概括而言,本公开内容涉及声音事件分类,以及更具体地涉及检测空间音频中的风噪声。
背景技术:
1、技术中的进步已经导致更小且更强大的计算设备。例如,当前存在各种各样的便携式个人计算设备,包括小型、轻量级以及容易由用户携带的无线电话(诸如移动和智能电话、平板设备和膝上型计算机)。这些设备可以在无线网络上传送语音和数据分组。进一步地,许多这样的设备并入了额外的功能,诸如数字照相机、数字摄像机、数字记录器、音频记录、音频和或视频会议、以及音频文件播放器。此外,这样的设备可以处理可执行指令,包括可以用以接入互联网的软件应用(诸如网页浏览器应用)。照此,这些设备可以包括关键的计算能力,包括例如音频信号处理。对于这样的设备,风噪声对于在室外捕获的音频而言可能是有问题的。
技术实现思路
1、在特定方面中,一种设备包括:一个或多个处理器,其被配置为获得表示由至少三个麦克风捕获的声音的音频信号;以及基于音频信号来确定空间音频数据。一个或多个处理器还被配置为确定指示音频信号中的风噪声的度量。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,以及第二值对应于基于空间音频数据的差分信号。
2、在特定方面中,一种方法包括:获得表示由至少三个麦克风捕获的声音的音频信号;以及基于音频信号来确定空间音频数据。方法还包括:确定指示音频信号中的风噪声的度量。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,以及第二值对应于基于空间音频数据的差分信号。
3、在特定方面中,一种设备包括:用于基于表示由至少三个麦克风捕获的声音的音频信号来确定空间音频数据的单元。设备还包括:用于确定指示音频信号中的风噪声的度量的单元。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,以及第二值对应于基于空间音频数据的差分信号。
4、在特定方面中,一种非暂时性计算机可读存储设备存储指令,指令能由一个或多个处理器执行以使得一个或多个处理器进行以下操作:基于表示由至少三个麦克风捕获的声音的音频信号来确定空间音频数据。指令还使得一个或多个处理器进行以下操作:确定指示音频信号中的风噪声的度量。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,以及第二值对应于基于空间音频数据的差分信号。
5、在阅读整个申请(包括以下章节:附图说明、具体实施方式和权利要求书)之后,本公开内容的其它方面、优势和特征将变得显而易见。
1.一种设备,包括:
2.根据权利要求1所述的设备,其中,所述一个或多个处理器还被配置为基于所述度量来修改所述空间音频数据,以生成风噪声降低的音频数据。
3.根据权利要求2所述的设备,其中,基于所述度量来修改所述空间音频数据以生成所述风噪声降低的音频数据包括:基于所述度量,使用滤波器参数来对所述空间音频数据进行滤波以降低与风相关联的低频噪声。
4.根据权利要求2所述的设备,其中,基于所述度量来修改所述空间音频数据以生成所述风噪声降低的音频数据包括:减小应用于所述空间音频数据的一个或多个空间音频通道的增益。
5.根据权利要求1所述的设备,其中,确定指示所述音频信号中的风噪声的所述度量包括:针对一组频率来确定所述度量的频率特定值,并且其中,所述一个或多个处理器还被配置为基于关于所述频率特定值中的至少一个频率特定值满足风检测准则的确定来使得应用于一个或多个空间音频通道的增益减小。
6.根据权利要求5所述的设备,其中,所述增益应用于的所述一个或多个空间音频通道对应于从前到后方向和上下方向,并且其中,应用所述增益减小与所述从前到后方向和所述上下方向相对应的音频输出。
7.根据权利要求1所述的设备,还包括所述至少三个麦克风,其中,所述至少三个麦克风中的至少两个麦克风分隔开至少0.5厘米。
8.根据权利要求1所述的设备,还包括所述至少三个麦克风,其中,所述至少三个麦克风中的至少两个麦克风分隔开至少2厘米。
9.根据权利要求1所述的设备,其中,所述一个或多个处理器是整合在移动计算设备内的。
10.根据权利要求1所述的设备,其中,所述一个或多个处理器是整合在车辆内的。
11.根据权利要求1所述的设备,其中,所述一个或多个处理器是整合在增强现实头戴式耳机、混合现实头戴式耳机、虚拟现实头戴式耳机或可穿戴设备中的一者或多者内的。
12.根据权利要求1所述的设备,其中,所述一个或多个处理器被包括在集成电路中。
13.一种方法,包括:
14.根据权利要求13所述的方法,还包括:基于所述度量来修改所述空间音频数据,以生成风噪声降低的音频数据。
15.根据权利要求14所述的方法,还包括:基于所述风噪声降低的音频数据来生成双声道音频输出,以及执行对所述双声道音频输出的环境噪声抑制。
16.根据权利要求14所述的方法,其中,基于所述度量来修改所述空间音频数据以生成所述风噪声降低的音频数据包括:基于所述度量,使用滤波器参数来对所述空间音频数据进行滤波以降低与风相关联的低频噪声。
17.根据权利要求14所述的方法,其中,基于所述度量来修改所述空间音频数据以生成所述风噪声降低的音频数据包括:减小应用于所述空间音频数据的一个或多个空间音频通道的增益。
18.根据权利要求13所述的方法,其中,基于所述音频信号来确定所述空间音频数据包括:对所述音频信号进行空间滤波以生成多个经波束成形的音频通道。
19.根据权利要求18所述的方法,其中,所述聚合信号是基于所述多个经波束成形的音频通道中的多个角度上偏移的经波束成形的音频通道的总和的信号功率的,并且所述差分信号是基于所述多个角度上偏移的经波束成形的音频通道的差的信号功率的。
20.根据权利要求19所述的方法,其中,所述多个角度上偏移的经波束成形的音频通道在角度上偏移达至少90度。
21.根据权利要求13所述的方法,其中,基于所述音频信号来确定所述空间音频数据包括:基于所述音频信号来确定全景声系数以生成多个全景声通道。
22.根据权利要求21所述的方法,其中,所述聚合信号是基于所述多个全景声通道中的全向全景声通道的信号功率的,并且所述差分信号是基于所述多个全景声通道中的定向全景声通道的信号功率的。
23.根据权利要求13所述的方法,其中,确定指示所述音频信号中的风噪声的所述度量包括:针对一组频率来确定所述度量的频率特定值,并且还包括:基于关于所述频率特定值中的至少一个频率特定值满足风检测准则的确定来减小应用于一个或多个空间音频通道的增益。
24.根据权利要求13所述的方法,其中,确定指示所述音频信号中的风噪声的所述度量包括:针对一组频带中的每个频带来确定所述度量的频带特定值。
25.根据权利要求24所述的方法,还包括:
26.根据权利要求24所述的方法,还包括:基于所述度量,使用滤波器参数来对所述空间音频数据进行滤波,以生成风噪声降低的音频数据。
27.根据权利要求13所述的方法,还包括:在确定所述空间音频数据之前,处理所述音频信号以去除高频风噪声。
28.一种设备,包括:
29.根据权利要求28所述的设备,还包括:用于基于所述度量来修改所述空间音频数据以生成风噪声降低的音频数据的单元。
30.一种存储指令的计算机可读存储设备,所述指令能由一个或多个处理器执行以使得所述一个或多个处理器进行以下操作: