空间音频风噪声检测制造技术

技术编号:38434890 阅读:16 留言:0更新日期:2023-08-11 14:20
一种设备包括:一个或多个处理器,其被配置为获得表示由至少三个麦克风捕获的声音的音频信号;以及基于音频信号来确定空间音频数据。一个或多个处理器还被配置为确定指示音频信号中的风噪声的度量。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,并且第二值对应于基于空间音频数据的差分信号。间音频数据的差分信号。间音频数据的差分信号。

【技术实现步骤摘要】
【国外来华专利技术】空间音频风噪声检测
[0001]相关申请的交叉引用
[0002]本专利申请要求享受来自2020年12月21日递交的共同所有的美国非临时专利申请第17/128,544号的优先权的权益,该美国非临时专利申请的内容整体地通过引用的方式明确地并入本文中。


[0003]概括而言,本公开内容涉及声音事件分类,以及更具体地涉及检测空间音频中的风噪声。

技术介绍

[0004]技术中的进步已经导致更小且更强大的计算设备。例如,当前存在各种各样的便携式个人计算设备,包括小型、轻量级以及容易由用户携带的无线电话(诸如移动和智能电话、平板设备和膝上型计算机)。这些设备可以在无线网络上传送语音和数据分组。进一步地,许多这样的设备并入了额外的功能,诸如数字照相机、数字摄像机、数字记录器、音频记录、音频和或视频会议、以及音频文件播放器。此外,这样的设备可以处理可执行指令,包括可以用以接入互联网的软件应用(诸如网页浏览器应用)。照此,这些设备可以包括关键的计算能力,包括例如音频信号处理。对于这样的设备,风噪声对于在室外捕获的音频而言可能是有问题的。

技术实现思路

[0005]在特定方面中,一种设备包括:一个或多个处理器,其被配置为获得表示由至少三个麦克风捕获的声音的音频信号;以及基于音频信号来确定空间音频数据。一个或多个处理器还被配置为确定指示音频信号中的风噪声的度量。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,以及第二值对应于基于空间音频数据的差分信号。
[0006]在特定方面中,一种方法包括:获得表示由至少三个麦克风捕获的声音的音频信号;以及基于音频信号来确定空间音频数据。方法还包括:确定指示音频信号中的风噪声的度量。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,以及第二值对应于基于空间音频数据的差分信号。
[0007]在特定方面中,一种设备包括:用于基于表示由至少三个麦克风捕获的声音的音频信号来确定空间音频数据的单元。设备还包括:用于确定指示音频信号中的风噪声的度量的单元。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,以及第二值对应于基于空间音频数据的差分信号。
[0008]在特定方面中,一种非暂时性计算机可读存储设备存储指令,指令能由一个或多个处理器执行以使得一个或多个处理器进行以下操作:基于表示由至少三个麦克风捕获的声音的音频信号来确定空间音频数据。指令还使得一个或多个处理器进行以下操作:确定
指示音频信号中的风噪声的度量。度量是基于对第一值和第二值的比较的,其中,第一值对应于基于空间音频数据的聚合信号,以及第二值对应于基于空间音频数据的差分信号。
[0009]在阅读整个申请(包括以下章节:附图说明、具体实施方式和权利要求书)之后,本公开内容的其它方面、优势和特征将变得显而易见。
附图说明
[0010]图1是被配置为检测和降低空间音频数据中的风噪声的设备的示例的框图。
[0011]图2是示出根据特定示例的用于检测和降低空间音频数据中的风噪声的设备的特定方面的框图。
[0012]图3是示出根据另一特定示例的用于检测和降低空间音频数据中的风噪声的设备的特定方面的框图。
[0013]图4是示出根据特定示例的在没有风噪声消除的情况下和在具有风噪声消除的情况下的针对若干风速的声级的一组图形。
[0014]图5是示出根据另一特定示例的在没有风噪声消除的情况下和在具有风噪声消除的情况下的针对若干风速的声级的一组图形。
[0015]图6示出根据本公开内容的一些示例的可操作以执行风噪声检测和降低的各方面的集成电路的示例。
[0016]图7示出根据本公开内容的一些示例的可操作以执行风噪声检测和降低的各方面的集成电路的另一示例。
[0017]图8示出并入图1的设备的各方面的移动设备。
[0018]图9示出并入图1的设备的各方面的耳塞。
[0019]图10示出并入图1的设备的各方面的头戴式耳机。
[0020]图11示出并入图1的设备的各方面的可穿戴设备。
[0021]图12示出并入图1的设备的各方面的语音控制的扬声器系统。
[0022]图13示出并入图1的设备的各方面的照相机。
[0023]图14示出并入图1的设备的各方面的头戴式耳机。
[0024]图15示出并入图1的设备的各方面的空中设备。
[0025]图16示出并入图1的设备的各方面的车辆。
[0026]图17是示出使用图1的设备来检测空间音频数据中的风噪声的方法的示例的各方面的流程图。
[0027]图18是示出使用图1的设备来检测和降低空间音频数据中的风噪声的方法的示例的各方面的流程图。
[0028]图19是示出使用图1的设备来检测和降低空间音频数据中的风噪声的方法的示例的各方面的流程图。
[0029]图20是示出使用图1的设备来检测和降低空间音频数据中的风噪声的方法的示例的各方面的流程图。
[0030]图21是根据特定方面的可操作以执行风噪声检测和降低的设备的特定说明性示例的框图。
具体实施方式
[0031]风噪声对于在室外捕获的音频而言可能是有问题的。本文中公开的方面实现对诸如空间音频数据的音频数据中的风噪声的检测以及对诸如空间音频数据的音频数据中的风噪声的降低。在一些方面中,风噪声是基于对空间音频数据的分析来检测的。在一些方面中,检测到的风噪声是通过处理空间音频数据来减轻或降低的。例如,空间音频数据的特定通道可以被去加重(de

emphasized)。作为另一示例,空间音频数据的低频分量可以在不使捕获的音频和空间质量降级的情况下被滤除。
[0032]在特定方面中,风噪声度量是基于对两个值的比较来确定的,这两个值包括与基于空间音频数据的聚合信号相对应的第一值以及与基于空间音频数据的差分信号相对应的第二值。在一些实现方式中,空间音频数据包括全景声(ambisonics)数据。例如,当全景声数据包括一阶全景声时,全景声数据可以被编码为W

通道(包括全向声音信息)、X

通道(包括表示前/后声音的差分声音信息)、Y

通道(包括表示左/右声音的差分声音信息)以及Z

通道(包括表示上/下声音的差分声音信息)。在这个示例中,聚合信号对应于全向声音信息(例如,W

通道),以及差分信号对应于定向通道(例如,X

通道、Y

通道或Z

通道)中的一个定向通道。
[0033]在一些实现方式中,空间音频数据包括两个或更多个经波束形成的音频通道,这些音频通道对应于偏移达至少门限角度(例如,90至180度)的波束。在这样的实现方式中,聚合信号对应于基于两个波束的总和,以及差分信号对应于基于两个波束的差。<本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种设备,包括:一个或多个处理器,其被配置为:获得表示由至少三个麦克风捕获的声音的音频信号;基于所述音频信号来确定空间音频数据;以及确定指示所述音频信号中的风噪声的度量,所述度量是基于对第一值和第二值的比较的,其中,所述第一值对应于基于所述空间音频数据的聚合信号,并且所述第二值对应于基于所述空间音频数据的差分信号。2.根据权利要求1所述的设备,其中,所述一个或多个处理器还被配置为基于所述度量来修改所述空间音频数据,以生成风噪声降低的音频数据。3.根据权利要求2所述的设备,其中,基于所述度量来修改所述空间音频数据以生成所述风噪声降低的音频数据包括:基于所述度量,使用滤波器参数来对所述空间音频数据进行滤波以降低与风相关联的低频噪声。4.根据权利要求2所述的设备,其中,基于所述度量来修改所述空间音频数据以生成所述风噪声降低的音频数据包括:减小应用于所述空间音频数据的一个或多个空间音频通道的增益。5.根据权利要求1所述的设备,其中,确定指示所述音频信号中的风噪声的所述度量包括:针对一组频率来确定所述度量的频率特定值,并且其中,所述一个或多个处理器还被配置为基于关于所述频率特定值中的至少一个频率特定值满足风检测准则的确定来使得应用于一个或多个空间音频通道的增益减小。6.根据权利要求5所述的设备,其中,所述增益应用于的所述一个或多个空间音频通道对应于从前到后方向和上下方向,并且其中,应用所述增益减小与所述从前到后方向和所述上下方向相对应的音频输出。7.根据权利要求1所述的设备,还包括所述至少三个麦克风,其中,所述至少三个麦克风中的至少两个麦克风分隔开至少0.5厘米。8.根据权利要求1所述的设备,还包括所述至少三个麦克风,其中,所述至少三个麦克风中的至少两个麦克风分隔开至少2厘米。9.根据权利要求1所述的设备,其中,所述一个或多个处理器是整合在移动计算设备内的。10.根据权利要求1所述的设备,其中,所述一个或多个处理器是整合在车辆内的。11.根据权利要求1所述的设备,其中,所述一个或多个处理器是整合在增强现实头戴式耳机、混合现实头戴式耳机、虚拟现实头戴式耳机或可穿戴设备中的一者或多者内的。12.根据权利要求1所述的设备,其中,所述一个或多个处理器被包括在集成电路中。13.一种方法,包括:获得表示由至少三个麦克风捕获的声音的音频信号;基于所述音频信号来确定空间音频数据;以及确定指示所述音频信号中的风噪声的度量,所述度量是基于对第一值和第二值的比较的,其中,所述第一值对应于基于所述空间音频数据的聚合信号,并且所述第二值对应于基于所述空间音频数据的差分信号。14.根据权利要求13所述的方法,还包括:基于所述度量来修改所述空间音频数据,以
生成风噪声降低的音频数据。15.根据权利要求14所述的方法,还包括:基于所述风噪声降低的音频数据来生成双声道音频输出,以及执行对所述双声道音频输出的环境噪声抑制。16.根据权利要求14所述的方法,其中,基于所述度量来修改所述空间音频数据以生成所述风噪声降低的音频数据包括:基于所述度量,使用滤波器参数来对所述空间音频数据进行滤波以降低与风相关联的低频噪声。17.根据权利要求...

【专利技术属性】
技术研发人员:S
申请(专利权)人:高通股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1