基于显示方位进行声学回声消除的系统、设备和方法技术方案

技术编号:36769013 阅读:17 留言:0更新日期:2023-03-08 21:36
一种电子设备包括传声器阵列、扬声器阵列、一个或多个传感器、声学回声消除逻辑以及接口;该传声器阵列用于采集音频输入数据;该扬声器阵列用于呈现用于播放的音频输出数据;该一个或多个传感器用于检测传声器阵列的方位。该声学回声消除逻辑基于传声器阵列的方位,将声学回声消除应用到音频输入数据,以形成回声消除后的音频输入数据;该接口通过作为视听通信系统的一部分的通信信道传输该回声消除后的音频输入数据。消除后的音频输入数据。消除后的音频输入数据。

【技术实现步骤摘要】
【国外来华专利技术】基于显示方位进行声学回声消除的系统、设备和方法


[0001]本公开总体上涉及电子设备,更具体地,涉及具有音频通信能力的视频通信系统。

技术介绍

[0002]包括视频会议、视频聊天工具和视频聊天服务等的视频电话技术正成为朋友、家人、同事和其他人群彼此之间的越来越受欢迎的交流方式。摄像头硬件(例如,网络摄像头硬件)正越来越多地被添加到各种终端用户设备中,无论是作为集成硬件还是作为附加硬件;这些终端用户设备例如为智能手机、头戴式设备(head

mounted device,HMD)、平板电脑、笔记本电脑、联网电视(或号称“智能电视”)、数字显示器(例如,计算机显示器)。将摄像头硬件越来越多地添加到各联网设备中正提高了,使用多种在线视频电话服务中的任何一种来与他人视频会议的能力。此外,视频电话服务正越来越多地结合了正变得越来越先进的音频通信硬件,音频通信硬件例如为多个具有特定频带输出能力的扬声器、被排列以提供高精度音频采集能力等的多个传声器等。

技术实现思路

[0003]总体上,本公开描述了具有音频能力和/或视频能力的电话系统,电话系统被配置为基于采集用于电话会话的音频信号的传声器阵列的当前方位,自定义音频输入参数和/或音频输出参数。在一些实例中,传声器阵列被固定附接到视频电话系统的显示设备,并且该显示设备可相对于电话系统的第二部分而改变位置,该电话系统的第二部分例如为包括多个音频输出设备的底座,音频输出设备例如为扬声器。在一些示例中,本公开的电话系统基于电子设备的显示设备的方位,为正由该电话系统的一个或多个扬声器输出的音频数据、或待由该电话系统的一个或多个扬声器输出的音频数据设置均衡参数。
[0004]在一些示例中,本公开的电话系统基于电子设备的显示设备的方位,为正经由该电话系统的传声器阵列输入的音频数据、或待经由电话系统中的传声器阵列输入的音频数据设置数字信号处理(digital signal processing,DSP)参数。在一些示例中,本公开的电话系统基于该电话系统的显示设备的方位,为正经由电子设备的传声器阵列输入的音频数据、或待经由电子设备的传声器阵列输入的音频数据设置回声消除参数。
[0005]本公开的电话系统可以在与本公开一致的各种用例场景中实现上述功能中的一个功能、一些功能或全部功能。此外,本公开的视听电话系统可以响应于检测到传声器阵列的位置变化和/或方位变化(例如,显示设备作为该传声器阵列的位置变化和/或方位变化的替代物),对以上列出的多个音频相关参数中的一个或多个进行动态地更新。
[0006]在本专利技术的一方面,提供了一种电子设备,该电子设备包括传声器阵列、扬声器阵列、一个或多个传感器、声学回声消除逻辑以及接口,该传声器阵列被配置为采集音频输入数据,该扬声器阵列被配置为呈现用于播放的音频输出数据,该一个或多个传感器被配置为检测传声器阵列的方位,该声学回声消除逻辑被配置为基于传声器阵列的方位,将声学回声消除应用到该音频输入数据,以形成回声消除后的音频输入数据,该接口被配置为通
过作为视听通信系统的一部分的通信信道,传输回声消除后的音频输入数据。
[0007]声学回声消除逻辑还可以被配置为基于传声器阵列的方位,确定回声消除参数集,并且其中,为将声学回声消除应用到音频输入数据,该声学回声消除逻辑可以被配置为基于所确定的回声消除参数集,应用声学回声消除。
[0008]为将声学回声消除应用到音频数据,该声学回声消除逻辑可以被配置为:基于所确定的回声消除参数集,配置自适应滤波器;并且将基于所确定的回声消除参数集而配置的自适应滤波器应用到音频数据。
[0009]为配置自适应滤波器,该声学回声消除逻辑可以被配置为基于所确定的回声消除参数集,控制自适应滤波器的自适应或训练。
[0010]为确定回声消除参数集,该声学回声消除逻辑可以被配置为使用查找表,从多个回声消除参数集中选择回声消除参数集。
[0011]为确定回声消除参数集,该声学回声消除逻辑可以被配置为应用有限元解法,该有限元解法确定回声消除参数集。
[0012]为确定回声消除参数集,该声学回声消除逻辑可以被配置为应用人工智能模型或机器学习模型,该人工智能模型或机器学习模型利用传声器阵列的转动角度到相应的回声消除参数集的映射而被训练,以预测回声消除参数集。
[0013]为将自适应滤波器应用到音频数据,该声学回声消除逻辑可以被配置为使用自适应滤波器,确定音频数据的信号之间的信号相干性。
[0014]传声器阵列可以被固定附接到电子设备的显示设备,其中,电子设备还可以包括底座,显示设备安装在该底座上,并且其中,扬声器阵列可以被装在底座中。
[0015]为检测显示设备的方位,该声学回声消除逻辑还可以被配置为基于由该一个或多个传感器检测到的显示设备的方位,确定扬声器阵列与传声器阵列之间的相对定位,并且其中,为将声学回声消除应用到音频数据,该声学回声消除逻辑可以被配置为:基于扬声器阵列与传声器阵列之间的相对定位,确定回声消除参数集;以及基于所确定的回声消除参数集,应用声学回声消除。
[0016]该一个或多个传感器可以包括加速度计、位置编码器、陀螺仪、运动传感器、摄像头硬件、成像系统、射频探头、天线或霍尔探头中的一个或多个。
[0017]该一个或多个传感器还可以被配置为检测电子设备的物理组件相对于传声器阵列的方位,并且其中,为基于传声器阵列的方位,将声学回声消除应用到音频输入数据,以形成回声消除后的音频输入数据,该声学回声消除逻辑可以被配置为基于物理组件相对于传声器阵列的方位处理音频数据,以形成回声消除后的音频输入数据。
[0018]在本专利技术的另一方面,提供了一种方法,该方法包括:由电子设备的传声器阵列采集音频输入数据;由电子设备的扬声器阵列呈现用于播放的音频输出数据;由电子设备的一个或多个传感器检测传声器阵列的方位;由电子设备的声学回声消除逻辑基于传声器阵列的方位,将声学回声消除应用到音频输入数据,以形成回声消除后的音频输入数据;以及由电子设备的接口通过通信信道传输回声消除后的音频输入数据。
[0019]该方法还可以包括:由声学回声消除逻辑基于传声器阵列的方位,确定回声消除参数集,其中,将声学回声消除应用到音频输入数据可以包括:由声学回声消除逻辑基于确定的回声消除参数集,应用声学回声消除。
[0020]将声学回声消除应用到音频数据可以包括:由声学回声消除逻辑基于确定的回声消除参数集,配置自适应滤波器;以及由声学回声消除逻辑将基于确定的回声消除参数集而配置的自适应滤波器应用到音频数据。
[0021]确定回声消除参数集可以包括:由声学回声消除逻辑使用查找表,从多个回声消除参数集中选择回声消除参数集。
[0022]确定回声消除参数集可以包括:由声学回声消除逻辑应用用于确定回声消除参数集的有限元解法。
[0023]将自适应滤波器应用到音频数据可以包括:由声学回声消除逻辑使用自适应滤波器,确定音频数据的信号之间的信号相干本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种电子设备,包括:传声器阵列,所述传声器阵列被配置为采集音频输入数据;扬声器阵列,所述扬声器阵列被配置为呈现用于播放的音频输出数据;一个或多个传感器,所述一个或多个传感器被配置为检测所述传声器阵列的方位;声学回声消除逻辑,所述声学回声消除逻辑被配置为,基于所述传声器阵列的方位,将声学回声消除应用到所述音频输入数据,以形成回声消除后的音频输入数据;以及接口,所述接口被配置为通过作为视听通信系统的一部分的通信信道,传输所述回声消除后的音频输入数据。2.根据权利要求1所述的电子设备,其中,所述声学回声消除逻辑还被配置为,基于所述传声器阵列的方位,确定回声消除参数集,并且其中,为将所述声学回声消除应用到所述音频输入数据,所述声学回声消除逻辑被配置为,基于确定的所述回声消除参数集,应用所述声学回声消除。3.根据权利要求2所述的电子设备,其中,为将所述声学回声消除应用到所述音频数据,所述声学回声消除逻辑被配置为:基于确定的所述回声消除参数集,配置自适应滤波器;以及将基于确定的所述回声消除参数集而配置的所述自适应滤波器应用到所述音频数据。4.根据权利要求3所述的电子设备,其中,为配置所述自适应滤波器,所述声学回声消除逻辑被配置为,基于确定的所述回声消除参数集,控制所述自适应滤波器的自适应或训练。5.根据权利要求3所述的电子设备,其中,为确定所述回声消除参数集,所述声学回声消除逻辑被配置为:使用查找表,从多个回声消除参数集中选择所述回声消除参数集;和/或应用有限元解法,所述有限元解法用于确定所述回声消除参数集;和/或应用人工智能模型或机器学习模型,所述人工智能模型或机器学习模型利用所述传声器阵列的转动角度到相应的回声消除参数集的映射而被训练,以预测所述回声消除参数集;并且可选地,其中,为将所述自适应滤波器应用到所述音频数据,所述声学回声消除逻辑被配置为,使用所述自适应滤波器确定所述音频数据的多个信号之间的信号相干性。6.根据权利要求1所述的电子设备,其中,所述传声器阵列被固定附接到所述电子设备的显示设备,其中,所述电子设备还可以包括底座,所述显示设备安装在所述底座上,并且其中,所述扬声器阵列被装在所述底座中。7.根据权利要求5所述的电子设备,其中,为检测所述显示设备的方位,所述声学回声消除逻辑还被配置为,基于由所述一个或多个传感器检测到的所述显示设备的方位,确定所述扬声器阵列与所述传声器阵列之间的相对定位,并且其中,为将所述声学回声消除应用到所述音频数据,所述声学回声消除逻辑被配置为:基于所述扬声器阵列与所述传声器阵列之间的相对定位,确定回声消除参数集;以及基于确定的所述回声消除参数集,应用所述声学回声消除。8.根据权利要求1所述的电子设备,其中,所述一个或多个传感器包括加速度计、位置编码器、陀螺仪、运动传感器、摄像头硬件、成像系统、射频探头、天线或霍尔探头中的一个
或多个。9.根据权利要求1所述的电子设备,其...

【专利技术属性】
技术研发人员:约书亚
申请(专利权)人:元平台技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1