声音处理方法、装置和电子设备制造方法及图纸

公开了一种声音处理方法、装置、电子设备和计算机可读存储介质。所述方法包括：根据麦克风阵列所采集的多个声音信号和摄像头所采集的图像信号确定声音预处理方向；基于所述声音预处理方向选择预处理滤波系数；使用所述预处理滤波系数对所述多个声音信号进行预处理滤波，以得到初始信号源信号和初始噪声源信号；确定自适应滤波系数；以及，使用所述自适应滤波系数来对所述初始信号源信号和所述初始噪声源信号进行自适应滤波，以得到增强信号源信号。可以增强信号源信号，从而提高声音的音质。

Sound processing methods, devices, and electronic equipment

A voice processing method, device, electronic device and computer readable storage medium are disclosed. The method includes: determining the sound preprocessing direction according to a plurality of sound signals collected by the microphone array and the image signals collected by the camera; a preprocessing filter coefficient is selected based on the sound preprocessing direction, and the preprocessing filter coefficients are used to preprocess and filter the multiple sound signals to obtain the first time. The initial signal source signal and the initial noise source signal; determine the adaptive filter coefficient; and the adaptive filtering of the initial signal source signal and the initial noise source signal using the adaptive filter coefficient to obtain an enhanced signal source signal. It can enhance the source signal and improve the sound quality of the sound.

【技术实现步骤摘要】
声音处理方法、装置和电子设备
本申请涉及声音处理领域，且更为具体地，涉及一种声音处理方法、声音处理装置、电子设备和计算机可读存储介质。
技术介绍
随着各种电子设备的普及，为了提高控制电子设备的便利性，越来越多的电子设备提供了通过语音进行控制的功能。例如，诸如智能手机或者车载设备的电子设备提供有语音控制功能，用户可以通过语音来控制电子设备以执行相应的功能。因此，电子设备需要识别用户的语音，从而获知用户的真实意图，以控制相应的功能单元执行用户所需的功能。但是，无论是在使用智能手机的家庭环境，还是在使用车载设备的车载环境下，语音识别都比较容易受到外界环境的干扰，特别是外界噪声对于语音识别影响较大。因此，现有的声音处理方法存在音质较差、识别率较低的问题。
技术实现思路
为了解决上述技术问题，提出了本申请。本申请的实施例提供了一种声音处理方法、声音处理装置、电子设备和计算机可读存储介质，其可以提高声音的音质从而改进声音的识别率。根据本申请的一个方面，提供了一种声音处理方法，包括：根据麦克风阵列所采集的多个声音信号和摄像头所采集的图像信号确定声音预处理方向；基于所述声音预处理方向选择预处理滤波系数；本文档来自技高网...

【技术保护点】
一种声音处理方法，包括：根据麦克风阵列所采集的多个声音信号和摄像头所采集的图像信号确定声音预处理方向；基于所述声音预处理方向选择预处理滤波系数；使用所述预处理滤波系数对所述多个声音信号进行预处理滤波，以得到初始信号源信号和初始噪声源信号；确定自适应滤波系数；以及使用所述自适应滤波系数来对所述初始信号源信号和所述初始噪声源信号进行自适应滤波，以得到增强信号源信号。

【技术特征摘要】
1.一种声音处理方法，包括：根据麦克风阵列所采集的多个声音信号和摄像头所采集的图像信号确定声音预处理方向；基于所述声音预处理方向选择预处理滤波系数；使用所述预处理滤波系数对所述多个声音信号进行预处理滤波，以得到初始信号源信号和初始噪声源信号；确定自适应滤波系数；以及使用所述自适应滤波系数来对所述初始信号源信号和所述初始噪声源信号进行自适应滤波，以得到增强信号源信号。2.如权利要求1所述的声音处理方法，其中，根据麦克风阵列所采集的多个声音信号和摄像头所采集的图像信号确定声音预处理方向包括：根据所述多个声音信号确定声音声源方向；根据所述图像信号确定图像声源方向；以及基于所述声音声源方向和所述图像声源方向来确定声音增强方向和声音抑制方向中的至少一个，作为所述声音预处理方向。3.如权利要求2所述的声音处理方法，其中，基于所述声音声源方向和所述图像声源方向来确定声音增强方向和声音抑制方向中的至少一个包括：确定所述图像声源方向是否包含与信号源相关联的至少一个图像信号源方向；以及响应于确定所述图像声源方向包含与信号源相关联的至少一个图像信号源方向，将所述至少一个图像信号源方向确定为所述声音增强方向。4.如权利要求3所述的声音处理方法，基于所述声音声源方向和所述图像声源方向来确定声音增强方向和声音抑制方向中的至少一个进一步包括：将所述声音声源方向中所述声音增强方向以外的方向确定为所述声音抑制方向。5.如权利要求2所述的声音处理方法，其中，基于所述声音声源方向和所述图像声源方向来确定声音增强方向和声音抑制方向中的至少一个包括：确定所述图像声源方向是否包含与信号源相关联的至少一个图像信号源方向；以及响应于确定所述图像声源方向包含与信号源相关联的至少一个图像信号源方向，基于所述声音声源方向和所述至少一个图像信号源方向联合确定所述声音增强方向和所述声音抑制方向中的至少一个。6.如权利要求5所述的声音处理方法，其中，基于所述声音声源方向和所述至少一个图像信号源方向联合确定所述声音增强方向和所述声音抑制方向中的至少一个包括：确定所述声音声源方向与所述至少一个图像信号源方向的第一差异性；响应于所述第一差异性取最小值，确定与所述取最小值的第一差异性对应的候选声音声源方向和候选图像声源方向；以及基于所述候选声音声源方向和所述候选图像声源方向确定所述声音增强方向。7.如权利要求6所述的声音处理方法，其中，基于所述候选声音声源方向和所述候选图像声源方向确定所述声音增强方向包括：将所述候选声音声源方向、所述候选图像声源方向、或者所述候选声音声源方向和所述候选图像声源方向的中值作为所述声音增强方向。8.如权利要求6所述的声音处理方法，其中，基于所述声音声源方向和所述至少一个图像信号源方向联合确定所述声音增强方向和所述声音抑制方向中的至少一个进一步包括：确定所述声音声源方向中除所述声音增强方向以外的方向与所述至少一个图像信号源方向中除所述声音增强方向以外的方向的第二差异性；确定所述第二差异性是否小于一预定相似度阈值；以及响应于所述第二差异性小于所述预定相似度阈值，确定与所述第二差异性对应的所述声音声源方向中除所述声音增强方向以外的方向为所述声音抑制方向。9.如权利要求2所述的声音处理方法，其中，基于所述声音预处理方向选择预处理滤波系数包括：预先设计对应于不同角度的增强滤波系数和...

【专利技术属性】
技术研发人员：朱长宝，陈本东，李育国，
申请(专利权)人：南京地平线机器人技术有限公司，
类型：发明
国别省市：江苏,32