空间音频捕获、传输和再现制造技术

一种装置，包括以下模块：用于接收至少两个音频信号；基于所述至少两个音频信号确定至少一个低频效果参数；基于所述至少两个音频信号确定至少一个传输音频信号；控制所述至少一个传输音频信号和所述至少一个低频效果信息的传输/存储，从而使得基于所述至少一个传输音频信号和所述至少一个低频效果信息的渲染能够确定至少一个低频效果声道。能够确定至少一个低频效果声道。能够确定至少一个低频效果声道。

【技术实现步骤摘要】
空间音频捕获、传输和再现
[0001]本申请是2019年6月12日提交的申请号为201980053322.3、专利技术名称为“空间音频捕获、传输和再现”的专利申请的分案申请。


[0002]本申请涉及用于空间声音捕获、传输和再现的装置和方法，但不限于音频编码器和解码器内的空间声音捕获、传输和再现的装置和方法。

技术介绍

[0003]用于多声道再现的典型扬声器布局(例如5.1)包括“常规”扬声器声道和低频效果(LFE)声道。常规扬声器声道(即5.part)包含宽带信号。使用这些声道，音频工程师可以例如将听觉对象定位到期望的方向。LFE声道(即.1部分)仅包含低频信号(＜120Hz)，通常使用超低音音箱进行再现。LFE最初是为再现单独的低频效果而开发的，但也已用于将声场的部分低频能量传递给超低音音箱。
[0004]所有常见的多声道扬声器布局(例如5.1、7.1、7.1+4和22.2)都包含至少一个LFE声道。因此，任何具有扬声器再现功能的空间音频处理系统都希望利用LFE声道。
[0005]如果系统的输入是多声道混音(例如5.1)，而输出是多声道扬声器设置(例如5.1)，则LFE声道不需要任何特定处理，可以直接路由到输出。然而，可以发送多声道信号，并且通常音频信号需要压缩以便具有合理的比特率。
[0006]参数化空间音频处理是音频信号处理的一个领域，其中使用一组参数描述声音的空间方面。例如，在从麦克风阵列进行参数化空间音频捕获时，从麦克风阵列信号中估计一组参数(例如，频带中声音的方向以及捕获的声音在频带中的定向部分和非定向部分之间的比率)是一种典型且有效的选择。众所周知，这些参数很好地描述了所捕获的声音在麦克风阵列的位置处的感知空间特性。这些参数可以相应地被用于空间声音的合成，用于双耳式耳机、用于扬声器、或其他格式，例如全景声(Ambisonics)。

技术实现思路

[0007]根据第一方面，提供一种装置，该装置包括用于以下的模块：接收至少两个音频信号；基于所述至少两个音频信号确定至少一个低频效果信息；基于所述至少两个音频信号确定至少一个传输音频信号；控制所述至少一个传输音频信号和所述至少一个低频效果信息的传输/存储，从而使得基于所述至少一个传输音频信号和所述至少一个低频效果信息的渲染能够确定至少一个低频效果声道。
[0008]该装置还可以包括用于以下的模块：基于所述至少两个音频信号来确定至少一个空间元数据参数，并且其中用于控制所述至少一个传输音频信号和所述至少一个低频效果信息的传输/存储的模块还可以进一步用于控制所述至少一个空间元数据参数的传输/存储。
[0009]所述至少一个空间元数据参数可以包括以下中的至少一个：与所述至少两个音频
信号的至少一个频带相关联的至少一个方向参数；以及与所述至少两个音频的至少一个频带相关联的至少一个直接与总体能量比。
[0010]用于基于所述至少两个音频信号来确定所述至少一个传输音频信号的模块可以包括以下至少一个：所述至少两个音频信号的缩混(downmix)；所述至少两个音频信号的选择；所述至少两个音频信号的音频处理；以及所述至少两个音频信号的全景声音频处理。
[0011]所述至少两个音频信号可以是以下至少一个：多声道扬声器音频信号；全景声音频信号；和麦克风阵列音频信号。
[0012]所述至少两个音频信号可以是多声道扬声器音频信号，并且其中用于基于所述至少两个音频信号确定所述至少一个低频效果信息的模块可以用于：基于对在所述多声道扬声器音频信号的至少一个定义的低频效果声道的能量和所述多声道扬声器音频信号的所有声道的所选择频率范围之间的至少一个比的计算，来确定至少一个低频效果与总体能量比。
[0013]所述至少两个音频信号可以是麦克风阵列音频信号或全景声音频信号，并且其中用于基于所述至少两个音频信号确定所述至少一个低频效果信息的模块可以用于基于经时间滤波的直接与总体能量比值来确定至少一个低频效果与总体能量比。
[0014]所述至少两个音频信号可以是麦克风阵列音频信号或全景声音频信号，并且其中用于基于所述至少两个音频信号确定所述至少一个低频效果信息的模块可以用于基于经能量加权时间滤波的直接与总体能量比值来确定至少一个低频效果与总体能量比。
[0015]用于基于所述至少两个音频信号确定所述至少一个低频效果信息的模块可以用于基于所述至少一个传输音频信号确定所述至少一个低频效果信息。
[0016]所述低频效果信息可以包括以下中的至少一个：至少一个低频效果声道能量比；至少一个低频效果声道能量；以及至少一个低频效果与总体能量比。
[0017]根据第二方面，提供了一种装置，其包括用于以下的模块：接收至少一个传输音频信号和至少一个低频效果信息；基于所述至少一个传输音频信号和所述至少一个低频效果信息来渲染至少一个低频效果声道。
[0018]该装置还可以包括用于以下的模块：基于所述至少一个传输音频信号的经滤波部分和所述至少一个低频效果信息来生成所述至少一个低频效果部分；以及基于所述至少一个低频效果部分来生成至少一个低频效果声道。
[0019]所述装置还可以包括用于通过将滤波器组应用于所述至少一个传输音频信号来生成所述至少一个传输音频信号的经滤波部分的模块。
[0020]该装置可以进一步包括用于以下的模块：接收所述至少一个空间元数据参数；以及基于所述至少一个传输音频信号和所述至少一个空间元数据参数生成至少两个音频信号。
[0021]低频效果信息可以包括以下中的至少一个：至少一个低频效果声道能量比；至少一个低频效果声道能量；以及至少一个低频效果与总体能量比。
[0022]根据第三方面，提供了一种方法，包括：接收至少两个音频信号；基于所述至少两个音频信号确定至少一个低频效果信息；基于所述至少两个音频信号确定至少一个传输音频信号；控制所述至少一个传输音频信号和所述至少一个低频效果信息的传输/存储，从而使得基于所述至少一个传输音频信号和所述至少一个低频效果信息的渲染能够确定至少
一个低频效果声道。
[0023]该方法可以进一步包括：基于所述至少两个音频信号来确定至少一个空间元数据参数，并且其中控制所述至少一个传输音频信号和所述至少一个低频效果信息的传输/存储可以进一步用于：控制至少一个空间元数据参数的传输/存储。
[0024]所述至少一个空间元数据参数可以包括以下中的至少一个：与至少两个音频信号的所述至少一个频带相关联的至少一个方向参数；与至少两个音频信号的至少一个频带相关联的至少一个直接与总体能量比。
[0025]基于所述至少两个音频信号来确定所述至少一个传输音频信号可以包括以下中的至少一个：所述至少两个音频信号的缩混；所述至少两个音频信号的选择；所述至少两个音频信号的音频处理；以及所述至少两个音频信号的全景声音频处理。
[0026]所述至少两个音频信号可以是以下中的至少一个：多声道扬声器音频信号；全景声音频信号；以及麦克风阵列音频信号。
...

【技术保护点】

【技术特征摘要】
1.一种用于音频处理的装置，包括至少一个处理器和至少一个包括计算机程序代码的存储器，所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起致使所述装置：接收至少两个音频信号；确定在所述至少两个音频信号的一个或多个频带中的至少一个低频效果信息；基于所述至少两个音频信号确定至少一个传输音频信号；以及使得能够基于所述至少一个传输音频信号和所述至少一个低频效果信息来进行对至少一个低频效果信号的确定。2.根据权利要求1所述的装置，其中，致使所述装置使得能够进行对所述至少一个低频效果信号的确定包括：所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起致使所述装置：控制所述至少一个传输音频信号和所述至少一个低频效果信息的传输和/或存储。3.根据权利要求1所述的装置，其中，所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起致使所述装置：控制至少两个空间元数据参数的传输和/或存储，使得所述至少两个空间元数据参数用于渲染空间音频信号。4.根据权利要求3所述的装置，其中，所述至少两个空间元数据参数包括以下中的至少一个：与所述至少两个音频信号的至少一个频带相关联的至少一个方向参数；以及与所述至少两个音频信号的至少一个频带相关联的至少一个直接与总体能量比。5.根据权利要求1所述的装置，其中，确定所述至少一个传输音频信号包括：所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起，致使所述装置基于确定以下中的至少一个，来确定所述至少一个传输音频信号：所述至少两个音频信号的缩混；所述至少两个音频信号的选择；所述至少两个音频信号的音频处理；以及所述至少两个音频信号的全景声音频处理。6.根据权利要求1所述的装置，其中，所述至少两个音频信号是以下中的至少一个：多声道扬声器音频信号；全景声音频信号；以及麦克风阵列音频信号。7.根据权利要求5所述的装置，其中，所述至少两个音频信号是所述多声道扬声器音频信号，并且其中，确定所述至少一个低频效果信息包括：所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起致使所述装置基于以下操作来确定所述至少一个低频效果信息：确定所述至少一个低频效果与总体能量比，包括对在所述多声道扬声器音频信号的至少一个定义的低频效果信号的能量和所述多声道扬声器音频信号的所有声道的所选择频率范围的能量之间的至少一个比的计算，其中所述多声道扬声器音频信号的声道包括比所
述所选择频率范围高的至少一个频率范围。8.根据权利要求6所述的装置，其中，所述至少两个音频信号是所述麦克风阵列音频信号或所述全景声音频信号，并且其中，所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起致使所述装置基于以下操作中的至少一个，来确定所述至少一个低频效果信息：确定用所述至少两个音频信...

【专利技术属性】
技术研发人员：MV，
申请(专利权)人：诺基亚技术有限公司，
类型：发明
国别省市：