音频信号的参数化重构制造技术

技术编号:24211715 阅读:20 留言:0更新日期:2020-05-20 17:10
本发明专利技术公开了音频信号的参数化重构。编码系统(400)将N声道音频信号(X)(其中,N≥3)编码为单声道下混信号(Y)连同干上混参数和湿上混参数(C,P)。在解码系统(200)中,去相关部分(101)基于下混信号输出(N‑1)声道去相关信号(Z);干上混部分(102)根据基于干上混参数而确定的干上混系数(C)线性地映射下混信号;湿上混部分(103)基于湿上混参数并且在已知中间矩阵属于预定义矩阵类的情况下填充所述中间矩阵,通过将中间矩阵乘以预定义矩阵来获得湿上混系数(P),以及根据湿上混系数线性地映射去相关信号;以及组合部分(104)组合来自上混部分的输出以获得与要被重构的信号对应的重构信号(X)。

Parametric reconstruction of audio signal

【技术实现步骤摘要】
音频信号的参数化重构本申请是基于申请号为201480057568.5、申请日为2014年10月21日、专利技术名称为“音频信号的参数化重构”的专利申请的分案申请。相关申请的交叉引用本申请要求2013年10月21日提交的美国临时专利申请No.61/893,770、2014年4月3日提交的美国临时专利申请No.61/974,544、以及2014年8月15日提交的美国临时专利申请No.62/037,693的优先权,每一专利申请的全部内容特此通过引用并入。
本文中公开的专利技术一般涉及音频信号的编码和解码,并且特别地涉及多声道音频信号从下混信号和相关联的元数据的参数化重构。
技术介绍
包括多个扬声器的音频回放系统被频繁地用于再现由多声道音频信号所表示的音频场景,其中,多声道音频信号的相应声道在相应的扬声器上被回放。多声道音频信号可能例如已经由多个声换能器被记录或者可能已通过音频制作设备被产生。在许多情形下,对于将音频信号传输到回放设备存在带宽限制,和/或对于将音频信号存储在计算机存储器中或者便携式存储设备上存在有限的空间。存在用于音频信号的参数化编码以便减少所需要的带宽或存储大小的音频编码系统。在编码器侧,这些系统通常将多声道音频信号下混为下混信号(其通常是单声道(一个声道)或立体声(两个声道)下混),并且提取通过比如水平差异(leveldifference)和互相关的参数描述声道的性质的边信息(sideinformation)。下混和边信息然后被编码,并且被发送到解码器侧。在解码器侧,在边信息的参数的控制下从下混重构(即,近似)多声道音频信号。鉴于可供用于回放多声道音频内容(包括针对终端用户家庭中的这些终端用户的新兴部分)的范围广泛的不同类型的设备和系统,需要新的、替代的方式以高效地对多声道音频内容进行编码,以便减少带宽要求和/或存储所需的存储器大小、和/或便于解码器侧的多声道音频信号的重构。附图说明在以下,将参照附图且更详细地描述示例实施例,其中:图1是根据示例实施例的用于基于单声道下混信号以及相关联的干(dry)上混参数和湿(wet)上混参数重构多声道音频信号的参数化重构部分的一般化框图;图2是根据示例实施例的包括图1中描绘的参数化重构部分的音频解码系统的一般化框图;图3是根据示例实施例的用于将多声道音频信号编码为单声道下混信号和相关联的元数据的参数化编码部分的一般化框图;图4是根据示例实施例的包括图3中描绘的参数化编码部分的音频编码系统的一般化框图;图5-11示出根据示例实施例的通过下混声道表示11.1声道音频信号的替代方式;图12-13示出根据示例实施例的通过下混声道表示13.1声道音频信号的替代方式;以及图14-16示出根据示例实施例的通过下混声道表示22.2声道音频信号的替代方式。所有的附图都是示意性的,并且一般仅示出为了阐明本专利技术所必要的部分,而其它部分则可以被省略或者仅仅被建议。具体实施方式如本文中所使用的,音频信号可以是纯音频信号、视听信号或多媒体信号的音频部分或者与元数据组合的这些中的任何一个。如本文中所使用的,声道是与预定义/固定的空间位置/方位或未定义的空间位置(诸如“左”或“右”)相关联的音频信号。I.概述根据第一方面,示例实施例提出了用于重构音频信号的音频解码系统以及方法和计算机程序产品。根据第一方面的提出的解码系统、方法和计算机程序产品一般可以共享相同的特征和优点。根据示例实施例,提供了一种用于重构N声道音频信号的方法,其中,N≥3。所述方法包括:对单声道下混信号或携载用于重构更多音频信号的数据的多声道下混信号的声道连同相关联的干上混参数和湿上混参数一起进行接收;将具有多个(N个)声道的第一信号(其被称为干上混信号)计算为所述下混信号的线性映射,其中,作为计算所述干上混信号的一部分,一组干上混系数被应用于所述下混信号;基于所述下混信号产生(N-1)声道去相关信号;将具有多个(N个)声道的另一信号(其被称为湿上混信号)计算为所述去相关信号的线性映射,其中,作为计算所述湿上混信号的一部分,一组湿上混系数被应用于所述去相关信号的声道;以及组合所述干上混信号和湿上混信号以获得与要被重构的N声道音频信号对应的多维重构信号。所述方法进一步包括:基于接收的干上混参数确定所述一组干上混系数;基于接收的湿上混参数并且在已知具有比接收的湿上混参数的数量多的元素的中间矩阵属于预定义矩阵类(class)的情况下,填充所述中间矩阵;以及通过将所述中间矩阵与预定义矩阵相乘来获得所述一组湿上混系数,其中,所述一组湿上混系数对应于从所述相乘得到的矩阵并且包括比所述中间矩阵中的元素的数量多的系数。在该示例实施例中,用于重构N声道音频信号的湿上混系数的数量大于接收的湿上混参数的数量。通过利用预定义矩阵和预定义矩阵类的知晓(knowledge)以从接收的湿上混参数获得湿上混系数,可以减少使得能够重构N声道音频信号所需要的信息量,从而允许减少从编码器侧连同下混信号一起传输的元数据的量。通过减少参数化重构所需要的数据量,可以减少N声道音频信号的参数化表示的传输所需的带宽和/或存储这样的表示所需的存储器大小。(N-1)声道去相关信号用于增加收听者所感知到的重构的N声道音频信号的内容的维度。(N-1)声道去相关信号的声道可以具有至少大致与单声道下混信号相同的频谱,或者可以具有与单声道下混信号的频谱的重新缩放(rescale)/规范化的版本对应的频谱,并且可以连同单声道下混信号一起形成N个至少大致互不相关的声道。为了提供N声道音频信号的声道的忠实重构,去相关信号的声道的每一个优选地具有它被收听者感知为类似于下混信号的这样的性质。因此,尽管可以将互不相关的信号与来自例如白噪声的给定频谱合成,但是去相关信号的声道优选地通过处理下混信号来导出,例如包括将相应的全通滤波器应用于下混信号或者组合下混信号的部分,以便保留下混信号的尽可能多的性质(尤其是局部平稳的性质),包括下混信号的相对更细微的、心理声学制约的性质,诸如音色。组合湿上混信号和干上混信号可以包括将来自湿上混信号的相应声道的音频内容添加到干上混信号的相应的对应声道的音频内容,诸如基于每一个采样或每一个变换系数加性混合(additivemixing)。预定义矩阵类可以与对于该类中的所有矩阵都有效的至少一些矩阵元素的已知性质(诸如矩阵元素中的一些之间的某些关系,或者一些矩阵元素为零)相关联。这些性质的知晓允许基于比中间矩阵中的矩阵元素的全部数量少的湿上混参数来填充中间矩阵。解码器侧至少具有它基于较少的湿上混参数计算所有矩阵元素所需的元素的性质以及这些元素之间的关系的知晓。干上混信号是下混信号的线性映射意指干上混信号是通过将第一线性变换应用于下混信号而获得的。该第一变换将一个声道当作输入并且提供N个声道作为输出,并且干上混系数是定义该第一线性变换的定量性质的系数。湿上混信号是去相关信号的线性映射意指湿上混信号是本文档来自技高网...

【技术保护点】
1.一种用于重构N声道音频信号(X)的方法,其中,N≥3,所述方法包括:/n对单声道下混信号(Y)连同相关联的干上混参数和湿上混参数

【技术特征摘要】
20131021 US 61/893,770;20140403 US 61/974,544;20141.一种用于重构N声道音频信号(X)的方法,其中,N≥3,所述方法包括:
对单声道下混信号(Y)连同相关联的干上混参数和湿上混参数一起进行接收;
将干上混信号计算为所述下混信号的线性映射,其中,一组干上混系数(C)被应用于所述下混信号;
基于所述下混信号产生(N-1)声道去相关信号(Z);
将湿上混信号计算为所述去相关信号的线性映射,其中,一组湿上混系数(P)被应用于所述去相关信号的声道;以及
组合所述干上混信号和湿上混信号以获得与要被重构的N声道音频信号对应的多维重构信号
其中,所述方法进一步包括:
基于接收的干上混参数确定所述一组干上混系数;
基于接收的湿上混参数并且在已知具有比接收的湿上混参数的数量多的元素的中间矩阵属于预定义矩阵类的情况下,填充所述中间矩阵;以及
通过将所述中间矩阵与预定义矩阵相乘来获得所述一组湿上混系数,其中,所述一组湿上混系数对应于从所述相乘得到的矩阵并且包括比所述中间矩阵中的元素的数量多的系数。


2.根据权利要求1所述的方法,其中,接收所述湿上混参数包括接收N(N-1)/2个湿上混参数,其中,填充所述中间矩阵包括基于接收的N(N-1)/2个湿上混参数并且在已知所述中间矩阵属于预定义矩阵类的情况下获得(N-1)2个矩阵元素的值,其中,所述预定义矩阵包括N(N-1)个元素,并且其中,所述一组湿上混系数包括N(N-1)个系数。


3.根据权利要求1所述的...

【专利技术属性】
技术研发人员:L·维勒莫斯HM·莱托恩H·普恩哈根T·赫冯恩
申请(专利权)人:杜比国际公司
类型:发明
国别省市:荷兰;NL

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1