用于使能再现空间音频信号的装置、方法及计算机程序制造方法及图纸

技术编号:35338241 阅读:25 留言:0更新日期:2022-10-26 12:00
一种用于使能空间音频信号的再现的装置(101)。该装置包括用于获得(401)包括一个或多个通道的音频信号(501);以及获得(403)与该音频信号(501)有关的空间元数据(503)的部件。该空间元数据(503)包括指示如何在空间上再现该音频信号的信息。该装置还包括用于获得(405)与视频的视场有关的信息(505)的部件,其中,该视频用于在渲染设备(201)的显示器(205)上显示,并且其中,该视频与该音频信号(501)相关联。该装置还包括用于根据所获得的与该视频的视场有关的信息,将至少部分地基于所获得的空间元数据(503)的该音频信号的空间再现与该视频中的对象(309A,309B)对齐(407);以及基于该对齐(407),使能(409)再现该音频信号的部件。使能(409)再现该音频信号的部件。使能(409)再现该音频信号的部件。

【技术实现步骤摘要】
【国外来华专利技术】用于使能再现空间音频信号的装置、方法及计算机程序


[0001]本公开的示例涉及用于使能再现空间音频信号的装置、方法及计算机程序。一些示例涉及用于使能再现空间音频信号和相关联的视频的装置、方法及计算机程序。

技术介绍

[0002]诸如移动电话、便携式媒体播放器设备、平板计算机、膝上型计算机及其他设备之类的渲染设备通常具有两个或更多个使能立体声再现的扬声器和一个或多个使能视频显示的显示器。在这种设备中,图像到显示器上的映射可能导致在显示器上的视频对象的位置与由扬声器所渲染的音频源的感知方向之间的未对齐。

技术实现思路

[0003]根据本公开的各种但并非所有示例,提供了一种装置,其包括用于执行以下操作的部件:获得音频信号,该音频信号包括一个或多个通道;获得与该音频信号有关的空间元数据,其中,该空间元数据包括指示如何在空间上再现该音频信号的信息;获得与视频的视场有关的信息,其中,该视频用于在渲染设备的显示器上显示,并且其中,该视频与该音频信号相关联;根据所获得的与该视频的视场有关的信息,将至少部分地基于所获得的空间元数据的该音频信号的空间再现与该视频中的对象对齐;以及基于该对齐,使能从两个或更多个扬声器再现该音频信号。
[0004]对齐音频信号的空间再现可以包括:至少部分地基于所获得的音频信号和所获得的空间元数据,处理空间音频输出信号,其中,该处理被配置为使用所获得的与视频的视场有关的信息将输出空间音频信号的一个或多个空间特征与该视频中对应的对象对齐。
[0005]对齐音频信号的空间再现可以包括:通过基于所获得的与视频的视场有关的信息调整空间元数据内的一个或多个参数,修改该空间元数据。
[0006]渲染设备可以包括两个或更多个扬声器,并且音频信号的再现可以由该渲染设备的两个或更多个扬声器进行。
[0007]使能空间音频信号的再现可以包括:使用第一类型的回放过程来再现该音频信号的第一部分,以及使用不同的第二类型的回放过程来再现该音频信号的第二部分,其中,对齐至少部分地确定该音频信号的空间特征是落入第一部分内还是第二部分内。
[0008]第一类型的回放过程可以包括幅度平移。第二类型的回放过程可以包括串扰消除。
[0009]音频信号的第一部分包括在该音频信号的前方区域内的声音方向,该音频信号的第二部分包括在该音频信号的前方区域外的声音方向。
[0010]前方区域可以包括渲染设备的两个或更多个扬声器所跨越的区域。
[0011]可以在第一区域与第二区域之间的边界处匹配回放过程。
[0012]该装置可以包括用于执行以下操作的部件:获得与渲染设备内的两个或更多个扬声器的位置有关的信息,以及使用与该渲染设备的两个或更多个扬声器的位置有关的信息
来确定第一区域和第二区域的边界。
[0013]将音频信号的空间再现与视频中的对象对齐可以使得靠近该视频的视场的边缘的声音方向被再现到与渲染设备的显示器的边缘对应的方向,并且将该音频信号的空间再现与该视频中的对象对齐使得将在该视频的视场内但不靠近该视频的视场的边缘的声音方向用平移技术再现到更接近该渲染设备的显示器的中心。
[0014]针对一个或多个频率子带,空间元数据可以包括:声音方向参数,以及能量比率参数。
[0015]可以由该装置捕获音频信号或者表示视频的视频信号中的至少一者。
[0016]音频信号或者表示视频的视频信号中的至少一者可以由单独的捕获设备捕获并被发送到该装置。空间元数据、与视频的视场有关的信息中的至少一者可以从该捕获设备发送到该装置。
[0017]根据本公开的各种但并非所有示例,提供了一种装置,其包括:至少一个处理器;包括计算机程序代码的至少一个存储器;该至少一个存储器和计算机程序代码被配置为与至少一个处理器一起使该装置至少:获得音频信号,该音频信号包括一个或多个通道;获得与该音频信号有关的空间元数据,其中,该空间元数据包括指示如何在空间上再现该音频信号的信息;获得与视频的视场有关的信息,其中,该视频用于在渲染设备的显示器上显示,并且其中,该视频与该音频信号相关联;根据所获得的与该视频的视场有关的信息,将至少部分地基于所获得的空间元数据的该音频信号的空间再现与该视频中的对象对齐;以及基于该对齐,使能从两个或更多个扬声器再现该音频信号。
[0018]根据本公开的各种但并非所有示例,提供了一种方法,其包括:获得音频信号,该音频信号包括一个或多个通道;获得与该音频信号有关的空间元数据,其中,该空间元数据包括指示如何在空间上再现该音频信号的信息;获得与视频的视场有关的信息,其中,该视频用于在渲染设备的显示器上显示,并且其中,该视频与该音频信号相关联;根据所获得的与该视频的视场有关的信息,将至少部分地基于所获得的空间元数据的该音频信号的空间再现与该视频中的对象对齐;以及基于该对齐,使能从两个或更多个扬声器再现该音频信号。
[0019]对齐音频信号的空间再现可以包括:至少部分地基于所获得的音频信号和所获得的空间元数据,处理空间音频输出信号,其中,该处理被配置为使用所获得的与视频的视场有关的信息将输出空间音频信号的一个或多个空间特征与该视频中对应的对象对齐。
[0020]对齐音频信号的空间再现可以包括:通过基于所获得的与视频的视场有关的信息调整空间元数据内的一个或多个参数,修改该空间元数据。
[0021]渲染设备可以包括两个或更多个扬声器,并且音频信号的再现可以由该渲染设备的两个或更多个扬声器进行。
[0022]使能空间音频信号的再现包括:使用第一类型的回放过程来再现该音频信号的第一部分,以及使用不同的第二类型的回放过程来再现该音频信号的第二部分,其中,对齐至少部分地确定该音频信号的空间特征是落入第一部分内还是第二部分内。第一类型的回放过程可以包括幅度平移。第二类型的回放过程可以包括串扰消除。
[0023]音频信号的第一部分可以包括在该音频信号的前方区域内的声音方向,该音频信号的第二部分可以包括在该音频信号的前方区域外的声音方向。前方区域可以包括渲染设
备的两个或更多个扬声器所跨越的区域。可以在第一区域与第二区域之间的边界处匹配回放过程。
[0024]该方法可以包括:获得与渲染设备内的两个或更多个扬声器的位置有关的信息,以及使用与该渲染设备的两个或更多个扬声器的位置有关的信息来确定第一区域和第二区域的边界。
[0025]在该方法中,将音频信号的空间再现与视频中的对象对齐可以使得靠近该视频的视场的边缘的声音方向被再现到与渲染设备的显示器的边缘对应的方向,并且将该音频信号的空间再现与该视频中的对象对齐使得将在该视频的视场内但不靠近该视频的视场的边缘的声音方向用平移技术再现到更接近该渲染设备的显示器的中心。
[0026]针对一个或多个频率子带,空间元数据可以包括:声音方向参数,以及能量比率参数。
[0027]可以由渲染设备捕获音频信号或者表示视频的视频信号中的至少一者。
[0028]音频信号或者表示视频的视频本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种装置,包括用于执行以下操作的部件:获得音频信号,所述音频信号包括一个或多个通道;获得与所述音频信号有关的空间元数据,其中,所述空间元数据包括指示如何在空间上再现所述音频信号的信息;获得与视频的视场有关的信息,其中,所述视频用于在渲染设备的显示器上显示,并且其中,所述视频与所述音频信号相关联;根据所获得的与所述视频的视场有关的信息,将至少部分地基于所获得的空间元数据的所述音频信号的空间再现与所述视频中的对象对齐;以及基于所述对齐,使能从两个或更多个扬声器再现所述音频信号。2.根据权利要求1所述的装置,其中,对齐所述音频信号的空间再现包括:至少部分地基于所获得的音频信号和所获得的空间元数据,处理空间音频输出信号,其中,所述处理被配置为使用所获得的与所述视频的视场有关的信息将所述输出空间音频信号的一个或多个空间特征与所述视频中对应的对象对齐。3.根据前述权利要求中任一项所述的装置,其中,对齐所述音频信号的空间再现包括:通过基于所获得的与视频的视场有关的信息调整所述空间元数据内的一个或多个参数,修改所述空间元数据。4.根据前述权利要求中任一项所述的装置,其中,所述渲染设备包括所述两个或更多个扬声器,并且所述音频信号的所述再现是由所述渲染设备的所述两个或更多个扬声器进行的。5.根据权利要求3所述的装置,其中,使能所述空间音频信号的再现包括:使用第一类型的回放过程来再现所述音频信号的第一部分,以及使用不同的第二类型的回放过程来再现所述音频信号的第二部分,其中,所述对齐至少部分地确定所述音频信号的空间特征是落入所述第一部分内还是所述第二部分内。6.根据权利要求5所述的装置,其中,所述第一类型的回放过程包括幅度平移。7.根据权利要求5至6中任一项所述的装置,其中,所述第二类型的回放过程包括串扰消除。8.根据权利要求5至7中任一项所述的装置,其中,所述音频信号的所述第一部分包括在所述音频信号的前方区域内的声音方向,所述音频信号的所述第二部分包括在所述音频信号的所述前方区域外的声音方向。9.根据权利要求8所述的装置,其中,所述前方区域包括所述渲染设备的所述两个或更多个扬声器所跨越的区域。10.根据权利要求5至9中任一项所述的装置,其中,在所述第一区域与所述第二区域之间的边界处匹配所述回放过程。11.根据权利要求5至10中任一项所述的装置,包括用于执行以下操作的部件:获得与所述渲染设备内的所述两个或更多个扬声器的位置有关的信息,以及使用与所述渲染设备的所述两个或更多个扬声器的所述位置有关的所述信息来确定所述第一区域和所述第二区域的边界。12.根据前述权利要求中任一项所述的装置,其中,将所述音频信号的空间再现与所述视频中的对象对齐使得靠近所述视频的视场的边缘的声音方向被再现到与所述渲染设备
的显示器的边缘对应的方向,并且将所述音频信号的空间再现与所述视频中的对象对齐使得在所述视频的所述视场内但不靠近所述视频的所述视场的边缘的声音方向用平移技术再现到更接近所述渲染设备的所述显示器的中心。13.根据前述权利要求中任一项所述的装置,其中,针对一个或多个频率子带,所述空间...

【专利技术属性】
技术研发人员:J
申请(专利权)人:诺基亚技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1