【技术实现步骤摘要】
【国外来华专利技术】音频驱动的视区选择本申请案主张2017年6月30日申请的美国临时申请案第62/527,794号的权利，所述临时申请案的全部内容特此以引用的方式并入。
本专利技术涉及处理例如音频数据及/或视频数据的媒体数据。
技术介绍
高阶立体混响(HOA)信号(常常由多个球谐系数(SHC)或其它层次元素表示)是声场的三维表示。HOA或SHC表示可按独立于用以回放从SHC信号显现的多声道音频信号的本地扬声器几何布置的方式来表示声场。SHC信号还可促进后向兼容性，这是因为可将SHC信号显现为熟知且被高度采用的多声道格式，例如5.1音频声道格式或7.1音频声道格式。SHC表示因此可实现对声场的较佳表示，其也适应后向兼容性。另外，数字视频能力可并入至广泛范围的装置中，包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子书阅读器、数字相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝或卫星无线电电话(所谓的“智能手机”)、视频电话会议装置、视频流式处理装置等等。数...
【技术保护点】
1.一种装置，其包括：/n存储器装置，其经配置以存储与声场相关联的音频空间元数据以及视频数据；/n处理器，其耦合至所述存储器装置，所述处理器经配置以使用存储至所述存储器装置的所述音频空间元数据来识别所述声场的一或多个前景音频对象，且基于所述经识别的一或多个前景音频对象而选择与所述视频数据相关联的一或多个视区；及/n显示器硬件，其耦合至所述处理器及所述存储器装置，所述显示器硬件经配置以输出所述视频数据的与由所述处理器选择的所述一或多个视区相关联的部分。/n
【技术特征摘要】
【国外来华专利技术】20170630 US 62/527,794;20170808 US 15/672,0801.一种装置，其包括：
存储器装置，其经配置以存储与声场相关联的音频空间元数据以及视频数据；
处理器，其耦合至所述存储器装置，所述处理器经配置以使用存储至所述存储器装置的所述音频空间元数据来识别所述声场的一或多个前景音频对象，且基于所述经识别的一或多个前景音频对象而选择与所述视频数据相关联的一或多个视区；及
显示器硬件，其耦合至所述处理器及所述存储器装置，所述显示器硬件经配置以输出所述视频数据的与由所述处理器选择的所述一或多个视区相关联的部分。
2.根据权利要求1所述的装置，其中所述处理器经进一步配置以确定与所述经识别的一或多个前景音频对象相关联的能量。
3.根据权利要求1所述的装置，其中所述处理器经进一步配置以基于所述经识别的一或多个前景音频对象而确定与所述经识别的一或多个视区相关联的视区数目。
4.根据权利要求1所述的装置，其中所述处理器经进一步配置以对存储至所述存储器装置的所述视频数据的与所述经识别的一或多个前景音频对象相关联的部分进行升采样，且
其中所述显示器硬件经配置以输出所述视频数据的所述经升采样部分。
5.根据权利要求1所述的装置，其进一步包括经配置以输出表示所述声场的音频数据格式的一或多个扩音器。
6.根据权利要求1所述的装置，其中所述处理器经配置以检测经更新视场FoV信息且基于所述经更新FoV信息而更新所述经识别的一或多个视区。
7.根据权利要求1所述的装置，其中所述显示器硬件经配置以仅输出所述视频数据的与所述一或多个视区相关联的所述部分，而不输出所述视频数据的不与由所述处理器选择的所述一或多个视区相关联的其余部分。
8.根据权利要求1所述的装置，其中所述存储器装置经进一步配置以存储所述声场的多个表示，所述多个表示包括所述声场的多个基于对象的表示、所述声场的高阶立体混响表示、所述声场的混合阶立体混响表示、所述声场的基于声道的表示、所述声场的基于对象的表示与所述声场的高阶立体混响表示的组合、所述声场的基于对象的表示与所述声场的混合阶立体混响表示的组合，或所述声场的混合阶表示与所述声场的高阶立体混响表示的组合。
9.根据权利要求1所述的装置，其中所述存储器装置经配置以存储与所述声场相关联的空间音频内容，且其中所述处理器经配置以进一步基于与所述声场相关联的空间音频内容的空间能量分布而选择所述一或多个视区。
10.根据权利要求1所述的装置，其中所述处理器经配置以进一步基于与所述声场相关联的空间音频内容的空间能量分布而选择所述一或多个视区。
11.根据权利要求1所述的装置，其中所述存储器装置经配置以存储包含空间元数据的所述声场的高阶立体混响HOA表示，且其中所述处理器经配置以解析所述HOA表示以获得主导声音的方向并基于所述主导声音的所述方向而选择所述一或多个视区。
12.根据权利要求1所述的装置，其中所述存储器装置经配置以存储包含空间元数据的所述声场的基于对象的表示，且其中所述处理器经配置以解析所述基于对象的表示以获得包含方向、距离或对象优先级中的一或多者的对象相关元数据，且基于所述对象相关元数据而选择所述一或多个视区。
13.根据权利要求1所述的装置，其中所述处理器经配置以跟踪由与所述装置相关联的一或多个角度提供的转向角。
14.根据权利要求13所述的装置，其中所述处理器经配置以进一步基于所述转向角而选择所述一或多个视区。
15.根据权利要求14所述的装置，其中所述处理器经配置以基于所述转向角而选择所述一或多个视区中的当前视区，且基于所述经识别...
【专利技术属性】
技术研发人员：N·G·彼得斯，S·塔加迪尔·施瓦帕，D·森，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国;US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。