装置以及相关联的方法制造方法及图纸

一种装置，被配置为使用捕获的空间音频内容，该捕获的空间音频内容由可旋转空间音频捕获麦克风阵列所捕获，捕获的空间音频内容定义场景中音频的三维布置，听觉场景相对于在音频捕获时麦克风阵列的定向而被定义，并且使用捕获的方向数据，该捕获的方向数据表示在所述空间音频内容被捕获期间的时间内该麦克风阵列的参考方向相对于场景的方向，以生成经修改的空间音频内容，其中，通过使用捕获的方向数据来修改听觉场景的定向，听觉场景从在捕获空间音频内容期间发生的可旋转空间音频捕获麦克风阵列的任何旋转被解耦，以用于相对于接收方用户所位于的空间来向接收方用户进行呈现。

Devices and associated methods

【技术实现步骤摘要】
【国外来华专利技术】装置以及相关联的方法
本公开涉及虚拟现实领域，并且具体地涉及在虚拟或增强现实视场中用以捕获虚拟现实内容的属性的修改的再检查领域、相关联的方法、计算机程序和装置。
技术介绍
随着虚拟现实内容生产方生产实况和录制的虚拟现实内容，捕获虚拟现实内容变得越来越普遍。确保这样的虚拟现实内容具有很高的生产价值非常重要。虚拟现实内容的捕获可能需要修改捕获属性，以改进或修改虚拟现实内容，诸如以允许内容生产方创建品质内容和/或在所得的虚拟现实内容中实现期望的风格效果。先前公布的文档及任何
技术介绍
在本说明书中的列出或讨论不应被视为承认该文档和
技术介绍
是现有技术的一部分或是公知常识。本公开的一个或多个方面/示例可以或可以不解决一个或多个
技术介绍
问题。
技术实现思路
在第一示例方面，提供了一种装置，包括：至少一个处理器；以及至少一个存储器，该至少一个存储器包括计算机程序代码，该至少一个存储器和该计算机程序代码被配置为与至少一个处理器一起，使该装置至少执行以下：使用：捕获的空间音频内容，该捕获的空间音频内本文档来自技高网...

【技术保护点】
1.一种装置，包括：/n至少一个处理器；以及/n至少一个存储器，所述至少一个存储器包括计算机程序代码，/n所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起使所述装置至少执行以下：/n使用/n捕获的空间音频内容，所述捕获的空间音频内容由可旋转空间音频捕获麦克风阵列捕获，所述捕获的空间音频内容定义听觉场景，所述听觉场景包括围绕所述空间音频捕获麦克风阵列的场景的所述音频，所述空间音频捕获麦克风阵列被定义为使得所述场景中的所述音频的三维布置以可听的方式可呈现给接收方用户，在音频捕获时，所述听觉场景的定向相对于所述可旋转空间音频捕获麦克风阵列被定义，以及/n捕获的方向数据，所述捕获...

【技术特征摘要】
【国外来华专利技术】20170630 EP 17178912.61.一种装置，包括：
至少一个处理器；以及
至少一个存储器，所述至少一个存储器包括计算机程序代码，
所述至少一个存储器和所述计算机程序代码被配置为与所述至少一个处理器一起使所述装置至少执行以下：
使用
捕获的空间音频内容，所述捕获的空间音频内容由可旋转空间音频捕获麦克风阵列捕获，所述捕获的空间音频内容定义听觉场景，所述听觉场景包括围绕所述空间音频捕获麦克风阵列的场景的所述音频，所述空间音频捕获麦克风阵列被定义为使得所述场景中的所述音频的三维布置以可听的方式可呈现给接收方用户，在音频捕获时，所述听觉场景的定向相对于所述可旋转空间音频捕获麦克风阵列被定义，以及
捕获的方向数据，所述捕获的方向数据与所述空间音频内容相关联，并且表示所述空间音频捕获麦克风阵列的参考方向在所述空间音频内容被捕获的期间相对于所述场景的方向；
来生成经修改的空间音频内容，在所述经修改的空间音频内容中，通过使用所述捕获的方向数据来修改所述听觉场景的所述定向，所述听觉场景从在捕获所述空间音频内容期间发生的所述可旋转空间音频捕获麦克风阵列的任何旋转被解耦，以用于相对于所述接收方用户所位于的空间来向所述接收方用户进行呈现。


2.根据权利要求1所述的装置，其中所述装置被使得向所述接收方用户提供作为空间音频的所述经修改的空间音频内容的呈现，并且基于在所述空间音频内容被捕获时的时间处的参考方向来提供将空间局部化音频效果应用于所述听觉场景的所述音频，以指示当所述捕获的空间音频内容被捕获时所述参考方向在所述听觉场景中正在指向何处，所述局部化音频效果被配置为相对于被呈现给所述接收方用户的所述音频的其余部分，引起以下中的一项或多项：
i)响度的增加；
ii)对一个或多个频率分量的响度的修改；以及
iii)对一个或多个频率分量的频率的修改。


3.根据权利要求2所述的装置，其中对所述空间局部化音频效果的所述提供还基于在所述参考方向与当前用户观看方向之间存在高于未对准阈值的未对准，所述当前用户观看方向包括所述接收方用户相对于被呈现给所述接收方用户的、作为空间音频的所述听觉场景而正在查看的当前方向。


4.根据前述权利要求中任一项所述的装置，其中所述装置被使得基于所述捕获的方向数据和当前用户观看方向，来向所述接收方用户提供所述经修改的空间音频内容的呈现作空间音频，所述当前用户观看方向包括所述接收方用户相对于被呈现给所述接收方用户的、作为空间音频的所述听觉场景而正在查看的所述当前方向，并且其中所述当前用户观看方向当前在阈值距离内被与所述参考方向对准；
向所述接收方用户提供观看方向对准指示符的呈现，从而所述观看方向对准指示符的所述呈现指示所述接收方用户相对于所述听觉场景正在与所述空间音频内容被捕获时所述空间音频捕获麦克风阵列相对于所述场景的所述参考方向相同的方向上进行查看。


5.根据前述权利要求中任一项所述的装置，其中所述空间音频捕获麦克风阵列相对于所述场景的所述参考方向包括位于所述场景中的用户在捕获所述捕获的空间音频内容时的观看方向，所述用户被称为捕获用户，所述空间音频捕获麦克风阵列根据所述捕获用户的所述观看方向可旋转。


6.根据前述权利要求中任一项所述的装置，其中至少所述可旋转空间音频捕获麦克风阵列被配置为被安装到捕获用户的头部。


7.根据前述权利要求中任一项所述的装置，其中所述空间音频内容被实况地呈现给所述接收方用户。


8.根据前述权利要求中任一项所述的装置，其中所述装置被使得向所述接收方用户提供所述经修改的空间音频内容的呈现作为空间音频，并且所述空间音频捕获麦克风阵列相对于所述场景的所述参考方向包括位于所述场景中的用户在捕获所述捕获的空间音频内容时的观看方向，所述用户被称为捕获用户，并且所述空间音频内容被实况地呈现给所述接收方用户；以及
基于所述捕获用户相对于所述场景的所述观看方向与所述接收方用户相对于所述听觉场景的当前用户观看方向在阈值内对准，使得所述捕获用户和所述接收方用户相对于所述场景和所述听觉场景分别具有基本相同的定向；
提供针对所述捕获用户的设备与所述接收方用户的设备之间的通信信道...

【专利技术属性】
技术研发人员：L·J·拉克索南，A·拉莫，A·勒蒂涅米，J·莱帕南，
申请(专利权)人：诺基亚技术有限公司，
类型：发明
国别省市：芬兰;FI