音频处理制造技术

技术编号:22947570 阅读:55 留言:0更新日期:2019-12-27 17:45
一种方法,包括:使用虚拟分隔来划分虚拟空间,该虚拟分隔映像用户在虚拟空间内对虚拟空间的感知;响应于用户相对于第一虚拟分隔而在虚拟空间中的第一动作,进行对第一虚拟分隔如何影响用户对虚拟空间感知方式的第一改变。

【技术实现步骤摘要】
【国外来华专利技术】音频处理
本专利技术的实施例涉及音频处理。一些示例但不一定是全部示例涉及音频处理的自动控制。
技术介绍
空间音频呈现包括呈现声音场景,该声音场景包括相应位置处的声源。因此,每个声音场景包括由听众在听觉上处理的信息。用户将不仅理解声源的存在,而且会理解声源在声音场景中的位置以及相对于其他声源的位置。声音的感知域比视力的感知域(视场)宽得多。这可能使得听众在听觉上对大量信息进行处理。在所呈现的经协调的现实的上下文中,期望根据用户与虚拟空间的关系来控制用户从用户所占据的虚拟空间在视觉和听觉上都感知到了什么。如果用户改变了这种关系,例如通过改变虚拟空间内的用户定向或用户位置,则用户所感知的将被改变。
技术实现思路
根据本专利技术的各个实施例但不一定是全部实施例,提供了一种方法,该方法包括:使用一个或多个虚拟分隔来划分虚拟空间,该一个或多个虚拟分隔影响虚拟空间内的用户对虚拟空间的感知。响应于用户相对于第一虚拟分隔的、在虚拟空间中的第一动作,对第一虚拟分隔如何影响用户所感知的虚拟空间进行第一改变。根据本专利技术的各个实施例但不一定是全部实施例,提供了一种装置,该装置包括:至少一个处理器;以及至少一个存储器,该至少一个存储器包括计算机程序代码,该至少一个存储器和该计算机程序代码被配置为与至少一个处理器一起使装置至少执行:使用一个或多个虚拟分隔来引起虚拟空间的划分,该一个或多个虚拟分隔影响具有虚拟空间内的虚拟位置的用户对虚拟空间的感知;响应于真实用户相对于第一虚拟分隔的、在虚拟空间中的第一动作,对第一虚拟分隔如何影响用户所感知的虚拟空间进行第一改变。根据本专利技术的各个实施例但不一定是全部实施例,提供了一种装置,该装置包括:用于使用一个或多个虚拟分隔来划分虚拟空间的部件,该一个或多个虚拟分隔影响虚拟空间内的用户对虚拟空间的感知;用于响应于用户相对于第一虚拟分隔的、在虚拟空间中的第一动作,来对第一虚拟分隔如何影响用户所感知的虚拟空间进行第一改变的部件。根据本专利技术的各个实施例但不一定是全部实施例,提供了一种计算机程序产品,该计算机程序产品在处理器上运行时执行:使装置至少执行:使用一个或多个虚拟分隔来引起虚拟空间的划分,该一个或多个虚拟分隔影响具有虚拟空间内的虚拟位置的用户对虚拟空间的感知;响应于真实用户相对于第一虚拟分隔的、在虚拟空间中的第一动作,使得对第一虚拟分隔如何影响用户所感知的虚拟空间进行第一改变。根据本专利技术的各个实施例但不一定是全部实施例,提供了如所附权利要求书所要求保护的示例。附图说明为了更好地理解有助于理解简要说明的各种示例,现在将仅以示例的方式参考附图,其中:图1A-1C和图2A-2C示出了经协调的现实的示例,其中图1A、1B、1C从常用的俯视视角示出了相同的虚拟视觉空间和不同的视点,并且图2A、2B、2C示出了来自相应的视点的视角的虚拟视觉场景;图3A示出了真实空间的示例,并且图3B示出了真实视觉场景的示例;图4示出了可操作以实现经协调的现实和/或增强现实和/或虚拟现实的装置的示例;图5A示出了用于实现经协调的现实和/或增强现实和/或虚拟现实的方法的示例;图5B示出了用于针对增强现实更新虚拟视觉空间的模型的方法的示例;图6A和图6B示出了实现向用户显示虚拟视觉场景的至少一些部分的装置的示例;图7A示出了真实空间中的手势的示例,并且图7B示出了真实空间中的手势在虚拟视觉场景中被呈现的对应表示;图8示出了用于修改经呈现的声音场景的系统的示例;图9示出了可以被用来例如执行系统的定位块、定向块和距离块的功能的模块的示例;图10示出了使用装置来实现的系统/模块的示例;图11A示出了包括声音对象的声音场景,图11B示出了包括声音对象的声音场景,图11C示出了基于虚拟分隔的存在的经修改的声音场景的示例,图11D示出了与图11C中所示的声音空间相对应的虚拟视觉空间。图12示出了用于响应于触发动作来控制虚拟分隔如何影响用户所感知的虚拟空间的方法;图13A示出了手势210作为触发动作的示例;图13B示出了移动和手势210的组合作为触发动作;图14示出了虚拟空间如何被划分成多个不同的声音场景;图15示出了影响用户所感知的虚拟空间的虚拟分隔的不同改变的示例;图16A、16B、17A和17B示出了相对于虚拟分隔的合适的触发动作的示例,该触发动作触发对虚拟分隔如何影响用户所感知的虚拟空间的改变。图17A示意性地示出了在相对于虚拟分隔的触发动作之前被呈现给用户的音频的示例,图17B示意性地示出了在相对于虚拟分隔的触发动作之后被呈现给用户的音频的示例;以及图18A至图18D示出了如何创建和适配虚拟分隔的示例。定义“人工环境”可以是已经被记录或生成的事物。“虚拟视觉空间”是指可以被观看的完全或部分人工的环境,其可以是三维的。“虚拟视觉场景”是指从虚拟视觉空间内的特定视点观看的、虚拟视觉空间的表示。“虚拟视觉对象”是虚拟视觉场景内的可见虚拟对象。“真实空间”是指真实环境,其可以是三维的。“真实视觉场景”是指从真实空间内的特定视点观看的、真实空间的表示。在本文档中,“经协调的现实”是指用户在视觉上体验完全或部分人工的环境(虚拟空间),作为由装置向用户至少部分地呈现的虚拟场景。虚拟场景由虚拟空间内的视点来确定。显示虚拟场景意指以可以被用户感知的形式来提供虚拟场景。在本文档中,“增强现实”是指经协调的现实的一种形式,其中用户体验部分人工的环境(虚拟空间)作为虚拟场景,该虚拟场景包括由装置向用户所呈现的一个或多个视觉或音频元素补充的、物理真实世界环境(真实空间)的真实场景;在本文档中,“虚拟现实”是指经协调的现实的一种形式,其中用户体验完全人工的环境(虚拟视觉空间)作为装置向用户所显示的虚拟场景;如应用于经协调的现实、增强现实或虚拟现实的“经视角协调的”意指用户动作确定虚拟空间内的视点,从而改变虚拟场景;如应用于经协调的现实、增强现实或虚拟现实的“经第一人称视角协调的”意指用附加约束协调的视角,该附加约束为用户的真实视点确定虚拟空间内的视点;如应用于经协调的现实、增强现实或虚拟现实的“经第三人称视角协调的”意指用附加约束协调的视角,该附加约束为用户的真实视点不确定虚拟空间内的视点;如应用于经协调的现实、增强现实或虚拟现实的“用户交互”意指用户动作至少部分地确定虚拟空间内发生的事情;“显示”意指以用户在视觉上所感知(观看)的形式来提供。“呈现”意指以用户所感知的形式来提供。“声音空间”是指声源在三维空间中的布置。声音空间可以与记录声音相关地被限定(所记录的声音空间),以及与呈现声音相关地被限定(所呈现的声音空间)。“声音场景”是指从声音空间内的特定视点所听到的声音空间的表示。“声音对象”是指可以被定位在声音空间内的声源。与本文档来自技高网...

【技术保护点】
1.一种装置,包括用于以下的部件:/n使用至少一个虚拟分隔,将虚拟空间划分成当前声音场景和不同于所述当前场景的至少一个第一声音场景;/n以比与至少一个第一声音场景相关联的音频大的音量,向用户呈现与所述当前声音场景相关联的音频;以及/n响应于所述用户的相对于所述至少一个虚拟分隔的、在所述虚拟空间中的第一触发动作,减小与至少一个第一声音场景相关联的所述音频的衰减,使得与所述至少一个第一声音场景相关联的所述音频以增加的音量被呈现给所述用户。/n

【技术特征摘要】
【国外来华专利技术】20170302 EP 17158876.71.一种装置,包括用于以下的部件:
使用至少一个虚拟分隔,将虚拟空间划分成当前声音场景和不同于所述当前场景的至少一个第一声音场景;
以比与至少一个第一声音场景相关联的音频大的音量,向用户呈现与所述当前声音场景相关联的音频;以及
响应于所述用户的相对于所述至少一个虚拟分隔的、在所述虚拟空间中的第一触发动作,减小与至少一个第一声音场景相关联的所述音频的衰减,使得与所述至少一个第一声音场景相关联的所述音频以增加的音量被呈现给所述用户。


2.根据权利要求1所述的装置,其中:
所述当前声音场景由所述虚拟空间中的虚拟用户的位置来确定。


3.根据权利要求1或2所述的装置,还包括用于以下的部件:
取决于距将所述当前场景与所述第一场景划分开的虚拟分隔的增加的用户接近度,以比与至少一个第一声音场景相关联的音频大的音量,向用户呈现与所述当前声音场景相关联的音频。


4.根据前述权利要求中任一项所述的装置,还包括用于以下的部件:
在向所述用户呈现音频期间,控制与所述至少一个第一声音场景相关联的音频的所述衰减、并且取决于与所述至少一个虚拟分隔的用户关系,来改变与所述至少一个第一声音场景相关联的音频的衰减,其包括:取决于距将所述第一场景与所述当前场景划分开的虚拟分隔的用户接近度,来减小与第一场景相关联的音频的衰减。


5.根据前述权利要求中任一项所述的装置,还包括用于以下的部件:
在没有继续所述第一触发动作的情况下,自动地撤消对与至少一个第一声音场景相关联的所述音频的所述衰减的所述改变。


6.根据前述权利要求中任一项所述的装置,还包括用于以下的部件:
响应于不同于所述第一触发动作的第二触发动作,通过撤销对与至少一个第一声音场景相关联的所述音频的所述衰减的所述改变,来移除所述第一触发动作在所述虚拟空间中相对于所述至少一个虚拟分隔的影响。


7.根据前述权利要求中任一项所述的装置,还包括用于以下的部件:
在用户在所述虚拟空间中执行所述第一触发动作之后,引起对所述用户的确认性触觉反馈,以确认引起对与至少一个第一声音场景相关联的所述音频的所述衰减的所述改变的用户动作。


8.根据前述权利要求中任一项所述的装置,还包括用于以下的部件:
使用所述至少一个虚拟分隔,来动态地改变所述虚拟空间的所述划分。


9.根据权利要求8所述的装置,还包括用于以下的部件:
使用所述至少一个虚拟分隔,来自动地改变所述虚拟空间的所述划分。


10.根据前述权利要求中任一项所述的装置,其中:
与所述当前声音场景相关联的所述音频和与所述至少第一声音场景相关联的所述音频包括声音对象,还包括用于以下的部件:
通过对声音对象进行分组,使用所述至少一个虚拟分隔来确定所述虚拟空间的所述划分。


11.根据权利要求10所述的装置,其中:
声音对象的所述分组取决于虚拟空间中的虚拟用户的位置和与声音对象相关联的位置之间的相对间隔。


12.根据前述权利要求中任一项所述的装置,还包括用于以下的部件:
通过取决于至少一个捕获设备的、在所述虚拟空间内的对应位置以定位所述至少一个虚拟分隔,来使用所述至少一个虚拟分隔确定所述虚拟空间的所述划分,所述至少一个捕获设备被用来捕获限定所述虚拟空间的内容。


13.根据前述权利要求中任一项所述的装置,还包括用于以下的部件:
呈现所述虚拟空间中的、与所述至少一个虚拟分隔相关联的视觉指示。


14.一种方法,包括:
使用至少一个虚拟分隔,将虚拟空间划分成当前声音场景和不同于所述当前场景的至少一个第一声音场景;
以比与至少一个第一声音场景相关联...

【专利技术属性】
技术研发人员:A·埃罗南A·勒蒂涅米J·莱帕南J·阿拉斯维奥里
申请(专利权)人:诺基亚技术有限公司
类型:发明
国别省市:芬兰;FI

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1