3D沉浸式空间音频系统和方法技术方案

本发明专利技术提供了用于通过耳机将三维沉浸式空间音频传递给用户的方法和系统，其中，所述耳机包括一个或者多个扬声器条件。所述方法和所述系统在用户的耳朵处重新创建超现实的声场，包括对高度和深度知觉的提示。在许多其它潜在用途和应用当中，本公开的所述方法和所述系统可以实施为虚拟现实应用。

【技术实现步骤摘要】
【国外来华专利技术】本申请要求于2014年11月11日提交的美国临时专利申请第62/078,074号的优先权，该申请的全部公开内容以引用的方式并入本文。
技术介绍
在许多情况下，需要生成声场，该声场包括与信号源(其可以是虚拟源)在声场内的位置有关的信息。这种信息导致听者认为信号是源于虚拟源的位置，即，认为信号源于在三维空间中相对于听者的位置的位置。例如，为了向观众提供更为身临其境、现实的体验，可以用环绕声输出伴随电影的音频。进一步的示例发生在计算机游戏的场景(context)中，其中，输出至用户的音频信号包括空间信息，从而使用户认为音频并非来自扬声器，而是来自在三维空间中的(虚拟)位置。例如可以通过使用耳机扬声器来将包含空间信息的声场传递至用户，通过该耳机扬声器来接收双耳信号。双耳信号包括足够的信息来重新创建包围一个或者多个虚拟信号源的虚拟声场。在这种情况下，例如为了保持音频和视频的关系(例如，同步性、一致性等)，需要考虑用户的头部移动以维持稳定的声场。响应于用户埋头，无法维持稳定的声场或者音频场可能例如导致用户认为虚拟源(诸如，汽车)飞入了空中。但是，更常见的情况是，无法考虑用户的头部移动会使源位置变成在用本文档来自技高网...

【技术保护点】
一种用于向用户提供三维空间音频的方法(600)，所述方法包括：将来自在虚拟扬声器环境中的音频源的音频信号输入编码为声场格式，从而生成声场数据(605)；基于采集的与所述用户的移动相关联的移动数据来使所述声场围绕所述用户动态旋转(610)；利用一个或者多个动态音频滤波器来处理所编码的音频信号(615)；将所述声场数据解码成一对双耳空间声道(620)；以及将所述一对双耳空间声道提供至所述用户的耳机装置(625)。

【技术特征摘要】
【国外来华专利技术】2014.11.11 US 62/078,0741.一种用于向用户提供三维空间音频的方法(600)，所述方法包括：将来自在虚拟扬声器环境中的音频源的音频信号输入编码为声场格式，从而生成声场数据(605)；基于采集的与所述用户的移动相关联的移动数据来使所述声场围绕所述用户动态旋转(610)；利用一个或者多个动态音频滤波器来处理所编码的音频信号(615)；将所述声场数据解码成一对双耳空间声道(620)；以及将所述一对双耳空间声道提供至所述用户的耳机装置(625)。2.根据权利要求1所述的方法，进一步包括：基于所述用户所在的所述虚拟环境的参数，利用动态房间效果来处理声源。3.根据权利要求1所述的方法，其中，在维持来自所述周围虚拟扬声器环境的声学提示的同时使所述声场围绕所述用户动态旋转。4.根据权利要求1所述的方法，其中，从所述用户的所述耳机装置采集与所述用户的移动相关联的所述移动数据。5.根据权利要求1所述的方法，其中，利用一个或者多个动态音频滤波器来处理所编码的音频信号包括：考虑来自所述周围虚拟扬声器环境的人体听觉提示。6.根据权利要求1所述的方法，其中，将在所述虚拟扬声器环境中的每个音频源作为单输入声道连同所述音频源的球面坐标位置矢量一起输入。7.根据权利要求6所述的方法，其中，所述球面坐标位置矢量识别在所述虚拟扬声器环境中所述音频源相对于所述用户的位置。8.根据权利要求1所述的方法，进一步包括：将在空间上记录的房间脉冲响应参数化为方向分量和漫射分量。9.根据权利要求8所述的方法，进一步包括：处理所述方向分量和漫射分量以生成数对解相关的漫射混响踪迹滤波器。10.根据权利要求9所述的方法，进一步包括：通过利用声学响应的随机性来对所述解相关的漫射混响踪迹滤波器进行建模，其中，所述声学响应包括房间脉冲响应。11.一种用于向用户提供三维空间音频的系统，所述系统包括：至少一个处理器；以及非暂时性计算机可读介质，所述非暂时性计算机可读介...

【专利技术属性】
技术研发人员：马尔钦·戈泽勒，弗兰克·伯兰德，布赖恩·奥图尔，伊恩·凯利，
申请(专利权)人：谷歌公司，
类型：发明
国别省市：美国;US