音频文件的头部姿势混合制造技术

描述了能够向显示设备的用户呈现音频文件的听觉或视觉表示的可穿戴设备的示例，其中音频文件包括表示音频文件的不同音频内容的多个干音轨。描述如下的系统和方法：确定用户的姿势；基于用户的姿势来生成音频文件的多个干音轨中的至少一个干音轨的音频混合；基于用户的姿势和音频混合来生成音频混合的可视化；将表示音频混合的音频信号传送给扬声器；并将表示音频混合的可视化的视觉信号传送给显示器。

The mixing of the head position of the audio file

An example of an audible or visual representation of an audio file that can be presented to a user of a display device is described, in which an audio file includes multiple audio tracks representing different audio content of an audio file. Describes the following systems and methods: to determine the user's posture; the audio mix of at least one of the dry tracks in the multiple tracks of the audio file based on the user's posture; to generate audio mixing visualization based on the mix of users' postures and audio; and to transmit audio mixed audio signals to the speakers; and The visual signal transmitted to the display is represented by audio mixing.

【技术实现步骤摘要】
【国外来华专利技术】音频文件的头部姿势混合相关申请的交叉引用本申请根据35USC§119(e)要求2015年9月16日提交的美国临时申请No.62/219,604题为“音频文件的头部姿势混合(HEADPOSEMIXINGOFAUDIOFILES)”和2016年1月29日提交的美国临时申请No.62/289,085题为“音频文件的头部姿势混合(HEADPOSEMIXINGOFAUDIOFILES”的优先权权益。两个临时申请的全部内容通过引用全部并入在此。
本公开涉及虚拟现实和增强现实成像和可视化系统，尤其涉及基于用户姿势来混合音频文件的系统。
技术介绍
现代计算和显示技术促进了用于所谓的“虚拟现实”、“增强现实”或“混合现实”体验的系统的开发，其中数字再现的图像或其部分以其看起来似乎是或可能被认为是真实的方式呈现给用户。虚拟现实或“VR”场景通常涉及数字或虚拟图像信息的呈现，而不透明于其它实际的真实世界的视觉输入；增强现实或“AR”情景通常涉及将数字或虚拟图像信息呈现为对用户周围的现实世界的可视化的增强；混合现实或“MR”，其与真实世界和虚拟世界合并在一起，以产生物理对象和虚拟对象共存并实时交互的新的环境本文档来自技高网...

【技术保护点】
1.一种可穿戴设备，包括：非瞬态存储器，其被配置为存储包括多个干音轨的音频文件，每个干音轨表示所述音频文件的不同音频内容；传感器，其被配置为测量与所述可穿戴设备的用户的姿势相关联的信息；显示器，其被配置为将图像呈现给所述可穿戴设备的用户的眼睛；扬声器，其被配置为将声音呈现给所述可穿戴设备的用户；以及处理器，其与所述非瞬态存储器、所述传感器、所述扬声器以及所述显示器通信，所述处理器编程有可执行指令从而：确定所述用户的所述姿势；至少部分地基于所述用户的所述姿势，生成所述音频文件的所述多个干音轨中的至少一个干音轨的音频混合；至少部分地基于所述用户的所述姿势和所述音频混合，生成所述音频混合的可视化；向...

【技术特征摘要】
【国外来华专利技术】2015.09.16 US 62/219,604;2016.01.29 US 62/289,0851.一种可穿戴设备，包括：非瞬态存储器，其被配置为存储包括多个干音轨的音频文件，每个干音轨表示所述音频文件的不同音频内容；传感器，其被配置为测量与所述可穿戴设备的用户的姿势相关联的信息；显示器，其被配置为将图像呈现给所述可穿戴设备的用户的眼睛；扬声器，其被配置为将声音呈现给所述可穿戴设备的用户；以及处理器，其与所述非瞬态存储器、所述传感器、所述扬声器以及所述显示器通信，所述处理器编程有可执行指令从而：确定所述用户的所述姿势；至少部分地基于所述用户的所述姿势，生成所述音频文件的所述多个干音轨中的至少一个干音轨的音频混合；至少部分地基于所述用户的所述姿势和所述音频混合，生成所述音频混合的可视化；向所述扬声器发送表示所述音频混合的音频信号；以及向所述显示器发送表示所述音频混合的可视化的视觉信号。2.根据权利要求1所述的可穿戴设备，其中，所述多个干音轨中的干音轨与不同的乐器或人声音轨相关联。3.根据权利要求1所述的可穿戴设备，其中，所述多个干音轨中的至少一个干音轨包括与所述干音轨的空间位置和空间方向性相关联的信息。4.根据权利要求1所述的可穿戴设备，其中，所述传感器包括以下中的至少一个：陀螺仪、加速度计、惯性测量单元、眼睛跟踪照相机或被配置为对所述用户的环境成像的照相机。5.根据权利要求1所述的可穿戴设备，其中，所述姿势包括以下中的至少一个：头部姿势、眼睛姿势、身体姿势或手势。6.根据权利要求1所述的可穿戴设备，其中，所述可视化包括与所述多个干音轨的相应干音轨相关联的视觉图形。7.根据权利要求6所述的可穿戴设备，其中，所述视觉图形包括与所述干音轨的表现相关联的乐器或人的图形表示。8.根据权利要求6所述的可穿戴设备，其中，所述视觉图形中的至少一些被呈现在相对于所述用户的不同深度平面处。9.根据权利要求1所述的可穿戴设备，其中，所述可穿戴设备被配置为识别所述用户的环境中的物理对象，并且将所述多个干音轨中的干音轨的图形表示呈现为与所述物理对象相关联。10.根据权利要求1所述的可穿戴设备，其中，所述可穿戴设备...

【专利技术属性】
技术研发人员：S·V·曼加特，M·B·塔克，A·A·塔吉克，
申请(专利权)人：奇跃公司，
类型：发明
国别省市：美国,US