基于用户的姿势混合音频制造技术

公开了一种用于利用用户的感测到的姿势来动态地控制音频轨道的混合以向用户提供诸如视频的虚拟环境的更现实、信息丰富和/或沉浸式的音频体验的系统、装置和方法。

【技术实现步骤摘要】
【国外来华专利技术】基于用户的姿势混合音频相关申请的交叉引用本申请要求于2018年5月8日提交的美国临时专利申请No.62/668,782的权益，其全部内容通过引用合并于此。
本公开涉及音频混合，并且更具体地涉及根据用户与设备的交互来动态地混合在设备上播放的音频。
技术介绍
计算设备(例如，智能手机、平板电脑、智能电视、膝上型电脑、虚拟助理等)可以由应用(即，app)配置以播放与虚拟环境相关联的音频。虚拟环境可以包括例如电影、导航或游戏环境。通过这些虚拟环境呈现的音频对于用户可能看起来缺乏沉浸式或交互性质量。
技术实现思路
在一个总体方面，本公开描述了一种用于混合音频的方法。在该方法中，接收包含未混合的音频轨道的媒体内容(例如，视频)。另外，从至少一个传感器接收信息(例如，用户的至少一个图像)。基于来自至少一个传感器的信息，然后确定用户的姿势并将其用作调整音频混合器的基础。将未混合的音频轨道应用于经调整的音频混合器，以创建用于媒体内容的混合音频，然后将其呈现给用户(例如，经由用户的设备)。在可能的实施方式中，用户的姿势可本文档来自技高网...

【技术保护点】
1.一种方法，包括：/n接收包含未混合的音频轨道的媒体内容；/n从至少一个传感器接收信息；/n基于来自所述至少一个传感器的所述信息来确定用户的姿势；/n基于所述确定的姿势来调整音频混合器；/n将所述未混合的音频轨道应用于经调整的音频混合器，以创建用于所述媒体内容的混合音频；以及/n向所述用户呈现所述媒体内容，所述媒体内容包括所述混合音频。/n

【技术特征摘要】
【国外来华专利技术】20180508 US 62/668,7821.一种方法，包括：
接收包含未混合的音频轨道的媒体内容；
从至少一个传感器接收信息；
基于来自所述至少一个传感器的所述信息来确定用户的姿势；
基于所述确定的姿势来调整音频混合器；
将所述未混合的音频轨道应用于经调整的音频混合器，以创建用于所述媒体内容的混合音频；以及
向所述用户呈现所述媒体内容，所述媒体内容包括所述混合音频。


2.根据权利要求1所述的方法，其中，所述媒体内容是视频。


3.根据权利要求1或权利要求2所述的方法，其中，所述音频混合器包括用于每个未混合的音频轨道的音频通道，所述混合器的每个音频通道可调整以控制所应用的未混合的音频轨道的至少一个特性。


4.根据权利要求3所述的方法，其中，所述至少一个特性包括所应用的音频轨道的音量或频谱分布图。


5.根据前述权利要求中的任一项所述的方法，其中，来自所述至少一个传感器的所述信息包括所述用户的至少一个图像。


6.根据前述权利要求中的任一项所述的方法，其中，所述用户的姿势包括所述用户与所述用户的设备之间的相对方位或相对定向。


7.根据权利要求6所述的方法，其中，所述用户的设备是显示器。


8.根据前述权利要求中的任一项所述的方法，其中，所述用户的姿势包括所述用户的表情或移动。


9.根据前述权利要求中的任一项所述的方法，进一步包括：
重复所述确定、所述调整、所述应用和所述呈现，使得所述媒体内容的混合音频在播放所述媒体内容时对所述用户的姿势的变化进行响应。


10.一种用于混合音频的系统，包括：
至少一个传感器，所述至少一个传感器被配置成接收与用户相对应的信息；和
处理器，所述处理器通信地耦合到所述至少一个传感器，所述处理器被配置成：
接收与视频相关联的未混合的音频轨道，
根据与所述用户相对应的信息确定姿势，
基于所确定的姿势来调整音频混合器，并且
将所述未混合的音频轨道应用于经调整的音频混合器，以创建用于所述视频的混合音频。


11.根据权利要求10所述的系统，其中，所述处理器进一步...

【专利技术属性】
技术研发人员：卢卡·普拉索，
申请(专利权)人：谷歌有限责任公司，
类型：发明
国别省市：美国;US