表面适当碰撞制造技术

本文公开了用于呈现与与表面碰撞的虚拟对象的呈现相关联的音频信号的系统和方法。虚拟对象和表面可以与混合现实环境相关联。音频信号的生成可以基于来自麦克风的音频流和来自传感器的视频流中的至少一个。在一些实施例中，虚拟对象与表面之间的碰撞与表面上的脚步相关联。相关联。相关联。

【技术实现步骤摘要】
【国外来华专利技术】表面适当碰撞
[0001]相关申请的交叉引用
[0002]本申请要求于2020年5月29日提交的美国临时申请号63/032,427的权益，其整体内容通过引用并入本文。


[0003]本公开大体涉及用于呈现沉浸式音频内容的系统和方法，并且特别地涉及用于在混合现实环境中呈现沉浸式音频内容的系统和方法。

技术介绍

[0004]虚拟环境在计算环境中是普遍存在的，虚拟环境应用于视频游戏(其中，虚拟环境可表示游戏世界)；地图(其中，虚拟环境可表示待导航的地形)；模拟(其中，虚拟环境可模拟真实环境)；数字故事(其中，虚拟角色可在虚拟环境中彼此交互)；和许多其他应用。现代计算机用户通常舒适感知虚拟环境并且与虚拟环境交互。然而，关于虚拟环境的用户的体验可能受限于用于呈现虚拟环境的技术。例如，常规显示器(例如，2D显示屏)和音频系统(例如，固定扬声器)可能不能够以产生令人信服、现实并且沉浸式体验的方式实现虚拟环境。
[0005]虚拟现实(“VR”)、增强现实(“AR”)、混合现实(“MR”)、和相关技术(统称为“XR”)共享向XR系统的用户呈本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种系统，包括：麦克风；传感器；显示器；音频输出；以及一个或多个处理器，其被配置为执行一种方法，所述方法包括：经由所述麦克风生成音频流；经由所述传感器生成视频流；确定触发事件已经发生；根据所述触发事件已经发生的确定：识别与所述触发事件相关联的时间戳；基于所述时间戳来识别所述音频流的一部分；基于所述时间戳来识别所述视频流的一部分；以及基于所述音频流的所述部分和所述视频流的所述部分中的至少一个，生成第一音频信号；在所述显示器上呈现与表面碰撞的虚拟对象，其中，所述表面与所述触发事件相关联；基于所述第一音频信号来生成第二音频信号；以及经由所述音频输出呈现所述第二音频信号。2.根据权利要求1所述的系统，其中，所述触发事件包括所述表面上的脚步。3.根据权利要求1所述的系统，还包括：第二传感器，其中，确定所述触发事件已经发生是基于由所述第二传感器所捕获的移动数据。4.根据权利要求1所述的系统，还包括：惯性测量单元，其中，确定所述触发事件已经发生是基于由所述惯性测量单元所捕获的惯性数据。5.根据权利要求1所述的系统，还包括：辅助设备和可穿戴头部设备，其中：确定所述触发事件已经发生是基于所述辅助设备的惯性数据，以及所述辅助设备被耦接到所述可穿戴头部设备。6.根据权利要求1所述的系统，其中，所述方法还包括：根据所述触发事件已经发生的确定：基于所述时间戳来识别所述系统的可穿戴头部设备的位置；基于所述系统的所述可穿戴头部设备的所述位置，确定所述触发事件的位置；以及将所述触发事件的所述位置与所述第一音频信号相关联。7.根据权利要求6所述的系统，其中，所述方法还包括：确定所述虚拟对象与所述表面的所述碰撞的位置；以及确定所述虚拟对象与所述表面的所述碰撞的所述位置是否与所述触发事件的所述位置相关联，其中，生成所述第二音频信号还基于确定所述虚拟对象与所述表面的所述碰撞的所述位置与所述触发事件的所述位置相关联。8.根据权利要求1所述的系统，其中，生成所述第二音频信号还基于以下中的至少一个：所述表面的物理模型和所述虚拟对象的物理模型。9.根据权利要求1所述的系统，其中，生成所述第二音频信号还基于对所述第一音频信
号的分析和再合成。10.根据权利要求1所述的系统，其中，所述方法还包括：根据所述触发事件已经发生的确定，将所述第一音频信号与所述表面相关联。11.根据权利要求1所述的系统，其中，所述第二音频信号对应于所述虚拟对象与所述表面的所述碰撞。12.根据权利要求1所述的系统，其中，所述方法还包括存储所述第一音频信号，其中：在第二系统的显示...

【专利技术属性】
技术研发人员：安娜斯塔西娅，
申请(专利权)人：奇跃公司，
类型：发明
国别省市：