具有基于观看者位置的音频的视觉内容呈现制造技术

本文所公开的各种具体实施包括显示视觉内容作为3D环境的一部分并且添加对应于该视觉内容的音频的设备、系统和方法。该音频可被空间化以来自该3D环境内的一个或多个音频源位置。例如，视频可呈现在扩展现实(XR)环境内的虚拟表面上，同时与该视频相关联的音频被空间化以听起来如同它是从对应于该虚拟表面的音频源位置产生的。如何提供该音频可基于该观看者(例如，该用户或他/她的设备)相对于所呈现的视觉内容的该位置来确定。现的视觉内容的该位置来确定。现的视觉内容的该位置来确定。

【技术实现步骤摘要】
【国外来华专利技术】具有基于观看者位置的音频的视觉内容呈现


[0001]本公开整体涉及用于提供视觉和音频内容的技术。

技术介绍

[0002]电子设备以不同方式呈现诸如图像和视频的视觉内容以及相关联音频。例如，可在设备的显示屏上显示视频内容，同时从设备上的一个或多个扬声器播放相关联音频。可改善提供视觉和音频内容的用户体验。

技术实现思路

[0003]期望实现改善的用户内容体验。本文所公开的各种具体实施包括显示视觉内容作为3D环境的一部分并且添加对应于该视觉内容的音频的设备、系统和方法。该音频可被空间化以来自该3D环境内的一个或多个音频源位置。例如，视频可呈现在扩展现实(XR)环境内的虚拟表面上，同时与该视频相关联的音频被空间化以听起来如同它是从对应于该虚拟表面的音频源位置产生的。如何提供该音频可基于该观看者(例如，该用户或他/她的设备)相对于所呈现的视觉内容的该位置来确定。例如，视频可被呈现在作为球体的一部分的表面上，并且当从球体的外部观看时，声音可如同从球体的外表面上的点源提供。然而，当观看者在球体内移动他或她的头部时，观看者可沉浸在音频中，该音频本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：在具有处理器的设备处：确定三维(3D)环境中的用于显示视觉内容的位置；确定观看者相对于所述3D环境中的所述视觉内容的位置关系；基于所述位置关系来确定音频模式；以及根据所述音频模式呈现音频内容与所述视觉内容。2.根据权利要求1所述的方法，其中确定所述位置关系包括确定所述观看者在所述视觉内容的预定距离内。3.根据权利要求1所述的方法，其中确定所述位置关系包括确定所述观看者在与所述视觉内容相关联的区域内。4.根据权利要求3所述的方法，其中在虚拟形状的一部分上显示视觉内容并且基于所述形状来限定所述区域。5.根据权利要求1至4中任一项所述的方法，其中所述音频模式是单点源音频模式。6.根据权利要求5所述的方法，其中基于所述视觉内容的所述位置来确定所述点源的位置。7.根据权利要求5所述的方法，其中所述位置关系包括所述观看者与所述视觉内容相距的距离，其中基于所述距离超过阈值来选择所述单点源音频模式。8.根据权利要求5所述的方法，其中所述位置关系包括所述观看者位于与所述视觉内容相关联的形状之外，其中基于所述观看者位于所述形状之外来选择所述单点源音频模式。9.根据权利要求1至4中任一项所述的方法，其中所述音频模式是多声道音频模式。10.根据权利要求9所述的方法，其中所述位置关系包括所述观看者与所述视觉内容相距的距离，其中基于所述距离小于阈值来选择所述多声道音频模式。11.根据权利要求9所述的方法，其中所述位置关系包括所述观看者位于与所述视觉内容相关联的形状之外，其中基于所述观看者位于所述形状之外来选择所述多声道音频模式。12.根据权利要求1至4中任一项所述的方法，其中所述音频模式是空间化音频模式。13.根据权利要求12所述的方法，其中所述位置关系包括所述观看者位于与所述视觉内容相关联的形状内，其中基于观看者位于所述形状内来选择所述空间化音频模式。14.根据权利要求1至4中任一项所述的方法，其中所述音频模式包括从在其上显示所述视觉内容的形状上的多个位置呈现音频。15.根据权利要求14所述的方法，还包括：确定所述音频内容的第一音频内容项与所述视觉内容的第一视觉内容项相关联；以及基于所述第一视觉内容项的位置来选择所述第一音频内容项的位置。16.根据权利要求1至15中任一项所述的方法，还包括基于检测到所述观看者接近所述视觉内容来增加音频空间化。17.一种系统，包括：非暂态计算机可读存储介质；以及一个或多个...

【专利技术属性】
技术研发人员：S，
申请(专利权)人：苹果公司，
类型：发明
国别省市：