定制的360度媒体观看制造技术

一种设备可以被配置为渲染360度媒体内容的至少一个空间区域，其中所述360度媒体内容可以包括两个或更多个空间区域。该设备可包括被配置成接收所述360度媒体内容和与该360度内容相关联的元数据的接收机。所述元数据可以包括所述360度媒体内容的相应空间区域的分类。所述设备还可以包括被配置为存储用户偏好的存储器和被配置为检测用户移动的传感器。所述设备可以包括处理器，该处理器被配置为确定所述用户移动与所述相应空间区域的渲染相关联。所述处理器还可以确定所述分类是否符合所述用户偏好，并且如果所述分类违反所述用户偏好，则改变所述相应空间区域的所述渲染。

Customized 360 degree media viewing

【技术实现步骤摘要】
【国外来华专利技术】定制的360度媒体观看相关申请的交叉引用本申请要求以下申请的权益：2017年10月4递交的题为“定制360°媒体观看”的美国临时申请号62/567,976、以及2018年6月28日递交的题为“定制360°媒体观看”的美国临时申请号62/691,316的权益，这两篇申请的内容通过引用而被整体结合于此。
技术介绍
360度视频是媒体行业中新兴且快速增长的格式，这是由虚拟现实(VR)设备的日益增长的可用性所促进的。360度视频的具有吸引力的一部分是其向用户提供动态观看体验的能力，该动态观看体验提供了新的存在感和增强的控制。除了经由VR设备的显示器呈现高质量图像之外，用户还可以通过例如向左或向右转动来控制他们正在观看的内容，就像他们在物理世界中那样。VR设备可以检测这种移动，然后调整视频显示器以向用户呈现与他们的物理移动相对应的视图(一个或多个)。然而，与直线视频相比，向用户提供这种沉浸式观看体验可能带来新的技术挑战，这其中包括如何进一步定制这种动态视频环境以适应用户的不同背景、兴趣和/或偏好，同时仍然使得通常与360度视频相关联的大量数据能够经由有限带宽资源而被高效地分发。
技术实现思路
一种设备可以被配置为渲染360度媒体内容的至少一个空间区域，其中所述360度媒体内容可以包括两个或更多个空间区域。所述设备可包括被配置成接收所述360度媒体内容和与该360度内容相关联的元数据的接收机。所述元数据可以包括所述360度媒体内容的空间区域的分类(classification)。所述设备还可以包括被配置为存储用户偏好的存储器和被配置为检测用户移动的传感器。所述设备可以包括处理器，该处理器被配置为确定所述用户移动与所述相应空间区域的渲染相关联。所述处理器可以进一步确定所述空间区域的所述分类是否符合所述用户偏好，并且如果所述分类违反所述用户偏好，则改变所述空间区域的所述渲染。所述处理器可以经由以下中的一个或多个来改变所述渲染：通过抑制移动到所述相应的空间区域；通过改变到直线投影格式；或者通过改变所述相应空间区域的一方面(例如，通过缩小所述空间区域)来改变所述渲染。附图说明图1示出了在头戴式设备(HMD)上显示的360度视频的示例部分。图2示出了示例媒体呈现描述(MPD)数据模型。图3示出了全向媒体应用的示例内容流。图4示出了示例多播/广播架构。图5示出了具有定制元数据的示例360度视频。图6示出了示例虚拟现实(VR)内容定制架构。图7示出了被配置成定制内容的示例客户端渲染设备的系统图。图8示出了示例性缩小呈现。图9图示了用于社交VR环境的示例架构。图10示出了被配置用于内容定制的社交VR环境的示例架构。图11A是可在其内实施一个或多个所公开的实施例的示例通信系统的系统图。图11B是可在图11A中所示的通信系统内使用的示例无线发射/接收单元(WTRU)的系统图。图11C是可在图11A中所示的通信系统内使用的示例无线电接入网络(RAN)和示例核心网络(CN)的系统图。图11D是可在图11A中所示的通信系统内使用的另一示例RAN和另一示例CN的系统图。具体实施方式现在将参考各个附图来描述说明性实施例的详细描述。尽管本说明书提供了可能实现的详细示例，但是应当注意，这些细节旨在是示例性的，而决不是限制本申请的范围。图1描绘了显示在头戴式设备(HMD)上的360度视频，该头戴式设备可以包括用于检测用户的移动(诸如用户头部的移动)的一个或多个传感器(未示出)。如图1所示，当观看360度视频时，可以向用户呈现该视频的一部分100。所述360度视频的显示部分100可以是单视场的(其中一个图像被导向双眼)，或者如图1所示，可以是立体的，其中两个不同的图像(例如，图像102、104)可以被单独地导向用户的每只眼睛。当用户“环顾”和/或放大或缩小图像时，可以改变所显示的部分100。例如，如果HMD的传感器之一检测到用户将她的头部向右转，则所述视频的显示部分100可以向右移动。所述视频的显示部分100也可以基于HMD和/或其他类型的用户接口(例如无线发射/接收单元(WTRU))提供的反馈而改变。所述360度视频的显示部分100可以对应于所述视频的单个空间区域，或者可以包括多个空间区域。所述360度视频的正被显示的空间区域或其任何(一个或多个)部分可以被称为视窗(viewport)。该视窗可以被全部或部分地呈现给用户。所呈现的视窗可以具有与所述360度视频的其他部分或视窗不同的质量。超文本传输协议(HTTP)流传输已经成为商业部署中的主导方法。例如，诸如Apple的HTTP直播流传输(HLS)、Microsoft的平滑流传输(SS)和/或Adobe的HTTP动态流传输(HDS)的流传输平台可以使用HTTP流作为底层视频递送方法。用于多媒体内容的HTTP流传输的标准可以允许基于标准的客户端(例如HMD)来流传输来自任何基于标准的服务器的内容，从而使得能够在不同供应商的客户端和服务器之间进行互操作性。运动图像专家组(MPEG)的HTTP动态自适应流传输(MPEG-DASH)可以是通用的传送格式，其可以通过动态地适应于变化的网络条件来向终端用户提供最佳可能的视频体验。DASH可以建立在普遍存在的HTTP/TCP/IP栈之上。DASH可以定义用于ISO基本媒体文件格式和MPEG-2传输流的分段格式、媒体呈现描述(MPD)和清单格式。动态HTTP流传输可能需要各种替代比特率的特定多媒体内容在服务器处可用的。所述多媒体内容可以包括若干媒体分量，诸如音频、视频和文本，并且所述媒体分量可以具有不同的特性。在MPEG-DASH的情况下，这些特性可以由MPD描述。所述MPD可以是可扩展标记语言(XML)文档，其可以包括元数据，其用于DASH客户端构造适当的HTTP-URL以在流传输会话期间以自适应方式访问视频分段。图2描述了示例MPD分级数据模型。该MPD可描述时段序列，例如图2中所示的时段1、2和3。在特定时段(例如时段2)内，可能存在所述媒体内容的编码版本的一致集合。所述时段1、2和3中的每一个可以具有开始时间和持续时间。所述时段1、2和3中的每一个可以由一个或多个适配集组成，例如图2中的AS0、AS1和AS2。在一个实施例中，DASH流传输客户端可以是如下面结合图11A-11D所述的WTRU。适配集可以表示共享一个或多个相同属性的一个或多个媒体内容分量的一组编码版本，所述属性可以包括语言、媒体类型、图片纵横比、角色、可访问性、视点和/或评级属性。例如，所述适配集可以包括用于相同多媒体内容的视频分量的不同比特率。所述适配集可包括相同多媒体内容的音频分量(例如，较低质量立体声和/或较高质量环绕声)的不同比特速率。所述适配集(诸如图2所示的AS1)可以包括多个表示(representation)，诸如也在图2中示出的表示1、2、3和4。表示可以描述一个或多个媒体分量的可递送的编码版本，其根据比特率、分辨率、通本文档来自技高网...

【技术保护点】
1.一种用于渲染具有多个空间区域的360度媒体内容的一个或多个空间区域的设备，所述设备包括：/n接收机，被配置为接收所述360度媒体内容和与所述360度内容相关联的元数据，其中所述元数据包含所述多个空间区域中的第一空间区域的分类；/n存储器，被配置为存储用户偏好；/n传感器，被配置为检测用户移动；以及/n处理器，被配置为：/n确定所述用户移动与所述第一空间区域的渲染相关联；/n确定所述分类是否符合所述用户偏好；以及/n如果所述分类违反所述用户偏好，则改变所述第一空间区域的所述渲染。/n

【技术特征摘要】
【国外来华专利技术】20171004 US 62/567,976;20180628 US 62/691,3161.一种用于渲染具有多个空间区域的360度媒体内容的一个或多个空间区域的设备，所述设备包括：
接收机，被配置为接收所述360度媒体内容和与所述360度内容相关联的元数据，其中所述元数据包含所述多个空间区域中的第一空间区域的分类；
存储器，被配置为存储用户偏好；
传感器，被配置为检测用户移动；以及
处理器，被配置为：
确定所述用户移动与所述第一空间区域的渲染相关联；
确定所述分类是否符合所述用户偏好；以及
如果所述分类违反所述用户偏好，则改变所述第一空间区域的所述渲染。


2.根据权利要求1所述的设备，其中所述用户移动与从所述多个空间区域中的第二空间区域到所述第一空间区域的移动相关联，且
其中所述处理器被配置为通过抑制移动到所述第一空间区域来改变所述第一空间区域的所述渲染。


3.根据权利要求1所述的设备，其中所述处理器被配置为通过改变为二维投影格式或直线投影格式来改变所述第一空间区域的所述渲染。


4.根据权利要求1所述的设备，其中所述处理器被配置为通过改变所述第一空间区域的一方面来改变所述第一空间区域的所述渲染。


5.根据权利要求4所述的设备，其中所述处理器被配置为通过缩小或通过放大来改变所述第一空间区域的所述方面。


6.根据权利要求1所述的设备，其中所述第一空间区域包括视窗。


...

【专利技术属性】
技术研发人员：贺勇，叶艳，阿里·C·贝根，阿赫麦德·哈姆扎，
申请(专利权)人：VID拓展公司，
类型：发明
国别省市：美国;US