沉浸式媒体的显示信息度量制造技术

技术编号:26181473 阅读:61 留言:0更新日期:2020-10-31 14:48
本发明专利技术公开了一种在基于超文本传输协议(Hypertext Transfer Protocol,HTTP)的动态自适应流(Dynamic Adaptive Streaming over HTTP,DASH)网络中实现的机制。所述机制包括接收描述媒体内容的DASH媒体展示描述(Media Presentation Description,MPD),所述媒体内容包括虚拟现实(virtual reality,VR)视频序列。根据所述MPD获取所述媒体内容。将所述媒体内容转发给多个渲染设备进行渲染。确定显示信息集度量,包括由所述渲染设备渲染的所述VR视频序列的显示信息。向提供方服务器发送所述显示信息集度量。

【技术实现步骤摘要】
【国外来华专利技术】沉浸式媒体的显示信息度量本专利申请要求Ye-KuiWang于2018年3月22日递交的专利技术名称为“沉浸式媒体度量(ImmersiveMediaMetrics)”的第62/646,425号美国临时专利申请案的权益,其内容以引用的方式并入本文本中。
本专利技术大体上涉及虚拟现实(virtualreality,VR)视频系统,具体涉及通过基于超文本传输协议的动态自适应流(DynamicAdaptiveStreamingoverHypertexttransferprotocol,DASH)发送VR视频相关数据。
技术介绍
VR,也可称为全向媒体、沉浸式媒体和/或360度媒体,是在模拟环境中使用视觉、音频和/或触觉反馈进行的交互式录制和/或计算机生成的体验。对于视觉角度,VR提供球体(或球体的子部分)成像,用户位于所述球体的中心。所述球体成像可由头戴式显示器(headmounteddisplay,HMD)或其它显示单元来渲染。具体地,用户可以在VR显示器上通过视角查看球体的子部分。用户可以动态地改变视角的位置和/或角度来体验VR视频所呈现的环境。VR视频的每张图像(也称为帧)包括视角内的球体区域和视角外的球体区域。因此,VR帧包括的数据比非VR视频图像明显更多。内容提供方有意于以流方式提供VR视频。然而,VR视频包括的数据比传统视频明显更多,属性也明显不同。因此,传统视频的流机制无法高效地流化VR视频。
技术实现思路
在一个实施例中,本专利技术包括一种在基于超文本传输协议(HypertextTransferProtocol,HTTP)的动态自适应流(DynamicAdaptiveStreamingoverHTTP,DASH)客户端网元(networkelement,NE)中实现的方法。所述方法包括:接收器接收描述媒体内容的DASH媒体展示描述(MediaPresentationDescription,MPD),所述媒体内容包括虚拟现实(virtualreality,VR)视频序列。所述方法还包括:所述接收器根据所述MPD获取所述媒体内容。所述方法还包括:将所述媒体内容转发给多个渲染设备进行渲染。所述方法还包括:处理器确定包括所述渲染设备渲染的所述VR视频序列的显示信息的显示信息集度量。所述方法还包括:发送器向提供方服务器发送所述显示信息集度量。在某些情况下,数据可以从客户端发送到服务器,表示用户已查看视场角(fieldofview,FOV)。具体地,可以向服务器发送单个VR设备的单个FOV相关信息。然而,存在单个客户端使用多个FOV的情况,例如计算机显示器和每个设备上具有不同FOV的HMD组合。此外,媒体网关可以与同时采用不同FOV的多个渲染设备结合使用。本实施例提供了一种显示信息集度量,包括用于潜在地显示普通VR视频序列的不同FOV的多个客户端的显示信息。这样,多个相关客户端的显示信息被打包并从客户端设备发送到服务器。可选地,上述任一方面中,在所述方面的另一实现方式中,所述VR视频序列在所述多个渲染设备上同时渲染。可选地,上述任一方面中,在所述方面的另一实现方式中,所述显示集度量包括所述渲染设备中至少一个渲染设备关联的每个客户端的入口对象。可选地,上述任一方面中,在所述方面的另一实现方式中,每个入口对象包括显示分辨率(displayResolution)值,以像素为单位表示由对应渲染设备渲染的所述VR视频序列的显示分辨率。可选地,上述任一方面中,在所述方面的另一实现方式中,每个入口对象包括显示像素密度(displayPixelDensity)值,以每英寸像素为单位表示由对应渲染设备渲染的所述VR视频序列的显示像素密度。可选地,上述任一方面中,在所述方面的另一实现方式中,每个入口对象包括显示刷新率(displayRefreshRate)值,以赫兹为单位表示由对应渲染设备渲染的所述VR视频序列的显示刷新率。可选地,上述任一方面中,在所述方面的另一实现方式中,所述显示集度量包括所述渲染设备渲染的所述VR视频序列的显示信息列表。可选地,上述任一方面中,在所述方面的另一实现方式中,所述DASH客户端NE是客户端、负责与多个客户端通信的媒体感知中间NE或其组合。在一个实施例中,本专利技术包括DASH客户端NE,其包括接收器,用于接收描述包括VR视频序列的媒体内容的DASHMPD;根据所述MPD获取所述媒体内容。所述DASH客户端NE还包括:一个或多个端口,用于将所述媒体内容转发给多个渲染设备进行渲染。所述DASH客户端NE还包括:处理器,与所述接收器和所述端口耦合。所述处理器用于:确定包括所述渲染设备渲染的所述VR视频序列的显示信息的显示信息集度量;通过所述一个或多个端口向提供方服务器发送所述显示信息集度量。在某些情况下,数据可以从客户端发送到服务器,表示用户已查看FOV。具体地,可以向服务器发送单个VR设备的单个FOV相关信息。然而,存在单个客户端使用多个FOV的情况,例如计算机显示器和每个设备上具有不同FOV的HMD组合。此外,媒体网关可以与同时采用不同FOV的多个渲染设备结合使用。本实施例提供了一种显示信息集度量,包括用于潜在地显示普通VR视频序列的不同FOV的多个客户端的显示信息。这样,多个相关客户端的显示信息被打包并从客户端设备发送到服务器。可选地,上述任一方面中,在所述方面的另一实现方式中,所述VR视频序列在所述多个渲染设备上同时渲染。可选地,上述任一方面中,在所述方面的另一实现方式中,所述显示集度量包括所述渲染设备中至少一个渲染设备关联的每个客户端的入口对象。可选地,上述任一方面中,在所述方面的另一实现方式中,每个入口对象包括displayResolution值,以像素为单位表示由对应渲染设备渲染的所述VR视频序列的显示分辨率。可选地,上述任一方面中,在所述方面的另一实现方式中,每个入口对象包括displayPixelDensity值,以每英寸像素为单位表示由对应渲染设备渲染的所述VR视频序列的显示像素密度。可选地,上述任一方面中,在所述方面的另一实现方式中,每个入口对象包括displayRefreshRate值,以赫兹为单位表示由对应渲染设备渲染的所述VR视频序列的显示刷新率。可选地,上述任一方面中,在所述方面的另一实现方式中,所述显示集度量包括所述渲染设备渲染的所述VR视频序列的显示信息列表。可选地,上述任一方面中,在所述方面的另一实现方式中,所述DASH客户端NE是通过所述一个或多个端口与所述多个渲染设备耦合的客户端,还包括发送器,用于通过所述一个或多个端口中的至少一个端口与所述DASH内容服务器进行通信。可选地,上述任一方面中,在所述方面的另一实现方式中,所述DASH客户端NE是媒体感知中间NE,并且还包括与所述一个或多个端口耦合的至少一个发送器,用于通过一个或多个客户端将所述媒体内容转发给所述多个渲染设备,以及向DASH内容服务器发送所述显示信息集度量。在一个实施例中,本专利技术包括一种非瞬时性计算本文档来自技高网...

【技术保护点】
1.一种在基于超文本传输协议(Hypertext Transfer Protocol,HTTP)的动态自适应流(Dynamic Adaptive Streaming over HTTP,DASH)客户端网元(network element,NE)中实现的方法,其特征在于,所述方法包括:/n接收器接收描述媒体内容的DASH媒体展示描述(Media Presentation Description,MPD),所述媒体内容包括虚拟现实(virtual reality,VR)视频序列;/n所述接收器根据所述MPD获取所述媒体内容;/n将所述媒体内容转发给多个渲染设备进行渲染;/n处理器确定包括所述渲染设备渲染的所述VR视频序列的显示信息的显示信息集度量;/n发送器向提供方服务器发送所述显示信息集度量。/n

【技术特征摘要】
【国外来华专利技术】20180322 US 62/646,4251.一种在基于超文本传输协议(HypertextTransferProtocol,HTTP)的动态自适应流(DynamicAdaptiveStreamingoverHTTP,DASH)客户端网元(networkelement,NE)中实现的方法,其特征在于,所述方法包括:
接收器接收描述媒体内容的DASH媒体展示描述(MediaPresentationDescription,MPD),所述媒体内容包括虚拟现实(virtualreality,VR)视频序列;
所述接收器根据所述MPD获取所述媒体内容;
将所述媒体内容转发给多个渲染设备进行渲染;
处理器确定包括所述渲染设备渲染的所述VR视频序列的显示信息的显示信息集度量;
发送器向提供方服务器发送所述显示信息集度量。


2.根据权利要求1所述的方法,其特征在于,所述VR视频序列在所述多个渲染设备上同时渲染。


3.根据权利要求1和2中任一项所述的方法,其特征在于,所述显示信息集度量包括所述渲染设备中至少一个渲染设备关联的每个客户端的入口对象。


4.根据权利要求1至3中任一项所述的方法,其特征在于,每个入口对象包括显示分辨率(displayResolution)值,以像素为单位表示由对应渲染设备渲染的所述VR视频序列的显示分辨率。


5.根据权利要求1至4中任一项所述的方法,其特征在于,每个入口对象包括显示像素密度(displayPixelDensity)值,以每英寸像素为单位表示由对应渲染设备渲染的所述VR视频序列的显示像素密度。


6.根据权利要求1至5中任一项所述的方法,其特征在于,每个入口对象包括显示刷新率(displayRefreshRate)值,以赫兹为单位表示由对应渲染设备渲染的所述VR视频序列的显示刷新率。


7.根据权利要求1至6中任一项所述的方法,其特征在于,所述显示信息集度量包括所述渲染设备渲染的所述VR视频序列的显示信息列表。


8.根据权利要求1至7中任一项所述的方法,其特征在于,所述DASH客户端NE是客户端、负责与多个客户端通信的媒体感知中间NE或其组合。


9.一种基于超文本传输协议(HypertextTransferProtocol,HTTP)的动态自适应流(DynamicAdaptiveStreamingoverHTTP,DASH)客户端网元(networkelement,NE),其特征在于,包括:
接收器,用于:
接收描述媒体内容的DASH媒体展示描述(MediaPresentationDescription,MPD),所述媒体内容包括虚拟现实(virtualreality,VR)视频序列;
根据所述MPD获取所述媒体内容;
一个或多个端口,用于:将所述媒体内容转发给多个渲染设备进行渲染;
处理器,与所述接收器和所述端口耦合,所述处理器用于:
确定包括所述渲染设备渲染的所述VR视频序列的显示信息的显示信息集度量;
通过所述一个或多个端口向提供方服务器发送所述显示信息集度量。


10.根据权利要求9所述的DASH客户端NE,其特征在于,所述VR视频序列在所述多个渲染设备上同时渲染。


11.根据权利要求9和10中任一项所述的DASH客户端NE,其特征在于,所述显示信息集度量包括所述渲染设备中至少一个渲染设备关联的每个客户端的入口对象。


12.根据权利要求9至11中任一项所述的DASH客户端NE,其特征在于,每个入口对象包括显示分辨率(displayResolution)值,以像素为单位表示由对应渲染设备渲染的所述VR视频序列的显示分辨率。


13.根据权利要求9至12中任一项所述的DASH客户端NE,其特征在于,每个入口对象包括显示像素密度(displayPixelDensity)值,以每英寸像素为单位表示由对应渲染设备渲染的所述VR视频序列的显示像素密度。


14.根据权利要求9至13中任一项所述的DASH客户端NE,其特征在于,每个入口对象包括显示刷新率(displayRefreshRate)值,以赫兹为单位表示由对应渲染设备渲染的所述VR视频序列的显示刷新率。


15.根据权利要求9和10中任一项所述的DASH...

【专利技术属性】
技术研发人员:王业奎
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1