用于生成并且绘制视频流的装置和方法制造方法及图纸

一种装置包括处理器(301)，所述处理器提供针对场景的多个参考视点的多个参考视频流。接收器(305)接收来自远程客户端的视点请求，其中，所述视点请求指示请求视点。生成器(303)生成输出视频流，所述输出视频流包括具有来自第一参考视频流的帧的第一视频流和具有来自第二参考视频流的帧的第二视频流。所述第二视频流的帧相对于所述第一视频流的帧被差分编码。控制器(307)响应于视点请求而选择针对第一和第二视频流的参考视频流，并且可以被布置为当所述视点请求满足准则时在被非差分编码与被差分编码之间调换参考视频流。

【技术实现步骤摘要】
【国外来华专利技术】用于生成并且绘制视频流的装置和方法
本专利技术涉及生成并且绘制视频流，并且特别地但非专有地，生成并且绘制用于虚拟现实应用的视频流。
技术介绍
各种各样和一系列的图像和视频应用近年来已经基本上随着利用和消耗视频的新服务和方式被连续开发和引入而增加。例如，日益流行的一个服务是以这样的方式提供图像序列：观察者能够主动地并且动态地与系统交互以改变绘制的参数。许多应用中的非常吸引人的特征是改变观察者的有效查看位置和查看方向的能力，诸如例如允许观察者在呈现的场景中移动和“环视”。这样的特征可以特别地允许虚拟现实体验被提供给用户。这可以允许用户在虚拟环境中(相对)自由地到处移动并且动态地改变他的位置和他正在看何处。通常，这样的虚拟现实应用基于场景的三维模型，其中，模型动态地评价以提供特定请求视图。该方法从例如用于计算机和控制台的游戏应用(诸如在第一人称射击的类别中)中公知。还期望的是，特别地针对虚拟现实应用，呈现的图像是三维图像。实际上，为了优化观察者的沉浸，用户将呈现的场景体验为三维场景通常是优选的。实际上，虚拟现实体验应当优选地允本文档来自技高网...

【技术保护点】
1.一种用于生成输出视频流的装置，所述装置包括：/n处理器(301)，其用于提供针对场景的多个参考视点的多个参考视频流；/n接收器(305)，其用于接收来自远程客户端的视点请求，所述视点请求指示针对所述输出视频流的所述场景的请求视点；/n生成器(303)，其用于生成输出视频流，所述输出视频流包括：第一视频流，其包括来自所述多个参考视频流中针对第一视点的第一参考视频流的第一输出帧；以及第二视频流，其包括来自所述多个参考视频流中针对第二参考视点的第二参考视频流的第二输出帧，所述第二输出帧相对于所述第一输出帧被差分编码并且所述第一输出帧未相对于所述第二输出帧被差分编码；以及/n控制器(307)，其用...

【技术特征摘要】
【国外来华专利技术】20180925 EP 18196433.91.一种用于生成输出视频流的装置，所述装置包括：
处理器(301)，其用于提供针对场景的多个参考视点的多个参考视频流；
接收器(305)，其用于接收来自远程客户端的视点请求，所述视点请求指示针对所述输出视频流的所述场景的请求视点；
生成器(303)，其用于生成输出视频流，所述输出视频流包括：第一视频流，其包括来自所述多个参考视频流中针对第一视点的第一参考视频流的第一输出帧；以及第二视频流，其包括来自所述多个参考视频流中针对第二参考视点的第二参考视频流的第二输出帧，所述第二输出帧相对于所述第一输出帧被差分编码并且所述第一输出帧未相对于所述第二输出帧被差分编码；以及
控制器(307)，其用于响应于所述视点请求而将所述第一视点和所述第二视点确定为所述多个参考视点中的视点；其中，
所述控制器(307)被布置为响应于检测到在所述输出视频流的所述生成期间所述视点请求的改变满足准则而从所述第一视点是所述多个参考视点中的第一参考视点并且所述第二视点是所述多个参考视点中的第二参考视点改变为所述第一视点是所述第二参考视点并且所述第二视点是所述第一参考视点；
其特征在于，所述装置被布置为将多个额外视频流包括在所述输出视频流中，每个额外视频流包括来自所述多个参考视频流中的额外参考视频流的相对于所述第一输出帧差分编码的输出帧；并且其中，所述控制器(307)被布置为响应于以下各项中的至少一项而确定额外视频流的数目：
针对所述视点请求的变化量度，以及
针对用于传输所述输出视频流的通信信道的延时量度。


2.根据权利要求1所述的装置，其中，所述第一输出帧在不参考针对除所述第一视点之外的其他参考视点的帧的情况下被编码。


3.根据权利要求2所述的装置，其中，所述第一输出帧被内编码。


4.根据权利要求2所述的装置，其中，所述第一输出帧中的一些帧相对于所述第一输出帧的其他帧被差分编码。


5.根据任一项前述权利要求所述的装置，其中，所述输出生成器(303)被布置为通过相对于所述第一输出帧将来自所述第二参考视频流的帧进行差分编码来生成所述第二输出帧。


6.根据任一项前述权利要求所述的装置，其中，所述处理器(301)被布置为存储所述多个参考视频流中的至少一些参考视频流的差分编码版本，参考视频流的差分编码版本包括相对于另一参考视频流的帧差分编码的帧；并且所述生成器(303)被布置为响应于检索到所述第二...

【专利技术属性】
技术研发人员：B·W·D·松内维尔特，C·韦雷坎普，
申请(专利权)人：皇家飞利浦有限公司，
类型：发明
国别省市：荷兰;NL