用于生成图像数据比特流的装置和方法制造方法及图纸

一种装置包括：存储部(201)，其存储针对表示来自不同查看姿态(位置和取向)的场景的图像的图像部分集合和相关联的深度数据。可预测性处理器(203)针对场景的查看姿态的图像集合中的图像部分生成可预测性量度。针对第一查看姿态的第一图像部分的可预测性量度指示对于来自图像部分集合中的不包括第一图像部分的图像部分的第一子集的针对第一查看姿态的视口的图像的至少部分的预测的预测质量的估计。选择器(205)响应于可预测性量度来选择图像部分集合的图像部分的第二子集；以及比特流生成器(207)用于生成包括来自图像部分的子集的图像数据和深度数据的图像比特流。

【技术实现步骤摘要】
【国外来华专利技术】用于生成图像数据比特流的装置和方法
本专利技术涉及生成图像数据比特流，并且具体但并非排他地涉及生成提供场景的自适应三维表示的图像数据比特流。
技术介绍
近年来，随着不断开发和引入新的服务以及利用和消费视频的方法，图像和视频应用的种类和范围已经大大增加。例如，一种越来越流行的服务是以这样的方式提供图像序列：查看者能够主动地并且动态地与系统进行交互以改变绘制的参数。在许多应用中，非常吸引人的特征是改变查看者的有效查看位置和查看方向(查看姿态)的能力，诸如，例如允许查看者在所呈现的场景中移动并且“环顾四周”。这样的特征能够具体使得能够向用户提供虚拟现实体验。这可以允许用户在虚拟环境中(相对)自由地走动，并且动态地改变他的位置和他所看的地方。通常，这样的虚拟现实应用基于场景的三维模型，其中该模型被动态地评估以提供特定的请求视图。该方案从例如用于计算机和控制台的游戏应用(诸如在第一人称射击游戏的游戏类别中)是公知的。特别对于虚拟现实应用，还期望所呈现的图像是三维图像。实际上，为了优化查看者的沉浸感，通常优选的是：用户将所呈现的场景本文档来自技高网...

【技术保护点】
1.一种用于生成图像数据比特流的装置，所述装置包括：/n存储部(201)，其用于存储表示来自不同查看姿态的场景的图像部分集合和相关联的深度数据；/n可预测性处理器(203)，其用于生成针对所述场景的查看姿态的所述图像部分集合中的图像部分的可预测性量度，针对第一查看姿态的第一图像部分的可预测性量度指示对于来自所述图像部分集合中的不包括所述第一图像部分的图像部分的第一子集的针对所述第一查看姿态的视口的图像的至少部分的预测的预测质量的估计；/n选择器(205)，其用于响应于所述可预测性量度而选择所述图像部分集合的图像部分的第二子集；以及/n比特流生成器(207)，其用于生成图像比特流，所述图像比特流...

【技术特征摘要】
【国外来华专利技术】20180105 EP 18150423.41.一种用于生成图像数据比特流的装置，所述装置包括：
存储部(201)，其用于存储表示来自不同查看姿态的场景的图像部分集合和相关联的深度数据；
可预测性处理器(203)，其用于生成针对所述场景的查看姿态的所述图像部分集合中的图像部分的可预测性量度，针对第一查看姿态的第一图像部分的可预测性量度指示对于来自所述图像部分集合中的不包括所述第一图像部分的图像部分的第一子集的针对所述第一查看姿态的视口的图像的至少部分的预测的预测质量的估计；
选择器(205)，其用于响应于所述可预测性量度而选择所述图像部分集合的图像部分的第二子集；以及
比特流生成器(207)，其用于生成图像比特流，所述图像比特流包括来自所述图像部分的第一子集的图像数据和深度数据。


2.根据权利要求1所述的装置，其中，所述可预测性处理器(203)被布置为生成针对所述第一图像部分的所述可预测性量度，以指示对所述第一图像部分的预测的预测质量。


3.根据任一前述权利要求所述的装置，其中，所述图像部分的第一子集仅包括被包含在所述比特流中的图像部分。


4.根据任一前述权利要求所述的装置，其中，所述选择器(205)还被布置为响应于针对目标查看姿态的所述图像部分集合的可见性量度而选择所述图像部分的第二子集。


5.根据任一前述权利要求所述的装置，其中，所述图像部分是预编码的图像部分。


6.根据任一前述权利要求所述的装置，其中，所述图像部分集合包括针对不同查看姿态的所述场景的多面体投影的面。


7.根据任一前述权利要求所述的装置，其中，所述图像部分对应于所述图像的预定分区。


8.根据任一前述权利要求所述的装置，还包括分区器(209)，所述分区器用于基于所述图像的像素值和针对所述图像的深度值中的至少一项...

【专利技术属性】
技术研发人员：B·克龙，C·韦雷坎普，P·L·E·万德瓦勒，
申请(专利权)人：皇家飞利浦有限公司，
类型：发明
国别省市：荷兰;NL