编码和解码沉浸式视频制造技术

公开了用于对针对沉浸式视频的多视图数据进行编码和解码的概念。在编码方法中，生成包括指示多视图数据的片块数据单元是否包括用于表示缺失数据的修复数据的字段的元数据。所生成的元数据提供了将包括原始纹理和深度数据的片块数据单元与包括修复数据(例如修复纹理和深度数据)的片块数据单元区分开的手段。在沉浸式视频的元数据内提供这样的信息可以解决与混合和修剪的视图重建相关联的问题。还提供了针对沉浸式视频的多视图数据的编码器和解码器，以及包括元数据的对应比特流。以及包括元数据的对应比特流。以及包括元数据的对应比特流。

【技术实现步骤摘要】
【国外来华专利技术】编码和解码沉浸式视频


[0001]本专利技术涉及沉浸式视频。其特别地涉及用于对针对沉浸式视频的多视图数据进行编码和解码的方法和装置。

技术介绍

[0002]沉浸式视频，也称为六自由度(6DoF)视频，是一种三维(3D)场景的视频，其允许针对位置和方向上不同的视点重建场景的视图。它表示了三自由度(3DoF)视频的发展，其允许为具有任意取向的视点重建视图，但仅在空间中的固定点处重建。在3DoF中，自由度是有角度的
‑
即俯仰、滚动和偏航。3DoF视频支持头部旋转
‑
换句话说，消费视频内容的用户可以在场景中的任何方向上观看，但不能移动到场景中的不同地点。6DoF视频支持头部旋转，并且额外地支持在场景中选择观看场景的位置。
[0003]生成6DoF视频要求多个相机来记录场景。每个相机生成图像数据(在该上下文中常被称为纹理数据)和对应的深度数据。对于每个像素，深度数据表示观察到对应图像像素数据的深度。多个相机中的每个提供场景的相应视图。
[0004]针对目标视图的生成的问题在于，仅可以合成在来自源相机的视本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种对针对沉浸式视频的多视图数据(110)进行编码的方法，所述方法包括：生成(130)元数据(140)，所述元数据包括指示所述多视图数据的片块数据单元是否包括用于表示缺失数据的修复数据的字段。2.根据权利要求1所述的方法，其中，所述字段包括至少两个允许值的集合，并且其中，所述集合的第一值指示所述多视图数据的所述片块数据单元包括从至少一个视点捕获的原始图像数据，并且其中，所述集合的第二值指示所述多视图数据的所述片块数据单元包括修复数据，并且其中，所述字段的所述值指示针对所述片块数据单元的细节水平。3.根据权利要求1所述的方法，其中，所述字段包括存储值的标识符或地址。4.根据权利要求3所述的方法，其中，所述存储值包括绘制参数值。5.根据权利要求1至4中的任一项所述的方法，还包括以下先前步骤：确定(120)多视图数据(110)的片块数据单元是包括从至少一个视点捕获的原始图像数据还是包括用于表示缺失图像数据的修复数据；并且基于确定的结果来定义(125)用于指示所述片块数据单元是包括原始图像数据还是包括修复数据的字段值。6.根据当从属于权利要求3时的权利要求5所述的方法，其中，所述字段值包括视图参数，并且其中，确定多视图数据(110)的片块数据单元是包括从至少一个视点捕获的原始图像数据还是包括用于表示缺失图像数据的修复数据包括：响应于识别出所述片块数据单元包括对修复视图的引用而确定多视图数据的所述片块数据单元包括修复数据。7.一种对针对沉浸式视频的多视图数据进行解码的方法，所述方法包括：接收(310)包括多视图数据和相关联的元数据(140)的比特流，所述元数据包括指示所述多视图数据的片块数据单元是否包括用于表示缺失数据的修复数据的字段；并且对所述多视图数据的所述片块数据单元进行解码(320)，包括基于指示所述多视图数据的所述片块数据单元包括修复数据的所述字段来设置所述片块数据单元的绘制参数。8.根据权利要求7所述的方法，其中，所述字段包括存储值的标识符或地址，并且其中，设置所述片块数据单元的所述绘制参数包括：基于所述标识符或所述地址来确定所述存储值；并且基于所述存储值来设置所述绘制参数。9.根据权...

【专利技术属性】
技术研发人员：B，
申请(专利权)人：皇家飞利浦有限公司，
类型：发明
国别省市：