对混合多视图传感器配置进行编码制造技术

技术编号:40933464 阅读:18 留言:0更新日期:2024-04-18 14:53
传输多视图图像帧数据的方法。方法包括获取由多个传感器生成的表示场景的多视图分量,每个多视图分量对应于一个传感器,至少一个多视图分量包括深度分量,至少一个多视图分量不包括深度分量。获取每个传感器在虚拟场景中的虚拟传感器姿态,虚拟场景是场景的虚拟表示,虚拟传感器姿态是传感器在生成相应多视图分量时在场景中的姿态的虚拟表示。针对多视图分量生成传感器参数元数据,传感器参数元数据包含多视图分量的外部参数,外部参数至少包含用于每个相应多视图分量的传感器的虚拟传感器姿态。外部参数使得能通过将深度分量基于其相应虚拟传感器姿态和虚拟场景中的目标位置扭曲来生成额外深度分量。多视图分量和传感器参数元数据如此传送。

【技术实现步骤摘要】
【国外来华专利技术】

本专利技术涉及多视图(multi-view)图像和视频处理领域。具体而言,本专利技术涉及对多视图图像帧数据的处理和渲染,并且涉及生成多视图元数据和对多视图元数据进行解码。


技术介绍

1、包括深度图(depth map)的当前多视图沉浸式(immersive)视频格式(format)通常假定深度图与物理或虚拟相机相关联,而纹理(texture)信息对于物理或虚拟相机也是可用的。多视图视频编码(encoding)算法和在客户端处进行渲染两者均使用这种假定。

2、共同定位(co-locating)纹理图(texture map)和深度图的历史性选择的可能原因是产生每图像像素坐标的深度值的多视图深度估测程序。

3、然而,近距离(close-range)或室内设置受益于基于飞行时间(time-of-flight)或结构光(structured light)的高质量深度传感器。当彩色相机与这些深度传感器组合时,产生混合传感器配置。因此,需要改进对来自混合传感器的多视图图像帧数据的编码和解码。

4、ep 2777267a2公开了生成深本文档来自技高网...

【技术保护点】

1.一种用于传输多视图图像帧数据的方法,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述多视图分量(106、108)包括以下项中的一个或多个:

3.根据权利要求1或2中任一项的方法,其特征在于,所述多视图分量(106、108)中的至少一个仅由所述深度分量(108)构成,其中,与所述深度分量相对应的虚拟传感器姿态不同于与任何其它多视图分量相对应的虚拟传感器姿态。

4.根据权利要求1至3中任一项的方法,其特征在于,第一传感器的虚拟传感器姿态被相对于参考传感器的虚拟传感器姿态定义。

5.根据权利要求1至4中任一项所述的方法,其特征在...

【技术特征摘要】
【国外来华专利技术】

1.一种用于传输多视图图像帧数据的方法,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述多视图分量(106、108)包括以下项中的一个或多个:

3.根据权利要求1或2中任一项的方法,其特征在于,所述多视图分量(106、108)中的至少一个仅由所述深度分量(108)构成,其中,与所述深度分量相对应的虚拟传感器姿态不同于与任何其它多视图分量相对应的虚拟传感器姿态。

4.根据权利要求1至3中任一项的方法,其特征在于,第一传感器的虚拟传感器姿态被相对于参考传感器的虚拟传感器姿态定义。

5.根据权利要求1至4中任一项所述的方法,其特征在于,所述方法还包括将与相同或部分相同的外部参数(112)相对应的多视图分量(106、108)聚集成组。

6.根据权利要求1至5中任一项所述的方法,其特征在于,所述传感器参数元数据(110)还包含所述多视图分量(106、108)的内部参数(114),并且所述内部参数(114)包含以下项中的一个或多个:

7.根据权利要求1至6中任一项所述的方法,其特征在于,所述传感器参数元数据(110)还包括指令,所述指令关于在对所述多视图图像帧数据进行渲染期间要将哪些多视图分量(106、108)彼此组合。

8.一种用于解码多视图图像帧数...

【专利技术属性】
技术研发人员:C·韦雷坎普B·克龙
申请(专利权)人:皇家飞利浦有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1