一种推导合成轨道的方法及装置制造方法及图纸

本发明专利技术涉及一种方法、装置及计算机可读介质，其用于处理(包括编码和解码)合成布局。视频数据包括与视点相关的已编码的二维子图像轨道，以及将这些轨道进行合成的合成操作。合成操作包括表示对多个二维子图像轨道执行合成的数据，以将这些轨道合成与视点相关的画布；以及若画布包括由画布上合成的多个二维子图像轨道中的两个或两个以上创建的合成布局，则合成布局操作调整该合成。根据合成，多个二维轨道被合成画布，包括确定两个或两个以上的已合成的二维子图像轨道合成该合成布局，并基于合成布局操作调整合成，以补偿合成布局。

A method and device for deriving synthetic orbit

【技术实现步骤摘要】
【国外来华专利技术】一种推导合成轨道的方法及装置交叉申请本专利技术要求2017年6月23日提出申请号为62/523,873的美国临时专利申请的优先权。上述美国临时申请整体以引用方式并入本文中。在相同日期，提出申请号为16/014,856，名称为“以轨道组合推导合成轨道的方法与装置”的共同申请。上述美国申请整体以引用方式并入本文中。
此处描述的技术大体上涉及视频编解码，且具体而言，涉及推导合成轨道(compositetrack)。
技术介绍
存在不同类型的3D内容和多向内容(multi-directionalcontent)。例如，全景视频是一种类型的视频，其是使用一组摄像机集合来捕捉的，而不像仅使用单个摄像机捕捉的传统单向视频那样。例如，摄像机可以被放置在特定中心点周围，使得每个摄像机捕捉场景的球面覆盖上的视频的一部分，以捕捉360度视频。来自于多个摄像机的视频可以被缝合、可能地旋转以及投影，以生成表示球面内容的已投影二维图像。例如，等角投影可以被使用以将球面映像成二维图像。这可以被进一步处理，例如，使用二维编码和压缩技术。最后，使用特定传本文档来自技高网...

【技术保护点】
1.一种编码方法，用于编码多个子图像轨道的合成操作，该方法包括：/n编码三维视频数据，包括编码成与视点相关的多个二维子图像轨道；/n编码用于将该视点的该多个二维子图像轨道进行合成的合成操作，其中该合成操作包括表示如下的数据：/n对该多个二维子图像轨道执行以将该多个二维轨道合成与该视点相关的画布的合成；以及/n在该画布包括由该画布上合成的该多个二维子图像轨道中的两个或两个以上创建的合成布局时，调整该合成的合成布局操作；以及/n提供已编码的该三维视频数据和该合成操作。/n

【技术特征摘要】
【国外来华专利技术】20170623 US 62/523,873;20180621 US 16/014,8171.一种编码方法，用于编码多个子图像轨道的合成操作，该方法包括：
编码三维视频数据，包括编码成与视点相关的多个二维子图像轨道；
编码用于将该视点的该多个二维子图像轨道进行合成的合成操作，其中该合成操作包括表示如下的数据：
对该多个二维子图像轨道执行以将该多个二维轨道合成与该视点相关的画布的合成；以及
在该画布包括由该画布上合成的该多个二维子图像轨道中的两个或两个以上创建的合成布局时，调整该合成的合成布局操作；以及
提供已编码的该三维视频数据和该合成操作。


2.根据权利要求1所述的编码方法，其特征在于，该合成布局包括该画布上合成的该多个二维子图像轨道中的两个或两个以上之间的间隙和该画布上合成的该多个二维子图像轨道中的两个或两个以上的重叠中的至少一个。


3.根据权利要求1所述的编码方法，其特征在于，编码该合成操作的该合成布局操作包括：
编码待使用的背景颜色、背景图像或背景视频中的一个或多个，以填充该画布上合成的该多个二维子图像轨道中的两个或两个以上之间的间隙。


4.根据权利要求1所述的编码方法，其特征在于，
编码该合成操作的该合成布局操作包括：
编码待使用的混合数据，以将该画布上合成的该多个二维子图像轨道中的两个或两个以上的重叠进行混合。


5.根据权利要求1所述的编码方法，其特征在于，编码该合成操作的该合成包括：
自包括如下的组选择该合成：
指定重叠操作和用于将该画布上的该多个二维子图像轨道中的每个进行重叠的顺序的轨道重叠合成；
指定用于将该画布上的该多个二维子图像轨道中的每个进行重叠的网格顺序的轨道网格合成；以及
指定用于将该画布上的该多个二维子图像轨道中的每个进行重叠的顺序和矩阵的轨道矩阵合成。


6.一种解码方法，用于解码视频数据，该方法包括：
接收(a)与视点相关的已编码的多个二维子图像轨道以及(b)将该视点的该多个二维子图像轨道进行合成的合成操作，其中该合成操作包括表示如下的数据：
对该多个二维子图像轨道执行以将该多个二维子图像轨道合成与该视点相关的画布的合成；以及
在该画布包括由该画布上合成的该多个二维子图像轨道中的两个或两个以上创建的合成布局时调整该合成的合成布局操作；
根据该合成，将该多个二维轨道合成该画布，包括：
确定已合成的该多个二维子图像轨道中的两个或两个以上包括该合成布局；以及
基于该合成布局操作，调整该合成，以补偿该合成布局。


7.根据权利要求6所述的解码方法，其特征在于，该合成布局包括该画布上合成的该多个二维子图像轨道中的两个或两个以上之间的间隙和该画布上合成的该多个二维子图像轨道中的两个或两个以上的重叠中的至少一个。


8.根据权利要求6所述的解码方法，其特征在于，解码该合成操作的该合成布局操作包括：
解码背景颜色、背景图像或背景视频中的一个或多个；以及
将该多个二维轨道进行合成包括：
填充该画布上合成的该多个二维子图像轨道中的两个或两个以上之间的间隙。


9.根据权利要求6所述的解码方法，其特征在于，
解码该合成操作的该合成布局操作包括：
解码混合数据；以及
将该多个二维轨道进行合成包括：
将该画布上合成的该多个二维子图像轨道中的两个或两个以上的重叠进行混合。


10.根据权利要求6所述的解码方法，其特征在于，
解码该合成操作的该合成包括：
自包括如下的组选择该合成：
指定重叠操作和用于将该画布上的该多个二维子图像轨道中的每个进行重叠的顺序的轨道重叠合成；
指定用于将该画布上的该多个二维子图像轨道中的每个进行重叠的网格顺序的轨道网格合成；以及
指定用于将该画布上的该多个二维子图像轨道中的每个进行重叠的顺序和矩阵的轨道矩阵合成。


11.一种解码视...

【专利技术属性】
技术研发人员：王新，陈鲁林，赵帅，
申请(专利权)人：联发科技股份有限公司，
类型：发明
国别省市：中国台湾;71