采用360°虚拟现实投影的投影布局的重构的基于投影的帧的样本适应性偏移滤波方法用于重构的基于投影的帧的样本适应性偏移滤波方法技术

一种用于重构的基于投影的帧的样本适应性偏移(SAO)滤波方法包括：获得填充区域的至少一个填充像素，所述填充区域充当第一投影面的面边界的延伸，以及将SAO滤波应用于块，该块具有包含在该第一投影面的至少一个像素。在该重构的基于投影的帧中，在该第一投影面的该面边界与第二投影面的面边界之间有图像内容不连续性。该块的该SAO滤波涉及该至少一个填充像素。

【技术实现步骤摘要】
【国外来华专利技术】采用360°虚拟现实投影的投影布局的重构的基于投影的帧的样本适应性偏移滤波方法用于重构的基于投影的帧的样本适应性偏移滤波方法相关引用本申请要求与2018年3月22日提交的号码为62/646,389的美国临时申请案的优先权，并通过引用纳入其中。
本专利技术涉及处理全景视频内容，以及更具体地，涉及重构的基于投影的帧的样本适应性偏移(sampleadaptiveoffset，SAO)滤波方法，该重构的基于投影的帧采用360°虚拟现实投影的投影布局。
技术介绍
具有头戴显示(head-mounteddisplay，HMD)的虚拟现实(VR)与各种应用相关。其向使用者展示宽视场(fieldofview)内容的能力可以用于提供沉浸式的视觉体验。需要在所有方向上捕获真实世界来生成对应观察球的全景图像内容。随着摄像机平台以及HMD的发展，由于展示如360°图像内容所需要的高比特率，VR内容的递送可能很快成为瓶颈。当全景视频的分辨率是4K或者更高时，数据压缩/编码对比特率降低是关键的。全景视频的数据压缩/编码可以由传统的视本文档来自技高网...

【技术保护点】
1.一种用于重构的基于投影的帧的样本适应性偏移(SAO)滤波方法，所述重构的基于投影的帧包括包装于360°虚拟现实(360VR)投影中的投影布局的多个投影面，观察球的360°图像内容根据所述投影布局被映射到所述多个投影面，其特征在于，所述方法包括：/n由样本适应性偏移滤波器获得填充区域中的至少一个填充像素，所述填充区域充当第一投影面的一个面边界的延伸，其中包装于所述重构的基于投影的帧的所述多个投影面包括所述第一投影面以及第二投影面；以及在所述重构的基于投影的帧中，所述第一投影面的所述一个面边界与所述第二投影面的一个面边界连接，以及在所述第一投影面的所述一个面边界与所述第二投影面的所述一个面边界...

【技术特征摘要】
【国外来华专利技术】20180322 US 62/646,3891.一种用于重构的基于投影的帧的样本适应性偏移(SAO)滤波方法，所述重构的基于投影的帧包括包装于360°虚拟现实(360VR)投影中的投影布局的多个投影面，观察球的360°图像内容根据所述投影布局被映射到所述多个投影面，其特征在于，所述方法包括：
由样本适应性偏移滤波器获得填充区域中的至少一个填充像素，所述填充区域充当第一投影面的一个面边界的延伸，其中包装于所述重构的基于投影的帧的所述多个投影面包括所述第一投影面以及第二投影面；以及在所述重构的基于投影的帧中，所述第一投影面的所述一个面边界与所述第二投影面的一个面边界连接，以及在所述第一投影面的所述一个面边界与所述第二投影面的所述一个面边界之间有图像内容不连续性；以及
将样本适应性偏移滤波应用于具有包含于所述第一投影面中的至少一个像素的块，以及所述块的所述样本适应性偏移滤波涉及所述填充区域中的所述至少一个填充像素。


2.如权利要求1所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，其中获得所述至少一个填充像素包括：
直接复制位于所述第一投影面的所述一个面边界的至少一个边缘像素来充当所述至少一个填充像素。


3.如权利要求1所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，其中每一所述至少一个填充像素是球面相邻像素，以及所述填充区域对应的所述观察球上的区域邻近于从所述观察球获得所述第一投影面的区域。


4.如权利要求3所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，其中获得所述至少一个填充像素包括：
直接使用从所述多个投影面之一选择的至少一个像素来充当所述至少一个填充像素；或者
将几何映射应用到在所述第一投影面的延伸区域的至少一个已投影像素来找到所述多个投影面之一上的至少一个点，以及从所述至少一个点推导所述至少一个填充像素。


5.如权利要求3所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，其中所述样本适应性偏移滤波方法进一步包括：
通过混合为第一像素获得的像素值以及为第二像素获得的像素值，生成所述第一像素的已更新像素值，其中所述第一像素位于包含在所述多个投影面之一中的位置，所述第二像素从所述至少一个填充像素中选择，以及所述第一像素以及所述第二像素被映射到所述观察球上的相同点。


6.如权利要求1所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，其中所述块的所述样本适应性偏移滤波包括被配置为将所述块的像素分类成对于给定边缘偏移(EO)类的多个形态中的一个的像素分类处理，以及所述像素分类处理涉及所述至少一个填充像素。


7.如权利要求1所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，其中所述块的所述样本适应性偏移滤波包括被配置为确定对于给定的边缘偏移(EO)类的一个形态的偏移的滤波处理，以及所述滤波处理涉及所述至少一个填充像素。


8.如权利要求1所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，其中在所述块的所述样本适应性偏移滤波期间动态地创造所述至少一个填充像素。


9.如权利要求1所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，进一步包括：
获得在另一个填充区域中的至少一个填充区域，所述另一个填充区域充当所述重构的基于投影的帧的一个图像边界的延伸；
将样本适应性偏移滤波应用于另一块，其中所述另一个块包括所述多个投影面之一中的至少一个像素；
其中所述多个投影面之一的一个面边界是所述重构的基于投影的帧的所述一个图像边界的一部分，以及所述另一个块的所述样本适应性偏移滤波涉及所述另一个填充区域中的所述至少一个填充像素。


10.一种用于重构的基于投影的帧的样本适应性偏移(SAO)滤波方法，所述重构的基于投影的帧包括包装于360°虚拟现实(360VR)投影的投影布局的至少一个投影面，观察球的360°图像内容根据所述投影布局被映射到所述多个投影面，其特征在于，所述方法包括：
由样本适应性偏移滤波器获得填充区域中的至少一个填充像素，所述填充区域充当包装于所述重构的基于投影的帧的投影面的一个面边界的延伸，其中所述投影面的所述一个面边界是所述重构的基于投影的帧的一个图像边界的一部分；以及
将样本适应性偏移滤波应用于一块，其中所述块具有包含在所述投影面的至少一个像素，以及所述块的所述样本适应性偏移滤波涉及所述填充区域中的所述至少一个填充像素。


11.如权利要求10所述的用于重构的基于投影的帧的样本适应性偏移滤波方法，其特征在于，其中获得所述至少一个填充像素包括：...

【专利技术属性】
技术研发人员：林圣晏，刘琳，林建良，
申请(专利权)人：联发科技股份有限公司，
类型：发明
国别省市：中国台湾;71