This issue provides a video processing method, including receiving a current input frame with 360-degree virtual reality (360VR) projection format representing 360-degree image/video content, and applying content-oriented rotation to the 360-degree image/video content in the current input frame to generate a 360-degree image with rotation in the 360-degree virtual reality projection format. A content rotation frame of an image/video content, encoding the content rotation frame to generate a bit stream, and sending at least one grammar element through the bit stream, wherein the at least one grammar element is set as rotation information for indicating the content-oriented rotation.
【技术实现步骤摘要】
【国外来华专利技术】具有旋转信息的语法元素信令的视频编码功能的方法和设备以及具有相关的视频解码功能的方法和设备相关申请的交叉引用本申请要求下列申请的优先权:2016年11月9日提出的申请号为62/419,513的美国临时案,2016年12月13日提出的申请号为62/433,272的美国临时案,2017年03月09日提出的申请号为62/469,041的美国临时案以及2017年11月03日提出的申请号为15/802,481的美国案。在此合并参考这些申请案的申请标的。
本专利技术有关于360度图像/视频内容处理。更具体地,本专利技术涉及具有应用于以投影格式来表示的360度图像/视频内容的内容导向旋转的旋转信息的语法元素信令的视频编码功能的方法和设备和具有相关的视频解码功能的方法和设备。
技术介绍
具有头戴式显示器(head-mounteddisplay,HMD)的虚拟现实(Virtualreality,VR)与各种应用相关联。向用户显示广泛视野内容的能力可用于提供身临其境的视觉体验。必须捕捉所有方向上的真实世界的环境,从而生成对应于视野范围的全方位视频(omnidirectionalvideo)。随着摄像机和HMD的进步,由于代表诸如360度图像/视频之类的内容所需的高比特率,而导致VR内容的传送可能很快遇到瓶颈。当全方位视频的分辨率为4k或更高时,数据压缩/编码对比特率的降低至关重要。通常,将对应于视野范围的全方位视频转换成图像序列,其中的每一个图像序列都以360度虚拟现实(360-degreeVirtualReality,360VR)投影格式来表示,随后得到的图像序列被编码为用 ...
【技术保护点】
1.一种视频处理方法,其特征在于,包括:接收具有以360度虚拟现实投影格式表示的360度图像/视频内容的当前输入帧;对所述当前输入帧中的所述360度图像/视频内容应用内容导向旋转,以生成具有以所述360度虚拟现实投影格式表示的旋转的360度图像/视频内容的内容旋转帧;编码所述内容旋转帧以生成比特流;以及通过所述比特流发信至少一个语法元素,其中所述至少一个语法元素被设置为用于指示所述内容导向旋转的旋转信息。
【技术特征摘要】
【国外来华专利技术】2016.11.09 US 62/419,513;2016.12.13 US 62/433,272;1.一种视频处理方法,其特征在于,包括:接收具有以360度虚拟现实投影格式表示的360度图像/视频内容的当前输入帧;对所述当前输入帧中的所述360度图像/视频内容应用内容导向旋转,以生成具有以所述360度虚拟现实投影格式表示的旋转的360度图像/视频内容的内容旋转帧;编码所述内容旋转帧以生成比特流;以及通过所述比特流发信至少一个语法元素,其中所述至少一个语法元素被设置为用于指示所述内容导向旋转的旋转信息。2.如权利要求1所述的视频处理方法,其特征在于,所述旋转信息包括所述至少一个语法元素指示的至少一个旋转角度。3.如权利要求1所述的视频处理方法,其特征在于,所述至少一个语法元素包括:第一语法元素,所述第一语法元素被设置为用于指示是否存在沿着特定旋转轴的旋转。4.如权利要求1所述的视频处理方法,其特征在于,所述至少一个语法元素还包括:第二语法元素,当存在沿着所述特定旋转轴的旋转时,所述第二语法元素由从多个预定义索引值中选择的索引值来设置,并且所述多个预定义索引值被分别映射到不同的预定义旋转角度和用户定义旋转角度。5.如权利要求4所述的视频处理方法,其特征在于,所述至少一个语法元素还包括:第三语法元素,当所述索引值是映射到所述用户定义旋转角度的预定义索引值时,所述第三语法元素被设置为用于指示所述用户定义旋转角度。6.如权利要求3所述的视频处理方法,其特征在于,所述至少一个语法元素还包括:第二语法元素,当所述360度虚拟现实投影格式是第一投影格式时,所述第二语法元素设置为第一值,以及当所述360度虚拟现实投影格式是不同于所述第一投影格式的第二投影格式时,所述第二语法元素设置为第二值,并且所述特定旋转轴根据所述第二语法元素而变化。7.如权利要求1所述的视频处理方法,其特征在于,所述至少一个语法元素还包括:第一语法元素,所述第一语法元素被设置为用于指示应用于所述当前输入帧的所述内容导向旋转与应用于至少一个先前输入帧的内容导向旋转是否相同。8.如权利要求7所述的视频处理方法,其特征在于,所述至少一个语法元素还包括:第二语法元素,当应用于所述当前输入帧的所述内容导向旋转不同于应用于所述至少一个先前输入帧的所述内容导向旋转时,所述第二语法元素被设置为用于指示是否存在沿着特定旋转轴的旋转。9.如权利要求8所述的视频处理方法,其特征在于,所述至少一个语法元素还包括:第三语法元素,当存在沿着所述特定旋转轴的旋转时,所述第三语法元素被设置为用于指示在所述当前输入帧的所述内容导向旋转中沿着所述特定旋转轴的旋转角度与所述至少一个先前输入帧的所述内容导向旋转中沿着所述特定旋转轴旋转角度之间的差。10.如权利要求8所述的视频处理方法,其特征在于,所述至少一个语法元素还包括:第三语法元素,当所述360度虚拟现实投影格式是第一投影格式时,所述第三语法元素设置为第一值,以及当所述360度虚拟现实投影格式是不同于所述第一投影格式的第二投影格式时,所述第三语法元素设置为第二值,所述特定旋转轴根据所述第三语法元素而变化。11.如权利要求1所述的视频处理方法,其特征在于,所述至少一个语法元素包括:第一语法元素,所述第一语法元素被设置为用于指示所述当前输入帧中的所述360度图像/视频内容的所述内容导向旋转是否启用。12.如权利要求1所述的视频处理方法,其特征在于,所述至少一个语法元素还包括:第二语法元素,当所述当前输入帧中的所述360度图像/视频内容的所述内容导向旋转被启用时,所述第二语法元素被设置为用于指示沿特定旋转轴的旋转角度。13.一种视频处理方法,包括:接收比特流;处理所述比特流以从所述比特流中获取至少一个语法元素;解码所述比特流以生成具有以360度虚拟现实投影格式表示的旋转的360度图像/视频内容的当前解码帧;以及根据所述当前解码帧以及由所述至少一个语法元素指示的内容导向旋转的旋转信息,在显示屏幕上渲染并显示输出图像数据,其中,在生成所述旋转的360度图像/视频内容中涉及所述内容导向旋转。14.如权利要求13所述的视频...
【专利技术属性】
技术研发人员:林鸿志,黄昭智,李佳盈,林建良,张胜凯,
申请(专利权)人:联发科技股份有限公司,
类型:发明
国别省市:中国台湾,71
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。