根据本发明专利技术的一种由接收360度视频的装置处理360度图像数据的方法包括以下步骤：接收360度图像数据；从所述360度图像数据获得与编码后图片相关的信息和元数据，其中，所述元数据包括相机镜头信息；基于与所述编码后图片相关的信息来对包括目标圆形区域的图片进行解码；以及基于所述相机镜头信息处理所述目标圆形区域来渲染所述目标圆形区域。
【技术实现步骤摘要】
【国外来华专利技术】用于发送和接收包括相机镜头信息的360度视频的方法及其装置
本公开涉及360度视频，并且更具体地，涉及用于用于发送和接收包括相机镜头信息的3DoF+内容的360度视频的方法及其装置。
技术介绍
虚拟现实(VR)系统允许用户体验电子投影环境。用于提供VR内容的系统可以被进一步改善，以提供较高质量的图像和立体声。VR系统可以允许用户交互性消费VR内容。3DoF+(六个自由度+)内容通过提供根据用户的位置间移动而新创建的3DoF或360度视频，允许用户通过多个视点的360度视频而具有更多样的感官体验。
技术实现思路
技术问题本公开的目的是提供用于增加提供VR系统的VR视频数据发送的效率的方法和装置。本公开的另一目的是提供用于发送关于VR视频数据的VR视频数据和元数据的方法和装置。本公开的另一方面是提供用于发送VR视频数据和关于VR视频数据的相机镜头信息的元数据的方法和装置。本公开的另一目的是提供用于增加提供3DoF+系统的360度视频数据发送的效率的方法和装置。本公开的另一目的是提供用于发送与用于提供3DoF+系统的视点/头部位置/眼睛视线的位置和/或角度有关的元数据的方法和装置。本公开的另一目的是提供基于与变形校正相关的信息通过反映镜头的特性来校正变形的方法和装置。本公开的另一目的是提供用于基于指示径向变形类型的信息通过反映镜头的特性来校正变形的方法和装置。技术方案在本公开的一个方面，本文中提供了一种通过360度视频发送装置处理360度图像数据的方法。该方法可以包括以下步骤：获取包括由具有至少一个镜头的相机获取的360度图像的目标圆形区域；将所述目标圆形区域映射到图片；对映射到所述目标圆形区域的所述图片进行编码，生成针对所述360度图像的元数据；以及处理编码后图片和所述元数据进行存储或发送，其中，所述元数据可以包含相机镜头信息。在本公开的另一方面，本文中提供了一种用于处理360度视频数据的360度视频发送设备。该360度视频发送设备可以包括：数据输入单元，该数据输入单元被配置为获取包括由具有至少一个镜头的相机获取的360度图像的目标圆形区域；投影处理器，该投影处理器被配置为将所述目标圆形区域映射到图片；数据编码器，该数据编码器对映射到所述目标圆形区域的所述图片进行编码；元数据处理器，该元数据处理器被配置为生成所述360度图像的元数据；以及发送处理器，该发送处理器处理编码后图片和所述元数据以便进行存储或发送，其中，所述元数据可以包含相机镜头信息。在本公开的另一方面，本文中提供了一种通过360度视频接收设备处理360度图像数据的方法。该设备可以包括：接收360度图像数据；从所述360度图像数据获取关于编码后图片的信息和元数据，所述元数据包含相机镜头信息；基于关于所述编码后图片的信息来解码包括目标圆形区域的图片；以及基于所述相机镜头信息来处理和渲染所述目标圆形区域。在本公开的另一方面，本文中提供了一种用于处理360度视频数据的360度视频接收设备。该设备可以包括：接收器，该接收器接收360度图像数据；接收处理器，该接收处理器被配置为从所述360度图像数据获取关于编码后图片的信息和元数据，所述元数据包含相机镜头信息；数据解码器，该数据解码器基于关于所述编码后图片的信息来解码包括目标圆形区域的图片；以及渲染器，该渲染器基于所述相机镜头信息来处理和渲染所述目标圆形区域。有益效果根据本公开，能在支持使用地面广播网络和互联网网络提供的下一代混合广播的环境中高效地发送3DoF+内容。根据本公开，能在用户消费3DoF+内容时向用户提供交互式体验。根据本公开，当用户消费3DoF+内容时，能执行信令，使得准确反映3DoF+内容产生方的意图。根据本公开，在传递3DoF+内容时，能高效地增加传输容量并且能传递必要的信息。根据本公开，可基于相机镜头信息从3DoF+内容的360度图像数据推导用于目标视点、目标头部位置和/或目标眼睛视线的圆形区域并进行渲染。由此，能在用户消费3DoF+内容时向用户提供交互式体验。根据本公开，可以通过基于相机镜头信息中所包括的投影功能相关信息和/或变形校正函数相关信息反映镜头的特性来推导多项式函数，并且可以基于多项式函数来校正360度图像被投影到其上的图片中出现的变形。由此，360度图像数据能被更精确地映射到3D空间。附图说明图1是示出了根据本公开的用于提供360度视频的整体架构的图。图2和图3例示了根据本公开的实施方式的媒体文件的结构。图4例示了基于DASH的自适应流传输模型的整体操作的示例。图5示例性示出了3DoF+VR系统。图6是示出了根据本公开的用于提供3DoF+视频的整体架构的图。图7示例性示出了根据本公开的基于相机镜头信息和/或补充相机镜头信息将360度视频拼接成全景图像的示例。图8a和图8b示例性例示了通过360度视频发送设备/360度视频接收设备执行的用于提供360内容/3DoF+内容的整体架构。图9例示了由360度视频接收设备基于相机镜头信息处理360度视频的示例。图10是示意性例示了适用本公开的360度视频发送设备的配置的图。图11是示意性例示了适用本公开的360度视频接收设备的配置的图。图12示例性示出了径向投影功能。图13示例性示出了各种类型的径向变形。图14例示了通过相机镜头捕获360度视频的示例。图15示意性例示了根据本公开的由360度视频发送设备处理360度视频数据的方法。图16示意性例示了根据本公开的被配置为执行360度图像数据处理方法的360度视频发送设备。图17示意性例示了根据本公开的由360度视频接收设备处理360度视频数据的方法。图18示意性例示了根据本公开的被配置为执行360度图像数据处理方法的360度视频接收设备。具体实施方式本公开可以进行各种改变并且可以有各种实施方式，并且将参照附图详细描述具体实施方式。然而，这并不旨在将本公开限制于具体实施方式。本说明书中使用的术语仅仅被用于描述具体实施方式，而不旨在限制本公开的技术精神。除非上下文另有明确指示，否则单数措辞也包括复数措辞。在本说明书中，术语“包括”或“具有”旨在指示存在说明书中公开的特性、图、步骤、操作、构成和部件或其组合，并且应该被理解为不排除存在或添加一个或更多个其它特性、图、步骤、操作、构成、部件或其组合。尽管为了方便描述不同功能而在附图中独立地示出了本公开中描述的各个元件，但这并不意味着这些元件以彼此分离的硬件或软件元件来实现。例如，这些元件中的两个或更多个元件可以被组合，以形成一个元件，或者一个元件可以被划分成多个元件。在不脱离本公开的实质的情况下，相应元件被集成和/或分离的实施方式也在本公开的范围内。下文中，将参照附图来详细描述本公开的示例性实施方式。在附图中，相同的附图本文档来自技高网...
【技术保护点】
1.一种由360度视频接收设备处理360度图像数据的方法，该方法包括以下步骤：/n接收360度图像数据；/n从所述360度图像数据获取与编码后图片有关的元数据和信息，所述元数据包含相机镜头信息；/n基于与所述编码后图片有关的信息来对包括目标圆形区域的图片进行解码；以及/n基于所述相机镜头信息来处理和渲染所述目标圆形区域。/n
【技术特征摘要】
【国外来华专利技术】20180227 US 62/635,5511.一种由360度视频接收设备处理360度图像数据的方法，该方法包括以下步骤：
接收360度图像数据；
从所述360度图像数据获取与编码后图片有关的元数据和信息，所述元数据包含相机镜头信息；
基于与所述编码后图片有关的信息来对包括目标圆形区域的图片进行解码；以及
基于所述相机镜头信息来处理和渲染所述目标圆形区域。
2.根据权利要求1所述的方法，其中，所述相机镜头信息包括用于指定所述目标圆形区域的目标视点的x分量、y分量和z分量的信息。
3.根据权利要求2所述的方法，其中，所述相机镜头信息包括用于指定所述目标圆形区域的所述目标视点的偏航角、俯仰角和滚转角的信息。
4.根据权利要求3所述的方法，其中，基于所述相机镜头信息来处理和渲染所述目标圆形区域包括以下步骤：
基于所述相机镜头信息来推导特定位置的目标视点；以及
推导针对所述目标视点的目标圆形区域，
其中，所述特定位置是通过局部坐标系和全局坐标系中的至少一个表示的位置。
5.根据权利要求1所述的方法，其中，所述相机镜头信息包括用于指定所述目标圆形区域的目标头部位置的x分量、y分量和z分量的信息。
6.根据权利要求5所述的方法，其中，所述相机镜头信息还包括用于指定所述目标圆形区域的所述目标头部位置的偏航角、俯仰角和滚转角的信息。
7.根据权利要求1所述的方法，其中，所述相机镜头信息包括用于指定所述目标圆形区域的目标眼睛视线的x分量、y分量和z分量的信息。
8.根据权利要求5所述的方法，其中，所述相机镜头信息还包括用于指定所述目标圆形区域的目标眼睛视线的偏航角、俯仰角和滚转角的信息。
9.根据权利要求1所述的方法，其中，所述相机镜头信息包括用于指定所述目标圆形区域的相机类型的信息，
其中，所述相机类型是视点、头部位置和眼睛视线中的一个。
10.根据权利要求1所述的方法，其中，当用于指定所述相机类型的信息的值为1时，推导出所述目标圆形区域的所述相机类型是所述视点，
其中，当用于指定所述相机类型的信息的值为2...
【专利技术属性】
技术研发人员：吴炫默，吴世珍，
申请(专利权)人：LG电子株式会社，
类型：发明
国别省市：韩国;KR
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。