用于针对虚拟现实应用程序发信号通知与最感兴趣区域相关联的信息的系统和方法技术方案

本发明专利技术公开了一种设备，该设备可被配置为根据本文所述技术中的一者或多者发信号通知与全向视频的最感兴趣区域相关联的信息(参见段落[0070]中的“region_on_frame_flag”)。

A system and method for signaling information associated with the most interested area for virtual reality applications

The invention discloses a device that can be configured to signal information associated with the most interesting area of omnidirectional video according to one or more of the techniques described herein (see \region on \ufe63 frame \ufe63 flag\ in paragraph [0070]).

【技术实现步骤摘要】
【国外来华专利技术】用于针对虚拟现实应用程序发信号通知与最感兴趣区域相关联的信息的系统和方法
本公开涉及交互式视频分发，并且更具体地涉及用于发信号通知与最感兴趣视频区域相关联的信息的技术。
技术介绍
数字媒体播放功能可以包含在各种设备中，包括数字电视(包括所谓的“智能”电视)、机顶盒、膝上型电脑或台式电脑、平板电脑、数字录音设备、数字媒体播放器、视频游戏设备、蜂窝电话(包括所谓的“智能”电话)、专用视频流设备等。数字媒体内容(例如，视频和音频编程)可以源自多个源，包括例如无线电视提供商、卫星电视提供商、有线电视提供商、在线媒体服务提供商(包括所谓的流媒体服务提供商)等。数字媒体内容可以通过分组交换网络交付，包括双向网络(诸如互联网协议(IP)网络)和单向网络(诸如数字广播网络)。可以根据视频编码标准来对数字媒体内容中包括的数字视频进行编码。视频编码标准可以结合视频压缩技术。视频编码标准的示例包括ISO/IECMPEG-4Visual和ITU-TH.264(也称为ISO/IECMPEG-4AVC)和高效率视频编码(HEVC)。视频压缩技术可减少存储和传输视频数据的数据需求。视频压缩技术可通过利用视频序列中固有的冗余来减少数据需求。视频压缩技术可将视频序列再分成连续较小的部分(即视频序列内的帧组、帧组内的帧、帧内的片段、片段内的编码树单元(例如，宏块)、编码树单元内的编码块等)。可以使用预测编码技术来生成待编码的单位视频数据与参考单位视频数据之间的差值。该差值可被称为残差数据。残差数据可被编码为量化变换系数。语法元素可以涉及残差数据和参考编码单元。残差数据和语法元素可以被包括在兼容的比特流中。可以根据数据结构来格式化兼容的比特流和相关联的元数据。可以根据传输标准将兼容比特流和相关联的元数据从源传输到接收器设备(例如，数字电视或智能电话)。传输标准的示例包括数字视频广播(DVB)标准、综合业务数字广播标准(ISDB)标准和由高级电视系统委员会(ATSC)开发的标准，包括例如ATSC2.0标准。ATSC目前正在开发所谓的ATSC3.0标准系列。
技术实现思路
在一个示例中，一种发信号通知与全向视频的最感兴趣区域相关联的信息的方法，该方法包括发信号通知指示是否在封装帧或投影帧上指示区域的位置和尺寸的语法元素。附图说明[图1]图1是示出根据本公开的一种或多种技术的可被配置为传输经解码的视频数据的系统的示例的框图。[图2A]图2A是示出根据本公开的一种或多种技术的编码视频数据和对应数据结构的概念图。[图2B]图2B是示出根据本公开的一种或多种技术的编码视频数据和对应数据结构的概念图。[图3]图3是示出根据本公开的一种或多种技术的编码视频数据和对应数据结构的概念图。[图4]图4是示出根据本公开的一种或多种技术的可被包括在可被配置为分发经编码视频数据的系统的具体实施中的部件的示例的概念图。[图5]图5是示出可实现本公开的一种或多种技术的接收器设备的示例的框图。[图6A]图6A是示出根据本公开的一种或多种技术的球体上的区域的示例的概念图。[图6B]图6B是示出根据本公开的一种或多种技术的球体上的区域的示例的概念图。具体实施方式一般来讲，本公开描述用于编码视频数据的各种技术。具体地，本公开描述了用于发信号通知与全向视频的最感兴趣区域相关联的信息的技术。根据本文所述的技术的信息信令对于通过降低传输带宽和/或降低编码复杂度来改善视频分发系统性能可能特别有用。应当指出的是，虽然本公开的技术是相对于ITU-TH.264和ITU-TH.265描述的，但是本公开的技术通常可应用于视频编码。例如，本文中所描述的编码技术可并入包括块结构的视频编码系统(包括基于未来视频编码标准的视频编码系统)、帧内预测技术、帧间预测技术、变换技术、滤波技术和/或熵编码技术，但ITU-TH.265中的那些除外。因此，对ITU-TH.264和ITU-TH.265的参考是用于描述性目的的，并且不应将其解释为限制本文描述技术的范围。此外，应当指出的是，将文献以引用方式并入本文不应被解释为限制或产生关于本文所用术语的歧义。例如，在某个并入的参考文献中提供的对某个术语的定义不同于另一个并入的参考文献和/或如本文中使用的该术语的情况下，则该术语应以广泛地包括每个相应定义的方式和/或以在包括替代方案中每个特定定义的方式来解释。在一个示例中，设备包括被配置为发信号通知语法元素的一个或多个处理器，该语法元素指示是否在封装帧或投影帧上指示区域的位置和尺寸。在一个示例中，非暂态计算机可读存储介质包括存储在其上的指令，该指令在被执行时使得设备的一个或多个处理器发信号通知指示是否在封装帧或投影帧上指示区域的位置和尺寸的语法元素。在一个示例中，一种装置包括用于发信号通知指示是否在封装帧或投影帧上指示区域的位置和尺寸的语法元素的装置。在以下附图和描述中阐述了一个或多个示例的细节。其他特征、目的和优点将从描述和附图以及权利要求书中显而易见。视频内容通常包括由一系列帧组成的视频序列。一系列帧也可以被称为一组图片(GOP)。每个视频帧或图片可以包括一个或多个片段，其中一个片段包括多个视频块。视频块可被定义为可被预测性地编码的最大像素值(也被称为样本)阵列。视频块可以根据扫描模式(例如，光栅扫描)来排序。视频编码器对视频块和其子分区执行预测编码。ITU-TH.264规定了包括16×16亮度样本的宏块。ITU-TH.265规定了类似的编码树单元(CTU)结构，其中图片可以被分割成相同大小的CTU，并且每个CTU可以包括具有16×16、32×32或64×64亮度样本的编码树块(CTB)。如本文所用，术语视频块通常可以指图片的区域，或者可以更具体地指可以被预测性地编码的像素值的最大阵列、其子分区和/或对应结构。此外，根据ITU-TH.265，每个视频帧或图片可以被分区为包括一个或多个图块，其中图块是与图片的矩形区域相对应的编码树单元序列。在ITU-TH.265中，可以根据相应的四叉树块结构将CTU的CTB分割成编码块(CB)。根据ITU-TH.265，一个亮度CB连同两个对应的色度CB和相关联的语法元素被称为一个编码单元(CU)。CU与为CU定义一个或多个预测单元(PU)的预测单元(PU)结构关联，其中PU与对应的参考样本相关联。也就是说，在ITU-TH.265中，使用帧内预测或帧间预测来对图片区域进行编码的决定是在CU级别进行的，并且对于CU，可以使用与帧内预测或帧间预测相对应的一个或多个预测来生成CU的CB的参考样本。在ITU-TH.265中，PU可以包括亮度和色度预测块(PB)，其中方形PB被支持用于帧内预测，并且矩形PB被支持用于帧间预测。帧内预测数据(例如，帧内预测模式语法元素)或帧间预测数据(例如，运动数据语法元素)可将PU与对应参考样本相关联。残差数据可以包括对应于视频数据的每个分量(例如，亮度(Y)和色度(Cb和Cr))的相应差值阵列。残差数据可能在像素域中。可对像素本文档来自技高网...

【技术保护点】
1.一种发信号通知与全向视频的最感兴趣区域相关联的信息的方法，所述方法包括：/n发信号通知语法元素，所述语法元素指示是否在封装帧或投影帧上指示区域的位置和尺寸。/n

【技术特征摘要】
【国外来华专利技术】20170327 US 62/477379;20170330 US 62/479162;2017041.一种发信号通知与全向视频的最感兴趣区域相关联的信息的方法，所述方法包括：
发信号通知语法元素，所述语法元素指示是否在封装帧或投影帧上指示区域的位置和尺寸。


2.根据权利要求1所述的方法，还包括发信号通知与具有区域标签的标识区域相关联的语法元素。


3.根据权利要求1或2中任一项所述的方法，还包括发信号通知指示是否存在区域标签的语法元素。


4.根据权利要求2或3中任一项所述的方法，其中区域标签包括字符...

【专利技术属性】
技术研发人员：萨钦·G·德施潘德，
申请(专利权)人：夏普株式会社，
类型：发明
国别省市：日本;JP