图像解码设备、图像解码方法和存储介质技术

一种图像解码设备，该图像解码设备用于对使用多个时间层对包括一个或多个图像的运动图像进行分级编码所获得的编码数据进行解码，所述图像解码设备包括：第一获取单元，用于获取与运动图像的与所述分级编码中所使用的所述多个时间层相对应的帧频有关的信息；第二获取单元，用于获取与所述一个或多个图像的关注区域的大小有关的信息；确定单元，用于根据与对应于各所述时间层的帧频有关的信息以及与所述关注区域的大小有关的信息，来确定在显示所述关注区域的情况下所要使用的帧频；以及解码单元，用于以所确定出的帧频来对所述关注区域进行解码。

Image decoding apparatus, image decoding method, and storage medium

An image decoding apparatus, image decoding apparatus for the use of multiple time decoding of encoding data includes one or more images of the moving image classification encoding obtained, the image decoding apparatus includes: a first acquisition unit for obtaining information about classification frame rate used in the encoding a layer corresponding to the image and movement with the second acquisition unit; for information about the size of the area and get the attention of one or more of the image; determining unit, according to the information about the frame corresponding to each of the time and attention of information related to the size of the area with the determined in displaying the attention to the case of the regional frame rate; and a decoding unit for the frame rate of the attention region. Line decoding.

【技术实现步骤摘要】
【国外来华专利技术】图像解码设备、图像解码方法和存储介质
本专利技术涉及一种图像解码设备、图像解码方法和存储介质，并且特别涉及使用时域可伸缩编码(temporalscalablecoding)的图像解码技术。
技术介绍
为了发送、存储并且重放运动图像，使用与图像数据压缩编码(以下称为编码)有关的技术。作为运动图像编码技术，例如已经有H.264/MPEG-4AVC(以下称为H.264)和高效视频编码(以下称为HEVC)。在这种运动图像编码技术中，在扩展规范中采用从低质量到高质量的分层方式来对运动图像进行编码的可伸缩视频编码(scalablevideocoding)。可以按照要分层的信息的类型将可伸缩视频编码分类成空间可伸缩性(spatialscalability)、时域可伸缩性以及信噪比(SNR)可伸缩性。这里，时域可伸缩性是用于根据时间尺度变化、即图像编码中每单位时间段的帧数(运动图像的帧频)来进行分层的技术。可以通过切出具有分层构造的数据的一部分来调节帧频。即，可以通过生成能够实现多个帧频的运动图像并且通过考虑诸如网络发送或重放(解码)处理等的环境的不同的限制来灵活地对运动图像的帧频进行切换。为了实现支持上述时域可伸缩性的分级编码(hierarchicalcoding)，规定如下：运动图像的各帧设置有表示用于标识时间层(temporallayer)中的各层的信息的时间层标识符(时间ID)，并且对运动图像的各帧进行编码。各层的帧被构造成能够通过参考所设置的时间ID的值以及具有值比所设置的时间ID的值小的时间ID的帧来进行重放。然后，根据该时间ID来选择时间层，并且进行重放(解码并显示)。另外，关于上述的运动图像编码技术，提出了如下技术：由于视频的画面视图整体没有以一样的帧频进行编码，因此增大了针对特定区域的帧频，并且仅减小了针对非特定区域的帧频(专利文献1)。在专利文献1中，描述了如下内容：在对从多个监控摄像机输入的视频进行压缩的情况下，使用被配置为根据从监控摄像机输入的图像的重要程度来针对各监控摄像机设置帧频、并且产生具有所设置帧频的视频数据的视频压缩单元。然而，在上述现有技术中，对于以低帧频来编码的非特定区域，在接收设备进行解码和重放时，对帧频的控制可能受到限制。例如，在编码时被视为非特定区域的区域不能以比在接收装置侧的编码时所使用的帧频高的帧频来进行解码和重放。即，在现有技术中，在解码和重放时可能不能获取到期望帧频。即，期望能够在解码时以适当帧频来对运动图像进行解码的图像解码设备。引用文献列表专利文献专利文献1：日本特开2008-167101
技术实现思路
解决问题的方案本专利技术提供一种图像解码设备，所述图像解码设备对使用多个时间层对包括一个或多个图像的运动图像进行分级编码所获得的编码数据进行解码，所述图像解码设备包括：第一获取单元，用于获取与运动图像的与所述分级编码中所使用的所述多个时间层相对应的帧频有关的信息；第二获取单元，用于获取与所述一个或多个图像的关注区域的大小有关的信息；确定单元，用于根据所述第一获取单元所获取到的与对应于各个时间层的帧频有关的信息、以及所述第二获取单元所获取到的与所述关注区域的大小有关的信息，来确定在显示所述关注区域的情况下要使用的帧频；以及解码单元，用于以所述确定单元所确定出的帧频来对所述关注区域进行解码。通过以下参考附图对典型实施例的说明，本专利技术的其它特征将变得明显。根据本专利技术，图像解码设备能够以适当帧频来对进行了时域可伸缩编码的运动图像进行解码。附图说明图1是示出根据第一实施例的图像解码设备的结构的框图。图2是示出根据第一实施例的帧频计算单元的结构的框图。图3是示出输入至图像解码设备的编码数据的示例的图。图4A是示出与图像解码设备的处理性能有关的编码对象片区(tile)的数量和帧频之间的关系的示例的图。图4B是示出与图像解码设备的处理性能有关的编码对象片区的数量和帧频之间的关系的示例的图。图5A是示出帧片区分割的示例的图。图5B是示出帧片区分割的示例和关注区域的示例的图。图5C是示出帧片区分割的示例和关注区域的示例的图。图5D是示出帧片区分割的示例和关注区域的示例的图。图6A是示出根据第一实施例的解码处理的一部分的流程图。图6B是示出根据第一实施例的解码处理的另一部分的流程图。图7是示出根据第二实施例的图像解码设备的结构的框图。图8是示出根据第二实施例的帧频计算单元的结构的框图。图9A是示出与图像解码设备的处理性能有关的编码对象片区的数量和帧频之间的关系的示例的图。图9B是示出与图像解码设备的处理性能有关的编码对象片区的数量和帧频之间的关系的示例的图。图10A是示出根据第二实施例的解码处理的一部分的流程图。图10B是示出根据第二实施例的解码处理的另一部分的流程图。图11是示出根据第二实施例的图像解码设备的另一结构的框图。图12是示出根据第三实施例的图像解码设备的结构的框图。图13是示出根据第三实施例的帧频计算单元的结构的框图。图14A是示出根据第三实施例的解码处理的一部分的流程图。图14B是示出根据第三实施例的解码处理的另一部分的流程图。图15是示出能够应用于图像解码设备的计算机的硬件结构的示例的框图。具体实施方式以下将参考附图、根据本专利技术的实施例的示例来进行详细说明。注意，以下实施例所示的结构仅是示例，并且本专利技术不限于所示结构。在以下实施例中，将对运动图像进行时域可伸缩编码(支持时域可伸缩性的分级编码)所生成的编码数据(位流)输入至图像解码设备。这里，时域可伸缩编码是可以在H.264和高效视频编码(HEVC)中使用的方式。此外，时域可伸缩编码使得可以以多个帧频(图片帧频)来表现运动图像，并且使得可以提供用于选择帧频的功能。这里，在以下实施例中，假定要输入至图像解码设备的编码数据是使用HEVC所编码的数据。为了实现上述时域可伸缩编码，规定如下：运动图像的各帧没有设置表示用于标识时间层中的各层的时间层级别(时间ID、时间层标识符)。时域可伸缩性的各层的帧被构造成能够通过参考针对各帧设置的时间层级别的值以及具有比时间层级别的值小的值的时间层级别的帧来进行重放。然后，根据该时间层级别来选择时间层，并且进行重放(解码并显示)。另外，在一帧(图片)以矩形方式被分割成片区(tile)的情况下，可以在使用HEVC的编码-解码处理中以片区为单位进行编码和解码。另外，在HEVC中，定义了片区，其中利用这些片区，可以以序列为单位仅对作为运动图像的连续帧的一部分的片区进行独立编码和解码(以下称为独立解码片区)。然后，将由帧内的一个或多个片区构成的独立解码片区(独立解码片区组)称为temporal_motion_constrained_tile_set(时间运动约束片区组)(以下称为TMCTS)。然后，在HEVC中，可以通过仅将位于与TMCTS中所包括的片区的位置相对一致的位置处的片区视为帧间预测对象并且通过在不使用(参考)位于与TMCTS中所包括的片区的位置不相对一致的位置处的片区的情况下进行预测，来确保编码和解码的独立性。注意，与TMCTS中所包括的片区的位置有关的信息可以插入至编码数据的头部中的补充增强信息(supplementalenhancementinformation(SEI))消息中本文档来自技高网...

【技术保护点】
一种图像解码设备，所述图像解码设备对使用多个时间层对包括一个或多个图像的运动图像进行分级编码所获得的编码数据进行解码，所述图像解码设备包括：第一获取单元，用于获取与运动图像的与所述分级编码中所使用的所述多个时间层相对应的帧频有关的信息；第二获取单元，用于获取与所述一个或多个图像的关注区域的大小有关的信息；确定单元，用于根据所述第一获取单元所获取到的与对应于各个时间层的帧频有关的信息、以及所述第二获取单元所获取到的与所述关注区域的大小有关的信息，来确定在显示所述关注区域的情况下要使用的帧频；以及解码单元，用于以所述确定单元所确定出的帧频来对所述关注区域进行解码。

【技术特征摘要】
【国外来华专利技术】2015.01.07 JP 2015-0016821.一种图像解码设备，所述图像解码设备对使用多个时间层对包括一个或多个图像的运动图像进行分级编码所获得的编码数据进行解码，所述图像解码设备包括：第一获取单元，用于获取与运动图像的与所述分级编码中所使用的所述多个时间层相对应的帧频有关的信息；第二获取单元，用于获取与所述一个或多个图像的关注区域的大小有关的信息；确定单元，用于根据所述第一获取单元所获取到的与对应于各个时间层的帧频有关的信息、以及所述第二获取单元所获取到的与所述关注区域的大小有关的信息，来确定在显示所述关注区域的情况下要使用的帧频；以及解码单元，用于以所述确定单元所确定出的帧频来对所述关注区域进行解码。2.根据权利要求1所述的图像解码设备，其中，所述第二获取单元获取所述关注区域中所包括的片区的数量作为与所述关注区域的大小有关的信息。3.根据权利要求2所述的图像解码设备，其中，还包括：第三获取单元，用于获取所述图像解码设备在单位时间段内能够处理的片区的数量，其中，所述确定单元在所述第一获取单元所获取到的与所述多个时间层相对应的帧频中，将低于或等于根据所述关注区域中所包括的片区的数量和所述图像解码设备在单位时间段内能够处理的片区的数量而计算出的帧频的帧频，确定为在显示所述关注区域的情况下要使用的帧频。4.根据权利要求1所述的图像解码设备，其中，所述解码单元根据与所述确定单元所确定出的帧频相对应的时间层来对所述关注区域进行解码。5.根据权利要求1所述的图像解码设备，其中，所述确定单元将所述第一...

【专利技术属性】
技术研发人员：前田充，大川浩司，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本,JP