图像处理设备、图像处理方法和程序技术

在图像编码中，为了提高系数能量的集中度(将变换系数集中在低频处)，公开了对初级变换之后的变换系数应用与初级变换不同的二次变换。由于应用多次变换之后的变换系数可能相对于原始图像特性被变换到与频域不同的域，因此使用用于频域的缩放列表(量化矩阵)的带宽控制受到影响。因此，即使在应用多个变换的情况下，目的是提供一种使用缩放列表实现带宽控制的机制。为了实现上述目的，本发明专利技术提供了一种图像处理设备、图像处理方法和程序，图像处理设备包括：处理控制部，其基于与应用于处理目标块的变换有关的变换信息(指示是否已经应用了预定变换的信息、指示变换的数量的信息等)来控制缩放列表处理。

【技术实现步骤摘要】
【国外来华专利技术】图像处理设备、图像处理方法和程序
本公开涉及图像处理设备、图像处理方法和程序。
技术介绍
在图像编码中，为了提高系数能量的集中度(将变换系数集中在低频处)，已经公开了对初级变换之后的变换系数应用与初级变换不同的二次变换(例如，参见非专利文献1)。引用列表非专利文献非专利文献1：JianleChen、ElenaAlshina、GaryJ.Sullivan、Jens-RainerOhm、JillBoyce，“联合探索测试模型3的算法描述”，JVET-C1001_v3，ITU-TSG16WP3和ISO/IECJTC1/SC29/WG11的联合视频探索组(JVET)第3次会议：2016年5月26日至6月1日，瑞士日内瓦
技术实现思路
技术问题然而，与非专利文献1中一样，由于应用多次变换之后的变换系数可能相对于原始图像特性被变换到与频域不同的域，因此使用用于频域的缩放列表(量化矩阵)的带宽控制受到影响。因此，即使在应用多个变换的情况下，也希望提供一种使用缩放列表实现带宽控制的机制。问题的解决方案根据本公开，提供了一种图像处理设备，包括：处理控制部，其基于与应用于处理目标块的变换有关的变换信息来控制缩放列表处理。另外，根据本公开，提供了一种图像处理方法，包括：由处理器基于与应用于处理目标的处理目标块的变换有关的变换信息，来控制缩放列表处理。另外，根据本公开，提供了一种程序，该程序使计算机执行以下功能：基于与应用于处理目标块的变换有关的变换信息来控制缩放列表处理。本专利技术的有益效果根据如上所述的本公开，即使在应用多个变换的情况下，使用缩放列表的带宽控制也变得可能。注意，上述效果不一定是限制性的。利用或代替上述效果，可以实现本说明书中描述的任何一种效果或可以从本说明书中理解的其他效果。附图说明图1是示意性地示出根据缩放列表处理的现有处理的流程的说明图。图2是Y＝Clip3(coeffMin，coeffMax，X)的图。图3是示意性地示出根据本公开第一实施例的处理的流程的说明图。图4是示出根据实施例的图像编码设备10的配置的一个示例的框图。图5是示出根据实施例的处理部14的详细配置的示例的框图。图6是示出在变换的数量是1的情况下根据现有技术进行编码时的处理流程的一个示例的流程图。图7是示出根据实施例的根据新技术进行编码时的处理的流程的示例的流程图。图8是示出根据实施例的图像解码设备60的配置的一个示例的框图。图9是示出根据实施例的逆处理部63的详细配置的一个示例的框图。图10是示出在变换的数量是1的情况下根据现有技术进行解码时的处理的流程的一个示例的流程图。图11是示出根据实施例的根据新技术进行解码时的处理的流程的示例的流程图。图12是示出根据本公开第二实施例的处理部14-2的详细配置的示例的框图。图13是示出根据实施例的编码期间的处理的流程的一个示例的流程图。图14是示出根据实施例的逆处理部63-2的详细配置的一个示例的框图。图15是示出根据实施例的解码期间的处理的流程的一个示例的流程图。图16是示出计算机的主要配置示例的框图。图17是示出电视设备的示意性配置的示例的框图。图18是示出移动电话的示意性配置的示例的框图。图19是示出记录/再现设备的示意性配置的示例的框图。图20是示出成像设备的示意性配置的示例的框图。图21是示出视频集的示意性配置的一个示例的框图。图22是示出视频处理器的示意性配置的一个示例的框图。图23是示出视频处理器的示意性配置的另一示例的框图。图24是示出网络系统的示意性配置的一个示例的框图。具体实施方式在下文中，将参考附图详细描述本公开的(一个或多个)优选实施例。注意，在本说明书和附图中，具有基本相同的功能和结构的结构元件用相同的附图标记表示，并且省略对这些结构元件的重复说明。在下文中，描述将按以下顺序进行。1.第一实施例2.第二实施例3.硬件配置示例4.应用示例5.结论<1.第一实施例>[1-1.概述]例如，为了提高系数能量的集中度(将变换系数集中在低频处)，非专利文献1公开了对应用变换到频域的初级变换之后的变换系数应用二次变换。然而，由于应用多个变换之后的变换系数可能相对于原始图像特性被变换到与频域不同的域，因此使用用于频域的缩放列表(缩放列表处理)的带宽控制受到影响。图1是示意性地示出对初级变换之后的变换系数应用二次变换的情况下根据缩放列表处理的现有处理的流程的说明图。如图1中所示，在应用初级变换(S11)之后，将二次变换(S12)应用于变换系数。接下来，对二次变换之后的变换系数执行量化处理和缩放列表处理(S13)。以上是编码时的处理。接下来，当解码时，执行逆量化和缩放列表处理(S14)，然后执行逆二次变换(S15)，并且另外，应用逆初级变换(S16)。如上所述，利用非专利文献1中描述的方法，同时或连续地执行(逆)量化处理和缩放列表处理。例如，在高效视频编码(HEVC)中，同时执行逆量化处理和缩放列表处理。在下文中，将描述HEVC中的解码期间的缩放列表处理。在HEVC中，使用缩放因子m[x][y]，如下面的公式(1)中那样计算处理块内的位置(x，y)处的逆量化的变换系数值d[x][y]，缩放因子m[x][y]是与缩放列表中的位置(x，y)相对应的元素的值。[公式1]d[x][y]＝Clip3(coeffMin，coeffMax，((TransCoeffLevel[xTbY][yTbY][cIdx][x][y]*m[x][y]*levelScale[qP％6]＜＜(qP/6))+(1＜＜(bdShift-1)))＞＞bdShift)...(1)在公式(1)中，TransCoeffLevel[xTbY][yTbY][cIdx][x][y]表示处理块中位置(x，y)处的量化等级值(量化数据)。此外，在公式(1)中，levelScale[qP％6]＜＜(qP/6)和(1＜＜(bdShift-1)))＞＞bdShift)是与使用量化参数qP的量化处理有关的值。此外，Clip3(coeffMin，coeffMax，X)表示通过将数值X舍入为等于或大于系数最小值coeffMin并且等于或小于系数最大值coeffMax而获得的值。图2是Y＝Clip3(coeffMin，coeffMax，X)的图。如图1中所示，Clip3(coeffMin，coeffMax，X)的值等于或大于coeffMin，并且还等于或小于coeffMax。如公式(1)所示，在HEVC中，在逆量化处理期间，通过根据缩放列表乘以缩放因子m[x][y]来执行缩放列表处理。而且，类似地，在HEVC中，已经同时执行量化和缩放列表处理。然而，例如在非专利文献1中描述的，应用二次变换之后的变换系数，即旋转矩阵，相对于原始图像特性被变换到与频域不同的域。因此，在使用用于频域的缩放列表来执行缩放列表处理作为(逆)量化处理的一部分的情况下，执行适当的带宽控制是困难的。因此，着眼于上述情况导致创建本公开的实施例。根据本实施例的图像编码设备或图像解码设备通过基于变换信息控制变换处理或缩放列表处理，通过缩放列表处理实现带宽控制。图3是示意性地示出根据本实施例的处理的流程的说明图。如图3中所示，在本实施例中，对应用初级变换(S21)之后的变换本文档来自技高网...

【技术保护点】
1.一种图像处理设备，包括：处理控制部，所述处理控制部基于与应用于处理目标块的变换有关的变换信息来控制缩放列表处理。

【技术特征摘要】
【国外来华专利技术】2016.08.24 JP 2016-1637181.一种图像处理设备，包括：处理控制部，所述处理控制部基于与应用于处理目标块的变换有关的变换信息来控制缩放列表处理。2.根据权利要求1所述的图像处理设备，其中，所述处理控制部还基于所述变换信息来控制与应用于处理目标块的变换的逆变换有关的逆变换处理。3.根据权利要求2所述的图像处理设备，其中，所述处理控制部基于所述变换信息来对向所述逆变换处理进行的输入进行控制。4.根据权利要求1所述的图像处理设备，其中，所述处理控制部基于所述变换信息来确定是否执行与另一变换的逆变换有关的逆变换处理，所述另一变换不同于关于预测误差数据的变换，所述预测误差数据是图像数据和预测图像数据之间的差异。5.根据权利要求4所述的图像处理设备，其中，所述处理控制部根据所述确定而对向所述缩放列表处理进行的输入进行控制。6.根据权利要求5所述的图像处理设备，其中，在确定执行所述逆变换处理的情况下，所述处理控制部控制对向所述缩放列表处理进行的输入进行控制，使得所述逆变换处理之后的系数数据变为向所述缩放列表处理进行的输入数据。7...

【专利技术属性】
技术研发人员：中神央二，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本,JP