图像处理装置和图像处理方法制造方法及图纸

本公开内容涉及能够在扩展帧内预测以提高预测精度时减少编码处理的开销的图像处理设备和图像处理方法。选择单元将距当前块距离相同的像素组取作行，并且根据基本帧内预测模式和扩展帧内预测模式选择帧内预测模式和作为在对当前块进行帧内预测时所参考的行的参考行，该基本帧内预测模式是在参考作为最接近当前块的最近行的编号1行时的帧内预测模式，该扩展帧内预测模式是在参考编号1行之后的行时的帧内预测模式。扩展帧内预测模式是基本帧内预测模式的一部分。本公开内容可以应用于例如像素编码设备等。

Image Processing Device and Image Processing Method

The present disclosure relates to image processing equipment and image processing methods capable of reducing the overhead of encoding processing in extending intra prediction to improve prediction accuracy. The selection unit takes a row of pixel groups with the same distance from the current block, and chooses the intra prediction mode and the reference line as the reference line for intra prediction of the current block according to the basic intra prediction mode and the extended intra prediction mode. The basic intra prediction mode is the intra prediction mode when referring to the line numbered as the nearest line to the current block. The intra prediction mode is the intra prediction mode when the line after the reference number is one line. Extended intra prediction mode is a part of basic intra prediction mode. The present disclosure may be applied to, for example, a pixel encoding device, etc.

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置和图像处理方法
本公开内容涉及图像处理装置和图像处理方法，并且更具体地，涉及可以在扩展帧内预测以提高预测精度时降低编码处理的开销的图像处理装置和图像处理方法。
技术介绍
在高效视频编码(HEVC)中，在帧内预测中参考第0行。注意，在本说明书中，行是与作为当前处理目标的当前块具有相同距离的像素组。此外，行编号对于每一行是唯一的，并且以从0开始的升序针对每个当前块分配行编号，其中0被给予最接近当前块的行。另一方面，在根据国际电信联盟电信标准化部门(ITU-T)搜索下一代视频编码的联合视频探索小组(JVET)中，建议将在帧内预测中称为行(下文中称为参考行)的候选扩展到0至3行(例如，参见非专利文献1和非专利文献2)。在非专利文献1中描述的专利技术中，仅在帧内预测模式是除了平面预测模式和DC预测模式之外的指示参考方向的帧内预测模式的情况下，参考行候选被扩展到行0至3。在非专利文献2中描述的专利技术中，参考行候选在所有帧内预测模式下被扩展到行0至3。此外，根据JVET，还提出了将帧内预测模式的候选从35个帧内预测模式扩展到67个帧内预测模式。如上所述，在帧内预测中扩展参考行或帧内预测模式的候选的情况下，提高了预测精度。引文列表专利文献非专利文献1：Yao-JenChang,Po-HanLin,Chun-Lung,“Arbitraryreferencetierforintradirectionalmodes”,JVET-C0043,2016年5月26日至6月1日非专利文献2：JiahaoLi,“Multipleline-basedintraprediction”,JVET-C00712016年5月26至6月1日
技术实现思路
技术问题然而，由于参考行和帧内预测模式的候选数目增加，因此根据在编码处理中执行的速率失真优化(RDO)等增加选择参考行和帧内预测模式的处理负荷。因此，增加了诸如编码处理的负荷和编码处理所需的时间之类的编码处理的开销。鉴于这样的情况做出了本公开内容，并且旨在扩展帧内预测以提高预测精度时降低编码处理的开销。技术问题的解决方案根据本公开内容的第一方面的图像处理装置是下述图像处理装置，该图像处理装置包括：选择单元，根据第一帧内预测模式和第二帧内预测模式选择帧内预测模式以及在当前块的帧内预测期间参考的参考行，其中将距当前块距离相同的像素组作为行，第一帧内预测模式是参考最接近当前块的第一行时的帧内预测模式，并且第二帧内预测模式是参考不同于第一行的第二行时的帧内预测模式，以及图像处理装置还包括：预测单元，基于由选择单元选择的参考行和帧内预测模式来对当前块执行帧内预测，其中第二帧内预测模式是第一帧内预测模式的一部分。根据本公开内容的第一方面的图像处理方法与根据本公开内容的第一方面的图像处理装置对应。根据本公开内容的第一方面，根据第一帧内预测模式和第二帧内预测模式选择帧内预测模式以及在当前块的帧内预测期间参考的参考行，其中将距当前块距离相同的像素组作为行，第一帧内预测模式是参考最接近当前块的第一行时的帧内预测模式，并且第二帧内预测模式是参考不同于第一行的第二行时的帧内预测模式，以及基于所选择的参考行和帧内预测模式来对当前块执行帧内预测。注意，第二帧内预测模式是第一帧内预测模式的一部分。根据本公开内容的第二方面的图像处理装置包括：预测单元，基于扩展信息来对当前块执行帧内预测，所述扩展信息指示帧内预测的扩展是由帧内预测模式指示的参考方向上的扩展还是在当前块的帧内预测中参考的参考行的扩展，其中将距当前块距离相同的像素组作为行。根据本公开内容的第二方面的图像处理方法与根据本公开内容的第二方面的图像处理装置对应。根据本公开内容的第二方面，基于扩展信息来对当前块执行帧内预测，所述扩展信息指示帧内预测的扩展是由帧内预测模式指示的参考方向上的扩展还是在当前块的帧内预测中参考的参考行的扩展，其中距当前块距离相同的像素组作为行。注意，可以通过使计算机执行程序来实现根据第一方面和第二方面的图像处理装置。此外，为了实现根据第一方面和第二方面的图像处理装置，可以通过经由传输介质传输程序或通过将程序记录在记录介质上来提供由计算机执行的程序。本专利技术的效果根据本公开内容的第一方面和第二方面，可以在扩展帧内预测以提高预测精度时降低编码处理的开销。注意，本文中描述的效果并不是限制性的，并且可以获得本公开内容中公开的任何一种效果。附图说明图1是示出形成CU的方法的图。图2是示出作为应用本公开内容的图像处理装置的图像编码装置的第一实施方式的配置示例的框图。图3是用于说明用作参考行候选的行的图。图4是示出基本帧内预测模式的示例的图。图5是示出扩展的帧内预测模式的第一示例的图。图6是示出扩展的帧内预测模式的第二示例的图。图7是示出在对行编号的语法值进行编码之后的比特串的示例的图。图8是用于说明图像编码处理的流程图。图9是示出作为应用本技术的图像处理装置的图像解码装置的第一实施方式的配置示例的框图。图10是用于说明图像解码处理的流程图。图11是示出扩展标志与角度帧内预测模式和参考行的候选之间的示例关系的图。图12是示出HEVC中的35个帧内预测模式的图。图13是示出计算机的配置示例的框图。图14是示意性地示出电视设备的配置示例的框图。图15是示意性地示出移动电话的配置示例的框图。图16是示意性示出记录/再现设备的配置示例的框图。图17是示意性地示出成像设备的配置示例的框图。图18是示意性地示出视频设备的配置示例的框图。图19是示意性示出视频处理器的示例配置的框图。图20是示意性示出视频处理器的另一示例配置的框图。图21是示意性示出网络系统的示例配置的框图。具体实施方式下面将描述用于执行本公开内容的方式(在下文中称为实施方式)。注意按照以下顺序给出描述：1.第一实施方式：图像编码装置和图像解码装置(图1至图10)2.第二实施方式：图像编码装置和图像解码装置(图11至图12)3.第三实施方式：计算机(图13)4.第四实施方式：电视设备(图14)5.第五实施方式：移动电话(图15)6.第六实施方式：记录与再现设备(图16)7.第七实施方式：成像设备(图17)8.第八实施方式：视频设备(图18至图20)9.第九实施方式：网络系统(图21)<第一实施方式>(形成CU的方法的描述)在诸如运动图像专家组2(MPEG2(ISO/IEC13818-2))和MPEG-4Part10(高级视频编码，在下文中称为AVC)的传统图像编码方法中，对被称为宏块的处理单元执行编码处理。宏块是具有16×16像素的均匀尺寸的块。另一方面，在HEVC中，对被称为编码单元(CU)的处理单元(编码单元)执行编码处理。CU是通过对作为最大编码单元的最大编码单元(LCU)进行递归地划分而形成的具有可变尺寸的块。可选择的CU的最大尺寸是64×64像素。可选择的CU的最小尺寸是8×8像素。最小尺寸的CU被称为最小编码单元(SCU)。注意，CU的最大尺寸不限于64×64像素，并且可以是更大块的尺寸，例如128×128像素或256×256像素。以该方式，作为采用具有可变尺寸的CU的结果，HEVC可以根据图像的内容自适应地调整图像质量和编码效率。在被称为预测单元(PU)的处理单元中执本文档来自技高网...

【技术保护点】
1.一种图像处理装置，包括：选择单元，根据第一帧内预测模式和第二帧内预测模式选择帧内预测模式以及在当前块的帧内预测期间参考的参考行；其中将距所述当前块距离相同的像素组作为行，所述第一帧内预测模式是参考最接近所述当前块的第一行时的帧内预测模式，并且所述第二帧内预测模式是参考不同于所述第一行的第二行时的帧内预测模式；以及预测单元，基于由所述选择单元选择的参考行和帧内预测模式来对所述当前块执行帧内预测，其中所述第二帧内预测模式是所述第一帧内预测模式的一部分。

【技术特征摘要】
【国外来华专利技术】2016.10.14 JP 2016-2022251.一种图像处理装置，包括：选择单元，根据第一帧内预测模式和第二帧内预测模式选择帧内预测模式以及在当前块的帧内预测期间参考的参考行；其中将距所述当前块距离相同的像素组作为行，所述第一帧内预测模式是参考最接近所述当前块的第一行时的帧内预测模式，并且所述第二帧内预测模式是参考不同于所述第一行的第二行时的帧内预测模式；以及预测单元，基于由所述选择单元选择的参考行和帧内预测模式来对所述当前块执行帧内预测，其中所述第二帧内预测模式是所述第一帧内预测模式的一部分。2.根据权利要求1所述的图像处理装置，其中，所述第二帧内预测模式包括指示水平方向、垂直方向和倾斜方向作为参考方向的帧内预测模式。3.根据权利要求2所述的图像处理装置，其中，所述第二帧内预测模式通过在每个预定编号处选择所述第一帧内预测模式来配置。4.根据权利要求1所述的图像处理装置，其中，所述第二帧内预测模式是所述当前块周围的块的帧内预测模式。5.根据权利要求1所述的图像处理装置，还包括：设置单元，设置指示由所述选择单元选择的帧内预测模式的帧内预测模式信息，其中所述设置单元被配置成：在由所述选择单元选择的帧内预测模式是所述第一帧内预测模式和所述第二帧内预测公共的帧内预测模式的情况下，设置指示由所述选择单元选择的参考行的参考行信息。6.根据权利要求1所述的图像处理装置，其中，所述选择单元基于指示帧内预测模式的帧内预测模式信息来选择帧内预测模式。7.根据权利要求6所述的图像处理装置，其中，在由所述帧内预测模式信息指示的帧内预测模式是所述第一帧内预测模式和所述第二帧内预测模式公共的帧内预测模式的情况下，所述选择单元基于指示参考行的参考行信息来选择参考行，以及在由所述帧内预测模式信息指示的帧内预测模式不是所述第一帧内预测模式和所述第二帧内预测模式公共的帧内预测模式的情况下，所述选择单元选择所述第一行作为参考行。8.一种图像处理方法，所述图像处理方法使图像处理装置执行：根据第一帧内预测模式和第二帧内预测模式选择帧内预测模式以及在当前块的帧内预测期间参考的参考行的选择步骤，其中将距所述当前块距...

【专利技术属性】
技术研发人员：池田优，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本,JP