图像处理装置和图像处理方法制造方法及图纸

提供一种能够在增强层间参考的图像的清晰度时有效地提高图像质量的机制。提供一种图像处理装置，其包括获取部，其被配置成获取参考图像，所述参考图像用于编码或解码第二层的图像，所述第二层具有与第一层不同的属性，参考图像是基于第一层的解码图像，其中设置具有不同的块大小的多个块；滤波部，其被配置成将清晰度增强滤波器应用于由获取部获取的参考图像并且生成清晰度增强参考图像；以及控制部，其被配置成根据每个块的块大小控制清晰度增强滤波器通过滤波部对多个块的每一个的应用。

【技术实现步骤摘要】
【国外来华专利技术】
本公开涉及一种图像处理装置和一种图像处理方法。
技术介绍
由JCTVC(联合协作组视频编码)(其为ITU-T和ISO/IEC的联合标准化组织)称为HEVC(高效视频编码)的图像编码方案的标准化目前正在为了提高编码效率超过H.264/AVC(例如，参见BenjaminBross、Woo-JinHan、GaryJ.Sullivan、Jens-RainerOhm、GaryJ.Sullivan、Ye-KuiWang和ThomasWiegand的“HighEfficiencyVideoCoding(HEVC)textspecificationdraft10(forFDIS&Consent)”(JCTVC-L1003v4，2013年1月14日至23日))。HEVC不仅提供单个层的编码，而且提供可伸缩视频编码，如在已知的图像编码方案(诸如MPEG2和AVC(高级视频编码))中。HEVC可伸缩视频编码技术也称为SHVC(可伸缩HEVC)(例如，参见JianleChen等人的“DescriptionofscalablevideocodingtechnologyproposalbyQualcomm(configuration2)”(JCTVC-K0036，2012年10月10日至19日))。顺便提一下，可伸缩视频编码通常是一种分级编码用于传输粗糙图像信号的层和用于传输精细图像信号的层的技术。根据分级属性，可伸缩视频编码通常分为三种类型的方案，即，空间可伸缩性方案、时间可伸缩性方案和信噪比(SNR)可伸缩性方案。在空间可伸缩性方案中，分级空间分辨率(或图像大小)，并且下层的图像被上采样，然后用于编码或解码上层的图像。在时间可伸缩性方案中，分级帧速率。在SNR可伸缩性方案中，通过改变量化的粗糙度来分级信噪比。尽管在标准中尚未被采用，但是位深可伸缩性方案和色度格式可伸缩性方案也进行讨论。在可伸缩视频编码中，使用作为参考图像的下层的图像来预测上层的图像被称为“层间预测”。非专利文献2提出了用于层间预测的几种技术。在增强层中的层间预测中，预测精度取决于充当参考图像的下层的图像的图像质量。在这方面，非专利文献3提出了两种技术作为代表良好的增益以提高下层的图像的图像质量的技术。第一技术在非专利文献4中具体描述，并且使用串色滤波器。在第一技术中，串色滤波器是一种清晰度增强滤波器，并且基于邻近亮度分量增强色度分量的清晰度。第二技术在非专利文献5中具体描述，并且使用边缘增强滤波器。引文列表非专利文献非专利文献1：BenjaminBross、Woo-JinHan、GaryJ.Sullivan、Jens-RainerOhm、GaryJ.Sullivan、Ye-KuiWang、ThomasWiegand，“HighEfficiencyVideoCoding(HEVC)textspecificationdraft10(forFDIS&Consent)”(JCTVC-L1003_v4，2013年1月14日至23日)非专利文献2：JianleChen等人，“DescriptionofscalablevideocodingtechnologyproposalbyQualcomm(configuration2)”(JCTVC-K0036，2012年10月10日至19日)非专利文献3：JianleChen等人，“DescriptionofHEVCScalableExtensionCoreExperimentSCE3:Inter-layerfiltering”(JCTVC-N1103，2013年7月25日至8月2日)非专利文献4：XiangLi等人，“Non-SCE3:RegionbasedInter-layerCross-ColorFiltering”(JCTVC-N0229_r2，2013年7月25日至8月2日)非专利文献5：SychevMaximi等人，“Inter-layerpredictionmodesbasedonbaselayersharpnessfilter”(JCTVC-N0070，2013年7月25日至8月2日)
技术实现思路
技术问题然而，如果将清晰度增强滤波器应用于图像内的所有像素，则滤波操作量变得巨大。特别是，即使当将清晰度增强滤波器应用于既不包括边缘，也不包括纹理的平坦区域时，图像质量没有特别地提高，并且操作量增加的缺点很大。在另一方面，如果为每个个别块调整清晰度增强滤波器的配置，则图像质量预期将得到提高。然而，当将每个块的滤波器配置信息从编码器传输到解码器时，滤波器配置信息的大的代码量降低了编码效率。本公开的技术的目的在于提供一种能够解决或缓解至少一个上述问题的改进机制。问题的解决方案根据本公开，提供一种图像处理装置，包括：获取部，其被配置成获取参考图像，所述参考图像用于编码或解码第二层的图像，所述第二层具有与第一层不同的属性，参考图像是基于第一层的解码图像，其中设置具有不同的块大小的多个块；滤波部，其被配置成将清晰度增强滤波器应用于由获取部获取的参考图像并且生成清晰度增强参考图像；以及控制部，其被配置成根据每个块的块大小控制控制清晰度增强滤波器通过滤波部对所述多个块的每一个的应用。图像处理装置可以实施为解码图像的图像解码设备，或可以实施为编码图像的图像编码设备。根据本公开，提供一种图像处理方法，包括：获取参考图像，所述参考图像用于编码或解码第二层的图像，所述第二层具有与第一层不同的属性，参考图像是基于第一层的解码图像，其中设置具有不同的块大小的多个块；将清晰度增强滤波器应用于获取的参考图像并且生成清晰度增强参考图像；以及根据每个块的块大小控制清晰度增强滤波器对多个块的每一个的应用。本专利技术的有益效果根据本公开的技术，有可能在增强层间参考的图像的清晰度时有效地提高图像质量。上述效果不一定受限，并且除了上述效果或代替上述效果，可以获得在本说明书中所描述的效果或可以从本说明书中理解的其他效果。附图说明图1是用于描述空间可伸缩性方案的说明图。图2是用于描述SNR可伸缩性方案的说明图。图3是用于描述使用串色滤波器的清晰度增强技术的说明图。图4是用于描述使用边缘增强滤波器的清晰度增强技术的说明图。图5是示出图像编码设备的示意性配置的方框图。图6是示出图像解码设备的示本文档来自技高网...

【技术保护点】
一种图像处理装置，包含：获取部，其被配置成获取参考图像，所述参考图像用于编码或解码第二层的图像，所述第二层具有与第一层不同的属性，所述参考图像是基于所述第一层的解码图像，其中设置具有不同的块大小的多个块；滤波部，其被配置成将清晰度增强滤波器应用于由所述获取部获取的所述参考图像并且生成清晰度增强参考图像；以及控制部，其被配置成根据所述块的每一个的块大小控制所述清晰度增强滤波器通过所述滤波部对所述多个块的每一个的应用。

【技术特征摘要】
【国外来华专利技术】2013.10.11 JP 2013-2137261.一种图像处理装置，包含：
获取部，其被配置成获取参考图像，所述参考图像用于编码或解码第二
层的图像，所述第二层具有与第一层不同的属性，所述参考图像是基于所述
第一层的解码图像，其中设置具有不同的块大小的多个块；
滤波部，其被配置成将清晰度增强滤波器应用于由所述获取部获取的所
述参考图像并且生成清晰度增强参考图像；以及
控制部，其被配置成根据所述块的每一个的块大小控制所述清晰度增强
滤波器通过所述滤波部对所述多个块的每一个的应用。
2.根据权利要求1所述的图像处理装置，
其中所述块被设置为所述第一层的编码处理的处理单元。
3.根据权利要求1所述的图像处理装置，
其中所述块被设置为所述第一层的预测过程的处理单元。
4.根据权利要求1所述的图像处理装置，
其中所述块被设置为所述第一层的正交变换处理的处理单元。
5.根据权利要求1所述的图像处理装置，
其中所述控制部使所述清晰度增强滤波器对具有大于阈值的块大小的块
的所述应用无效。
6.根据权利要求5所述的图像处理装置，
其中所述控制部根据所述第一层与所述第二层之间的空间分辨率比决定
所述阈值。
7.根据权利要求5所述的图像处理装置，进一步包含
解码部，其被配置成从编码流解码指示所述阈值的阈值信息。
8.根据权利要求5所述的图像处理装置，进一步包含
编码部，其被配置成将指示所述阈值的阈值信息编码到编码流。
9.根据权利要求1所述的图像处理装置，
其中所述控制部根据所述块的块大小决定应用于所述块的每一个的所述
清晰度增强滤波器的滤波器配置。
10.根据权利要求9所述的图像处理装置，进一步包含
解码部，其被配置成从编码流解码滤波器配置信息，所述滤波器配置信
息指示对于每个块...

【专利技术属性】
技术研发人员：佐藤数史，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP