图像处理设备及图像处理方法技术

本公开提供一种图像处理设备和图像处理方法。该图像处理设备包括解码单元、去块效应滤波器和样本自适应偏移处理单元。解码单元被配置成针对编码流执行解码过程以生成图像。去块效应滤波器被配置成将由解码单元生成的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且在相应块被输入时读取被存储在存储器中的块，以执行滤波过程。样本自适应偏移处理单元被配置成使用已被去块效应滤波器进行了滤波过程的块的像素来执行样本自适应偏移过程。

【技术实现步骤摘要】
图像处理设备及图像处理方法相关申请的交叉引用本申请要求2013年4月12日提交的日本优先权专利申请JP2013-083453的优先权，其全部内容通过引用合并到本文中。
本公开内容涉及图像处理设备以及图像处理方法，更具体地涉及能够减少对编码或解码处理所需的外部存储器的访问数量的图像处理设备以及图像处理方法。
技术介绍
目前，如下设备变得普及：其将图像信息处理为数字信息，同时为了高效传输和累积信息的目的，采用用于通过正交变换如离散余弦变换等进行压缩以及使用对于图像信息独特的冗余进行运动补偿的编码系统对图像执行压缩编码。编码系统的示例包括MPEG(运动图像专家组)、H.264、MPEG-4部分10(先进的视频编码，在下文中，称为H.264/AVC)等。当前，为了与H.264/AVC相比进一步提高编码效率，作为ITU-T和ISO/IEC的联合标准化组织的JCTVC(联合合作组-视频编码)正在推行称作HEVC(高效视频编码)的编码系统的标准化。在这一点上，在HEVC的草案中，采用去块效应滤波器和采样自适应偏移(SAO)滤波器作为环路滤波器。去块效应滤波器是用于去除由图像压缩导致的块噪声的图像质量提高工具。去块效应滤波器不仅用于HEVC中而且用于H.264/AVC中，但在滤波处理的顺序方面不同。在H.264/AVC中，基于宏块对相应竖直边缘和相应水平边缘按此顺序执行滤波处理。另一方面，在HEVC中，基于图片对相应整个竖直边缘执行滤波，然后对相应整个水平边缘执行滤波。为此，该处理不与基于编码单元(在下文中，称作CU)和基于编码树单元(在下文中，称为CTU)的处理兼容。在HEVC的参考软件HM中，调用一个函数，使得去块效应滤波处理之前的一个图片的局部解码完成，然后相对于整个图片对竖直边缘执行滤波，然后调用一个函数，使得对整个图片的水平边缘执行滤波。应当指出的是，在环路滤波器中，按照去块效应滤波器和样本自适应偏移滤波器的顺序执行处理。然而，在基于LCU(其为最大编码单元)对LCU的水平边缘(在下文中，也简称为LCU边缘)执行处理的情况下，必须为每个边缘提供线存储器。总共需要大量的线存储器。鉴于上述内容，为了减少大量线存储器，已经给出了各种提议。例如，“LineMemoryReductionforALFDecoding(ALF解码的线存储器减少)”(SemihEsenlik、MatthiasNarroschke、ThomasWedi，JCTVC-E225，2011年3月)(在下文中，称为非专利文献1)提出，将重建像素(即，去块效应之前的像素)用于针对为去块效应保持的线的样本自适应偏移滤波处理(抽头参考像素(tapreferencepixel))。
技术实现思路
非专利文献1中提出的方法是专门进行基于LCU的处理的处理。相反，在以与HM实现相同的架构执行硬件实现的情况下，图像处理设备由以下方面构成：外部存储器、用于将外部存储器与内部总线连接的外部控制器和总线、连接至总线和外部控制器的去块效应滤波处理之前的图像处理流水线、用于竖直边缘的去块效应滤波处理单元、用于水平边缘的去块效应滤波处理单元、以及样本自适应偏移滤波处理单元。然而，使用这样的结构，对于每个滤波处理频繁出现对于外部存储器的读访问和写访问。鉴于上述情形，期望减少编码或解码处理所需的对外部存储器的访问数量。根据本公开内容的第一实施方式，提供了一种包括解码单元、去块效应滤波器和样本自适应偏移处理单元的图像处理设备。解码单元被配置成执行编码流的解码处理以生成图像。去块效应滤波器被配置成将由解码单元生成的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且在该相应块被输入时读取被存储在存储器中的该块，以执行滤波过程。样本自适应偏移处理单元被配置成使用已被去块效应滤波器进行了滤波过程的块的像素来执行样本自适应偏移过程。去块效应滤波器可以将由解码单元生成的图像的块中被布置在当前竖直边缘的左侧的块存储在存储器中，并且在布置在竖直边缘的右侧的块被输入时读取被存储在存储器中的块，以执行滤波过程。去块效应滤波器可以将由解码单元生成的图像的块中被布置在当前水平边缘的上侧的块存储在存储器中，并且在布置在水平边缘的下侧的块被输入时读取被存储在存储器中的块，以执行滤波过程。去块效应滤波器可以将由解码单元生成的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且将该块的至少最上侧线上的像素输出至样本自适应偏移处理单元。根据本公开内容的第一实施方式的图像处理方法包括：由图像处理设备针对编码流执行解码过程以生成图像；由图像处理设备将所生成的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且在相应块被输入时读取被存储在存储器中的该块，以执行滤波过程；以及由图像处理设备使用已经经历了滤波过程的该块的像素来执行样本自适应偏移过程。根据本公开内容的第二实施方式，提供了一种包括去块效应滤波器、样本自适应偏移处理单元和编码单元的图像处理设备。去块效应滤波器被配置成将在图像编码时执行了局部解码过程的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且在相应块被输入时读取被存储在存储器中的该块，以执行滤波过程。样本自适应偏移处理单元被配置成使用已经被去块效应滤波器进行了滤波过程的块的像素来执行样本自适应偏移过程。编码单元被配置成使用已经被样本自适应偏移处理单元进行了样本自适应偏移过程的像素来对图像进行编码。去块效应滤波器可以将在图像编码时执行了局部解码过程的图像的块中的布置在当前竖直边缘的左侧的块存储在存储器中，并且在布置在竖直边缘的右侧的块被输入时读取被存储在存储器中的块，以执行滤波过程。去块效应滤波器可以将在图像编码时执行了局部解码过程的图像的块中的布置在当前水平边缘的上侧的块存储在存储器中，并且在布置在水平边缘的下侧的块被输入时读取被存储在存储器中的块，以执行滤波过程。去块效应滤波器可以将在图像编码时执行了局部解码过程的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且将该块的至少最上侧线上的像素输出至样本自适应偏移处理单元。根据本公开内容的第二实施方式的图像处理方法包括：由图像处理设备将在图像编码时执行了局部解码过程的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且在相应块被输入时读取被存储在存储器中的块，以执行滤波过程；由图像处理设备使用已经经历了滤波过程的块的像素来执行样本自适应偏移过程；以及由图像处理设备使用已经经历了样本自适应偏移过程的像素来对图像进行编码。在本公开内容的第一实施方式中，通过执行编码流的解码处理生成图像，将所生成的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且在相应块被输入时读取被存储在存储器中的块，以执行滤波过程。然后，使用已经经历了滤波过程的块的像素，由此执行样本自适应偏移过程。在本公开内容的第二实施方式中，将在图像编码时执行了局部解码过程的图像的块中这样的块存储在存储器中：该块的在当前边缘上的相应块没有被输入，并且在相应块被输入时读取被存储在存储器中的块，以执行滤波过程。然后，使用已经经本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：解码单元，被配置成针对编码流执行解码过程以生成图像；去块效应滤波器，被配置成将由所述解码单元生成的所述图像的块中这样的块存储在存储器中：所述块的在当前边缘上的相应块没有被输入，并且在所述相应块被输入时读取被存储在所述存储器中的所述块，以执行滤波过程；以及样本自适应偏移处理单元，被配置成使用已被所述去块效应滤波器进行了所述滤波过程的所述块的像素来执行样本自适应偏移过程。

【技术特征摘要】
2013.04.12 JP 2013-0834531.一种图像处理设备，包括：解码单元，被配置成针对编码流执行解码过程以生成图像；去块效应滤波器，其具有竖直边缘去块效应滤波器和水平边缘去块效应滤波器，并且被配置成将由所述解码单元生成的所述图像的块中这样的块存储在包括与所述竖直边缘去块效应滤波器相关联的竖直线存储器、与所述水平边缘去块效应滤波器相关联的水平线存储器、以及被配置在所述竖直线存储器与所述水平线存储器之间并且与所述竖直边缘去块效应滤波器和所述水平边缘去块效应滤波器两者相关联的竖直和水平中间存储器的多个存储器中的每个存储器中：所述块的在当前边缘上的相应块没有被输入，并且在所述相应块被输入到所述竖直边缘去块效应滤波器和所述水平边缘去块效应滤波器中的一个或更多个时读取被存储在包括所述竖直线存储器、所述水平线存储器以及所述竖直和水平中间存储器的所述多个存储器中的每个存储器中的所述块，以执行滤波过程；以及样本自适应偏移处理单元，被配置成使用已被所述去块效应滤波器进行了所述滤波过程的所述块的像素来执行样本自适应偏移过程。2.根据权利要求1所述的图像处理设备，其中，所述去块效应滤波器将由所述解码单元生成的所述图像的块中被布置在当前竖直边缘的左侧的块存储在所述竖直和水平中间存储器中，并且在布置在所述竖直边缘的右侧的块被输入时读取被存储在所述竖直和水平中间存储器中的所述块，以执行所述滤波过程。3.根据权利要求1所述的图像处理设备，其中，所述去块效应滤波器将由所述解码单元生成的所述图像的块中被布置在当前水平边缘的上侧的块存储在所述竖直和水平中间存储器中，并且在布置在所述水平边缘的下侧的块被输入时读取被存储在所述竖直和水平中间存储器中的所述块，以执行所述滤波过程。4.根据权利要求1所述的图像处理设备，其中，所述去块效应滤波器将由所述解码单元生成的所述图像的块中这样的块存储在所述竖直和水平中间存储器中：所述块的在所述当前边缘上的所述相应块没有被输入，并且将所述块的至少最上侧线上的像素输出至所述样本自适应偏移处理单元。5.一种图像处理方法，包括：由图像处理设备针对编码流执行解码过程以生成图像；由所述图像处理设备将所生成的所述图像的块中这样的块存储在包括与竖直边缘去块效应滤波器相关联的竖直线存储器、与水平边缘去块效应滤波器相关联的水平线存储器、以及被配置在所述竖直线存储器与所述水平线存储器之间并且与所述竖直边缘去块效应滤波器和所述水平边缘去块效应滤波器两者相关联的竖直和水平中间存储器的多个存储器中的每个存储器中：所述块的在当前边缘上的相应块没有被输入，并且在所述相应块被输入到所述竖直边缘去块效应滤波器和所述水平边缘去块效应滤波器中的一个或更多个时读取被存储在包括所述竖直线存储器、所述水平线存储器以及所述竖直和水平中间存储器的所述多个存储器中的每个存储器中的所述块，以执行滤波过程；以及由所述图像处理设备使用已经经历了所述滤波过程的所述块的像素来执行样本自适应偏移过程。6.一种图像处理设备，包括：去块效应滤...

【专利技术属性】
技术研发人员：菱沼信介，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP