图像编码装置及其集成电路、以及图像编码方法制造方法及图纸

在将图像编码时，能够根据被摄体的距离对图像施加模糊，并且适当地决定作为编码的单位的块大小。使用输入的图像的每个像素单位的视差信息或每个像素单位的距离信息、以及任意的模糊条件，对该图像附加模糊，并且根据每个单位区域的模糊量决定编码对象区域的块大小，按照所决定的块大小将图像分割为编码对象区域并进行编码。通过使模糊量较大的图像区域的块大小较大，能够减少参照块的搜索处理量，实现处理的高速化及处理量的削减。

【技术实现步骤摘要】
【国外来华专利技术】图像编码装置及其集成电路、以及图像编码方法
本专利技术涉及对图像附加模糊而进行编码的图像编码技术。
技术介绍
作为用于表现出使主要被摄体显眼的立体感的加工，进行将焦点仅对准于图像的一部分的被摄体、有意使其以外的前景、背景模糊的处理。此外，在用于立体视的立体影像信号中，当观看者的注意向着远景时，会发生观看者感觉较强的疲劳、或者立体视破坏的问题（例如，参照非专利文献1）。为了防止该问题，进行使立体影像信号的远景模糊、以免观看者的注意向着远景的处理。另一方面，在图像编码中，为了去除集合性的冗余度而提高压缩编码效率，将许多像素集中进行块分割。因而，在利用该块间的相关来提高压缩率的预测编码中，如果对复杂的图像以较小的块单位进行帧间预测和帧内预测、对平坦的图像以较大的块单位进行帧间预测和帧内预测，则复杂的图像及平坦的图像都能够高效率地预测。作为根据编码对象区域的特征来变更块大小的编码装置的以往例，公开了专利文献1。一般而言，在超声波诊断装置中，越接近于焦点位置则图像的析像度越高，越远离焦点位置则析像度越低。因此，使用距离信息和焦点位置信息来决定块大小，由此同时实现了析像度较高的区域的高画质化和析像度较低的区域的高压缩化。此外，作为另一以往例，公开了专利文献2。在专利文献2的技术中，着眼于平坦度较高的静止区域容易闪烁的情况而增大预测块大小，从而生成抑制了闪烁的压缩图像。现有技术文献专利文献专利文献1：特开2007－289556号公报专利文献2：特开2007－67469号公报非专利文献非专利文献1：本田捷夫修“立体影像技术―空间表现媒体的最新动向―”CMC出版，2008年7月31日（P61－P62）专利技术概要专利技术要解决的问题在专利文献1的技术中，根据距离信息和焦点位置信息决定编码的块大小。但是，对于各种模糊处理而言，仅根据焦点位置信息和距离信息决定的块大小并不一定是适合于模糊处理后的图像的块大小。另一方面，在专利文献2的技术中，根据图像区域的平坦程度决定块大小。但是，仅通过是否平坦的判断决定的块大小并不一定是适合于模糊处理后的图像的块大小。
技术实现思路
本专利技术是鉴于上述问题而做出的，目的是提供一种在根据视差信息或距离信息施加各种模糊处理后选择适当的块大小来进行编码的图像编码装置及图像编码方法。用于解决问题的手段为了解决上述以往的问题，本专利技术的图像编码装置的特征在于，包括：图像取得部，取得图像；视差取得部，取得上述图像的每个像素单位的视差或每个照像素单位的距离信息中的至少一方；模糊量决定部，根据每个上述像素单位的视差或每个上述像素单位的距离信息，决定上述图像的每个像素单位的模糊量；模糊处理部，按照上述模糊量，对上述图像实施模糊处理；块大小决定部，根据上述模糊量，从多个块大小之中决定用来从实施上述模糊处理后的各图像切出编码对象区域的块大小；以及编码部，按照上述决定的块大小，将实施上述模糊处理后的图像以块单位进行编码。专利技术效果根据该结构，在将图像编码时使用模糊量决定块大小，从而能够对模糊处理使用与模糊量相应的适当的块大小。附图说明图1是本专利技术的实施方式1的图像编码装置的模块图。图2是表示本专利技术的实施方式1的摄影光学系统和模糊量的图。图3是表示本专利技术的实施方式1的模糊矩阵的例子的图。图4是表示本专利技术的实施方式1的图像编码装置的动作的流程图。图5是表示本专利技术的实施方式1的图像编码装置的编码对象信号的生成的动作的流程图。图6是本专利技术的实施方式1的图像编码装置的帧内预测中的块大小决定的动作的流程图。图7是表示本专利技术的实施方式1的图像编码装置的运动补偿预测中的块大小决定的动作的流程图。图8是本专利技术的实施方式1的图像编码装置的视差补偿预测中的块大小决定的动作的流程图。图9是本专利技术的实施方式1的变形例1的图像编码装置的模块图。图10是本专利技术的实施方式2的图像编码装置的模块图。图11是表示本专利技术的实施方式2的图像编码装置的动作的流程图。图12是表示本专利技术的实施方式2的图像编码装置的块大小决定的动作的流程图。图13是本专利技术的实施方式3的图像编码装置的模块图。图14是表示本专利技术的实施方式3的图像编码装置的动作的流程图。图15是本专利技术的实施方式4的图像编码装置的模块图。图16是表示本专利技术的实施方式4的被摄体与焦点、摄像元件的位置关系的图。图17是本专利技术的实施方式5的图像编码系统的模块图。图18是作为本专利技术的实施方式1的集成电路的图像编码装置的模块图。图19是具备以往的编码单元的超声波诊断装置的模块图。图20是表示示出以往的编码控制方法的流程图。具体实施方式<完成专利技术的过程>作为图像处理之一，基于被摄体的距离的模糊的处理是重要的技术。例如，作为用于使主要被摄体显眼而表现出立体感的加工，进行仅将焦点对准于图像的一部分的被摄体、有意使其以外的前景及背景模糊的处理。在这样的模糊处理中，有将使用被摄体深度较浅的光学系统摄影的情况下发生的“散景（bokeh）”再现而使前景及背景模糊的情况。此外，其以外还有各种处理，例如：在针对背景的模糊和针对前景的模糊之间使模糊强度变化、或将焦点对准于距离不同的多个人物并使处于最近侧的人物的前景和处于最里侧的人物的背景模糊、或者将焦点对准于人物和其后方的建筑物双方来使人物和建筑物双方显眼、而使其以外的被摄体模糊等。此外，在用于立体视的立体影像信号中，如非专利文献1所记载，当观看者的注意向着远景时，如果引起视差信息所表示的距离与焦点距离的不一致，则有观看者感觉较强的疲劳、或立体视破坏等的问题。特别是，在将以放映到较小的屏幕上的前提制作的立体影像信号放大放映到较大的屏幕上的情况下，立体影像信号所设想的右眼与左眼的间隔也会被放大。因此，对于一个被摄体，在右眼用图像内的被摄体像与左眼用图像内的被摄体像的距离变得比右眼与左眼的间隔大的情况下（后方发散），成为该被摄体的视差不可能成为看到单一的物体的情况下的视差的状态，所以立体视破坏。为了防止该问题，进行使立体影像信号的远景模糊以使观看者的注意不向着远景的处理。另一方面，在将图像编码时，为了将集合性的冗余度去除而提高压缩编码效率，将许多像素集中进行块分割。因而，在利用该块间的相关来提高压缩率的预测编码中，如果对复杂的图像以较小的块单位进行帧间预测和帧内预测、对平坦的图像以较大的块单位进行帧间预测和帧内预测，则复杂的图像及平坦的图像都能够高效率地预测。这里，专利技术者们着眼于施加了较强的模糊的区域是适合较大的块大小的、没有复杂的图案而平坦的区域。并且，得到以下构思：如果不用解析模糊处理后的图像就能够取得作为较强的模糊的对象的区域，则在将模糊处理后的图像编码时的块大小选择中不需要进行该区域的块大小选择，能够削减用于编码的运算量。这是因为，如果这样，则不需要进行根据模糊处理后的图像再次重新检测作为较强的模糊的对象的区域这样的块大小选择处理。相对于此，在以往的块大小选择技术中，将编码对象图像本身作为解析对象。因而，在对模糊处理前的图像采用以往的块大小选择技术的情况下，存在所选择的块大小并不一定适合于模糊处理后的图像的编码的问题。专利文献1是使用距离信息和焦点信息选择块大小的超声波诊断装置，图19是专利文献1的超声波诊断装置的模块图。该超声波诊断装置将作为深度信息的反射信号作为输入本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】2011.07.19 JP 2011-1580601.一种图像编码装置，其特征在于，包括：图像取得部，取得由照相机拍摄的图像；视差取得部，取得上述图像的每个像素单位的视差或每个像素单位的、上述照相机与被摄体的距离信息的至少一方；模糊量决定部，根据上述每个像素单位的视差或上述每个像素单位的距离信息，决定上述图像的每个像素单位的模糊量；模糊处理部，按照上述模糊量，对上述图像实施模糊处理；块大小决定部，根据上述模糊量，从多个块大小中决定用于从实施上述模糊处理后的各图像切出编码对象区域的块大小；以及编码部，按照上述决定的块大小，将实施上述模糊处理后的图像以块单位进行编码。2.如权利要求1所述的图像编码装置，其特征在于，上述模糊量由上述图像的每个像素单位的视差或每个像素单位的距离信息、以及上述图像的模糊参数决定。3.如权利要求2所述的图像编码装置，其特征在于，上述模糊参数包括与拍摄上述图像的光学系统的特性值不同的光学特性值。4.如权利要求3所述的图像编码装置，其特征在于，上述模糊参数包括一个以上的被摄体的焦点位置信息。5.如权利要求1所述的图像编码装置，其特征在于，上述块大小决定部针对上述模糊量比阈值大的像素单位，决定为多个块大小之中的不是最小的块大小的块大小。6.如权利要求1所述的图像编码装置，其特征在于，上述块大小决定部针对上述模糊量比阈值小的像素单位，决定为包括多个块大小之中的最小的块大小在内的一个以上的块大小。7.如权利要求5或6所述的图像编码装置，其特征在于，上述编码部在进行运动补偿预测、视差补偿预测或帧内预测的情况下，使用由上述块大小决定部决定的各块大小进行类似块的搜索，选择一个能够得到与按上述块单位分割的图像最类似的块的块大小，生成对应于所选择的块大小的残差信号。8.如权利要求1所述的图像编码装置，其特征在于，上述图像取得部取得用于立体图像显示的左眼用图像和右眼用图像；上述视差取得部包括视差检测部，该视差检测部检测上述左眼用图像的区域与上述右眼用图像的对应的区域间的视差。9.如权利要求1所述的图像编码装置，其特征在于，上述图像取得部包括立体图像生...

【专利技术属性】
技术研发人员：清水健二，
申请(专利权)人：松下电器产业株式会社，
类型：
国别省市：