图像处理装置以及图像处理方法制造方法及图纸

提供一种图像处理装置以及图像处理方法。一种图像处理装置，进行从作为包括人物的面部的图像的面部图像去除目标的校正，包括：图像取得部件，取得面部图像；代表像素值决定部件，基于在所述面部图像中包含的像素，决定作为代表皮肤区域的像素值的代表像素值；区域生成部件，生成作为包括所述目标的区域的第一区域；校正像素决定部件，基于与所述代表像素值的相似度，从位于所述第一区域的附近的多个像素中，决定作为用于校正的一个以上的像素的校正像素；部分图像生成部件，使用所述校正像素，生成部分图像，所述部分图像是用于置换与所述目标对应的像素的像素的集合；以及校正部件，通过将所述部分图像合成到所述面部图像，从而进行校正。

【技术实现步骤摘要】

本专利技术涉及删除在图像中包含的不需要的目标的图像处理技术。
技术介绍
近年来，对使用数码相机等而拍摄的包括人的面部的图像(面部图像)进行自动校正的技术开始普及。这样的技术之一，有删除在图像中包含的不需要的目标的技术。例如，通过去除在面部中的黑痣或皱纹，从而使皮肤看起来漂亮。此外，通过检测眉毛而去除，能够重新描画眉毛。作为删除在图像中包含的不需要的目标的技术，例如有在专利文献1中记载的图像处理装置。在该图像处理装置中，通过从图像内搜索与存在不需要的目标的区域相似的区域，并按每个区域进行置换，从而去除不需要的目标。现有技术文献专利文献专利文献1:(日本)特开2011－170838号公报想要使用在专利文献1中记载的装置来去除在人的面部中包含的不需要的目标(黑痣、皱纹、眉毛等)的情况下，存在在处理后的图像中残留不自然性的情况。这是因为如下原因：由于照明的照射法等原因，产生的阴影因每个部位而异。例如，即使区域之间的像素的运算值(例如，亮度值的差的合计)相似，若选择了阴影的附着法不同的区域，则也会成为不自然的校正结果。为了解决这个问题，需要只去除对象的目标而不对位于去除对象的目标的周边的像素值大幅改变的技术。
技术实现思路
本专利技术是考虑上述的课题而完成的，其目的在于，提供一种不会不协调地去除在图像中包含的不需要的目标的技术。为了解决前述的课题，本专利技术的图像处理装置是，一种图像处理装置，进行从面部图像中去除目标的校正，所述面部图像是包括人物的面部的图像，其特征在于，包括：图像取得部件，取得面部图像；代表像素值决定部件，基于在所述面部图像中包含的像素，决定代表像素值，所述代表像素值是代表皮肤区域的像素值；区域生成部件，生成第一区域，所述第一区域是包括所述目标的区域；校正像素决定部件，基于与所述代表像素值的相似度，从位于所述第一区域的附近的多个像素中，决定校正像素，所述校正像素是用于校正的一个以上的像素；部分图像生成部件，使用所述校正像素，生成部分图像，所述部分图像是用于置换与所述目标对应的像素的像素的集合；以及校正部件，通过将所述部分图像合成到所述面部图像，从而进行校正。本专利技术的图像处理装置是进行去除在面部图像中包含的对象目标的图像校正的装置。对象的目标只要是在皮肤的表面的目标，则可以是眉毛、黑痣、皱纹、斑点、痣、伤等的任意的目标。代表像素值决定部件是决定代表在图像中包含的面部的表面区域(皮肤区域)的像素值的部件。代表像素值例如能够基于对与皮肤对应的多个像素进行了采样的结果而求出。此外，区域生成部件是生成包括去除对象的目标的区域(第一区域)的部件。例如，在有与去除对象的目标对应的特征点相关的信息的情况下，第一区域可以基于该信息而生成，也可以由装置的用户直接指定。校正像素决定部件是决定在进行校正第一区域、即去除目标的图像处理时使用的像素(校正像素)的部件。从位于第一区域的附近的像素中，基于与代表像素值的相似度而选择校正像素。例如，相似度可以基于与代表像素值的亮度分量的差而决定，也可以基于色调的差而决定。此外，部分图像生成部件是生成基于所决定的校正像素而去除了目标的部分图像的部件。部分图像生成部件例如基于校正像素，生成将第一区域进行了插补的图像作为部分图像。这样生成的部分图像由于应用存在于第一区域的周围的像素的亮度或色调等的信息，且成为基于更接近代表像素值的像素而生成的图像，所以在校正的前后像素值不会大幅变动。即，能够进行自然的校正。此外，其特征也可以在于，所述校正像素由隔着(挟んでいる)所述第
一区域而相对的第一校正像素和第二校正像素的多个对构成，所述部分图像生成部件通过按每个对生成像素串，从而生成所述第一区域被插补了的部分图像，该像素串将所述第一校正像素和所述第二校正像素进行连接，在所述像素串中包含的像素的颜色从所述第一校正像素具有的颜色逐渐地变化为所述第二校正像素具有的颜色。校正像素优选为隔着第一区域而相对的像素的对。通过这样，能够将存在于中间的像素(位于第一区域内的像素)的颜色进行插补。此外，通过使像素的颜色逐渐地变化，能够进行无不协调的插补。此外，其特征也可以在于，所述第一区域是椭圆形状的区域，所述第一校正像素以及第二校正像素是沿着所述椭圆形状的短轴方向、隔着所述第一区域而相对的像素。在第一区域为椭圆形状的情况下，优选沿短轴方向进行插补。通过这样，应插补的信息量减少，能够获得更加自然的校正结果。此外，其特征也可以在于，所述区域生成部件进一步生成包含在所述第一区域中且包括所述目标的第二区域，该第二区域中包含的皮肤区域比所述第一区域小，所述校正部件通过对所述第二区域的内部合成所述部分图像，从而校正所述面部图像。用于获得校正像素的区域优选为包括皮肤区域的区域。另一方面，进行校正的对象的区域优选为只包括目标的小的区域。因此，也可以在生成在第一区域中包含的第二区域之后，对第二区域进行校正。此外，其特征也可以在于，所述部分图像生成部件对所生成的部分图像进一步应用平滑化滤波器。在生成了单纯地将第一校正像素和第二校正像素进行连结的像素串的情况下，存在沿生成了像素的方向产生边缘的情况。因此，通过进一步应用对部分图像进行平滑化的滤波器，能够减少边缘。另外，本专利技术能够特定为包括上述部件的至少一部分的图像处理装置。此外，本专利技术也能够特定为上述图像处理装置进行的图像处理方法。此外，本专利技术也能够特定为使计算机执行上述图像处理方法的程序。上述处理或部件只要不产生技术性的矛盾，则能够自由组合而实施。根据本专利技术，能够无不协调地去除在图像中包含的不需要的目标。附图说明图1是实施方式的图像处理装置的系统结构图。图2是图像处理装置进行的处理的流程图。图3是详细说明取得代表像素值的处理的流程图。图4是提取去除对象的目标的处理的流程图。图5(A)～图5(B)是面部图像以及眉图像的例。图6是说明生成校正区域的处理的流程图。图7是说明与眉毛对应的特征点的配置的图。图8是表示基于特征点的位置而决定的第一眉毛区域的图。图9是表示第一眉毛区域和第二眉毛区域的关系的图。图10是说明生成部分图像的处理的图。标号说明10 图像处理装置11 图像取得部12 代表像素值取得部13 目标提取部14 校正区域生成部15 部分图像生成部16 图像校正部具体实施方式以下，参照附图说明本专利技术的优选的实施方式。本实施方式的图像处理装置是取得包括面部的图像，并对该图像进行去除眉毛的校正的装置。图1是本实施方式的图像处理装置10的系统结构图。(第一实施方式)第一实施方式的图像处理装置10由图像取得部11、代表像素值取得部12、目标提取部13、校正区域生成部14、部分图像生成部15、图像校正部16构成。图像取得部11是取得处理对象的图像(包括人的面部的图像。以下，称为面部图像)的部件，典型而言，是固定盘驱动器或闪存这样的存储装置。另外，图像取得部11既可以是从装置的外部取得图像的部件(例如，接口装
置或无线通信装置)，也可以是经由镜头和摄像元件而拍摄图像的部件。此外，处理对象的图像也可以是与构成运动图像的各帧对应的图像。另外，在本实施方式中，设面部图像的色空间为YCbCr，但也可以是RGB或Lab等。代表像素值取得部12是取得代表在面部图像中包含的本文档来自技高网...

【技术保护点】
一种图像处理装置，进行从面部图像中去除目标的校正，所述面部图像是包括人物的面部的图像，其特征在于，包括：图像取得部件，取得面部图像；代表像素值决定部件，基于在所述面部图像中包含的像素，决定代表像素值，所述代表像素值是代表皮肤区域的像素值；区域生成部件，生成第一区域，所述第一区域是包括所述目标的区域；校正像素决定部件，基于与所述代表像素值的相似度，从位于所述第一区域的附近的多个像素中，决定校正像素，所述校正像素是用于校正的一个以上的像素；部分图像生成部件，使用所述校正像素，生成部分图像，所述部分图像是用于置换与所述目标对应的像素的像素的集合；以及校正部件，通过将所述部分图像合成到所述面部图像，从而进行校正。

【技术特征摘要】
2015.03.12 JP 2015-0497331.一种图像处理装置，进行从面部图像中去除目标的校正，所述面部图像是包括人物的面部的图像，其特征在于，包括：图像取得部件，取得面部图像；代表像素值决定部件，基于在所述面部图像中包含的像素，决定代表像素值，所述代表像素值是代表皮肤区域的像素值；区域生成部件，生成第一区域，所述第一区域是包括所述目标的区域；校正像素决定部件，基于与所述代表像素值的相似度，从位于所述第一区域的附近的多个像素中，决定校正像素，所述校正像素是用于校正的一个以上的像素；部分图像生成部件，使用所述校正像素，生成部分图像，所述部分图像是用于置换与所述目标对应的像素的像素的集合；以及校正部件，通过将所述部分图像合成到所述面部图像，从而进行校正。2.如权利要求1所述的图像处理装置，其特征在于，所述校正像素由隔着所述第一区域而相对的第一校正像素和第二校正像素的多个对构成，所述部分图像生成部件通过按每个对生成像素串，从而生成所述第一区域被插补了的部分图像，该像素串将所述第一校正像素和所述第二校正像素进行连接，在所述像素串中包含的像素的颜色从所述第一校正像素具有的颜色逐渐地变化为所述第二校正像素具有的颜色。3.如权利要求2所述的图像处理装置，其特征在于，所述第一区域...

【专利技术属性】
技术研发人员：太田昂志，
申请(专利权)人：欧姆龙株式会社，
类型：发明
国别省市：日本;JP