眼睛检测方法、眼睛检测装置以及眼睛检测程序制造方法及图纸

眼睛检测装置，获取通过摄像装置摄像的包含人的脸部的彩色图像；针对彩色图像的各像素，通过对红色成分值、绿色成分值以及蓝色成分值分别乘以与人佩戴的眼镜的镜片的特性对应的规定的比率，生成灰度图像；从灰度图像检测人的眼睛；输出与检测到的所述眼睛相关的眼睛信息。睛信息。睛信息。

【技术实现步骤摘要】
【国外来华专利技术】眼睛检测方法、眼睛检测装置以及眼睛检测程序


[0001]本专利技术涉及一种从图像检测出人的眼睛的技术。

技术介绍

[0002]从图像检测出人的眼睛的眼睛检测技术是视线检测以及个人验证等所需的基础技术。
[0003]在眼睛检测技术，当摄像了佩戴眼镜的人的情况下，因眼镜的镜片反射特定波长的光或者外光或背景映入到眼镜的镜片，在所摄像的图像的眼睛部分会包含杂讯，存在从图像检测眼睛的精度有可能会降低的风险。因此，有必要抑制外光或背景映入到眼镜的镜片。
[0004]例如，专利文献1的摄像方法，为了以某个入射角向人的眼球照射光通过被眼球的图像反射的光获得虹膜图案进行摄影，并基于预先规定的阈值判断所摄影的眼球的图像的好坏，在判断图像为不好的情况下，以与某个入射角不同的另一入射角向眼球照射光，再次摄影眼球的图像。
[0005]而且，例如，专利文献2的摄影方法，利用在规定的偏光轴的方向上振动的近红外光，不受眼镜的反射光的影响地检测眼睛的开口度。
[0006]然而，上述的现有技术，难以提高从彩色图像检测出人的眼睛的精度，需要进一步的改善。
[0007]现有技术文献
[0008]专利文献
[0009]专利文献1：日本专利公告公报第3337913号
[0010]专利文献2：日本专利公开公报特开2015
‑
194884号

技术实现思路

[0011]本专利技术是为了解决上述的问题而做出的专利技术，其目的在于提供一种可以提高从彩色图像检测出人的眼睛的精度的技术。
[0012]本专利技术的一方面涉及的眼睛检测方法，让计算机：获取通过摄像装置摄像的包含人的脸部的彩色图像；针对所述彩色图像的各像素，通过对红色成分值、绿色成分值以及蓝色成分值分别乘以与所述人佩戴的眼镜的镜片的特性对应的规定的比率，生成灰度图像；从所述灰度图像检测所述人的眼睛；输出与检测到的所述眼睛相关的眼睛信息。
[0013]根据本专利技术，可以提高从彩色图像检测出人的眼睛的精度。
附图说明
[0014]图1是本专利技术的第一实施方式的眼睛检测系统的外观图。
[0015]图2是表示本专利技术的第一实施方式的眼睛检测系统的整体构成的一个例子的方框图。
[0016]图3是表示本专利技术的第一实施方式的眼睛检测装置的眼睛检测处理的一个例子的流程图。
[0017]图4是表示在第一实施方式、通过摄像装置摄像的彩色图像的一个例子的示意图。
[0018]图5是表示从图4所示的彩色图像生成的灰度图像(grayscale image)的一个例子的示意图。
[0019]图6是表示本专利技术的第二实施方式的眼睛检测系统的整体构成的一个例子的方框图。
[0020]图7是表示本专利技术的第二实施方式的眼睛检测装置的眼睛检测处理的一个例子的流程图。
[0021]图8是表示通过眼睛检测部检测到的脸部区域的一个例子的示意图。
[0022]图9是表示通过眼睛检测部检测到的左眼区域的一个例子的示意图。
[0023]图10是表示通过眼睛检测部检测到的右眼区域的一个例子的示意图。
[0024]图11是表示本专利技术的第三实施方式的眼睛检测系统的整体构成的一个例子的方框图。
[0025]图12是表示本专利技术的第三实施方式的眼睛检测装置的眼睛检测处理的一个例子的流程图。
[0026]图13是表示第三实施方式的脸部区域的二值图像的一个例子的示意图。
[0027]图14是表示第三实施方式的变形例的脸部区域的二值图像的一个例子的示意图。
[0028]图15是表示本专利技术的第四实施方式的眼睛检测系统的整体构成的一个例子的方框图。
[0029]图16是表示本专利技术的第四实施方式的眼睛检测装置的眼睛检测处理的一个例子的流程图。
[0030]图17是表示在第四实施方式、平均亮度值(1uminance value)高于阈值的脸部区域的一个例子的示意图。
[0031]图18是表示在第四实施方式、平均亮度值在阈值以下的脸部区域的一个例子的示意图。
具体实施方式
[0032]本专利技术的基础知识
[0033]专利文献1的技术需要用于变更照射到眼球的光的入射角度的照明装置。而且，专利文献2的技术需要用于照射在规定的偏光轴的方向上振动的近红外光的照明装置。
[0034]上述的任何一个现有技术都需要用于抑制外光或背景映入到眼镜的镜片的特殊的照明装置，因此，例如，使用诸如智能手机或者平板电脑终端等不具备照明装置或者仅具备简易的照明装置的设备，难以提高从图像检测出人的眼睛的精度。
[0035]为了解决上述的问题，本专利技术的一方面涉及的眼睛检测方法，让计算机：获取通过摄像装置摄像的包含人的脸部的彩色图像；针对所述彩色图像的各像素，通过对红色成分值、绿色成分值以及蓝色成分值分别乘以与所述人佩戴的眼镜的镜片的特性对应的规定的比率，生成灰度图像；从所述灰度图像检测所述人的眼睛；输出与检测到的所述眼睛相关的眼睛信息。
[0036]根据该构成，针对彩色图像的各像素，通过对红色成分值、绿色成分值以及蓝色成分值分别乘以与人佩戴的眼镜的镜片的特性对应的规定的比率，生成灰度图像，从灰度图像检测人的眼睛。因此，即使是诸如智能手机或者平板电脑终端之类的简易构成的设备，也可以去除映入到彩色图像所包含的眼镜的镜片部分的外光或背景，能提高从彩色图像检测出人的眼睛的精度。
[0037]而且，在所述的眼睛检测方法，对所述红色成分值乘以的比率也可以高于对所述绿色成分值以及所述蓝色成分值乘以的比率。
[0038]根据该构成，因为生成红色成分比绿色成分以及蓝色成分多的灰度图像，在人佩戴的眼镜的镜片具有反射绿色成分的光以及蓝色成分的光的特性时，可以减轻映入到眼镜的镜片部分的绿色成分的光以及蓝色成分的光。
[0039]而且，在所述的眼睛检测方法，对所述蓝色成分值乘以的比率也可以为0。
[0040]根据该构成，因为生成去除了蓝色成分的灰度图像，在人佩戴的眼镜的镜片具有反射蓝色成分的光的特性时，可以去除映入到眼镜的镜片部分的蓝色成分的光。
[0041]而且，在所述的眼睛检测方法，还计算包含检测到的所述眼睛的眼睛区域的平均亮度值；还判断计算出的所述平均亮度值是否高于阈值；在判断计算出的所述平均亮度值高于阈值的情况下，还输出表示外光或背景映入到所述眼镜的所述镜片的映入信息。
[0042]在外光或背景映入到眼镜的镜片部分的情况下的眼睛区域比外光或背景没有映入到眼镜的镜片部分的情况下的眼睛区域明亮。为此，通过对眼睛区域的平均亮度值与阈值进行比较，可以检测出在生成灰度图像时没有去除掉而映入到眼镜的镜片部分的外光或背景存在残留的情况。
[0043]而且，在所述的眼睛检测方法，还从所述彩色图像生成二值图像；还提取所述二值图像中的被推测为存在所述眼镜的眼镜推测区域；还基于在提取出的所述眼镜推测区域内多个白色像素连续的白色区域在水平方向的长度，判断所述本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种眼睛检测方法，其特征在于，让计算机执行以下步骤：获取通过摄像装置摄像的包含人的脸部的彩色图像；针对所述彩色图像的各像素，通过对红色成分值、绿色成分值以及蓝色成分值分别乘以与所述人佩戴的眼镜的镜片的特性对应的规定的比率，生成灰度图像；从所述灰度图像检测所述人的眼睛；输出与检测到的所述眼睛相关的眼睛信息。2.根据权利要求1所述的眼睛检测方法，其特征在于，对所述红色成分值乘以的比率高于对所述绿色成分值以及所述蓝色成分值乘以的比率。3.根据权利要求2所述的眼睛检测方法，其特征在于，对所述蓝色成分值乘以的比率为0。4.根据权利要求1至3中任一项所述的眼睛检测方法，其特征在于，还计算包含检测到的所述眼睛的眼睛区域的平均亮度值；还判断计算出的所述平均亮度值是否高于阈值；在判断为计算出的所述平均亮度值高于阈值的情况下，还输出表示外光或背景映入到所述眼镜的所述镜片的映入信息。5.根据权利要求1至4中任一项所述的眼睛检测方法，其特征在于，还从所述彩色图像生成二值图像；还提取所述二值图像中的被推测为存在所述眼镜的眼镜推测区域；还基于在提取出的所述眼镜推测区域内多个白色像素连续的白色区域在水平方向的长度，判断所述人是否佩戴了所述眼镜；在判断为所述人没有佩戴所述眼镜的情况下，还从所述彩色图像检测所述人的眼睛；在判断为所述人佩戴了所述眼镜的情况下，在生成所述灰度图像的步骤生成所述灰度图像。6.根据权利要求1至5中任一项所述的眼睛检测方法，其特征在于，还从所述彩色图像检测包含所述人的脸部的脸部区域；还计算所述脸部区域的平均亮度值；在计算出的所述平均亮度值高于阈值的情况下，...

【专利技术属性】
技术研发人员：大野寿和，
申请(专利权)人：松下控股株式会社，
类型：发明
国别省市：