注视检测设备和注视检测方法技术

公开了注视检测设备和注视检测方法。该注视检测设备包括：图像捕捉单元，其生成表示用户的双眼的图像；眼睛检测单元，其针对双眼中的每只眼睛而从该图像中检测包含该眼睛的眼睛区域；瞳孔检测单元，其针对双眼中的一只眼睛而从眼睛区域中检测包含瞳孔的瞳孔区域；估计单元，其基于针对该一只眼睛检测到的瞳孔区域，获得针对双眼中的另一只眼睛的在该图像上的瞳孔区域的估计形状；瞳孔再检测单元，其通过从针对该另一只眼睛检测到的眼睛区域内搜索具有与估计形状匹配的形状的区域来检测瞳孔区域；以及注视检测单元，其基于针对双眼中的每只眼睛检测到的瞳孔区域的位置来检测用户的注视方向。

Gaze detection device and gaze detection method

A gaze detection device and a gaze detection method are disclosed. The gaze detection apparatus includes an image capture unit, the image user's eyes; the eye detection unit for each eye in the eyes of the image from the eye detection region including the eye pupil detection unit; the eyes in one eye from the eye region detection in pupil area contains the estimation unit, the pupil; the eye pupil area detected based on the estimated shape in the other eye eyes in the image on the pupil area; then the pupil detection unit, through the search area with estimation of shape matching shape from the eye region on the other one eye was detected in the pupil area is detected; and gaze detection unit for each eye detection in the eyes to the pupil area based on the position detection User's gaze direction.

【技术实现步骤摘要】
注视检测设备和注视检测方法
本文论述的实施方式涉及用于基于捕捉到的人眼图像来检测注视方向的注视检测设备和注视检测方法。
技术介绍
正在进行的工作是检测人眼的注视方向，从而获得关于吸引人的注意的对象的信息或者自动执行与注视方向或者正在注视的人的位置相关的操作。为了方便起见，下文中将由人注视的位置简称为注视位置。人的注视位置或注视方向与人的瞳孔指向的方向密切相关。有鉴于此，已知提供根据捕捉的人眼的图像检测瞳孔并基于瞳孔相对于参考点的位置关系来识别人的注视方向或注视位置的技术。例如，光源的角膜反射图像(下文中被称为浦肯野(Purkinje)图像)被用作参考点。然而，在一些情况下，浦肯野图像可能与瞳孔重叠，并且在眼睛图像中可能不能完整地捕捉瞳孔。当这发生时，可能不能从眼睛图像中准确地检测瞳孔。为了解决这个问题，已经提出了一种技术，其积极利用浦肯野图像中包含的信息，从而即使当大部分瞳孔被浦肯野图像遮住时也能稳定地检测瞳孔(例如，参照日本未审查专利公开(特开)第2012-24154号)。根据在日本未审查专利公开(特开)第2012-24154号中公开的瞳孔检测设备，以浦肯野图像内的参考点作为一端来本文档来自技高网...

【技术保护点】
一种注视检测设备，包括：眼睛检测单元，其针对用户的双眼中的每只眼睛而从表示所述双眼的图像中检测包含所述眼睛的眼睛区域；瞳孔检测单元，其针对所述双眼中的一只眼睛而从所述眼睛区域中检测包含瞳孔的瞳孔区域；估计单元，其基于针对所述一只眼睛检测到的所述瞳孔区域，获得针对所述双眼中的另一只眼睛的在所述图像上的所述瞳孔区域的估计形状；瞳孔再检测单元，其通过从针对所述另一只眼睛检测到的所述眼睛区域内搜索具有与所述估计形状匹配的形状的区域来检测所述瞳孔区域；以及注视检测单元，其基于针对所述双眼中的每只眼睛检测到的所述瞳孔区域的位置来检测所述用户的注视方向。

【技术特征摘要】
2016.03.31 JP 2016-0734811.一种注视检测设备，包括：眼睛检测单元，其针对用户的双眼中的每只眼睛而从表示所述双眼的图像中检测包含所述眼睛的眼睛区域；瞳孔检测单元，其针对所述双眼中的一只眼睛而从所述眼睛区域中检测包含瞳孔的瞳孔区域；估计单元，其基于针对所述一只眼睛检测到的所述瞳孔区域，获得针对所述双眼中的另一只眼睛的在所述图像上的所述瞳孔区域的估计形状；瞳孔再检测单元，其通过从针对所述另一只眼睛检测到的所述眼睛区域内搜索具有与所述估计形状匹配的形状的区域来检测所述瞳孔区域；以及注视检测单元，其基于针对所述双眼中的每只眼睛检测到的所述瞳孔区域的位置来检测所述用户的注视方向。2.根据权利要求1所述的注视检测设备，其中，当针对所述一只眼睛检测到的所述注视方向与将所述一只眼睛联接至图像捕捉单元的线所成的第一角度小于针对所述另一只眼睛估计的所述注视方向与将所述另一只眼睛联接至所述图像捕捉单元的线所成的第二角度时，所述估计单元将在所述双眼被布置成沿着的第一方向上测得的所述另一只眼睛的所述瞳孔区域的所述估计形状的宽度与在垂直于所述第一方向的第二方向上测得的所述另一只眼睛的所述瞳孔区域的所述估计形状的宽度之比设置成小于在所述第一方向上测得的所述一只眼睛的所述瞳孔区域的宽度与在所述第二方向上测得的所述一只眼睛的所述瞳孔区域的宽度之比，而另一方面，当所述第一角度大于所述第二角度时，所述估计单元将在所述第一方向上测得的所述另一只眼睛的所述瞳孔区域的所述估计形状的宽度与在所述第二方向上测得的所述另一只眼睛的所述瞳孔区域的所述估计形状的宽度之比设置成大于在所述第一方向上测得的所述一只眼睛的所述瞳孔区域的宽度与在所述第二方向上测得的所述一只眼睛的所述瞳孔区域的宽度之比。3.根据权利要求1所述的注视检测设备，还包括参考点检测单元，其针对所述双眼中的每只眼睛而检测位置不随所述用户的注视方向改变的参考点，并且其中，所述估计单元基于针对所述一只眼睛检测到的所述参考点与所述瞳孔区域之间的位置关系、以及针对所述另一只眼睛检测到的所述参考点来获得估计范围，针对所述另一只眼睛的所述瞳孔区域被估计为位于所述估计范围内，并且所述瞳孔再检测单元通过从所述估计范围内搜索具有与所述估计形状匹配的形状的区域来检测所述瞳孔区域。4.根据权利要求3所述的注视检测设备，还包括对所述双眼中的全部两只眼睛进行照明的照明光源，并且其中，所述参考点检测单元将所述照明光源的角膜反射图像的位置检测为针对所述双眼中的每只眼睛的所述...

【专利技术属性】
技术研发人员：石井大祐，中岛哲，
申请(专利权)人：富士通株式会社，
类型：发明
国别省市：日本,JP