注视方向识别方法、装置及电子设备和存储介质制造方法及图纸

技术编号:24208434 阅读:31 留言:0更新日期:2020-05-20 15:43
本申请实施例公开了一种注视方向识别方法、装置及电子设备和存储介质,采集图像后,在图像中检测人脸区域,并从人脸区域中裁剪出眼部区域图像;降低眼部区域图像的分辨率;将降低分辨率后的眼部区域图像输入注视方向识别模型,得到图像中的眼部的视线方向属于各个视线方向的可能性表征值,或者,得到图像中的每只眼睛的视线方向属于各个视线方向的可能性表征值;根据图像中的眼部的视线方向属于各个视线方向的可能性表征值,或者,图像中的每只眼睛的视线方向属于各个视线方向的可能性表征值,确定图像中的眼部的注视方向,该方案不需要定位普尔钦斑点,也不需要红外摄像头,只需要一般的摄像头即可,因而以较低的成本实现了注视方向的识别。

Methods, devices, electronic devices and storage media for gaze direction recognition

【技术实现步骤摘要】
注视方向识别方法、装置及电子设备和存储介质
本申请涉及信息处理
,更具体地说,涉及一种注视方向识别方法、装置及电子设备和存储介质。
技术介绍
随着对电子设备的智能性要求的提高,越来越多的应用提供人眼控制功能。人眼控制功能可以提供给用户更方便的交互和用户体验。人眼控制的核心是获得人眼的注视点,也就是获取用的注视方向。目前普遍通过普尔钦斑点和镜头几何结构来获取注视方向。但这种方法需要使用红外摄像头,使得电子设备的成本较高。因此,如何以较低的成本实现注视方向的识别成为亟待解决的技术问题。
技术实现思路
本申请的目的是提供一种注视方向识别方法、装置及电子设备和存储介质,包括如下技术方案:一种注视方向识别方法,包括:采集图像;在所述图像中检测人脸区域,并从所述人脸区域中裁剪出眼部区域图像;对所述眼部区域图像进行处理,以降低所述眼部区域图像的分辨率;将降低分辨率后的眼部区域图像输入注视方向识别模型,得到所述图像中的眼部的视线方向属于各个视线方向的可能性表征值,或者,得到所述图本文档来自技高网...

【技术保护点】
1.一种注视方向识别方法,包括:/n采集图像;/n在所述图像中检测人脸区域,并从所述人脸区域中裁剪出眼部区域图像;/n对所述眼部区域图像进行处理,以降低所述眼部区域图像的分辨率;/n将降低分辨率后的眼部区域图像输入注视方向识别模型,得到所述图像中的眼部的视线方向属于各个视线方向的可能性表征值,或者,得到所述图像中的每只眼睛的视线方向属于各个视线方向的可能性表征值;/n根据所述图像中的眼部的视线方向属于各个视线方向的可能性表征值,或者,所述图像中的每只眼睛的视线方向属于各个视线方向的可能性表征值,确定所述图像中的眼部的注视方向。/n

【技术特征摘要】
1.一种注视方向识别方法,包括:
采集图像;
在所述图像中检测人脸区域,并从所述人脸区域中裁剪出眼部区域图像;
对所述眼部区域图像进行处理,以降低所述眼部区域图像的分辨率;
将降低分辨率后的眼部区域图像输入注视方向识别模型,得到所述图像中的眼部的视线方向属于各个视线方向的可能性表征值,或者,得到所述图像中的每只眼睛的视线方向属于各个视线方向的可能性表征值;
根据所述图像中的眼部的视线方向属于各个视线方向的可能性表征值,或者,所述图像中的每只眼睛的视线方向属于各个视线方向的可能性表征值,确定所述图像中的眼部的注视方向。


2.根据权利要求1所述的方法,从所述人脸区域中裁剪出眼部区域图像包括:从所述人脸区域中裁剪出一帧双眼图像;
所述根据所述图像中的眼部的视线方向属于各个视线方向的可能性表征值,确定所述图像中的眼部的注视方向,包括:
将表征最大可能性的可能性表征值对应的视线方向确定为所述图像中的眼部的注视方向。


3.根据权利要求2所述的方法,所述从所述人脸区域中裁剪出一帧双眼图像,包括:
从所述人脸区域中裁剪出两帧单眼图像;
将所述两帧单眼图像拼接为一帧双眼图像。


4.根据权利要求1所述的方法,从所述人脸区域中裁剪出眼部区域图像包括:从所述人脸区域中裁剪出两帧单眼图像;
所述根据所述图像中的每只眼睛的视线方向属于各个视线方向的可能性表征值,确定所述图像中的眼部的注视方向,包括:
将两帧单眼图像中的眼睛视线方向属于同一视线方向的可能性表征值加权求和,得到所述眼部的眼睛视线方向属于各个视线方向的可能性表征值;
将表征最大可能性的可能性表征值对应的视线方向确定为所述图像中的眼部的注视方向。


5.根据权利要求1-4任意一项所述的方法,所述从所述人脸区域中裁剪出眼部区域图像包括:
对所述人脸区域进行几何校正,得到校正后的脸部区域;
从所述校正后的脸部区域中截取眼部图像。


6.根据权利要求5所述的方法,还包括:
记录对所述人脸区域进行几何校正时,所述人脸区域的旋转角度和旋转方向;
在确定所述眼部的视...

【专利技术属性】
技术研发人员:杨大业宋建华
申请(专利权)人:联想北京有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1