一种基于远眼的双视角注视估计方法及系统技术方案

技术编号:43202410 阅读:41 留言:0更新日期:2024-11-01 20:20
本发明专利技术公开了一种基于远眼的双视角注视估计方法及系统,包括以下步骤;步骤1:获取双视角人脸图像,并对图像进行预处理,得到双视角注视估计数据集;步骤2:对双视角人脸和远眼图像进行特征提取;步骤3:构建双视角注视估计模型,输入双视角人脸和眼睛特征图估计视线方向;步骤4:利用所述双视角注视估计数据集对所述双视角注视估计模型进行训练;步骤5:使用训练完成双视角注视估计模型进行注视估计。本发明专利技术视线估计精度较高,达到了目前最好的估计精度,且首次发现了在双视场景下仅使用远眼图像的效果优于使用双眼图像。

【技术实现步骤摘要】

本专利技术属于计算机视觉和人机交互,具体涉及一种基于远眼的双视角注视估计方法及系统


技术介绍

1、人类的注视行为通常包含了丰富的意图信息,反映了人的潜在兴趣偏好。在日常生活中,注视也是一种重要的非语言交流形式。在人机交互的环境下,人类可以依赖注视行为向计算机传递信息或发出指令。注视估计在智慧教育、电子商务、医疗诊断和虚拟现实等应用中都起到了重大作用。传统的注视估计方法通常涉及构建特定的相机系统(例如,使用多个红外相机和光源)来计算视线方向,导致成本高且缺乏灵活性。近年来,基于深度学习的基于外观的凝视估计得到了相当多的关注。它只需要一个网络摄像头来捕捉面部图像,并直接学习从面部外观到凝视方向的映射功能。

2、目前主流的基于外观的注视估计方法为单视角视线估计。早期的单视方法主要关注眼睛的外观,并使用神经网络进行注视估计。然而,这种基于单眼的方法忽略了双眼之间的差异性,因此后续出现了基于双眼图像的注视估计方法。针对双眼特征,一些方法采用简单的特征连接,而其他方法则建立了非对称结构以突出特征的不对称性。然而,仅依赖眼部图像的方法需要一个额外的模块来估本文档来自技高网...

【技术保护点】

1.一种基于远眼的双视角注视估计方法,其特征在于,包括以下步骤;

2.根据权利要求1所述的一种基于远眼的双视角注视估计方法,其特征在于,所述步骤1中双视角注视估计数据集包括双视角注视估计人脸图像和双视角远眼图像数据集,即各视角人脸图像中距离相机更远的眼睛图像,分别为左视角右眼图像和右视角左眼图像。

3.根据权利要求1所述的一种基于远眼的双视角注视估计方法,其特征在于,所述步骤1包括:

4.根据权利要求3所述的一种基于远眼的双视角注视估计方法,其特征在于,所述步骤2包括:

5.根据权利要求4所述的一种基于远眼的双视角注视估计方法,其特征在于,...

【技术特征摘要】

1.一种基于远眼的双视角注视估计方法,其特征在于,包括以下步骤;

2.根据权利要求1所述的一种基于远眼的双视角注视估计方法,其特征在于,所述步骤1中双视角注视估计数据集包括双视角注视估计人脸图像和双视角远眼图像数据集,即各视角人脸图像中距离相机更远的眼睛图像,分别为左视角右眼图像和右视角左眼图像。

3.根据权利要求1所述的一种基于远眼的双视角注视估计方法,其特征在于,所述步骤1包括:

4.根据权利要求3所述的一种基于远眼的双视角注视估计方法,其特征在于,所述步骤2包括:

5.根据权利要求4所述的一种基于远眼的双视角注视估计方法,其特征在于,所述步骤2.1中双视角交互卷积块包括:

6.根据权利要求5所述的一种基于远眼的双视角注视估计方法,其特征在于,所述步骤2.1.3具体补...

【专利技术属性】
技术研发人员:牛振兴汪雅莉钟昊迪王文野王泉
申请(专利权)人:西安电子科技大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1