注视点估计方法、装置和计算机可读存储介质制造方法及图纸

技术编号:43492166 阅读:40 留言:0更新日期:2024-11-29 17:01
一种注视点估计方法、装置和计算机可读存储介质,所述方法包括:获取用户眼部图像和传感器信号;根据预设的时间与注视点预测方法的对应关系确定当前时刻的注视点预测方法;当确定的方法为根据用户眼部图像和传感器信号进行预测的第一方法时,调用注视点检测模型进行注视点位置估计,注视点检测模型被配置为提取用户眼部图像的特征图,将提取的特征图与当前时刻的传感器信号进行特征融合,根据融合后的特征进行注视点预测;当确定的方法为根据传感器信号进行预测的第二方法时,调用注视点跟踪模型进行注视点位置估计,注视点跟踪模型被配置为根据上一时刻的注视点坐标、上一时刻的传感器信号以及当前时刻的传感器信号进行注视点预测。

【技术实现步骤摘要】

本公开实施例涉及但不限于人机交互,尤指一种注视点估计方法、装置和计算机可读存储介质


技术介绍

1、随着科技的不断进步,人机交互技术越来越受到人们的关注。注视点估计技术是人机交互领域的一项关键技术,旨在确定视觉场景中用户正在关注的特定区域。注视点估计技术通过跟踪用户的注视区域,洞察用户的视觉兴趣,从而实现高效、自然的交互方式以及优质的用户体验。注视点估计技术的应用领域非常广泛,例如,在虚拟现实方面,注视点估计技术用于显示渲染,将计算资源集中于用户关注的部分,从而实现更真实的虚拟场景;在人机交互方面,注视点估计技术允许用户通过注视与虚拟环境进行互动,进一步增强了用户与设备的联系;此外,注视点估计技术还在医疗、广告、用户研究等领域中有着潜在应用,可以揭示用户的兴趣和行为,为相关领域的决策提供依据。


技术实现思路

1、以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。

2、本公开实施例提供了一种注视点估计方法,包括:

3、获取用户眼部图像和传感器信号;

4本文档来自技高网...

【技术保护点】

1.一种注视点估计方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述多分辨率特征提取模块包括:第一卷积网络、第二卷积网络和第三卷积网络,其中:

3.根据权利要求1所述的方法,其特征在于,所述特征融合模块包括:特征降维模块、第一多层感知机、第一拼接模块、第二多层感知机和特征升维模块,其中:

4.根据权利要求3所述的方法,其特征在于,所述注视点预测模块包括:反卷积模块和预测模块,其中:

5.根据权利要求1所述的方法,其特征在于,所述注视点跟踪模型包括依次串联连接的第三多层感知机、特征拼接模块、第四多层感知机和求和模块,其中...

【技术特征摘要】

1.一种注视点估计方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述多分辨率特征提取模块包括:第一卷积网络、第二卷积网络和第三卷积网络,其中:

3.根据权利要求1所述的方法,其特征在于,所述特征融合模块包括:特征降维模块、第一多层感知机、第一拼接模块、第二多层感知机和特征升维模块,其中:

4.根据权利要求3所述的方法,其特征在于,所述注视点预测模块包括:反卷积模块和预测模块,其中:

5.根据权利要求1所述的方法,其特征在于,所述注视点跟踪模型包括依次串联连接的第三多层感知机、特征拼接模块、第四多层感知机和求和模块,其中:

6.根据权利要求1所述的方法,其特征在于,所述根据预设的时间与注视点预测方法的对应关系确定当前时...

【专利技术属性】
技术研发人员:赵元兴张浩吕耀宇
申请(专利权)人:京东方科技集团股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1