【技术实现步骤摘要】
一种基于激光视觉反馈的眼动交互方法及系统
[0001]本专利技术涉及信息交互
，具体而言，涉及一种基于激光视觉反馈的眼动交互方法及系统。
技术介绍
[0002]肌萎缩侧索硬化症(ALS，Amyotrophic Lateral Sclerosis)由于其独特而可怕的病症，导致患者不可逆转地失去控制肌肉的能力。在疾病发展过程中，患者意识完全清醒，但无法像正常人一样与周围环境互动，其中，眼动是ALS患者最后失去的肌肉控制功能之一。因而，可以利用基于计算机辅助交互(CAI，Computer Aided Instruction)的眼动追踪技术，获取ALS患者的眼动意图，依据眼动意图执行相应的操作，从而实现与患者更长时间的交互，方便ALS患者的生活，同时也缓解ALS患者的精神痛苦。
[0003]目前，常用的眼动追踪一般采用头戴式眼动追踪设备，头戴式眼动追踪设备允许用户自由移动头部，而轻微的肌肉运动不仅可以减缓疾病进展，也能使患者的视线区域范围脱离界面束缚，可以探索更广阔的空间，因此更适合ALS患者。但目前的头戴式眼动追踪，...
【技术保护点】
【技术特征摘要】
1.一种基于激光视觉反馈的眼动交互系统，其特征在于，包括：眼动追踪系统、视觉反馈系统以及舵机云台控制系统，其中，眼动追踪系统包括：眼镜框架、人眼摄像头、红外灯、场景摄像头、防滑橡胶套、支架、第一USB线以及第二USB线，其中，人眼摄像头固定在支架上，红外灯设置在人眼摄像头周围，红外灯向人眼发射红外光，人眼摄像头对人眼的注视点进行摄像，得到人眼图像；防滑橡胶套包裹眼镜框架；支架连接到眼镜框架的右腿框架，位于右眼前方预定距离；场景摄影头通过扎带固定在眼镜框架的左腿框架上，对目标物体上形成的激光光斑进行摄像，得到激光光斑图像；第一USB线连接到人眼摄像头以及舵机云台控制系统，内置在右腿框架内，第二USB线连接到场景摄像头以及舵机云台控制系统，内置在左腿框架内；视觉反馈系统包括：激光器、水平舵机、垂直舵机，其中，水平舵机设置在垂直舵机上，用于向目标物体发射激光的激光器设置在水平舵机上，水平舵机和垂直舵机接收舵机云台控制系统输出的控制信号，依据控制信号分别调整水平舵机以及垂直舵机的方位，以调整激光器发射的激光在目标物体的位置；舵机云台控制系统，用于依据人眼图像中的注视点映射到激光光斑图像所在坐标系的人眼映射注视点的位置，以及，激光光斑图像中的激光光斑的位置，输出控制信号以对水平舵机以及垂直舵机的方位进行调整。2.根据权利要求1所述的眼动交互系统，其特征在于，所述舵机云台控制系统包括：瞳孔角膜反射向量获取单元、映射单元、激光光斑位置获取单元以及定位校正单元，其中，瞳孔角膜反射向量获取单元，用于对获取的人眼图像进行高斯滤波和灰度处理，得到人脸灰度图像；从人脸灰度图像中提取包含瞳孔的感兴趣区域；采用基于邻域平均的自适应阈值算法，对感兴趣区进行分割，通过Canny边缘检测算法，提取分割的感兴趣区的人眼轮廓；通过Hough圆变换算法，从提取的人眼轮廓中确定瞳孔区域；通过最小二乘椭圆拟合算法，拟合瞳孔区域中包含的瞳孔轮廓，得到瞳孔中心坐标；针对分割的感兴趣区，通过调整二值化灰度阈值，定位普尔钦斑，依据瞳孔中心坐标以及普尔钦斑，得到瞳孔角膜反射向量；映射单元，用于基于瞳孔角膜反射向量，利用预先标定的二阶多项式回归算法，该二阶多项式回归算法用于标定人眼图像中的注视点与激光光斑图像所在坐标系的人眼映射注视点的位置，获取瞳孔角膜反射向量映射的人眼映射注视点的位置；激光光斑位置获取单元，用于基于场景摄像头获取的激光光斑图像，获取激光光斑图像中的激光光斑的位置；定位校正单元，用于依据激光光斑的位置与人眼映射注视点的位置的差异，输出控制信号调整激光器的方位，以使激光器发射的激光在目标物体上形成的激光光斑与人眼映射注视点相匹配。3.根据权利要求2所述的眼动交互系统，其特征在于，所述激光光斑位置获取单元包括：静态检测单元，用于基...
【专利技术属性】
技术研发人员：高硕，王子皓，张奡杰，夏心悦，张思哲，
申请(专利权)人：北京航空航天大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。