一种视线追踪方法及装置制造方法及图纸

本申请提供一种视线追踪方法及装置，涉及计算机视觉技术领域，能够有效提高对视轴方向的估算准确率。该方法包括：获取用户脸部的纹理图像和三维点云数据；根据所述纹理图像和所述三维点云数据，确定所述用户眼睛的角膜中心坐标和眼球中心坐标；根据所述角膜中心坐标和所述眼球中心坐标，确定光轴方向；根据所述光轴方向和光视轴方向角度差，确定视轴方向；通过获取纹理图像和三维点云数据，实现了对用户凝视点的实时追踪，提高了光轴方向的判断准确率，因此实现了对视轴方向的准确追踪，在一定程度上提高了眼控操作和交互的准确性。

【技术实现步骤摘要】
一种视线追踪方法及装置
本申请涉及计算机视觉
，尤其涉及一种视线追踪方法及装置。
技术介绍
人们的信息绝大部分是通过眼睛来获取的，正因为通过视觉获取的信息对人们的生活有重要意义，视觉方面的研究显得至关重要。随着科技的飞速发展，视觉追踪日趋成为国内外专家学者研究的焦点。其中，视觉追踪，是通过观测眼睛，来估算出视线凝视点的位置。对视线追踪技术来说，最重要的是能够实时、精确地定位视线的位置。然而，现有的视线追踪方法中，存在精度不足，无法满足精确的视线计算和定位，无法实现精确的眼控操作和交互的问题。
技术实现思路
本申请实施例提供了一种视线追踪方法及装置，能够有效提高对视轴方向的估算准确率。第一方面，本申请提供一种视线追踪方法，包括：获取用户脸部的纹理图像和三维点云数据；根据所述纹理图像和所述三维点云数据，确定所述用户眼睛的角膜中心坐标和眼球中心坐标；根据所述角膜中心坐标和所述眼球中心坐标，确定光轴方向；根据所述光轴方向和光视轴方向角度差，确定视轴方向。采用本申请实施例提供的视线追踪方法，通过获取用户脸本文档来自技高网...

【技术保护点】
1.一种视线追踪方法，其特征在于，包括：/n获取用户脸部的纹理图像和三维点云数据；/n根据所述纹理图像和所述三维点云数据，确定所述用户眼睛的角膜中心坐标和眼球中心坐标；/n根据所述角膜中心坐标和所述眼球中心坐标，确定光轴方向；/n根据所述光轴方向和光视轴方向角度差，确定视轴方向。/n

【技术特征摘要】
1.一种视线追踪方法，其特征在于，包括：
获取用户脸部的纹理图像和三维点云数据；
根据所述纹理图像和所述三维点云数据，确定所述用户眼睛的角膜中心坐标和眼球中心坐标；
根据所述角膜中心坐标和所述眼球中心坐标，确定光轴方向；
根据所述光轴方向和光视轴方向角度差，确定视轴方向。


2.如权利要求1所述的视线追踪方法，其特征在于，所述根据所述纹理图像和所述三维点云数据，确定所述用户眼睛的角膜中心坐标和眼球中心坐标，包括：
从所述纹理图像中获取所述用户的眼睛区域，并确定所述眼睛区域中的瞳孔区域；
根据所述眼睛区域和所述瞳孔区域，确定所述用户眼睛的虹膜区域；
根据所述虹膜区域和所述三维点云数据，确定所述用户的角膜中心坐标；
根据所述眼睛区域、所述虹膜区域和所述三维点云数据，确定所述用户的眼球中心坐标。


3.如权利要求2所述的视线追踪方法，其特征在于，所述根据所述虹膜区域和所述三维点云数据，确定所述用户的角膜中心坐标，包括：
通过相机二维坐标与三维空间坐标之间的映射关系，根据所述虹膜区域对应的相机二维坐标，从所述三维点云数据中确定所述虹膜区域对应的三维空间坐标的第一坐标集合；
根据所述第一坐标集合中的三维空间坐标，确定所述用户的角膜中心坐标。


4.如权利要求3所述的视线追踪方法，其特征在于，所述根据所述第一坐标集合中的三维空间坐标，确定所述用户的角膜中心坐标，包括：
利用最小二乘法，对所述第一坐标集合中的三维空间坐标进行球拟合得到第一球心的坐标，所述第一球心的坐标为所述角膜中心坐标。


5.如权利要求2所述的视线追踪方法，其特征在于，所述根据所述眼睛区域、所述虹膜区域和所述三维点云数据，确定所述用户的眼球中心坐标，包括：
通过相机二维坐标与三维空间坐标之间的映射关系，根据第一区域对应的相机二维坐标，从所述三维点云数据中确定所述第一区域对应的三维空间坐标的第二坐标集合，所述第一区域为所述眼睛区域减去所述虹膜区域后得到的区域；
根据所述第二坐标集合中的三维空间坐标，确定所述用户的眼球中心坐标。


6.如权利要求5所述的视线追踪方法，其特征在于，所述根据所述第二坐标集合中的三维空间坐标，确定所述用户的眼球中心坐标，包括：
利用最小二乘法，对所述第二坐标集合中的三维空间坐标进行球拟合得到第二球心的坐标，所述第二球心...

【专利技术属性】
技术研发人员：宋展，叶于平，赵娟，
申请(专利权)人：中国科学院深圳先进技术研究院，
类型：发明
国别省市：广东;44