一种基于视线跟踪的增强虚拟现实投影方法及系统技术方案

本发明专利技术涉及汽车电子领域，公开了一种基于视线跟踪的增强虚拟现实投影方法及系统。其中，所述基于视线跟踪的增强虚拟现实投影方法应用于汽车，所述汽车采用AR‑HUD技术，所述方法包括：获取汽车内的视频图像；检测所述视频图像中的目标用户的人脸图像；根据所述人脸图像，确定基准位置坐标和跟随位置坐标；根据所述基准位置坐标和所述跟随位置坐标，计算所述目标用户的视线与所述汽车的水平方向的夹角；根据所述夹角，调整AR场景对应的虚拟摄像机的投影角度。本发明专利技术实施例提升了增强虚拟现实投影效果。

An augmented virtual reality projection method and system based on line of sight tracking

【技术实现步骤摘要】
一种基于视线跟踪的增强虚拟现实投影方法及系统
本专利技术涉及汽车电子领域，特别是涉及一种基于视线跟踪的增强虚拟现实投影方法及系统。
技术介绍
AR-HUD技术是在现实世界之上叠加虚拟的显示信息，增强驾驶员对当下情景的了解并改善其驾驶体验，显示信息包括导航地图、车辆信息、行人信息、车道线信息、天气信息、建筑物信息、性能信息、应用信息等。但是，大部分显示信息的投影位置是固定的，不能实时动态投影于驾驶员当前能够容易注意到的位置，从而降低了增强虚拟现实投影效果。
技术实现思路
本专利技术实施例旨在提供一种基于视线跟踪的增强虚拟现实投影方法及系统，其能够提升增强虚拟现实投影效果。为解决上述技术问题，本专利技术实施例提供以下技术方案：第一方面，本专利技术实施例提供一种基于视线跟踪的增强虚拟现实投影方法，应用于汽车，所述汽车采用AR-HUD技术，所述方法包括：获取汽车内的视频图像；检测所述视频图像中的目标用户的人脸图像；根据所述人脸图像，确定基准位置坐标和跟随位置坐标；根据所述基准位置坐标和本文档来自技高网...

【技术保护点】
1.一种基于视线跟踪的增强虚拟现实投影方法，应用于汽车，其特征在于，所述汽车采用AR-HUD技术，所述方法包括：/n获取汽车内的视频图像；/n检测所述视频图像中的目标用户的人脸图像；/n根据所述人脸图像，确定基准位置坐标和跟随位置坐标；/n根据所述基准位置坐标和所述跟随位置坐标，计算所述目标用户的视线与所述汽车的水平方向的夹角；/n根据所述夹角，调整AR场景对应的虚拟摄像机的投影角度。/n

【技术特征摘要】
1.一种基于视线跟踪的增强虚拟现实投影方法，应用于汽车，其特征在于，所述汽车采用AR-HUD技术，所述方法包括：
获取汽车内的视频图像；
检测所述视频图像中的目标用户的人脸图像；
根据所述人脸图像，确定基准位置坐标和跟随位置坐标；
根据所述基准位置坐标和所述跟随位置坐标，计算所述目标用户的视线与所述汽车的水平方向的夹角；
根据所述夹角，调整AR场景对应的虚拟摄像机的投影角度。


2.根据权利要求1所述的方法，其特征在于，所述基准位置坐标为瞳孔中心坐标，所述跟随位置坐标为普尔钦斑点坐标。


3.根据权利要求2所述的方法，其特征在于，所述根据所述人脸图像，确定基准位置坐标和跟随位置坐标，包括：
采用红外光源对人眼进行照射，以在所述目标用户的眼睛的角膜上形成普尔钦斑点；
根据所述人脸图像，检测人眼轮廓图像和所述普尔钦斑点坐标；
在所述人眼轮廓图像中定位所述瞳孔中心坐标。


4.根据权利要求3所述的方法，其特征在于，所述根据所述人脸图像，检测人眼轮廓图像和所述普尔钦斑点坐标，包括：
建立主动形状模型；
根据所述主动形状模型，在所述人脸图像中搜索所述人眼轮廓图像；
在所述人眼轮廓图像中检测所述普尔钦斑点坐标。


5.根据权利要求4所述的方法，其特征在于，所述在所述人眼轮廓图像中定位所述瞳孔中心坐标，包括：
根据哈夫变换算法，检测所述人眼轮廓图像的圆形；
过滤所述圆形，获得所述瞳孔所在的圆形；
检测所述瞳孔的瞳孔中心坐标。


6.根据权利要求5所述的方法，其特征在于，所述过滤所述圆形，获得所述瞳孔所在的圆形，包括：
对所述人眼轮廓图像作二值化处理；
计算二值化处理后每一所述圆形为预设像素值的比例；
过滤除所述比例最高外的所述圆形。


7.根据权利要求1-6任一项所述的方法，其特征在于，在获取汽车内的视频图像之后，所述方法还包括：
对所述视频图像进行预处理。


8.根据权利要求1-6任一项所述的方法，其特征在于，所述检测所述视频图像中的人脸图像，包括：
定义训练子窗口，所述训练子窗口包括训练样本；
获...

【专利技术属性】
技术研发人员：汪大崴，康栋，
申请(专利权)人：深圳疆程技术有限公司，
类型：发明
国别省市：广东;44