一种视线估计方法、装置、设备及介质制造方法及图纸

本申请公开了一种视线估计方法、装置、设备及介质，在需要进行视线估计时，获取左眼图像和右眼图像。将左眼图像和右眼图像输入预先训练的视线估计模型中，获得该视线估计模型输出的单眼视线估计结果，即左眼视线角度和右眼视线角度，以及双眼视线估计结果，即双眼组合视线角度。其中，视线估计模型是通过约束单眼视线角度与双眼视线角度一致性训练生成的。也就是，通过本申请提供的技术方案，由于视线估计模型是通过约束单眼视线角度与双眼视线角度一致性训练生成的，从而可以提高视线估计准确度，而且不仅可以获取单眼视线估计结果，还可以获取双眼视线估计结果，满足不同应用场景需求。需求。需求。

【技术实现步骤摘要】
一种视线估计方法、装置、设备及介质


[0001]本申请涉及计算机
，具体涉及一种视线估计方法、装置、设备及介质。

技术介绍

[0002]视线估计技术是利用机械、电子、光学等各种检测手段获取用户当前“注视方向”的技术，被广泛应用于人机交互、智能驾驶、医疗等领域。
[0003]目前通常采用眼球模型进行视线估计，而该种方法需要获取较好的光斑和瞳孔成像。当视线的角度较大时，光斑和成像较差，导致视线估计失败或误差较大。

技术实现思路

[0004]有鉴于此，本申请实施例提供一种视线估计方法、装置、设备及介质，以实现准确的视线估计。
[0005]为实现上述目的，本申请提供的技术方案如下：
[0006]在本申请第一方面，提供了一种视线估计方法，该方法包括：
[0007]获取左眼图像和右眼图像；
[0008]将所述左眼图像和所述右眼图像输入视线估计模型，获得第一视线估计结果，所述第一视线估计结果包括左眼视线角度、右眼视线角度以及双眼组合视线角度，所述视线估计模型是通过约束单眼视线角度与双眼视线角度一致本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视线估计方法，其特征在于，所述方法包括：获取左眼图像和右眼图像；将所述左眼图像和所述右眼图像输入视线估计模型，获得第一视线估计结果，所述第一视线估计结果包括左眼视线角度、右眼视线角度以及双眼组合视线角度，所述视线估计模型是通过约束单眼视线角度与双眼视线角度一致性训练生成的。2.根据权利要求1所述的方法，其特征在于，所述获取左眼图像和右眼图像，包括：获取待处理图像，所述待处理图像包括左眼和右眼；从所述待处理图像中获取左眼的内外眼角坐标和右眼的内外眼角坐标；基于所述左眼的内外眼角坐标确定左眼区域，以及基于所述右眼的内外眼角坐标确定右眼区域；基于所述左眼区域和所述右眼区域分别对所述待处理图像进行裁剪，获得左眼图像和右眼图像。3.根据权利要求2所述的方法，其特征在于，所述基于所述左眼的内外眼角坐标确定左眼区域，包括：基于所述左眼的内外眼角坐标确定所述左眼的内外眼角的第一距离；基于所述左眼的内眼角坐标以及所述第一距离确定所述左眼区域；所述右眼的内外眼角坐标确定右眼区域，包括：基于所述右眼的内外眼角坐标确定所述右眼的内外眼角的第二距离；基于所述右眼的内外眼角坐标以及所述第二距离确定所述右眼区域。4.根据权利要求1
‑
3任一项所述的方法，其特征在于，所述视线估计模型的训练过程包括：获取训练样本，所述训练样本包括训练左眼图像、所述训练左眼图像对应的第一视线角度、训练右眼图像、所述训练右眼图像对应的第二视线角度以及第三组合视线角度；将所述训练左眼图像和所述训练右眼图像分别输入初始模型，获得第二视线结果，所述第二视线估计结果包括左眼视线角度、右眼视线角度以及双眼组合视线角度；基于所述第一视线角度、所述第二视线角度、所述第三组合视线角度、所述左眼视线角度、所述右眼视线角度以及双眼组合视线角度对所述初始模型进行训练，直至满足预设条件，获得视线估计模型。5.根据权利要求4所述的方法，其特征在于，所述基于所述第一视线角度、所述第二视线角度、所述第三组合视线角度、所述左眼视线角度、所述右眼视线角度以及所述双眼组合视线角度对所述初始模型进行训练，包括：基于所...

【专利技术属性】
技术研发人员：池立盈，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：