眼动数据处理方法及电子设备技术

本申请提供了一种眼动数据处理方法及电子设备，该方法包括：获取待测图像；根据待测图像的头部姿态数据，对第一标定图像进行修正，得到多个第二标定图像和每个第二标定图像的注视点的标定位置；根据待测图像、多个第二标定图像、和每个第二标定图像的注视点的标定位置，确定待测图像的注视点的预测位置；根据待测图像的注视点的预测位置，触发电子设备执行相应的操作。从而，本申请实现了注视点的位置的准确预测，能够准确触发电子设备执行相应的操作，提高了用户的使用体验。提高了用户的使用体验。提高了用户的使用体验。

【技术实现步骤摘要】
眼动数据处理方法及电子设备


[0001]本申请属于终端
，尤其涉及一种眼动数据处理方法及电子设备。

技术介绍

[0002]随着各种新技术的诞生，在电子设备上通过眼动跟踪(eye tracking)技术控制电子设备进行相应操作的研究越来越为人所熟知。眼动跟踪技术是对眼睛注视点的位置进行预测的一种技术。例如，在拍照场景中，电子设备可以获取眼睛的视线在拍摄画面所在的显示界面上的注视位置，便于根据该注视点的位置进行对焦。
[0003]目前，在通过眼动跟踪技术预测注视点的位置时，电子设备可采集用户的待测头部图像，并根据待测头部图像的视线特征和标定头部图像的视线特征之间的关系，以及标定头部图像的注视点的标定位置，实现待测头部图像的注视点的位置的预测。
[0004]然而，上述的实现过程中，由于视线特征与头部姿态相关，在待测头部图像与标定头部图像之间的头部姿态差异较大时，难以准确确定上述关系，导致预测的注视点的位置准确率较低，使用户的体验不高。

技术实现思路

[0005]本申请提供了一种眼动数据处理方法及电子设备，实现了注视点的位置的准确预测，保证了用户的使用体验。
[0006]第一方面，本申请提供一种眼动数据处理方法，包括：
[0007]获取待测图像，待测图像包括与用户注视所述电子设备的显示屏有关的区域；
[0008]根据待测图像的头部姿态数据，对第一标定图像进行修正，得到多个第二标定图像和每个第二标定图像的注视点的标定位置，第一标定图像为根据预先设定的注视点的标定位置获取的图像，每个第二标定图像的头部姿态数据与待测图像的头部姿态数据相同；
[0009]根据待测图像、多个第二标定图像、和每个第二标定图像的注视点的标定位置，确定待测图像的注视点的预测位置，待测图像的注视点的预测位置为用户注视电子设备的显示屏中的真实位置；
[0010]根据待测图像的注视点的预测位置，触发电子设备执行相应的操作。
[0011]上述方法中，电子设备可获取包括用户的眼部区域和头部区域的待测图像，便于根据用户的眼部区域和头部区域获取待测图像的头部姿态。
[0012]电子设备生成待测图像的头部姿态数据对应的标定图，即多个第二标定图像，代替用户重新标定，便于电子设备根据获得的多个第二标定图像确定待测图像的注视点的预测位置。
[0013]另外，电子设备基于待测图像、多个第二标定图像、和每个第二标定图像的注视点的标定位置，可以获得更加准确的待测图像的注视点的预测位置，为电子设备根据待测图像的注视点的预测位置，触发相应的操作做好数据准备。
[0014]此外，电子设备还可根据待测图像的注视点的预测位置，触发电子设备执行相应
的操作，能够解放用户的双手，在用户不方便用手执行相应的操作时，也能触发相应的操作，提高了用户的操作体验。
[0015]电子设备执行的操作可以包括：眼神解锁、眼控拍照(对焦)、裸眼3D、眼动浏览、身份识别、或眼控游戏。
[0016]结合第一方面，在第一方面的某些实现方式中，根据所述待测图像的头部姿态数据，对第一标定图像进行修正，得到多个第二标定图像和每个第二标定图像的注视点的标定位置，包括：
[0017]根据待测图像的头部姿态数据、用户的眼部中心的多个注视参考位置、第一标定图像、第一标定图像的头部姿态数据、和第一标定图像中用户的眼部中心的注视标定位置，确定多个第二标定图像和每个第二标定图像中用户的眼部中心的注视位置，用户的眼部中心的每个注视参考位置用于表示用户能够注视到电子设备的显示屏中的注视点；
[0018]根据每个第二标定图像中用户的眼部中心的注视位置，得到所述每个第二标定图像的注视点的标定位置。
[0019]结合第一方面，在第一方面的某些实现方式中，该方法还包括：
[0020]根据待测图像的头部姿态数据和第一标定图像的头部姿态数据，确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度；
[0021]在确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度满足预设条件时，根据待测图像的头部姿态数据、用户的眼部中心的多个注视参考位置、第一标定图像、第一标定图像的头部姿态数据、和第一标定图像中用户的眼部中心的注视标定位置，确定多个第二标定图像和每个第二标定图像中用户的眼部中心的注视位置。
[0022]上述方法中，电子设备可在确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度满足预设条件时，根据待测图像和第一标定图像确定多个第二标定图像和每个第二标定图像中用户的眼部中心的注视位置。
[0023]也就是说，电子设备在待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的差异较大时，获取多个第二标定图像和每个第二标定图像中用户的眼部中心的注视位置，便于在待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的差异较大时，电子设备也能准确获得待测图像的注视点的预测位置。
[0024]结合第一方面，在第一方面的某些实现方式中，头部姿态数据包括偏航角、俯仰角、和翻滚角，根据待测图像的头部姿态数据和第一标定图像的头部姿态数据，确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度，包括：
[0025]确定待测图像和第一标定图像中的偏航角、俯仰角、和翻滚角中的至少一种角度的差值大于预设阈值；
[0026]确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度满足预设条件，包括：
[0027]在待测图像和第一标定图像中的偏航角、俯仰角、和翻滚角中的至少一种角度的差值大于预设阈值时，确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度满足预设条件。
[0028]其中，头部姿态数据可以包括偏航角、俯仰角、和翻滚角。
[0029]基于上述描述，电子设备可以根据偏航角、俯仰角、和翻滚角确定待测图像的头部
姿态数据与第一标定图像的头部姿态数据之间的相似度。
[0030]由此，电子设备可在待测图像和第一标定图像中的偏航角、俯仰角、和翻滚角中的至少一种角度的差值大于预设阈值时，确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度满足预设条件。
[0031]从而，为电子设备在待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度满足预设条件时，执行确定多个第二标定图像和每个第二标定图像中用户的眼部中心的注视位置做好准备。
[0032]结合第一方面，在第一方面的某些实现方式中，根据待测图像的头部姿态数据和第一标定图像的头部姿态数据，确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度，还包括：
[0033]待测图像和第一标定图像中的偏航角、俯仰角、和翻滚角中的任意两种角度的累加值的差值大于预设阈值；
[0034]确定待测图像的头部姿态数据与第一标定图像的头部姿态数据之间的相似度满足预设条件，还包括：
[0035]在本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种眼动数据处理方法，其特征在于，应用于电子设备，所述方法包括：获取待测图像，所述待测图像包括与用户注视所述电子设备的显示屏有关的区域；根据所述待测图像的头部姿态数据，对第一标定图像进行修正，得到多个第二标定图像和每个第二标定图像的注视点的标定位置，所述第一标定图像为根据预先设定的注视点的标定位置获取的图像，每个第二标定图像的头部姿态数据与所述待测图像的头部姿态数据相同；根据所述待测图像、所述多个第二标定图像、和所述每个第二标定图像的注视点的标定位置，确定所述待测图像的注视点的预测位置，所述待测图像的注视点的预测位置为用户注视所述电子设备的显示屏中的真实位置；根据所述待测图像的注视点的预测位置，触发所述电子设备执行相应的操作。2.根据权利要求1所述的方法，其特征在于，所述根据所述待测图像的头部姿态数据，对第一标定图像进行修正，得到多个第二标定图像和每个第二标定图像的注视点的标定位置，包括：根据所述待测图像的头部姿态数据、用户的眼部中心的多个注视参考位置、所述第一标定图像、所述第一标定图像的头部姿态数据、和所述第一标定图像中用户的眼部中心的注视标定位置，确定多个第二标定图像和每个第二标定图像中用户的眼部中心的注视位置，用户的眼部中心的每个注视参考位置用于表示用户能够注视到所述电子设备的显示屏中的注视点；根据每个第二标定图像中用户的眼部中心的注视位置，得到所述每个第二标定图像的注视点的标定位置。3.根据权利要求2所述的方法，其特征在于，所述方法还包括：根据所述待测图像的头部姿态数据和第一标定图像的头部姿态数据，确定所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度；在确定所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度满足预设条件时，根据所述待测图像的头部姿态数据、用户的眼部中心的多个注视参考位置、所述第一标定图像、所述第一标定图像的头部姿态数据、和所述第一标定图像中用户的眼部中心的注视标定位置，确定多个第二标定图像和每个第二标定图像中用户的眼部中心的注视位置。4.根据权利要求3所述的方法，其特征在于，所述头部姿态数据包括偏航角、俯仰角、和翻滚角，根据所述待测图像的头部姿态数据和第一标定图像的头部姿态数据，确定所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度，包括：确定所述待测图像和所述第一标定图像中的偏航角、俯仰角、和翻滚角中的至少一种角度的差值大于预设阈值；确定所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度满足预设条件，包括：在所述待测图像和所述第一标定图像中的偏航角、俯仰角、和翻滚角中的至少一种角度的差值大于所述预设阈值时，确定所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度满足预设条件。5.根据权利要求4所述的方法，其特征在于，所述根据所述待测图像的头部姿态数据和
第一标定图像的头部姿态数据，确定所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度，还包括：所述待测图像和所述第一标定图像中的偏航角、俯仰角、和翻滚角中的任意两种角度的累加值的差值大于预设阈值；所述确定所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度满足预设条件，还包括：在所述待测图像和所述第一标定图像中的偏航角、俯仰角、和翻滚角中的任意两种角度的累加值的差值大于所述预设阈值时，所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度满足预设条件。6.根据权利要求4或5所述的方法，其特征在于，所述根据所述待测图像的头部姿态数据和第一标定图像的头部姿态数据，确定所述待测图像的头部姿态数据与所述第一标定图像的头部姿态数据之间的相似度，还包括：所述待测图像和所述第一标定图像中的偏航角、俯仰角、和翻滚角中的三种角度的累加值的差值大于预设阈值；所述确定所述待测图像的头部姿态数据与所述第一标定图像的头...

【专利技术属性】
技术研发人员：舒畅，
申请(专利权)人：荣耀终端有限公司，
类型：发明
国别省市：