当前位置: 首页 > 专利查询>张也弛专利>正文

操作者目光在终端设备屏幕上落点位置的确定方法及装置制造方法及图纸

技术编号:31224376 阅读:22 留言:0更新日期:2021-12-08 09:25
本文提供了一种操作者目光在终端设备屏幕上落点位置的确定方法及装置,适用于终端设备控制场景,其中,方法包括:根据采集的所述操作者的图像,生成包括所述操作者人眼模型与终端设备模型在内的虚拟空间;记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系;根据所述操作者的图像中人眼特征信息与所述对应关系,确定所述操作者目光在所述终端设备屏幕上的落点位置,以使终端设备根据该落点位置生成控制指令。本文能对终端设备的图像采集设备性能要求低,能够不受环境影响,在无需手操作的情况下,利用操作者目光实现对终端设备的精准控制。设备的精准控制。设备的精准控制。

【技术实现步骤摘要】
操作者目光在终端设备屏幕上落点位置的确定方法及装置


[0001]本文涉及设备的控制方法,尤其涉及一种操作者目光在终端设备屏幕上落点位置的确定方法及装置。

技术介绍

[0002]随着社会的发展,终端设备在人们生活、工作中扮演着很重要的角色,而最新终端设备的控制方式主要有电容屏幕感应控制,声音指令(语音助手)控制,基于前置摄像头的手势控制等。上述控制方式虽然都能对终端设备进行控制,但均有一定的局限性,具体体现在:
[0003]1.对于电容屏幕感应控制的方式:天气寒冷或者手被占用的情况下,会影响终端设备的控制效果;
[0004]2.对于声音指令控制的方式:在嘈杂的环境下指令识别不准确,在要求保持安静的场所不宜使用,且很多功能需要预先设置;
[0005]3.对于基于前置摄像头的手势控制:在特殊情况下,例如天气寒冷时,会影响终端设备的控制效果。

技术实现思路

[0006]本文用于解决现有技术中,终端设备屏幕上的落点位置及终端设备的控制是由操作者手控、声控实现的,存在受环境影响会影响用户体验的问题,例如环境太冷,使得操作者无法用手控制终端设备。
[0007]为了解决上述技术问题,本文的第一方面提供一种操作者目光在终端设备屏幕上落点位置的确定方法,包括:
[0008]根据采集的所述操作者的图像,生成包括操作者人眼模型与终端设备模型在内的虚拟空间;
[0009]记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系;
[0010]根据所述操作者的图像中人眼特征信息与所述对应关系,确定所述操作者目光在所述终端设备屏幕上的落点位置。
[0011]进一步实施例中,根据采集的所述操作者的图像,生成包括所述操作者人眼模型与终端设备模型在内的虚拟空间,包括:
[0012]根据所述操作者的图像,确定所述操作者与所述终端设备的空间位置关系;
[0013]根据所述操作者与所述终端设备的空间位置关系,生成包括所述操作者人眼模型与终端设备模型在内的虚拟空间。
[0014]进一步实施例中,记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系,包括:
[0015]按预先设定的规则,控制所述虚拟空间中的所述操作者人眼模型关注所述终端设备模型屏幕的预定位置,确定所述操作者人眼模型的特征信息,建立所述终端设备屏幕的被关注位置与所述人眼模型的特征信息的对应关系;
[0016]集合所述终端设备屏幕的每一被关注位置与相应的所述人眼模型的特征信息的对应关系,得到所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系。
[0017]进一步实施例中,根据所述操作者的图像中人眼特征信息与所述对应关系,确定所述操作者目光在所述终端设备屏幕上的落点位置,包括:
[0018]从所述对应关系中,查找所述操作者的人眼特征信息;
[0019]将查找出的所述人眼特征信息对应的所述终端设备模型屏幕的被关注位置,作为所述操作者目光在所述终端设备屏幕上的落点位置。
[0020]进一步实施例中,所述操作者人眼模型预先建立,包括:虹膜边缘曲线及眼部周围特征,所述眼部周围特征用于定位所述操作者人眼模型。
[0021]进一步实施例中,所述操作者人眼模型的确定过程包括:
[0022]在所述操作者的各面部三维点阵模型中,查找并提取所述操作者的人眼特征信息,其中,所述操作者的面部三维点阵模型由三维扫描仪预先扫描得到;
[0023]根据提取出的人眼特征信息,构造所述操作者人眼模型。
[0024]本文的第二方面提供一种终端设备控制方法,包括:
[0025]采集操作者的图像;
[0026]根据采集的所述操作者的图像,生成包括所述操作者人眼模型与终端设备模型在内的虚拟空间;
[0027]记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系;
[0028]根据所述操作者的图像中人眼特征信息与所述对应关系,确定所述操作者目光在所述终端设备屏幕上的落点位置;
[0029]根据所述操作者目光在所述终端设备屏幕上的落点位置,生成所述终端设备的操作指令。
[0030]本文的第三方面提供一种操作者目光在终端设备屏幕上落点位置的确定装置,包括:
[0031]虚拟空间构建模块,用于根据采集的所述操作者的图像,生成包括所述操作者人眼模型与终端设备模型在内的虚拟空间;
[0032]人眼运动模拟模块,用于记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系;
[0033]操作者目标定位模块,用于根据所述操作者的图像中人眼特征信息与所述对应关系,确定所述操作者目光在所述终端设备屏幕上的落点位置。
[0034]本文的第四方面提供一种终端设备控制装置,包括:
[0035]图像采集模块,用于采集操作者的图像;
[0036]虚拟空间构建模块,用于根据采集的所述操作者的图像,生成包括所述操作者人
眼模型与终端设备模型在内的虚拟空间;
[0037]人眼运动模拟模块,用于记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系;
[0038]操作者目标定位模块,用于根据所述操作者的图像中人眼特征信息与所述对应关系,确定所述操作者目光在所述终端设备屏幕上的落点位置;
[0039]控制模块,用于根据所述操作者目光在所述终端设备屏幕上的落点位置,生成所述终端设备的操作指令。
[0040]本文的第五方面提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现前述任一实施例所述的操作者目光在终端设备屏幕上落点位置的确定方法。
[0041]本文的第六方面提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行计算机程序,所述计算机程序被处理器执行时实现前述任一实施例所述的操作者目光在终端设备屏幕上落点位置的确定方法。
[0042]本文提供的操作者目光在终端设备屏幕上落点位置的确定方法及装置、终端设备控制方法、计算机设备及计算机设备存储介质,通过步骤根据采集的所述操作者的图像,生成包括所述操作者人眼模型与终端设备模型在内的虚拟空间,能够在虚拟空间中模拟操作者与终端设备本身及其位置关系;通过步骤记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系,能够模拟操作者关本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种操作者目光在终端设备屏幕上落点位置的确定方法,其特征在于,包括:根据采集的所述操作者的图像,生成包括操作者人眼模型与终端设备模型在内的虚拟空间;记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系;根据所述操作者的图像中人眼特征信息与所述对应关系,确定所述操作者目光在所述终端设备屏幕上的落点位置。2.如权利要求1所述的方法,其特征在于,根据采集的所述操作者的图像,生成包括所述操作者人眼模型与终端设备模型在内的虚拟空间,包括:根据所述操作者的图像,确定所述操作者与所述终端设备的空间位置关系;根据所述操作者与所述终端设备的空间位置关系,生成包括所述操作者人眼模型与终端设备模型在内的虚拟空间。3.如权利要求1所述的方法,其特征在于,记录在所述虚拟空间中所述操作者人眼模型关注所述终端设备模型屏幕时,所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系,包括:按预先设定的规则,控制所述虚拟空间中的所述操作者人眼模型关注所述终端设备模型屏幕的预定位置,确定所述操作者人眼模型的特征信息,建立所述终端设备屏幕的被关注位置与所述人眼模型的特征信息的对应关系;集合所述终端设备屏幕的每一被关注位置与相应的所述人眼模型的特征信息的对应关系,得到所述终端设备模型屏幕不同的被关注位置与所述操作者人眼模型的特征信息的对应关系。4.如权利要求1所述的方法,其特征在于,根据所述操作者的图像中人眼特征信息与所述对应关系,确定所述操作者目光在所述终端设备屏幕上的落点位置,包括:从所述对应关系中,查找所述操作者的人眼特征信息;将查找出的所述人眼特征信息对应的所述终端设备模型屏幕的被关注位置,作为所述操作者目光在所述终端设备屏...

【专利技术属性】
技术研发人员:ꢀ七四专利代理机构
申请(专利权)人:张也弛
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1