设备控制方法、模型训练方法及装置制造方法及图纸

技术编号:43935244 阅读:11 留言:0更新日期:2025-01-07 21:28
本公开提出一种设备控制方法、模型训练方法及装置,通过获取一帧或多帧面部图像,基于任一帧面部图像进行眼部行为识别,以得到各面部图像的眼部行为信息,并基于一帧或多帧面部图像的眼部行为信息,确定目标控制指令,之后基于目标控制指令进行设备控制。由此,该方法可以通过眼部行为信息对设备进行控制,这样能够满足用户对设备个性化控制的需求,提升设备控制的丰富性和便捷性,提升用户体验。

【技术实现步骤摘要】

本公开涉及人机交互,尤其涉及一种设备控制方法、模型训练方法及装置


技术介绍

1、目前,设备控制方式种类繁多,包括语音控制、手机app控制、遥控器控制等。其中,语音控制是设备最为普及的一种控制方式,通过智能音响或智能语音助手来实现对设备的语音控制;手机app控制和遥控器控制均是一种常见的设备控制方式。但是,这些控制方式可能无法满足用户对个性化控制的需求。


技术实现思路

1、本公开旨在至少在一定程度上解决相关技术中的技术问题之一。

2、为此,本公开的第一个目的在于提出一种设备控制方法,通过眼部行为信息对设备进行控制,这样能够满足用户对设备个性化控制的需求,提升设备控制的丰富性和便捷性,提升用户体验。

3、本公开的第二个目的在于提出一种模型训练方法。

4、本公开的第三个目的在于提出一种设备控制装置。

5、本公开的第四个目的在于提出一种模型训练装置。

6、本公开的第五个目的在于提出一种电子设备。

7、本公开的第六个目的在于提出一种计算机可读存储本文档来自技高网...

【技术保护点】

1.一种设备控制方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述眼部行为信息包括注视方向;所述基于所述一帧或多帧面部图像的所述眼部行为信息,确定目标控制指令,包括:

3.根据权利要求2所述的方法,其特征在于,所述将所述注视方向序列与预设的标准序列进行匹配,包括:

4.根据权利要求1所述的方法,其特征在于,所述基于所述目标控制指令进行设备控制,包括:

5.根据权利要求1-4任一项所述的方法,其特征在于,所述基于任一帧所述面部图像进行眼部行为识别,以得到各所述面部图像的眼部行为信息,包括:

>6.根据权利要求5...

【技术特征摘要】

1.一种设备控制方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述眼部行为信息包括注视方向;所述基于所述一帧或多帧面部图像的所述眼部行为信息,确定目标控制指令,包括:

3.根据权利要求2所述的方法,其特征在于,所述将所述注视方向序列与预设的标准序列进行匹配,包括:

4.根据权利要求1所述的方法,其特征在于,所述基于所述目标控制指令进行设备控制,包括:

5.根据权利要求1-4任一项所述的方法,其特征在于,所述基于任一帧所述面部图像进行眼部行为识别,以得到各所述面部图像的眼部行为信息,包括:

6.根据权利要求5所述的方法,其特征在于,所述针对任一帧所述面部图像提取眼部局部图像,包括:

7.根据权利要求5所述的方法,其特征在于,所述眼部局部图像包括左眼局部图像和右眼局部图像,所述分别对所述眼部局部图像和所属的面部图像进行特征提取,包括:

8.根据权利要求7所述的方法,其特征在于,所述基于所述眼部局部图像的特征和所属的面部图像的特征进行分类,以得到所述眼部行为信息,包括...

【专利技术属性】
技术研发人员:严勇胡佳椰刘艺超陈晓晴李佳浩
申请(专利权)人:北京小米移动软件有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1