交互检测方法、装置、车辆、存储介质以及程序产品制造方法及图纸

技术编号:42020132 阅读:19 留言:0更新日期:2024-07-16 23:12
本申请提供一种针对多媒体系统的交互检测方法、装置、车辆、存储介质及程序产品。该方法包括:获取目标对象的脸部图像和眼部图像;将脸部图像和眼部图像输入眼部检测模型,以由眼部检测模型同时执行三个任务:用于检测目标对象的眼部遮挡状态的第一任务、用于检测目标对象的眼部睁闭状态的第二任务以及用于检测目标对象的眼部注视方向的第三任务,得到眼部遮挡状态、眼部睁闭状态以及眼部注视方向;根据眼部遮挡状态、眼部睁闭状态、眼部注视方向以及多媒体系统所在位置进行交互检测,获得交互检测结果;交互检测结果用于描述目标对象是否存在与多媒体系统进行交互的意图。实现基于眼部状态准确地捕捉目标对象的交互意图,同时节省计算资源。

【技术实现步骤摘要】

本申请涉及人机交互,尤其涉及一种针对多媒体系统的交互检测方法、装置、车辆、计算机可读存储介质以及计算机程序产品。


技术介绍

1、车载多媒体系统是安装在汽车中的一种综合性电子设备,旨在为车辆中的用户提供多种娱乐和信息服务。比如可以为车辆中的用户提供娱乐功能、导航功能或者通信功能等等。

2、相关技术中,驾驶员与车载多媒体系统的交互过程,通常需要驾驶员进行物理触摸或手动操作,这可能会使驾驶员分心而忽略道路情况。


技术实现思路

1、有鉴于此,本申请提供一种针对多媒体系统的交互检测方法、装置、车辆、计算机可读存储介质以及计算机程序产品。

2、具体地,本申请是通过如下技术方案实现的:

3、根据本申请实施例的第一方面,提供一种针对多媒体系统的交互检测方法,包括:

4、获取目标对象的脸部图像和眼部图像;

5、将所述目标对象的脸部图像和眼部图像输入预先训练好的眼部检测模型,以由所述眼部检测模型基于所述目标对象的脸部图像和眼部图像同时执行以下三个任务:用于检测目标对象的本文档来自技高网...

【技术保护点】

1.一种针对多媒体系统的交互检测方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,还包括:

3.根据权利要求1所述的方法,其特征在于,所述根据所述眼部遮挡状态、所述眼部睁闭状态、所述眼部注视方向以及所述多媒体系统的位置信息进行交互检测,获得交互检测结果,包括:

4.根据权利要求1所述的方法,其特征在于,所述眼部检测模型包括特征提取网络、眼部遮挡状态检测网络、眼部睁闭状态检测网络以及眼部注视方向检测网络;

5.根据权利要求1所述的方法,其特征在于,还包括:

6.根据权利要求5所述的方法,其特征在于,所述根据所述目...

【技术特征摘要】

1.一种针对多媒体系统的交互检测方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,还包括:

3.根据权利要求1所述的方法,其特征在于,所述根据所述眼部遮挡状态、所述眼部睁闭状态、所述眼部注视方向以及所述多媒体系统的位置信息进行交互检测,获得交互检测结果,包括:

4.根据权利要求1所述的方法,其特征在于,所述眼部检测模型包括特征提取网络、眼部遮挡状态检测网络、眼部睁闭状态检测网络以及眼部注视方向检测网络;

5.根据权利要求1所述的方法,其特征在于,还包括:

6.根据权利要求5所述的方法,其特征在于,所述根据所述目标对象的头部姿态、所述眼部遮挡状态、所述眼部睁闭状态、所述眼部注视方向以及所述多媒体系统所在位置进行交互检测,获得交互检测结果,包括:<...

【专利技术属性】
技术研发人员:郑笑寅杨杰张国祥白宸熊丰伟赵益青
申请(专利权)人:广州小鹏自动驾驶科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1