车辆的交互方法及装置、电子设备、存储介质和车辆制造方法及图纸

本公开涉及一种车辆的交互方法及装置、电子设备、存储介质和车辆。所述方法包括：控制设置在车辆的车舱外的摄像头采集车舱外的视频流；根据所述车舱外的视频流进行人脸识别，得到车舱外的人脸识别结果；响应于所述车舱外的人脸识别结果为人脸识别成功，控制车门解锁和/或打开，并控制设置在车舱内的显示设备显示数字人，以通过所述数字人进行人机交互。

【技术实现步骤摘要】
车辆的交互方法及装置、电子设备、存储介质和车辆
本公开涉及车辆
，尤其涉及一种车辆的交互方法及装置、电子设备、存储介质和车辆。
技术介绍
随着车辆技术和计算机技术的发展，车辆的人机交互功能越来越受到用户的关注。人机交互是指人与计算机之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与计算机之间的信息交换过程。车辆的人机交互旨在实现人与车辆之间的交互。如何在车辆的人机交互中提高车辆的响应速度，是亟待解决的技术问题。
技术实现思路
本公开提供了一种车辆的交互技术方案。根据本公开的一方面，提供了一种车辆的交互方法，包括：控制设置在车辆的车舱外的摄像头采集车舱外的视频流；根据所述车舱外的视频流进行人脸识别，得到车舱外的人脸识别结果；响应于所述车舱外的人脸识别结果为人脸识别成功，控制车门解锁和/或打开，并控制设置在车舱内的显示设备显示数字人，以通过所述数字人进行人机交互。在本公开实施例中，通过控制设置在车辆的车舱外的摄像头采集车舱外的视频流，根据所述车舱外的视频流进行人脸识别，得到本文档来自技高网...

【技术保护点】
1.一种车辆的交互方法，其特征在于，包括：/n控制设置在车辆的车舱外的摄像头采集车舱外的视频流；/n根据所述车舱外的视频流进行人脸识别，得到车舱外的人脸识别结果；/n响应于所述车舱外的人脸识别结果为人脸识别成功，控制车门解锁和/或打开，并控制设置在车舱内的显示设备显示数字人，以通过所述数字人进行人机交互。/n

【技术特征摘要】
1.一种车辆的交互方法，其特征在于，包括：
控制设置在车辆的车舱外的摄像头采集车舱外的视频流；
根据所述车舱外的视频流进行人脸识别，得到车舱外的人脸识别结果；
响应于所述车舱外的人脸识别结果为人脸识别成功，控制车门解锁和/或打开，并控制设置在车舱内的显示设备显示数字人，以通过所述数字人进行人机交互。


2.根据权利要求1所述的方法，其特征在于，所述响应于所述车舱外的人脸识别结果为人脸识别成功，控制车门解锁和/或打开，并控制设置在车舱内的显示设备显示数字人，包括：
响应于所述车舱外的人脸识别结果为人脸识别成功，在控制车门解锁和/或打开的同时，控制设置在车舱内的显示设备显示数字人。


3.根据权利要求1或2所述的方法，其特征在于，
在人脸识别成功之前，所述显示设备处于关闭状态或者休眠状态，所述数字人对应的进程处于终止状态或者休眠状态；
所述控制设置在车舱内的显示设备显示数字人，包括：启动或唤醒设置在车舱内的显示设备；创建或唤醒所述数字人对应的进程，并运行所述数字人对应的进程，以将数字人显示在所述显示设备上。


4.根据权利要求3所述的方法，其特征在于，在启动或唤醒设置在车舱内的显示设备的同时，创建或唤醒所述数字人对应的进程。


5.根据权利要求3或4所述的方法，其特征在于，所述创建或唤醒所述数字人对应的进程，包括：
获取与所述车舱外的人脸识别结果对应的数字人形象信息和/或交互方式信息；
根据所述数字人形象信息和/或交互方式信息，创建或唤醒所述数字人对应的进程。


6.根据权利要求1至5中任意一项所述的方法，其特征在于，
在人脸识别成功之前，设置在所述车舱内的摄像头处于关闭状态或者休眠状态；
在所述得到车舱外的人脸识别结果之后，所述方法还包括：响应于所述车舱外的人脸识别结果为人脸识别成功，启动或唤醒设置在所述车舱内的摄像头，并控制所述车舱内的摄像头采集车舱内的视频流；基于所述车舱内的视频流，通过所述数字人与所述车辆的乘员进行交互。


7.根据权利要求6所述的方法，其特征在于，所述响应于所述车舱外的人脸识别结果为人脸识别成功，启动或唤醒设置在所述车舱内的摄像头，包括：
响应于所述车舱外的人脸识别结果为人脸识别成功，在控制车门解锁和/或打开的同时，启动或唤醒设置在所述车舱内的摄像头。


8.根据权利要求6或7所述的方法，其特征在于，所述基于所述车舱内的视频流，通过所述数字人与所述车辆的乘员进行交互，包括：
根据所述车舱内的视频流中的图像，检测乘员的位置信息；所述乘员的位置信息包括：所述乘员在所述图像中的第一相对位置信息，和/或，所述乘员在所述车舱内的第二相对位置信息；
根据所述乘员的位置信息，在所述显示设备上生成并显示所述数字人转向所述乘员的动画。


9.根据权利要求8所述的方法，其特征在于，所述根据所述车舱内的视频流中的图像，检测所述乘员的位置信息，包括：
在所述图像对应的图像坐标系中，检测所述乘员的至少一个部位所在的图像坐标区域；
将所述图像坐标区域作为所述乘员在所述图像中的所述第一相对位置信息；和/或，根据所述图像坐标系与所述车舱内的空间坐标系之间的映射关系，确定所述图像坐标区域对应的车舱内空间坐标区域，并将所述车舱内空间坐标区域作为所述乘员在所述车舱内的所述第二相对位置信息。


10.根据权利要求8或9所述的方法，其特征在于，所述根据所述乘员的位置信息，在所述显示设备上生成并显示所述数字人转向所述乘员的动画，包括：
根据预先建立的位置信息与数字人的朝向之间的映射关系，确定与所述乘员的位置信息对应的目标朝向；
在所述显示设备上生成并显示所述数字人转向所述目标朝向的动画。


11.根据权利要求8至10中任意一项所述的方法，其特征在于，所述根据所述乘员的位置信息，在所述显示设备上生成并显示所述数字人转向所述乘员的动画，包括：
响应于检测到的乘员的位置信息为多名乘员的多个位置信息，将所述多个位置信息中的一个位置信息确定为目标位置信息；
在所述显示设备上生成并显示所述数字人转向所述目标位置信息对应的乘员...

【专利技术属性】
技术研发人员：周群艳，曾彬，李轲，吴阳平，许亮，郑世静，伍俊，
申请(专利权)人：上海商汤临港智能科技有限公司，
类型：发明
国别省市：上海;31