虚拟机器人的交互方法、装置、电子设备及存储介质制造方法及图纸

本申请公开了一种虚拟机器人的交互方法、装置、电子设备及存储介质。该方法包括：实时获取当前会话进程对应的目标用户的音频数据；根据音频数据，确定目标用户的头部的空间位置；根据空间位置，获取虚拟机器人的头部的姿态调整参数序列，姿态调整参数序列包括多个姿态调整参数；基于姿态调整参数序列，逐步调整虚拟机器人的头部姿态，直至虚拟机器人的头部朝向目标用户，并生成图像序列，图像序列由多帧连续的虚拟机器人的姿态图像构成；根据图像序列，生成并输出包含虚拟机器人的头部姿态变化的交互视频。本申请可根据用户的头部位置动态调整虚拟机器人的头部姿态，使交互视频中的虚拟机器人始终面向用户，提高人机交互的自然度。

Interaction method, device, electronic equipment and storage medium of virtual robot

【技术实现步骤摘要】
虚拟机器人的交互方法、装置、电子设备及存储介质
本申请实施例涉及人机交互
，更具体地，涉及一种虚拟机器人的交互方法、装置、电子设备及存储介质。
技术介绍
随着人工智能相关技术的发展，机器人客服的交互功能越来越强，能够适用的场景也越来越多，大大提高了交互效率，节省了人工资源。而众所周知的，面对面交流是人与人之间最基本的礼貌，即便是与机器人之间的交流，用户多少也会有这方面的体验。但是，目前大多机器人的交互功能比较单一，通常只是简单的基于用户语音或触摸输入的指令，执行相应的动作，缺乏生动性，用户体验不佳。
技术实现思路
本申请实施例提供一种虚拟机器人的交互方法、装置、电子设备及存储介质，可以使交互视频中的虚拟机器人始终面向用户，优化了人机交互体验。第一方面，本申请实施例提供了一种虚拟机器人的交互方法，该方法可包括：实时获取当前会话进程对应的目标用户的音频数据，所述会话进程中所述虚拟机器人与所述目标用户一对一交互；根据所述音频数据，确定所述目标用户的头部的空间位置；根据所述空间位置，获取所述虚拟机器人的头部的姿态调整参本文档来自技高网...

【技术保护点】
1.一种虚拟机器人的交互方法，其特征在于，所述方法包括：/n实时获取当前会话进程对应的目标用户的音频数据，所述会话进程中所述虚拟机器人与所述目标用户一对一交互；/n根据所述音频数据，确定所述目标用户的头部的空间位置；/n根据所述空间位置，获取所述虚拟机器人的头部的姿态调整参数序列，所述姿态调整参数序列包括多个姿态调整参数；/n基于所述姿态调整参数序列，逐步调整所述虚拟机器人的头部姿态，直至所述虚拟机器人的头部朝向所述目标用户，并生成图像序列，所述图像序列由多帧连续的所述虚拟机器人的姿态图像构成；/n根据所述图像序列，生成并输出包含所述虚拟机器人的头部姿态变化的交互视频。/n

【技术特征摘要】
1.一种虚拟机器人的交互方法，其特征在于，所述方法包括：
实时获取当前会话进程对应的目标用户的音频数据，所述会话进程中所述虚拟机器人与所述目标用户一对一交互；
根据所述音频数据，确定所述目标用户的头部的空间位置；
根据所述空间位置，获取所述虚拟机器人的头部的姿态调整参数序列，所述姿态调整参数序列包括多个姿态调整参数；
基于所述姿态调整参数序列，逐步调整所述虚拟机器人的头部姿态，直至所述虚拟机器人的头部朝向所述目标用户，并生成图像序列，所述图像序列由多帧连续的所述虚拟机器人的姿态图像构成；
根据所述图像序列，生成并输出包含所述虚拟机器人的头部姿态变化的交互视频。


2.根据权利要求1所述的方法，其特征在于，所述音频数据由两个麦克风采集到，所述根据所述音频数据，确定所述目标用户的头部的空间位置，包括：
根据所述两个麦克风采集到的同一音频数据的音频特征差异，确定所述音频数据对应的音源的平面坐标；
将所述平面坐标转换为空间坐标系中的三维坐标，并将所述三维坐标作为所述目标用户的头部的空间位置，其中，所述空间坐标系以所述虚拟机器人的头部的空间位置为原点。


3.根据权利要求1所述的方法，其特征在于，所述音频数据由麦克风阵列采集到，所述麦克风阵列至少由3个麦克风组成，所述根据所述音频数据，确定所述目标用户的头部的空间位置，包括：
根据所述麦克风阵列中每个麦克风采集的同一音频数据的音频特征差异，确定所述音频数据的音源在空间坐标系中的三维坐标，并将所述三维坐标作为所述目标用户的头部的空间位置，所述空间坐标系以所述虚拟机器人的头部的空间位置为原点。


4.根据权利要求1所述的方法，其特征在于，在所述实时获取当前会话进程对应的目标用户的音频数据之前，所述方法还包括：
当获取到第一用户的音频数据时，提取所述第一用户的音频数据对应的第一声纹特征；
建立与所述第一用户对应的第一会话进程，并将所述第一会话进程与所述第一声纹特征绑定；
所述实时获取当前会话进程对应的目标用户的音频数据，包括：
当所述当前会话进程为所述第一会话进程时，将所述第一会话进程对应的第一用户作为所述当前会话进程对应的目标用户，并根据所述第一声纹特征，实时获取所述目标用户的音频数据。


5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
当所述当前会话进程为所述第一会话进程时，如果获取到第二用户的音频数据，则提取所述第二用户的音频数据对应的第二声纹特征；
建立与所述第二用户对应的第二会话进程，并将所述第二会话进程与所述第二声纹特征绑定；
当所述第一会话进程结束或者所述第一会话进程处于等待超时状态时，将所述当前会话进程切换为所述第二会话进程；
所述实时获取当前会话进程对应的目标用户的音频数据，包括：
将所述第二会话进程对应的第二用户作为所述当前会话进程对应的目标用户，并根据所述第二声纹特征，实时获取所述目标用户的音频数据。


6.根据权利要求5所述的方法，其特征在于，所述第一会话进程处于等待超时状态，包括：
当未获取到所述第一用户的音频数据时，进行等待时间的计时；
当所述计时的数值未达到设定时长，且所述计时期间未采集到所述第一用户的音频数据时，确定所述第一会话进程处于等待超时状态...

【专利技术属性】
技术研发人员：刘炫鹏，
申请(专利权)人：深圳追一科技有限公司，
类型：发明
国别省市：广东;44