在人机交互中对语音对话进行标注的方法和装置、设备和介质制造方法及图纸

本公开实施例公开了一种在人机交互中对语音对话进行标注的方法和装置、设备和介质，通过确定人机交互系统针对用户的前一次语音做出的机器语音回复，确定用户针对所述机器语音回复做出的本次语音时的情绪特征，并基于该情绪特征确定用户针对所述机器语音回复的第一满意度；若本次语音为多轮对话中的结束语音，确定历史轮对话中用户针对人机交互系统输出的机器语音回复的至少一个第二满意度，基于第一满意度和至少一个第二满意度对多轮对话进行标注，从而可以实现对人机对话的自动标注。注。注。

【技术实现步骤摘要】
在人机交互中对语音对话进行标注的方法和装置、设备和介质


[0001]本公开涉及自然语言处理技术，尤其是一种在人机交互中对语音对话进行标注的方法和装置、设备和介质。

技术介绍

[0002]人机交互是指人与计算机之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与计算机之间的信息交换过程。传统的人机交互主要通过键盘、鼠标、显示器等输入输出设备实现，而随着语音识别、自然语言处理(NatureLanguage Processing，NLP)等技术的发展，人与机器之间已经能够通过类似于自然语言的方式进行交互。
[0003]随着智能生活概念的逐步推广、人机交互技术的不断提升，对NLP技术也提出了更高的要求。例如，当用户给出一个诸如语音会话以期望机器给出相应的回复或者执行相关的任务时，这一会话内容将通过信号处理、语音识别等技术转换为文本，作为NLP系统的输入，由NLP系统理解用户的会话含义，并在此基础上给出相应的回复或者执行相关的任务。
[0004]因此，NLP系统对用户会话含义理解的准确度，直接影响了NLP系统针对用户会话的回复效率本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种在人机交互中对语音对话进行标注的方法，包括：确定人机交互系统针对用户的前一次语音做出的机器语音回复；确定所述用户针对所述机器语音回复做出的本次语音时的情绪特征；基于所述情绪特征，确定所述用户针对所述机器语音回复的第一满意度；若所述本次语音为多轮对话中的结束语音，确定所述多轮对话中位于所述本次语音所属的本轮对话之前的历史轮对话中，所述用户针对所述人机交互系统输出的机器语音回复的至少一个第二满意度，其中，一个机器语音回复对应所述用户的一次语音；基于所述第一满意度和所述至少一个第二满意度，对所述多轮对话进行标注。2.根据权利要求1所述的方法，其中，所述确定所述用户针对所述机器语音回复做出的本次语音时的情绪特征，包括：确定所述用户针对所述机器语音回复做出的本次语音时的语音参数；确定所述用户针对所述机器语音回复做出的本次语音时的人脸表情；基于所述语音参数和所述人脸表情，确定所述用户针对所述机器语音回复做出的本次语音时的情绪特征。3.根据权利要求2所述的方法，其中，所述确定所述用户针对所述机器语音回复做出的本次语音时的语音参数，包括：在检测到所述用户针对所述机器语音回复做出的本次语音的起始时间点开始，以音节为单位确定所述用户在所述本次语音中的每一个音节对应的语音参数分量；基于在所述本次语音的持续期间得到的语音参数分量，确定所述用户针对所述机器语音回复做出的本次语音时的语音参数。4.根据权利要求2所述的方法，其中，所述确定所述用户针对所述机器语音回复做出的本次语音时的人脸表情，包括：获取所述用户针对所述机器语音回复做出本次语音时的人脸图像；将所述人脸图像输入预先训练得到的第一神经网络，经所述第一神经网络输出所述人脸图像对应的人脸表情。5.根据权利要求2所述的方法，其中，所述基于所述情绪特征，确定所述用户针对所述机器语音回复的第一满意度，包括：确定所述语音参数对应的第一情绪分值；确定所...

【专利技术属性】
技术研发人员：余凯，李星宇，王怀章，王超银，
申请(专利权)人：地平线上海人工智能技术有限公司，
类型：发明
国别省市：