本发明专利技术公开了一种基于情绪分析的人机互动方法、装置、计算机设备及介质，方法包括接收用户的语音数据；将用户的语音数据转换为用户的文本数据；对用户的文本数据进行语义分析和情感分析，以获得用户的情绪状态关键词；查询与用户的情绪状态关键词相关的知识数据，并生成与情绪相关的具有故事情境的文本数据；将多媒体数据与情绪相关的具有故事情境的文本数据进行融合，以得到融合后的文本数据；从融合后的文本数据转换出融合后的语音数据；将融合后的文本数据在触控显示界面展示，并同时播放融合后的语音数据。本发明专利技术能够充分利用用户的情绪信息与用户更加深层次的互动，并且能够给予用户一定的情绪引导，帮助用户更加了解自己的情绪。的情绪。的情绪。
【技术实现步骤摘要】
基于情绪分析的人机互动方法、装置、计算机设备及介质
[0001]本专利技术涉及数据处理
，更具体地说是基于情绪分析的人机互动方法、装置、计算机设备及介质。
技术介绍
[0002]随着社会的发展，人们所能接触到的事物也更加丰富，随之而来的是人们的情绪也容易因为接触的不同事物出现波动，特别是儿童，在成长过程中可能遇到各种困惑、压力和情绪问题，如自卑、焦虑、抑郁、孤独等，因此，对人们的情绪分析是比较重要的问题。
[0003]目前，市面上的情绪分析技术一般通过采集用户的语音数据或者图像数据进行情绪分析，当这种分析技术仅仅是单方面的，仅仅停留在情绪分析的阶段，没有与用户建立更深层次的互动联系，以及不能及时给予用户一定的情绪引导和评估。
技术实现思路
[0004]本专利技术的目的在于克服现有技术的不足，提供基于情绪分析的人机互动方法、装置、计算机设备及介质。
[0005]为实现上述目的，本专利技术采用以下技术方案：
[0006]第一方面，本专利技术提供了一种基于情绪分析的人机互动方法，包括：
[0007]接收用户的语音数据；
[0008]将用户的语音数据转换为用户的文本数据；
[0009]对用户的文本数据进行语义分析和情感分析，以获得用户的情绪状态关键词；
[0010]查询与用户的情绪状态关键词相关的知识数据，并生成与情绪相关的具有故事情境的文本数据；
[0011]将多媒体数据与情绪相关的具有故事情境的文本数据进行融合，以得到融合后的文本数据；
[0012]从融合后的文本数据转换出融合后的语音数据；
[0013]将融合后的文本数据在触控显示界面展示，并同时播放融合后的语音数据。
[0014]基于第一方面，进一步技术方案为：所述将融合后的文本数据在触控显示界面展示，并同时播放融合后的语音数据之后，包括：
[0015]响应于用户对触控显示界面的触摸或点击操作；
[0016]显示用户选择的故事情境的文本内容；
[0017]统计用户对选择的故事情境的文本内容中的提问进行回答的数据；
[0018]将统计结果与选择的故事情境的内容的标准答案进行对比；
[0019]根据对比结果生成反馈信息，并展示在触控显示界面。
[0020]基于第一方面，进一步技术方案为：所述对用户的文本数据进行语义分析和情感分析，以获得用户的情绪状态关键词，包括：
[0021]使用自然语言处理技术将用户的文本数据输进行语义分析和情感分析，以得到语
义信息和情感信息；
[0022]根据语义信息和情感信息生成关于用户的情绪状态关键词。
[0023]基于第一方面，进一步技术方案为：所述查询与用户的情绪状态关键词相关的知识数据，并生成与情绪相关的具有故事情境的文本数据，包括：
[0024]调用知识库；
[0025]利用用户的情绪状态关键词从知识库中查询出相关的知识和数据；
[0026]将查询出相关的知识和数据转换为具有故事情境的文本数据。
[0027]基于第一方面，进一步技术方案为：所述将多媒体数据与情绪相关的具有故事情境的文本数据进行融合，以得到融合后的文本数据，包括：
[0028]将多媒体数据和情绪相关的具有故事情境的文本数据进行分段处理，以得到多个分段的多媒体数据和多个分段的具有故事情境的文本数据；
[0029]分别从每个分段的多媒体数据和每个分段的具有故事情境的文本数据提取出关联特征；
[0030]根据关联特征将分段的多媒体数据融合至相对应的分段的具有故事情境的文本数据中；
[0031]将进行分段融合后的多媒体数据与情绪相关的具有故事情境的文本数据再次进行整体融合，以生成包含多媒体和情境元素的文本数据。
[0032]基于第一方面，进一步技术方案为：所述从融合后的文本数据转换出融合后的语音数据，包括：
[0033]选择发音风格；
[0034]设定的语音和语调；
[0035]使用自然语言处理技术结合选择发音风格以及设定的语音和语调将融合后的文本数据转换为语音数据。
[0036]第二方面，本专利技术还提供了一种基于情绪分析的人机互动装置，包括接收单元、第一转换单元、分析单元、查询单元、融合单元、第二转换单元以及显示播放单元；
[0037]所述接收单元，用于接收用户的语音数据；
[0038]所述第一转换单元，用于将用户的语音数据转换为用户的文本数据；
[0039]所述分析单元，用于对用户的文本数据进行语义分析和情感分析，以获得用户的情绪状态关键词；
[0040]所述查询单元，用于查询与用户的情绪状态关键词相关的知识数据，并生成与情绪相关的具有故事情境的文本数据；
[0041]所述融合单元，用于将多媒体数据与情绪相关的具有故事情境的文本数据进行融合，以得到融合后的文本数据；
[0042]所述第二转换单元，用于从融合后的文本数据转换出融合后的语音数据；
[0043]所述显示播放单元，用于将融合后的文本数据在触控显示界面展示，并同时播放融合后的语音数据。
[0044]基于第二方面，进一步技术方案为：还包括响应单元、显示单元、统计单元、对比单元以及反馈单元；
[0045]所述响应单元，用于响应于用户对触控显示界面的触摸或点击操作；
[0046]所述显示单元，用于显示用户选择的故事情境的文本内容；
[0047]所述统计单元，用于统计用户对选择的故事情境的文本内容中的提问进行回答的数据；
[0048]所述对比单元，用于将统计结果与选择的故事情境的内容的标准答案进行对比；
[0049]所述反馈单元，用于根据对比结果生成反馈信息，并展示在触控显示界面。
[0050]第三方面，本专利技术还提供了一种计算机设备，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上述的基于情绪分析的人机互动方法。
[0051]第四方面，本专利技术还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令被处理器执行时，使得所述处理器执行如上述的基于情绪分析的人机互动方法。
[0052]本专利技术与现有技术相比的有益效果是：通过对用户的语音数据进行语义分析和情感分析，得到用户的情绪状态，然后再根据用户的情绪状态建立与情绪相关的具有故事情境的文本数据，并融合了多媒体数据，然后展示并供用户选择，最后根据用户的选择进行更加具体的故事情境的内容展示，从而能够充分利用用户的情绪信息与用户更加深层次的互动，并且能够给予用户一定的情绪引导，帮助用户更加了解自己的情绪。
[0053]上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术技术手段，可依照说明书的内容予以实施，并且为了让本专利技术的上述和其它目的特征及优点能够更明显易懂，以下特举较佳实施例，详细说明如下。...
【技术保护点】
【技术特征摘要】
1.基于情绪分析的人机互动方法，其特征在于，包括：接收用户的语音数据；将用户的语音数据转换为用户的文本数据；对用户的文本数据进行语义分析和情感分析，以获得用户的情绪状态关键词；查询与用户的情绪状态关键词相关的知识数据，并生成与情绪相关的具有故事情境的文本数据；将多媒体数据与情绪相关的具有故事情境的文本数据进行融合，以得到融合后的文本数据；从融合后的文本数据转换出融合后的语音数据；将融合后的文本数据在触控显示界面展示，并同时播放融合后的语音数据。2.根据权利要求1所述的基于情绪分析的人机互动方法，其特征在于，所述将融合后的文本数据在触控显示界面展示，并同时播放融合后的语音数据之后，包括：响应于用户对触控显示界面的触摸或点击操作；显示用户选择的故事情境的文本内容；统计用户对选择的故事情境的文本内容中的提问进行回答的数据；将统计结果与选择的故事情境的内容的标准答案进行对比；根据对比结果生成反馈信息，并展示在触控显示界面。3.根据权利要求1所述的基于情绪分析的人机互动方法，其特征在于，所述对用户的文本数据进行语义分析和情感分析，以获得用户的情绪状态关键词，包括：使用自然语言处理技术将用户的文本数据输进行语义分析和情感分析，以得到语义信息和情感信息；根据语义信息和情感信息生成关于用户的情绪状态关键词。4.根据权利要求1所述的基于情绪分析的人机互动方法，其特征在于，所述查询与用户的情绪状态关键词相关的知识数据，并生成与情绪相关的具有故事情境的文本数据，包括：调用知识库；利用用户的情绪状态关键词从知识库中查询出相关的知识和数据；将查询出相关的知识和数据转换为具有故事情境的文本数据。5.根据权利要求1所述的基于情绪分析的人机互动方法，其特征在于，所述将多媒体数据与情绪相关的具有故事情境的文本数据进行融合，以得到融合后的文本数据，包括：将多媒体数据和情绪相关的具有故事情境的文本数据进行分段处理，以得到多个分段的多媒体数据和多个分段的具有故事情境的文本数据；分别从每个分段的多媒体数据和每个分段的具有故事情境的文本数据提取出关联特征；根据关联特征将分段的多媒体数据融合至相对应的分段的具有故事情境的文本数据中；将进行分段融合后的多媒体数据与情绪相关的具...
【专利技术属性】
技术研发人员：钟杰，张云翔，朱俊成，
申请(专利权)人：深圳前海丹捷信息技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。