一种用于智能机器人的人机交互方法及装置制造方法及图纸

一种用于智能机器人的人机交互方法及装置，该方法包括：输入信息获取步骤，获取用户输入的多模态人机交互信息；情感信息确定步骤，利用预设情感处理模型确定多模态人机交互信息的用户情感信息；反馈信息输出步骤，利用预设思维处理方法确定对应于多模态人机交互信息的思维反馈信息，根据用户情感信息和思维反馈信息，生成对应于多模态人机交互信息的多模态情感反馈信息并输出。该方法能够使得智能机器人所输出的反馈信息更加多样化和丰富，使得智能机器人表现得更具有拟人化的情感反馈特性，从而提高了智能机器人的用户体验。

【技术实现步骤摘要】
一种用于智能机器人的人机交互方法及装置
本专利技术涉及人机交互
，具体地说，涉及一种用于智能机器人的人机交互方法及装置。
技术介绍
随着科学技术的不断发展，信息技术、计算机技术以及人工智能技术的引入，机器人的研究已经逐步走出工业领域，逐渐扩展到了医疗、保健、家庭、娱乐以及服务行业等领域。而人们对于机器人的要求也从简单重复的机械动作提升为具有拟人问答、自主性及与其他机器人进行交互的智能机器人。现有的智能机器人仅能完成固定制式的交互，例如完成唱歌、讲故事、播报新闻和简单问题回答等。然而，现有的人机交互方法造成智能机器人本质上是一个只会回答问题，的机器，而非一个能够与用户进行有效互动的“人”，这也就导致了现有的智能机器人用户体验差的问题。
技术实现思路
为解决上述问题，本专利技术提供了一种用于智能机器人的人机交互方法，所述方法包括：输入信息获取步骤，获取用户输入的多模态人机交互信息；情感信息确定步骤，利用预设情感处理模型确定所述多模态人机交互信息的用户情感信息；反馈信息输出步骤，利用预设思维处理方法确定对应于所述多模态人机交互信息的思维反馈信息，根据所述用户情感信息和所述思维反馈信息，生成对应于所述多模态人机交互信息的多模态情感反馈信息并输出。根据本专利技术的一个实施例，在所述反馈信息输出步骤中，还获取智能机器人的机器情感信息，并结合所述机器情感信息生成对应于所述多模态人机交互信息的多模态情感反馈信息。根据本专利技术的一个实施例，所述预设情感模型是利用已知的人机交互信息构建得到的。根据本专利技术的一个实施例，所述多模态人机交互信息包括以下所列项中的任一项或几项：文字信息、图像信息、肢体信息和语音信息；其中，所述语音信息的有效信息包括：语气信息、语调信息和语义信息；所述图像信息的有效信息包括表情信息。根据本专利技术的一个实施例，所述多模态情感反馈信息包括以下所列项中的任一项或几项：图像反馈信息、肢体反馈信息和语音反馈信息。根据本专利技术的一个实施例，在所述反馈信息输出步骤中，生成语音反馈信息的步骤包括：根据所述情感信息确定对应的语气信息和语调信息；根据所述语气信息、语调信息和所述思维反馈信息生成相应的语音反馈信息。本专利技术还提供了一种用于智能机器人的人机交互装置，所述装置包括：输入信息获取模块，其用于获取用户输入的多模态人机交互信息；情感信息确定模块，其用于利用预设情感处理模型确定所述多模态人机交互信息的用户情感信息；反馈信息输出模块，其用于利用预设思维处理方法确定对应于所述多模态人机交互信息的思维反馈信息，根据所述用户情感信息和所述思维反馈信息，生成对应于所述多模态人机交互信息的多模态情感反馈信息并输出。根据本专利技术的一个实施例，所述反馈信息输出模块配置为还获取智能机器人的机器情感信息，并结合所述机器情感信息生成对应于所述多模态人机交互信息的多模态情感反馈信息。根据本专利技术的一个实施例，所述预设情感模型是利用已知的人机交互信息构建得到的。根据本专利技术的一个实施例，所述多模态人机交互信息包括以下所列项中的任一项或几项：文字信息、图像信息、肢体信息和语音信息；其中，所述语音信息的有效信息包括：语气信息、语调信息和语义信息；所述图像信息的有效信息包括表情信息。根据本专利技术的一个实施例，所述多模态情感反馈信息包括以下所列项中的任一项或几项：图像反馈信息、肢体反馈信息和语音反馈信息。根据本专利技术的一个实施例，所述反馈信息输出模块配置为生成语音反馈信息时，首先根据所述情感信息确定对应的语气信息和语调信息，随后根据所述语气信息、语调信息和所述思维反馈信息生成相应的语音反馈信息。智能机器人通过本专利技术所提供的人机交互方法和装置所输出的反馈信息更加多样化和丰富，其能够更加接近于“人”的反馈，这样也就使得智能机器人表现得更具有拟人化的情感反馈特性，从而提高了智能机器人的用户体验。本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要的附图做简单的介绍：图1是根据本专利技术一个实施例的用于智能机器人的人机交互方法的流程图；图2是根据本专利技术另一个实施例的用于智能机器人的人机交互方法的流程图；图3是根据本专利技术一个实施例的用于智能机器人的人机交互装置的结构示意图。具体实施方式以下将结合附图及实施例来详细说明本专利技术的实施方式，借此对本专利技术如何应用技术手段来解决技术问题，并达成技术效果的实现过程能充分理解并据以实施。需要说明的是，只要不构成冲突，本专利技术中的各个实施例以及各实施例中的各个特征可以相互结合，所形成的技术方案均在本专利技术的保护范围之内。同时，在以下说明中，出于解释的目的而阐述了许多具体细节，以提供对本专利技术实施例的彻底理解。然而，对本领域的技术人员来说显而易见的是，本专利技术可以不用这里的具体细节或者所描述的特定方式来实施。另外，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。传统的智能机器人在进行人机交互时，都是通过单一的“问”和“答”这样的逻辑思维进行处理，这种人机交互方法不会考虑在用户处于不同情感状态下时，就同一问题智能智能机器人应该给予不同的回应或有差异地进行响应。而现有的人机交互方法也就使得智能机器人本质上是一个只会回答问题的机器，而不是具有特定人类情感元素的“人”。为此，本专利技术提供了一种新的用于智能机器人的人机交互方法。在智能机器人与用户进行交互的过程中，用户的言行举止都可能带有一定的情感信息。本专利技术所提供的方法正是通过人机交互过程中用户的行为举止来确定出用户此时的情感信息，并将该情感信息与逻辑思维处理得到的逻辑反馈信息相结合，从而得到能够考虑到用户当前情感状态的反馈信息，这样也就使得智能机器人能够表现得更加人性化，从而提高智能机器人的用户体验。为了更加清楚地阐述本专利技术所提供的人机交互方法的原理、实现过程以及优点，以下分别通过不同的实施例来对该方法进行进一步地说明。实施例一：图1示出了本实施例所提供的用于智能机器人的人机交互方法的流程图。如图1所示，该方法首先在输入信息获取步骤S101中获取用户输入的多模态人机交互信息。本实施例中，为了使得智能机器人能够更加方便地与用户进行交互，该方法在步骤S101中所能够获取的多模态人机交互信息优选地包括：文字信息、图像信息、肢体信息和语音信息。需要指出的是，本实施例中，文字信息既可以是通过对语音信息进行文本转换得到的信息，也可以是用户直接通过实体或虚拟键盘输入的信息，本专利技术不限于此。图像信息优选地包括用户表情信息。其中，图像信息可以通过配置在智能机器人壳体上的摄像头来拍摄得到。肢体信息优选地包括用户的手势信息和/或动作信息。用户的手势信息和动作信息均可以在一定程度上反映出用户当前的情感状态。例如对于手势信息来说，用户手势的加强通常会反映出一种强调的心态，而用户身体某一部位的不停摆动则通常会反映出用于此时存在情绪紧张的倾向。其中，本实施例中，用户手势信息既可以选本文档来自技高网...

【技术保护点】
一种用于智能机器人的人机交互方法，其特征在于，所述方法包括：输入信息获取步骤，获取用户输入的多模态人机交互信息；情感信息确定步骤，利用预设情感处理模型确定所述多模态人机交互信息的用户情感信息；反馈信息输出步骤，利用预设思维处理方法确定对应于所述多模态人机交互信息的思维反馈信息，根据所述用户情感信息和所述思维反馈信息，生成对应于所述多模态人机交互信息的多模态情感反馈信息并输出。

【技术特征摘要】
1.一种用于智能机器人的人机交互方法，其特征在于，所述方法包括：输入信息获取步骤，获取用户输入的多模态人机交互信息；情感信息确定步骤，利用预设情感处理模型确定所述多模态人机交互信息的用户情感信息；反馈信息输出步骤，利用预设思维处理方法确定对应于所述多模态人机交互信息的思维反馈信息，获取智能机器人的机器情感信息，根据所述用户情感信息、机器人情感信息和所述思维反馈信息，生成对应于所述多模态人机交互信息的多模态情感反馈信息并输出。2.如权利要求1所述的方法，其特征在于，所述预设情感模型是利用已知的人机交互信息构建得到的。3.如权利要求1或2所述的方法，其特征在于，所述多模态人机交互信息包括以下所列项中的任一项或几项：文字信息、图像信息、肢体信息和语音信息；其中，所述语音信息的有效信息包括：语气信息、语调信息和语义信息；所述图像信息的有效信息包括表情信息。4.如权利要求1或2所述的方法，其特征在于，所述多模态情感反馈信息包括以下所列项中的任一项或几项：图像反馈信息、肢体反馈信息和语音反馈信息。5.如权利要求4所述的方法，其特征在于，在所述反馈信息输出步骤中，生成语音反馈信息的步骤包括：根据所述情感信息确定对应的语气信息和语调信息；根据所述语气信息、语调信息和所述思维反馈信息生成相应的语音反馈信息。6.一种用...

【专利技术属性】
技术研发人员：陈宾，王辰，
申请(专利权)人：北京光年无限科技有限公司，
类型：发明
国别省市：北京;11