一种用于智能机器人的人机交互方法及装置制造方法及图纸

一种用于智能机器人的人机交互方法，在绘本阅读模式下，该方法包括：步骤一、获取关于当前用户的多模态交互信息；步骤二、根据多模态交互信息判断是否满足预设主动推送条件，如果满足，则执行步骤三；步骤三、根据多模态交互信息生成相应的绘本推荐信息并输出。本方法能够主动地判断是否需要向用户推送绘本故事，这样也就可以避免现有的只会对所识别得到的绘本图像进行阅读而导致的用户体验不佳的问题，其能够使得智能机器人表现地更加生动以及了解用户的实际需求，这样也就提高了智能机器人的用户体验以及用户粘度。

A Human-Computer Interaction Method and Device for Intelligent Robot

A human-computer interaction method for intelligent robots is presented. In the picture book reading mode, the method includes: step 1, acquiring multi-modal interaction information about the current user; step 2, judging whether the preset active push condition is satisfied according to the multi-modal interaction information, and if it is satisfied, executing step 3; step 3, generating the corresponding picture book recommendation letter according to the multi-modal interaction information. Information and output. This method can actively judge whether it is necessary to push the picture book story to the user, thus avoiding the problem of poor user experience caused by only reading the recognized picture book. It can make the intelligent robot more vivid and understand the actual needs of users, thus improving the user experience and users of the intelligent robot. Viscosity.

【技术实现步骤摘要】
一种用于智能机器人的人机交互方法及装置
本专利技术涉及机器人
，具体地说，涉及一种用于智能机器人的人机交互方法及装置。
技术介绍
随着科学技术的不断发展，信息技术、计算机技术以及人工智能技术的引入，机器人的研究已经逐步走出工业领域，逐渐扩展到了医疗、保健、家庭、娱乐以及服务行业等领域。而人们对于机器人的要求也从简单重复的机械动作提升为具有拟人问答、自主性及与其他机器人进行交互的智能机器人，人机交互也就成为决定智能机器人发展的重要因素。因此，提升智能机器人的交互能力，改善机器人的类人性和智能性，是现在亟需解决的重要问题。
技术实现思路
为解决上述问题，本专利技术提供了一种用于智能机器人的人机交互方法，在绘本阅读模式下，所述方法包括：步骤一、获取关于当前用户的多模态交互信息；步骤二、根据所述多模态交互信息判断是否满足预设主动推送条件，如果满足，则执行步骤三；步骤三、根据所述多模态交互信息生成相应的绘本推荐信息并输出。根据本专利技术的一个实施例，在所述步骤二中，如果一绘本阅读完毕后在第一预设时长内无法获取到所述当前用户所输入的新的绘本信息，则判定满足预设主动推送条件。根据本专利技术的一个实施例，在所述步骤二中，如果在绘本阅读过程中检测当前页识别多次失败，则判定满足所述预设主动推送条件。根据本专利技术的一个实施例，如果在绘本阅读过程中检测当前页识别多次失败，则在所述步骤三中生成第一问询信息并获取所述当前用户针对所述第一问询信息的反馈信息，根据所述反馈信息继续当前绘本的阅读或是切换绘本。根据本专利技术的一个实施例，在所述步骤二中，如果检测到所述当前用户在当前页停留的时长超过第二预设时长时，则判定满足预设主动推送条件。根据本专利技术的一个实施例，在所述步骤二中，根据所述多模态交互信息确定所述当前用户的情绪信息，其中，如果所述当前用户的情绪信息属于预设正面情绪或是预设负面情绪，则判定满足预设主动推送条件，从而在所述步骤三中根据所述用户的情绪信息生成所述绘本推荐信息。根据本专利技术的一个实施例，在所述步骤二中，根据所述多模态交互信息确定所述当前用户的交互意图，并根据所述交互意图判断是否满足预设主动推送条件，如果满足，则在所述步骤三中根据所述交互意图生成相应的绘本推荐信息。根据本专利技术的一个实施例，所述方法还包括：步骤四、获取所述当前用户针对所述绘本推荐信息的反馈信息，并根据该反馈信息推送相应绘本或是继续当前操作。本专利技术还提供了一种程序产品，其上存储有可执行如上任一项所述的方法步骤的程序代码。本专利技术还提供了一种面向智能机器人的人机交互系统，其特征在于，所述系统装配有操作系统，所述操作系统能够装载并执行如上所述的程序产品。本专利技术还提供了一种用于智能机器人的人机交互装置，所述装置包括：交互信息获取模块，其用于获取关于当前用户的多模态交互信息；绘本推荐信息生成模块，其用于根据所述多模态交互信息判断是否满足预设主动推送条件，如果满足，则根据所述多模态交互信息生成相应的绘本推荐信息并输出。根据本专利技术的一个实施例，如果一绘本阅读完毕后在第一预设时长内无法获取到所述当前用户所输入的新的绘本信息，所述绘本推荐信息生成模块则配置为判定满足预设主动推送条件。根据本专利技术的一个实施例，如果在绘本阅读过程中检测当前页识别多次失败，所述绘本推荐信息生成模块则配置为判定满足所述预设主动推送条件。根据本专利技术的一个实施例，如果在绘本阅读过程中检测当前页识别多次失败，所述绘本推荐信息生成模块则配置为生成第一问询信息并获取所述当前用户针对所述第一问询信息的反馈信息，根据所述反馈信息继续当前绘本的阅读或是切换绘本。根据本专利技术的一个实施例，如果检测到所述当前用户在当前页停留的时长超过第二预设时长时，所述绘本推荐信息生成模块则配置为判定满足预设主动推送条件。根据本专利技术的一个实施例，所述绘本推荐信息生成模块配置为根据所述多模态交互信息确定所述当前用户的情绪信息，其中，如果所述当前用户的情绪信息属于预设正面情绪或是预设负面情绪，则判定满足预设主动推送条件，从而根据所述用户的情绪信息生成所述绘本推荐信息。根据本专利技术的一个实施例，所述绘本推荐信息生成模块配置为根据所述多模态交互信息确定所述当前用户的交互意图，并根据所述交互意图判断是否满足预设主动推送条件，如果满足，则根据所述交互意图生成相应的绘本推荐信息。根据本专利技术的一个实施例，所述方法还包括：绘本推送模块，其用于获取所述当前用户针对所述绘本推荐信息的反馈信息，并根据该反馈信息推送相应绘本或是继续当前操作。本专利技术还提供了一种儿童专用智能设备，所述设备包括处理器以及存储装置，其中，所述存储装置存储有程序，所述处理器用于执行所述存储装置中的程序以实现如上任一项所述的方法。本专利技术所提供的用于智能机器人的人机交互方法能够主动地判断是否需要向用户推送绘本故事，这样也就可以避免现有的只会对所识别得到的绘本图像进行阅读而导致的用户体验不佳的问题。本方法根据所获取到的关于用户的多模态交互信息来确定出用户的实际状态，进而根据用户的实际状态(例如翻书情况、情绪状态以及交互意图等)来调整智能机器人的绘本阅读状态，从而使得智能机器人表现地更加生动以及了解用户的实际需求，这样也就提高了智能机器人的用户体验以及用户粘度。本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要的附图做简单的介绍：图1是根据本专利技术一个实施例的用于智能机器人的人机交互方法的实现流程示意图；图2至图7是根据本专利技术不同实施例的用于智能机器人的人机交互方法的实现流程示意图；图8是根据本专利技术一个实施例的用于智能机器人的人机交互装置的结构示意图；图9是根据本专利技术一个实施例的用于智能机器人的人机交互相同的实现流程示意图。具体实施方式以下将结合附图及实施例来详细说明本专利技术的实施方式，借此对本专利技术如何应用技术手段来解决技术问题，并达成技术效果的实现过程能充分理解并据以实施。需要说明的是，只要不构成冲突，本专利技术中的各个实施例以及各实施例中的各个特征可以相互结合，所形成的技术方案均在本专利技术的保护范围之内。同时，在以下说明中，出于解释的目的而阐述了许多具体细节，以提供对本专利技术实施例的彻底理解。然而，对本领域的技术人员来说显而易见的是，本专利技术可以不用这里的具体细节或者所描述的特定方式来实施。另外，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。随着人工智能的发展，越来越多的绘本阅读机器人推向儿童早教市场，通过识别卡片上的物体，例如各种形状交通工具、乐器、动植物等内容进行语音播报或者屏幕显示，从而提升儿童的认知能力。然而，现有的绘本阅读机器人只会对所识别得到的绘本图像进行阅读，其无法根据用户的实际状态来调整自身的绘本阅读状态，从而使得绘本阅读机器人表现得过于呆板，不利于绘本阅读机器人的推广使用。针对现有技术中所存在的问题，本专利技术提供了一种新的用于智能机器人本文档来自技高网...

【技术保护点】
1.一种用于智能机器人的人机交互方法，其特征在于，在绘本阅读模式下，所述方法包括：步骤一、获取关于当前用户的多模态交互信息；步骤二、根据所述多模态交互信息判断是否满足预设主动推送条件，如果满足，则执行步骤三；步骤三、根据所述多模态交互信息生成相应的绘本推荐信息并输出。

【技术特征摘要】
1.一种用于智能机器人的人机交互方法，其特征在于，在绘本阅读模式下，所述方法包括：步骤一、获取关于当前用户的多模态交互信息；步骤二、根据所述多模态交互信息判断是否满足预设主动推送条件，如果满足，则执行步骤三；步骤三、根据所述多模态交互信息生成相应的绘本推荐信息并输出。2.如权利要求1所述的人机交互方法，其特征在于，在所述步骤二中，如果一绘本阅读完毕后在第一预设时长内无法获取到所述当前用户所输入的新的绘本信息，则判定满足预设主动推送条件。3.如权利要求1或2所述的人机交互方法，其特征在于，在所述步骤二中，如果在绘本阅读过程中检测当前页识别多次失败，则判定满足所述预设主动推送条件。4.如权利要求1所述的人机交互方法，其特征在于，如果在绘本阅读过程中检测当前页识别多次失败，则在所述步骤三中生成第一问询信息并获取所述当前用户针对所述第一问询信息的反馈信息，根据所述反馈信息继续当前绘本的阅读或是切换绘本。5.如权利要求1～4中任一项所述的方法，其特征在于，在所述步骤二中，如果检测到所述当前用户在当前页停留的时长超过第二预设时长时，则判定满足预设主动推送条件。6.如权利要求1～5中任一项所述的方法，其特征在于，在所述步骤二中，根据所述多模态交互信息确定所述当前用户的情绪信息，其中，如果所述当前用户的情绪信息属于预设正面情绪或是预设负面情绪，则判...

【专利技术属性】
技术研发人员：贾志强，
申请(专利权)人：北京光年无限科技有限公司，
类型：发明
国别省市：北京,11