基于智能机器人的交互方法及系统技术方案

本发明专利技术提供基于智能机器人的交互方法，其包含以下步骤：在智能机器人处于激活的情况下，获取多模态输入数据；提取多模态输入数据中，当前场景中的当前情景参数；将当前情景参数与历史情景参数进行融合形成用户的动态生活轨迹图谱；基于动态生活轨迹图谱生成多模态交互输出数据。本发明专利技术提供了一种智能机器人，智能机器人具备预设形象和预设属性，能够与用户进行多模态的交互。并且，本发明专利技术还能够有效利用用户日常生活中产生的时间、人物以及地点等的生活图谱，根据对生活图谱的充分开发和利用对交互话题进行有效的拓展或者向用户进行有意义的话题推荐，丰富了交互内容，提升了交互的准确度。

Interaction Method and System Based on Intelligent Robot

The invention provides an interactive method based on Intelligent robots, which includes the following steps: acquiring multi-modal input data when the intelligent robot is activated; extracting the current scenario parameters in the current scenario from the multi-modal input data; integrating the current scenario parameters with the historical scenario parameters to form the dynamic life trajectory map of users; and based on the dynamic life trajectory map. Spectrum generates multimodal interactive output data. The invention provides an intelligent robot, which has a preset image and preset attributes and can interact with users in multi-modality. Moreover, the invention can effectively utilize the life Atlas of time, people and places generated in the daily life of users, effectively expand the interactive topics or recommend meaningful topics to users according to the full development and utilization of the life atlas, enrich the interactive content and improve the accuracy of interaction.

【技术实现步骤摘要】
基于智能机器人的交互方法及系统
本专利技术涉及人工智能领域，具体地说，涉及一种基于智能机器人的交互方法及系统。
技术介绍
机器人多模态交互系统的开发致力于模仿人类对话，以试图在上下文之间模仿人类之间的交互。但是，目前来说，对于智能机器人相关的机器人多模态交互系统的开发还不太完善，尚未出现进行多模态交互的智能机器人，更为重要的是，尚无针对用户在日常生活中所产生的时间、人物以及地点等生活图谱相关进行开发与利用的交互产品。因此，本专利技术提供了一种基于智能机器人的交互方法及系统。
技术实现思路
为解决上述问题，本专利技术提供了一种基于智能机器人的交互方法，所述方法包含以下步骤：在智能机器人处于激活的情况下，获取多模态输入数据；提取所述多模态输入数据中，当前场景中的当前情景参数；将所述当前情景参数与历史情景参数进行融合形成用户的动态生活轨迹图谱；基于所述动态生活轨迹图谱生成多模态交互输出数据。根据本专利技术的一个实施例，提取所述多模态输入数据中，当前场景中的当前情景参数的步骤包含：定位当前场景的地理位置，确定当前场景的地点参数；捕捉并识别当前场景范围内的人物，确定当前场景的人脸；获取当前场景的时间信息，确定当前场景的时间参数；关联所述地点参数、所述人物参数以及所述时间参数，并记录为当前场景的当前情景参数。根据本专利技术的一个实施例，将所述当前情景参数与历史情景参数进行融合形成用户的动态生活轨迹图谱的步骤中包含：对当前情景参数的参数属性进行判断，确定当前情景参数的类别；按照当前情景参数的类别，将当前情景参数与历史情景参数进行融合，形成用户的动态生活轨迹图谱。根据本专利技术的一个实施例，基于所述动态生活轨迹图谱生成多模态交互输出数据的步骤中包含：确定用户与所述智能机器人的交互话题；遍历用户的动态生活轨迹图谱，查找与所述交互话题相关的用户生活轨迹；根据与所述交互话题相关的用户生活轨迹以及所述多模态输入数据生成多模态交互输出数据，或更新该用户生活轨迹。根据本专利技术的一个实施例，确定用户与所述智能机器人的交互话题的步骤中，包含：解析所述多模态输入数据，获取用户的交互意图，决策输出与所述意图对应的交互话题；或，解析当前情景参数，对当前情景参数进行分析，决策交互话题。根据本专利技术的一个实施例，在将所述当前情景参数与历史情景参数进行融合形成用户的动态生活轨迹图谱的步骤前，还包含：获取当前用户的身份特征信息，对当前用户的用户属性进行判断，确定当前用户的类别，其中，用户的类别包含：儿童用户。根据本专利技术的一个实施例，当与所述智能机器人交互的用户为儿童用户时，所述方法还包含：确定适合所述儿童交互意图的交互话题；或，解析当前情景参数，对当前情景参数以及儿童人脸参数进行分析，决策交互话题。根据本专利技术的一个实施例，当与所述智能机器人交互的用户包含儿童用户时，基于所述动态生活轨迹图谱生成多模态交互输出数据的步骤中包含：筛选所述多模态交互输出数据，剔除不适合儿童用户的多模态交互输出数据。根据本专利技术的另一个方面，还提供了一种程序产品，其包含用于执行如上任一项所述的方法步骤的一系列指令。根据本专利技术的另一个方面，还提供了一种基于智能机器人的交互系统，所述系统包含：智能终端，其包含摄像头、定位装置以及时间装置，用于获取当前场景的当前情景参数以及多模态输入数据，并具备语音、情感、表情和动作输出的能力；智能机器人，其安装在所述智能终端上，采用如上任一项所述的方法进行多模态的交互；云端大脑，其用于对所述多模态输入数据进行语义理解、视觉识别、认知计算以及情感计算，以决策所述智能机器人输出多模态交互输出数据。本专利技术提供的基于智能机器人的交互方法及系统提供了一种智能机器人，智能机器人具备预设形象和预设属性，能够与用户进行多模态的交互。并且，本专利技术还能够有效利用用户日常生活中产生的时间、人物以及地点等的生活图谱，根据对生活图谱的充分开发和利用对交互话题进行有效的拓展或者向用户进行有意义的话题推荐，丰富了交互内容，提升了交互的准确度。本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。附图说明附图用来提供对本专利技术的进一步理解，并且构成说明书的一部分，与本专利技术的实施例共同用于解释本专利技术，并不构成对本专利技术的限制。在附图中：图1显示了根据本专利技术的一个实施例的基于智能机器人的交互系统的交互示意图；图2显示了根据本专利技术的一个实施例的基于智能机器人的交互系统的结构框图；图3显示了根据本专利技术的一个实施例的基于智能机器人的交互方法的流程图；图4显示了根据本专利技术的一个实施例的基于智能机器人的交互方法提取当前情景参数的流程图；图5显示了根据本专利技术的一个实施例的基于智能机器人的交互方法生成多模态交互输出数据的流程图；图6显示了根据本专利技术的一个实施例的基于智能机器人的交互方法的另一流程图；以及图7显示了根据本专利技术的一个实施例的在用户、智能终端以及云端大脑三方之间进行通信的流程图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚，以下结合附图对本专利技术实施例作进一步地详细说明。为表述清晰，需要在实施例前进行如下说明：本专利技术提到的智能机器人能够与用户进行多模态的交互。智能终端包含摄像头、定位装置以及时间装置，用于获取当前场景的当前情景参数以及多模态输入数据，并具备语音、情感、表情和动作输出的能力；智能机器人基于所述智能终端的硬件获取多模态输入数据，在云端大脑的能力支持下，对多模态输入数据进行语义理解、视觉识别、认知计算、情感计算，以完成决策输出的过程。所提到的云端大脑为提供所述智能机器人对用户的交互需求进行语义理解(语言语义理解、动作语义理解、视觉识别、情感计算、认知计算)的处理能力的终端，实现与用户的交互，以决策所述智能机器人的输出多模态交互输出数据。下面结合附图对本专利技术的各个实施例进行详细描述。图1显示了根据本专利技术的一个实施例的基于智能机器人的交互系统的交互示意图。如图1所示，进行多模态交互需要用户101、智能终端102、智能机器人103以及云端大脑104。其中，与智能机器人交互的用户101可以为真实人以及另一个智能机器人，另一智能机器人与智能机器人的交互过程与单个的人与智能机器人的交互过程类似。因此，在图1中仅展示的是用户(人)与智能机器人的多模态交互过程。另外，智能终端102包括显示区域1021以及硬件支持设备1022(实质为核心处理器)。显示区域1021用于显示智能机器人103的形象，硬件支持设备1022与云端大脑104配合使用，用于交互过程中的数据处理。图1中智能机器人与用户101之间交互的过程为：交互所需的前期准备或是条件有，智能机器人具备自然语言理解、视觉感知、触摸感知、语言输出、情感表情动作输出等AI能力。根据本专利技术的一个实施例，为了提升交互的体验，智能机器人可在被启动后就显示在预设区域内。图2显示了根据本专利技术的另一个实施例的基于智能机器人的交互系统的结构框图。如图2所示，完成交互需要用户101、智能终端102以及云端大脑104。其中，智能终端102包含人机界面201、数据处理单元202、输入输出装置203以及接口单元204。云端大脑104包含语义理本文档来自技高网...

【技术保护点】
1.一种基于智能机器人的交互方法，其特征在于，所述方法包含以下步骤：在智能机器人处于激活的情况下，获取多模态输入数据；提取所述多模态输入数据中，当前场景中的当前情景参数；将所述当前情景参数与历史情景参数进行融合形成用户的动态生活轨迹图谱；基于所述动态生活轨迹图谱生成多模态交互输出数据。

【技术特征摘要】
1.一种基于智能机器人的交互方法，其特征在于，所述方法包含以下步骤：在智能机器人处于激活的情况下，获取多模态输入数据；提取所述多模态输入数据中，当前场景中的当前情景参数；将所述当前情景参数与历史情景参数进行融合形成用户的动态生活轨迹图谱；基于所述动态生活轨迹图谱生成多模态交互输出数据。2.如权利要求1所述的方法，其特征在于，提取所述多模态输入数据中，当前场景中的当前情景参数的步骤包含：定位当前场景的地理位置，确定当前场景的地点参数；捕捉并识别当前场景范围内的人物，确定当前场景的人脸；获取当前场景的时间信息，确定当前场景的时间参数；关联所述地点参数、所述人脸以及所述时间参数，并记录为当前场景的当前情景参数。3.如权利要求1或2所述的方法，其特征在于，将所述当前情景参数与历史情景参数进行融合形成用户的动态生活轨迹图谱的步骤中包含：对当前情景参数的参数属性进行判断，确定当前情景参数的类别；按照当前情景参数的类别，将当前情景参数与历史情景参数进行融合，形成用户的动态生活轨迹图谱。4.如权利要求1-3中任一项所述的方法，其特征在于，基于所述动态生活轨迹图谱生成多模态交互输出数据的步骤中包含：确定用户与所述智能机器人的交互话题；遍历用户的动态生活轨迹图谱，查找与所述交互话题相关的用户生活轨迹；根据与所述交互话题相关的用户生活轨迹以及所述多模态输入数据生成多模态交互输出数据，或更新该用户生活轨迹。5.如权利要求4所述的方法，其特征在于，确定用户与所述智能机器人的交互话题的步骤中，包含：解析所述...

【专利技术属性】
技术研发人员：谢巧菁，魏晨，
申请(专利权)人：北京光年无限科技有限公司，
类型：发明
国别省市：北京,11