一种基于识别用户操作动作的人机交互方法技术

本发明专利技术提供了一种基于识别用户操作动作的人机交互方法，人机交互设备每隔一预定时间获取外部人脸信息及外部人体动作信息；当所述人机交互设备获取到所述外部人脸信息和/或所述外部人体动作信息之后，基于所述外部人脸信息在其内部的人脸信息库中进行搜索和/或基于所述外部人体动作信息在其内部的人体动作信息库中进行搜索；当所述外部人脸信息与所述外部人脸信息库中的任一人脸信息和/或所述人体动作信息与所述人体动作信息库中的任一人体动作信息匹配时，所述人机交互设备解锁。本发明专利技术丰富了人机交互的多样性，实现更为有效的人机交互操作。机交互操作。机交互操作。

【技术实现步骤摘要】
一种基于识别用户操作动作的人机交互方法


[0001]本专利技术涉及人机交互
，尤其涉及一种基于识别用户操作动作的人机交互方法。

技术介绍

[0002]人机交互(Human
‑
ComputerInteraction，HCI)主要是研究人和计算机之间的信息交换，它主要包括人到计算机和计算机到人的信息交换两部分。
[0003]随着人工智能的不断发展，具有不同功能的人机交互设备逐渐走进人们的生活。例如，具有儿童陪伴功能的人机交互设备(如儿童陪伴机器人)可以给儿童讲故事、读诗歌、播放动画等。又如，具有教育辅导功能的人机交互设备(如教育机器人)可以帮助学生提高学习能力(如，进行问题解答、知识讲解等)。
[0004]人机交互方式有接触式和非接触式两种，接触式的人机交互方式较为成熟和完善，而非接触式的人机交互操作方式则处于研究起步阶段。近年来，非接触式的人机交互方式一直是人机交互方式中研究的热点和难点问题，研究好非接触式的人机交互方式具有很高使用价值，尤其是应用到一些特殊要求的场合下则意义更为重大。

技术实现思路

[0005]本专利技术的目的在于提供一种基于识别用户操作动作的人机交互方法，能够基于识别用户操作动作进行人机交互。
[0006]为了达到上述目的，本专利技术提供了一种基于识别用户操作动作的人机交互方法，包括：
[0007]人机交互设备每隔一预定时间获取外部人脸信息及外部人体动作信息；
[0008]当所述人机交互设备获取到所述外部人脸信息和/或所述外部人体动作信息之后，基于所述外部人脸信息在其内部的人脸信息库中进行搜索和/或基于所述外部人体动作信息在其内部的人体动作信息库中进行搜索；以及，
[0009]当所述外部人脸信息与所述外部人脸信息库中的任一人脸信息和/或所述人体动作信息与所述人体动作信息库中的任一人体动作信息匹配时，所述人机交互设备解锁。
[0010]可选的，所述人脸信息包括五官信息和/或脸部轮廓信息。
[0011]可选的，所述人体动作信息包括手势信息和/或肢体动作信息。
[0012]可选的，基于所述外部人脸信息在其内部的人脸信息库中进行搜索的步骤包括：
[0013]将所述外部人脸信息与所述人脸信息库中的每个人脸信息逐一进行特征比对，将所述人脸信息库中与所述外部人脸信息的相似度大于第一预定值的人脸信息作为相似人脸信息；以及，
[0014]获取每个所述相似人脸信息与所述外部人脸信息之间相似的置信度，当任一置信度大于第二预定值时，判定所述外部人脸信息与相应的所述相似人脸信息匹配。
[0015]可选的，将所述外部人脸信息与所述人脸信息库中的每个人脸信息逐一进行特征
比对的步骤包括：
[0016]提取所述外部人脸信息及所述人脸信息库中的每个人脸信息中对应于人脸几何特征的特征点；
[0017]计算所述外部人脸信息对应的特征点与所述人脸信息库中的每个人脸信息对应的特征点之间的欧式距离；以及，
[0018]将所述欧式距离作为所述人脸信息库中与所述外部人脸信息的相似度。
[0019]可选的，基于所述外部人体动作信息在其内部的人体动作信息库中进行搜索的步骤包括：
[0020]将所述外部人体动作信息与所述人体动作信息库中的每个人体动作信息逐一进行特征比对，将所述人体动作信息库中与所述外部人体动作信息的相似度大于第三预定值的人体动作信息作为相似人体动作信息；以及，
[0021]获取每个所述相似人体动作信息与所述外部人体动作信息之间相似的置信度，当任一置信度大于第四预定值时，判定所述外部人体动作信息与相应的所述相似人体动作信息匹配。
[0022]可选的，将所述外部人体动作信息与所述人体动作信息库中的每个人体信息逐一进行特征比对的步骤包括：
[0023]提取所述外部人体动作信息及所述人体动作信息库中的每个人体动作信息中对应于人体动作几何特征的特征点；
[0024]计算所述外部人体动作信息对应的特征点与所述人体动作信息库中的每个人体动作信息对应的特征点之间的欧式距离；以及，
[0025]将所述欧式距离作为所述人体动作信息库中与所述外部人体动作信息的相似度。
[0026]可选的，所述人机交互设备解锁之后，响应于一声音信号，开始解锁操作响应。
[0027]在本专利技术提供的基于识别用户操作动作的人机交互方法中，人机交互设备每隔一预定时间获取外部人脸信息及外部人体动作信息；当所述人机交互设备获取到所述外部人脸信息和/或所述外部人体动作信息之后，基于所述外部人脸信息在其内部的人脸信息库中进行搜索和/或基于所述外部人体动作信息在其内部的人体动作信息库中进行搜索；当所述外部人脸信息与所述外部人脸信息库中的任一人脸信息和/或所述人体动作信息与所述人体动作信息库中的任一人体动作信息匹配时，所述人机交互设备解锁。本专利技术丰富了人机交互的多样性，实现更为有效的人机交互操作。
附图说明
[0028]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。为了更清楚地说明本申请实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0029]图1为本专利技术实施例提供的基于识别用户操作动作的人机交互方法的流程图；
[0030]图2为本专利技术实施例提供的基于所述外部人脸信息在其内部的人脸信息库中进行搜索的步骤的流程图；
[0031]图3为本专利技术实施例提供的将所述外部人脸信息与所述人脸信息库中的每个人脸
信息逐一进行特征比对的步骤的流程图；
[0032]图4为本专利技术实施例提供的基于所述外部人体动作信息在其内部的人体动作信息库中进行搜索的步骤的流程图；
[0033]图5为本专利技术实施例提供的将所述外部人体动作信息与所述人体动作信息库中的每个人体信息逐一进行特征比对的步骤的流程图。
[0034]本申请目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。通过上述附图，已示出本申请明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围，而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
[0035]这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
[0036]需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于识别用户操作动作的人机交互方法，其特征在于，包括：人机交互设备每隔一预定时间获取外部人脸信息及外部人体动作信息；当所述人机交互设备获取到所述外部人脸信息和/或所述外部人体动作信息之后，基于所述外部人脸信息在其内部的人脸信息库中进行搜索和/或基于所述外部人体动作信息在其内部的人体动作信息库中进行搜索；以及，当所述外部人脸信息与所述外部人脸信息库中的任一人脸信息和/或所述人体动作信息与所述人体动作信息库中的任一人体动作信息匹配时，所述人机交互设备解锁。2.如权利要求1所述的基于识别用户操作动作的人机交互方法，其特征在于，所述人脸信息包括五官信息和/或脸部轮廓信息。3.如权利要求1所述的基于识别用户操作动作的人机交互方法，其特征在于，所述人体动作信息包括手势信息和/或肢体动作信息。4.如权利要求1或2所述的基于识别用户操作动作的人机交互方法，其特征在于，基于所述外部人脸信息在其内部的人脸信息库中进行搜索的步骤包括：将所述外部人脸信息与所述人脸信息库中的每个人脸信息逐一进行特征比对，将所述人脸信息库中与所述外部人脸信息的相似度大于第一预定值的人脸信息作为相似人脸信息；以及，获取每个所述相似人脸信息与所述外部人脸信息之间相似的置信度，当任一置信度大于第二预定值时，判定所述外部人脸信息与相应的所述相似人脸信息匹配。5.如权利要求4所述的基于识别用户操作动作的人机交互方法，其特征在于，将所述外部人脸信息与所述人脸信息库中的每个人脸信息逐一进行特征比对的步骤包括：提取所述外部人脸信息及所...

【专利技术属性】
技术研发人员：史明，
申请(专利权)人：北京梦想绽放科技有限公司，
类型：发明
国别省市：