基于AR的人机交互方法、装置及设备制造方法及图纸

本发明专利技术提供一种基于AR的人机交互方法、装置及设备，其中，所述方法包括：采集当前增强现实技术AR场景中的一组动作数据；对所述动作数据进行特征提取，得到所述动作数据的第一特征；根据所述第一特征与多组样本操作数据的第二特征分别进行相似度比对，得到相似度比对结果；根据所述相似度比对结果确定一组样本操作数据；根据所述一组样本操作数据对应的关联动作执行预设的交互操作。本发明专利技术可以基于当前开发的一种界面交互程序实现多种人机交互方式，为相关开发者的开发以及用户的使用提供极大的便利，并且可以提高AR场景中的人机交互的智能化水平，满足用户需求。

Human-computer interaction method, device and equipment based on AR

【技术实现步骤摘要】
基于AR的人机交互方法、装置及设备
本专利技术涉及交互
，特别涉及一种基于AR的人机交互方法、装置及设备。
技术介绍
AR(AugmentedReality，增强现实)技术是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术，其可将原本在现实世界的一定时间空间范围内很难体验到的实体信息(如视觉信息、声音、味道和触觉等)通过计算机技术等模拟仿真后再进行叠加，以将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验，可实现将真实的环境和虚拟的物体实时叠加到同一画面或空间。现有的AR交互技术中，需要针对各种交互方式(比如针对手势、体感和眼球运动等)分别开发对应的界面交互程序，因此给相关开发者的开发工作和用户的使用均带来很大不便。
技术实现思路
有鉴于此，本专利技术提供一种基于AR的人机交互方法、装置及设备，提高AR场景中的人机交互的智能化水平，满足用户需求。第一方面，本专利技术实施例提供了一种基于AR的人机交互方法，包括：采集当前增强现实技术AR场景中的一组动作数据；对所述动作数据进行特征提取，得到所述动作数据的第一特征；根据所述第一特征与多组样本操作数据的第二特征分别进行相似度比对，得到相似度比对结果；根据所述相似度比对结果确定一组样本操作数据；根据所述一组样本操作数据对应的关联动作执行预设的交互操作。在一实施例中，所述采集当前增强现实技术AR场景中的一组动作数据之前，还包括：接收交互方式控制指令，所述交互方式控制指令中包含当前选择的交互方式；从预先保存的第一对应关系中，查询所述交互方式对应的多组样本操作数据。在一实施例中，还包括：根据以下步骤预先保存所述第一对应关系：确定待保存的多组样本操作数据以及所述多组样本操作数据对应的交互方式；构建所述多组样本操作数据与所述交互方式之间的第一对应关系；保存所述第一对应关系。在一实施例中，所述得到相似度比对结果之后，还包括：根据灵敏度参数确定相似度阈值；将所述相似度比对结果与所述相似度阈值进行比较；若确定所述相似度比对结果达到所述相似度阈值，则执行所述根据所述相似度比对结果确定一组样本操作数据的操作。在一实施例中，所述根据所述一组样本操作数据对应的关联动作执行预设的交互操作之前，还包括：从预先保存的第二对应关系中，查询与所述一组样本操作数据相对应的所述关联动作。在一实施例中，还包括：根据以下步骤预先保存所述第二对应关系：确定待关联的关联动作以及所述关联动作对应的一组样本操作数据，所述关联动作用于对关联的终端设备执行对应的交互操作；构建所述样本操作数据与所述一组关联动作之间的第二对应关系；保存所述第二对应关系。在一实施例中，所述方法还包括：对所述动作数据进行特征提取前，对所述动作数据进行归一化处理。第二方面，本专利技术实施例提供了一种基于AR的人机交互装置，包括：数据采集模块，用于采集当前增强现实技术AR场景中的一组动作数据；特征提取模块，用于对所述动作数据进行特征提取，得到所述动作数据的第一特征；特征比对模块，用于根据所述第一特征与多组样本操作数据的第二特征分别进行相似度比对，得到相似度比对结果；操作确定模块，用于根据所述相似度比对结果确定一组样本操作数据；交互执行模块，用于根据所述一组样本操作数据对应的关联动作执行预设的交互操作。第三方面，本专利技术实施例提供了一种电子设备，所述电子设备包括：处理器；被配置为存储处理器可执行指令的存储器；其中，所述处理器被配置为：采集当前增强现实技术AR场景中的一组动作数据；对所述动作数据进行特征提取，得到所述动作数据的第一特征；根据所述第一特征与多组样本操作数据的第二特征分别进行相似度比对，得到相似度比对结果；根据所述相似度比对结果确定一组样本操作数据；根据所述一组样本操作数据对应的关联动作执行预设的交互操作。第四方面，本专利技术实施例提供了一种计算机可读存储介质，所述存储介质上存储有计算机程序，该程序被处理器处理时实现：采集当前增强现实技术AR场景中的一组动作数据；对所述动作数据进行特征提取，得到所述动作数据的第一特征；根据所述第一特征与多组样本操作数据的第二特征分别进行相似度比对，得到相似度比对结果；根据所述相似度比对结果确定一组样本操作数据；根据所述一组样本操作数据对应的关联动作执行预设的交互操作。由上述技术方案可知，本专利技术提供的基于AR的人机交互方法、装置及设备，通过采集当前增强现实技术AR场景中的一组动作数据，并对所述动作数据进行特征提取，再将提取的第一特征与多组样本操作数据的第二特征分别进行相似度比对，进而根据相似度比对结果确定一组样本操作数据，以根据该组样本操作数据对应的关联动作执行预设的交互操作，可以基于当前开发的一种界面交互程序实现多种人机交互方式，为相关开发者的开发以及用户的使用提供极大的便利，并且可以提高AR场景中的人机交互的智能化水平，满足用户需求。附图说明图1是根据本专利技术实施例一的基于AR的人机交互方法的流程图；图2是根据本专利技术实施例二的基于AR的人机交互方法的流程图；图3是根据本专利技术实施例三的基于AR的人机交互方法的流程图；图4是根据本专利技术实施例四的基于AR的人机交互方法的流程图；图5是根据本专利技术实施例五的基于AR的人机交互方法的流程图；图6是根据本专利技术实施例六的基于AR的人机交互方法的流程图；图7是根据本专利技术实施例八的基于AR的人机交互装置的结构框图；图8是根据本专利技术实施例九的基于AR的人机交互装置的结构框图；图9是根据本专利技术实施例十的电子设备的结构框图。具体实施方式为使本专利技术的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本专利技术作进一步详细的说明。在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示普通含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。应当理解，尽管在本申请中可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。图1是根据本专利技术实施例一的基于AR的人机交互方法的流程图；该实施例可以用于具有多种支持AR交互技术的终端设备(例如手机、平板电脑、个人计算机等)。如图1所示，该方法包括以下步骤S101-S105：S101：采集当前增强现实技术AR场景中的一组动作数据。在一可选的实施例中，在当前的AR场景进行人机交互的过程中，终端设备可以通过AR应用或摄像装置(如摄像头或照相机等)采集用户的一组动作数据。在一可选的实施例中，所述一组动作数据可以包括二维或三维形式的帧图像序列(如图像采集过程中得到的视频流)，该帧图像序列中可以包括若干帧图像。S102：对所述动作数据进行特征提取，得到所述动作数据的第一特征。在一可选的实施例中，对所述动作数据提取的特征可以为既能很好地突出该动作数据的特点，又能表现出与其他动作数据的区别与联系的特征，本文档来自技高网...

【技术保护点】
一种基于AR的人机交互方法，其特征在于，包括：采集当前增强现实技术AR场景中的一组动作数据；对所述动作数据进行特征提取，得到所述动作数据的第一特征；根据所述第一特征与多组样本操作数据的第二特征分别进行相似度比对，得到相似度比对结果；根据所述相似度比对结果确定一组样本操作数据；根据所述一组样本操作数据对应的关联动作执行预设的交互操作。

【技术特征摘要】
1.一种基于AR的人机交互方法，其特征在于，包括：采集当前增强现实技术AR场景中的一组动作数据；对所述动作数据进行特征提取，得到所述动作数据的第一特征；根据所述第一特征与多组样本操作数据的第二特征分别进行相似度比对，得到相似度比对结果；根据所述相似度比对结果确定一组样本操作数据；根据所述一组样本操作数据对应的关联动作执行预设的交互操作。2.根据权利要求1所述的方法，其特征在于，所述采集当前增强现实技术AR场景中的一组动作数据之前，还包括：接收交互方式控制指令，所述交互方式控制指令中包含当前选择的交互方式；从预先保存的第一对应关系中，查询所述交互方式对应的多组样本操作数据。3.根据权利要求2所述的方法，其特征在于，还包括：根据以下步骤预先保存所述第一对应关系：确定待保存的多组样本操作数据以及所述多组样本操作数据对应的交互方式；构建所述多组样本操作数据与所述交互方式之间的第一对应关系；保存所述第一对应关系。4.根据权利要求1所述的方法，其特征在于，所述得到相似度比对结果之后，还包括：根据灵敏度参数确定相似度阈值；将所述相似度比对结果与所述相似度阈值进行比较；若确定所述相似度比对结果达到所述相似度阈值，则执行所述根据所述相似度比对结果确定一组样本操作数据的操作。5.根据权利要求1所述的方法，其特征在于，所述根据所述一组样本操作数据对应的关联动作执行预设的交互操作之前，还包括：从预先保存的第二对应关系中，查询与所述一组样本操作数据相对应的所述关联动作。6.根据权利要求5所述的方法，其特征在于，还包括：根据以下步骤预先保存所述第二对应关系：确定待关联的关联动作以及所述关联动作对应的一组样本操作数据，所述关联动作用于对关联的终端设...

【专利技术属性】
技术研发人员：王行，盛赞，李骊，周晓军，李朔，
申请(专利权)人：北京华捷艾米科技有限公司，
类型：发明
国别省市：北京,11