本公开公开了手部信息识别方法、控制方法、装置、电子设备及介质。方法包括：获取当前帧的当前手部图像；识别当前手部图像得到对应的候选手部信息；根据候选手部信息和历史手部信息，确定目标手部信息，历史手部信息为基于当前帧之前的历史手部图像确定出的手部信息，候选手部信息包括候选手势类别信息和候选手部关键点信息，历史手部信息包括历史手势类别信息和历史手部关键点信息，目标手部信息包括目标手势类别信息和目标手部关键点信息。利用该方法，通过候选手部信息和历史手部信息确定出的目标手部信息，提高了对目标手部信息确定的准确度，提高了通过目标手部信息进行人机交互的成功率，增强了用户通过目标手部信息进行人机交互的体验。人机交互的体验。人机交互的体验。
【技术实现步骤摘要】
手部信息识别方法、控制方法、装置、电子设备及介质
[0001]本公开实施例涉及计算机
，尤其涉及手部信息识别方法、控制方法、装置、电子设备及介质。
技术介绍
[0002]随着无线通信技术和移动互联网产业的发展，智能终端(例如手机)应用相当普遍，给个人带来诸多便利的同时，深深地影响了每个人的生活。
[0003]人机交互是一门研究系统与用户之间的交互关系的学问。系统可以是各种各样的机器，也可以是计算机化的系统和软件，如系统为智能终端。
[0004]现阶段，人机交互的方式主要为使用触摸屏(例如手机或平板)或物理按键(电灯开关或电脑键盘)。但是随着技术的应用演进，在人们适应现有人机交互方式带来的便利之后，会继续追寻更加方便的人机交互方式，以解除当前人机交互方式的限制。如，通过动作识别进行无接触式人机交互。
[0005]然而，目前，通过动作识别进行人机交互存在识别错误的情况，从而导致交互控制出错，影响了用户进行人机交互的体验。
技术实现思路
[0006]本公开实施例提供了手部信息识别方法、控制方法、装置、电子设备及介质，提高了目标手部信息确定的准确率，提高了通过目标手部信息进行人机交互的成功率，增强了用户通过目标手部信息进行人机交互的体验。
[0007]第一方面，本公开实施例提供了一种手部信息识别方法，包括：
[0008]获取当前帧的当前手部图像；
[0009]识别所述当前手部图像得到对应的候选手部信息；
[0010]根据所述候选手部信息和历史手部信息，确定目标手部信息，所述历史手部信息为基于所述当前帧之前的历史手部图像确定出的手部信息；
[0011]其中，所述候选手部信息包括候选手势类别信息和候选手部关键点信息，所述历史手部信息包括历史手势类别信息和历史手部关键点信息，所述目标手部信息包括目标手势类别信息和目标手部关键点信息。
[0012]第二方面，本公开实施例还提供了一种控制方法，包括：
[0013]获取设定时长内的手部信息；
[0014]根据所述手部信息确定所述设定时长内所述手部信息的变换信息；
[0015]根据所述手部信息和所述变换信息，确定对应的控制指令；
[0016]根据所述控制指令进行控制；
[0017]其中，所述手部信息根据目标手部信息确定。
[0018]第三方面，本公开实施例提供了一种手部信息识别装置，包括：
[0019]获取模块，用于获取当前帧的当前手部图像；
[0020]识别模块，用于识别所述当前手部图像得到对应的候选手部信息；
[0021]确定模块，用于根据所述候选手部信息和历史手部信息，确定目标手部信息，所述历史手部信息为基于所述当前帧之前的历史手部图像确定出的手部信息；
[0022]其中，所述候选手部信息包括候选手势类别信息和候选手部关键点信息，所述历史手部信息包括历史手势类别信息和历史手部关键点信息，所述目标手部信息包括目标手势类别信息和目标手部关键点信息。
[0023]第四方面，本公开实施例提供了一种控制装置，包括：
[0024]获取模块，用于获取设定时长内的手部信息；
[0025]第一确定模块，用于根据所述手部信息确定所述设定时长内所述手部信息的变换信息；
[0026]第二确定模块，用于根据所述手部信息和所述变换信息，确定对应的控制指令；
[0027]控制模块，用于根据所述控制指令进行控制。
[0028]第五方面，本公开实施例还提供了一种电子设备，包括：
[0029]一个或多个处理装置；
[0030]存储装置，用于存储一个或多个程序；
[0031]所述一个或多个程序被所述一个或多个处理装置执行，使得所述一个或多个处理装置实现本公开实施例提供的方法。
[0032]第六方面，本公开实施例还提供了一种计算机可读介质，其上存储有计算机程序，该程序被处理装置执行时实现本公开实施例提供的方法。
[0033]本公开实施例提供了手部信息识别方法、控制方法、装置、电子设备及介质，首先获取当前帧的当前手部图像；然后识别所述当前手部图像得到对应的候选手部信息；最后根据所述候选手部信息和历史手部信息，确定目标手部信息，所述历史手部信息为基于所述当前帧之前的历史手部图像确定出的手部信息。利用上述技术方案，通过候选手部信息和历史手部信息确定出的目标手部信息，提高了对目标手部信息确定的准确度，提高了通过目标手部信息进行人机交互的成功率，增强了用户通过目标手部信息进行人机交互的体验。
附图说明
[0034]结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。
[0035]图1为本公开实施例一提供的一种手部信息识别方法的流程示意图；
[0036]图2为本公开实施例二提供的一种控制方法的流程示意图；
[0037]图3为本公开实施例三提供的一种控制方法的流程示意图；
[0038]图4为本公开实施例四提供的一种手部信息识别装置的结构示意图；
[0039]图5为本公开实施例五提供的一种控制装置的结构示意图；
[0040]图6为本公开实施例六提供的一种电子设备的结构示意图。
具体实施方式
[0041]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
[0042]应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
[0043]本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0044]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0045]需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0046]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0047]下述各实施本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种手部信息识别方法，其特征在于，包括：获取当前帧的当前手部图像；识别所述当前手部图像得到对应的候选手部信息；根据所述候选手部信息和历史手部信息，确定目标手部信息，所述历史手部信息为基于所述当前帧之前的历史手部图像确定出的手部信息；其中，所述候选手部信息包括候选手势类别信息和候选手部关键点信息，所述历史手部信息包括历史手势类别信息和历史手部关键点信息，所述目标手部信息包括目标手势类别信息和目标手部关键点信息。2.根据权利要求1所述的方法，其特征在于，所述根据所述候选手部信息和历史手部信息，确定目标手部信息，包括：获取历史手势类别信息；将所述候选手势类别信息和所述历史手势类别信息中占比最多的手势类别信息，确定为当前帧的目标手势类别信息。3.根据权利要求2所述的方法，其特征在于，所述获取历史手势类别信息，包括：使用滑动窗口获取第一预设时长内的历史手势类别信息。4.根据权利要求1所述的方法，其特征在于，识别所述当前手部图像得到对应的候选手部信息，包括：通过卷积神经网络确定所述当前手部图像所对应手势属于原始手势类别中每种手势类别的原始概率；根据所述原始概率和类别映射关系，确定所述当前手部图像所对应手势属于目标手势类别中每种手势类别的目标概率；确定所述当前手部图像的候选手势类别信息，所述候选手势类别信息表征各所述目标概率中数值最大的目标概率所对应的手势类别；其中，所述目标手势类别为根据所述原始手势类别所包括各手势类别的相似度重新进行类别划分后形成的，所述目标手势分类所包括的类别数小于所述原始手势分类所包括的类别数，所述类别映射关系表征所述原始手势类别中各手势类别和所述目标手势类别中各手势类别的映射关系。5.根据权利要求1所述的方法，其特征在于，所述根据所述候选手部信息和历史手部信息，确定目标手部信息，包括：通过滑动窗口获取第二预设时长内的历史手部关键点信息；使用最小二乘法处理所述候选手部关键点信息和所述历史手部关键点信息，得到设定帧的目标手部关键点信息，所述设定帧为所述滑动窗口的中心对应时刻所采集的帧，所述目标手部关键点信息与所述设定帧的目标手势类别信息关联存储，以用于确定对应的控制指令。6.一种控制方法，...
【专利技术属性】
技术研发人员：朱泳明，王增辉，刘翰宏，申洋，赵哲，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。