基于人脸识别和手势识别的控制方法及装置制造方法及图纸

本发明专利技术实施例提供一种基于人脸识别和手势识别的控制方法及装置。该方法包括：采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；获取与所识别出的人脸信息相对应的预设操作集合；执行预设操作集合中与所识别出的手势信息相匹配的操作。本发明专利技术实施例的方法，通过人脸信息和手势信息的双重匹配，提高了安全性。

Control Method and Device Based on Face Recognition and Gesture Recognition

The embodiment of the present invention provides a control method and device based on face recognition and gesture recognition. The method includes collecting images including face information and gesture information, recognizing face information and gesture information in images, acquiring preset operation sets corresponding to the recognized face information, and performing operations matching the recognized gesture information in preset operation sets. The method of the embodiment of the present invention improves security by double matching of face information and gesture information.

【技术实现步骤摘要】
基于人脸识别和手势识别的控制方法及装置
本专利技术实施例涉及图像处理
，尤其涉及一种基于人脸识别和手势识别的控制方法及装置。
技术介绍
随着智能终端及图像处理技术的不断发展，各种基于人脸识别的应用得到了广泛的使用，为人们的生活带来了极大的便利。现有基于人脸识别的相关应用中，可以基于人的脸部特征，对采集的图像先判断其是否存在人脸，如果存在人脸，则进一步的从图像中获取人脸的位置、大小和主要面部器官的位置信息。然后，可以依据这些信息，进一步提取人脸图像中所蕴涵的身份特征，并将所提取的身份特征与预设的人脸身份特征进行对比，若相同，则执行后续操作，例如，解锁、支付、签名等。现有仅基于人脸识别进行的解锁、支付、签名等操作，易受照片和视频等的干扰，安全性较低。
技术实现思路
本专利技术实施例提供一种基于人脸识别和手势识别的控制方法及装置，用以解决现有仅基于人脸识别进行操作安全性低的问题。第一方面，本专利技术实施例提供一种基于人脸识别和手势识别的控制方法，包括：采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；获取与所识别出的人脸信息相对应的预设操作集合；执行预设操作集合中与所识别出的手势信息相匹配的操作。在一种可能的实现方式中，执行预设操作集合中与所识别出的手势信息相匹配的操作包括：若预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与预设操作集合中的手势信息进行匹配；执行预设操作集合中与所识别出的手势信息相匹配的操作。在一种可能的实现方式中，执行预设操作集合中与所识别出的手势信息相匹配的操作包括：若预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；执行预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。在一种可能的实现方式中，执行预设操作集合中与所采集的手势信息相匹配的操作包括：若预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，场景信息包括时间信息、位置信息、天气信息中的至少一种；执行预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。在一种可能的实现方式中，手势信息包括静态手势信息和/或动态手势信息。在一种可能的实现方式中，在获取与所识别出的人脸信息相对应的预设操作集合之前，还包括：接收用户输入的信息，根据信息设置与用户相对应的预设操作集合。第二方面，本专利技术实施例提供一种基于人脸识别和手势识别的控制装置，包括：采集模块，用于采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；获取模块，用于获取与所识别出的人脸信息相对应的预设操作集合；执行模块，用于执行预设操作集合中与所识别出的手势信息相匹配的操作。在一种可能的实现方式中，执行模块具体用于，若预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与预设操作集合中的手势信息进行匹配；执行预设操作集合中与所识别出的手势信息相匹配的操作。在一种可能的实现方式中，执行模块具体用于，若预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；执行预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。在一种可能的实现方式中，执行模块具体用于，若预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，场景信息包括时间信息、位置信息、天气信息中的至少一种；执行预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。在一种可能的实现方式中，手势信息包括静态手势信息和/或动态手势信息。在一种可能的实现方式中，所述装置还包括：接收模块，用于在获取与所识别出的人脸信息相对应的预设操作集合之前，接收用户输入的信息，根据信息设置与用户相对应的预设操作集合。第三方面，本专利技术实施例提供一种电子设备，包括：存储器；处理器；以及计算机程序；其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如第一方面任一项所述的方法。第四方面，本专利技术实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行以实现如第一方面任一项所述的方法。本专利技术实施例提供的基于人脸识别和手势识别的控制方法及装置，通过采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；获取与所识别出的人脸信息相对应的预设操作集合；执行预设操作集合中与所识别出的手势信息相匹配的操作，相较于仅基于人脸识别执行操作的方法，不仅提高了执行操作的趣味性，而且提高了执行操作的安全性。附图说明此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本专利技术的实施例，并与说明书一起用于解释本专利技术的原理。图1为本专利技术提供的基于人脸识别和手势识别的控制方法一实施例的流程图；图2A为本专利技术实施例中使用的表情的示意图；图2B为本专利技术实施例中使用的手势的示意图；图3为本专利技术提供的基于人脸识别和手势识别的控制装置一实施例的结构示意图；图4为本专利技术提供的电子设备一实施例的结构示意图。通过上述附图，已示出本专利技术明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本专利技术构思的范围，而是通过参考特定实施例为本领域技术人员说明本专利技术的概念。具体实施方式这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本专利技术相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本专利技术的一些方面相一致的装置和方法的例子。本专利技术的说明书和权利要求书中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本专利技术中的“第一”和“第二”只起标识作用，而不能理解为指示或暗示顺序关系、相对重要性或者隐含指明所指示的技术特征的数量。“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。本专利技术的说明书中通篇提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。需要说明的是，在不冲突的情况下，本专利技术中的实施例及实施例中的特征可以相互组合。图1为本专利技术提供的基于人脸识别和手势识别的控制方法一实施例的流程图。本实施例的执行主体可以为终端设备，包括但不限于智能手机、门禁装置、快递签收装置、自动贩卖机等。如图1所示，本实施例提供的方法可以包括：步骤S101、采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息。可选的，可以通过终端设备自带的摄像模块采集图像，例如通过手机的摄像头进行采集；也可以通过与设备经有线和/或无线方式连接的摄像装置进行采集，例如门禁装置通过USB外接本文档来自技高网...

【技术保护点】
1.一种基于人脸识别和手势识别的控制方法，其特征在于，包括：采集包括人脸信息和手势信息的图像，识别所述图像中的人脸信息和手势信息；获取与所识别出的人脸信息相对应的预设操作集合；执行所述预设操作集合中与所识别出的手势信息相匹配的操作。

【技术特征摘要】
1.一种基于人脸识别和手势识别的控制方法，其特征在于，包括：采集包括人脸信息和手势信息的图像，识别所述图像中的人脸信息和手势信息；获取与所识别出的人脸信息相对应的预设操作集合；执行所述预设操作集合中与所识别出的手势信息相匹配的操作。2.根据权利要求1所述的方法，其特征在于，所述执行所述预设操作集合中与所识别出的手势信息相匹配的操作包括：若所述预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与所述预设操作集合中的手势信息进行匹配；执行所述预设操作集合中与所识别出的手势信息相匹配的操作。3.根据权利要求1所述的方法，其特征在于，所述执行所述预设操作集合中与所识别出的手势信息相匹配的操作包括：若所述预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；执行所述预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。4.根据权利要求1所述的方法，其特征在于，所述执行所述预设操作集合中与所采集的手势信息相匹配的操作包括：若所述预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，所述场景信息包括时间信息、位置信息、天气信息中的至少一种；执行所述预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。5.根据权利要求1-4任一项所述的方法，其特征在于，所述手势信息包括静态手势信息和/或动态手势信息。6.根据权利要求1-4任一项所述的方法，其特征在于，在所述获取与所识别出的人脸信息相对应的预设操作集合之前，还包括：接收用户输入的信息，根据所述信息设置与所述用户相对应的预设操作集合。7.一种基于人脸识别和手势识别的控制装置，其特征在于，包括：采集模块，用于采集包括人脸信息和手势信息的图像，识别所述图像中的人脸...

【专利技术属性】
技术研发人员：朱康，姚淼，
申请(专利权)人：百度在线网络技术北京有限公司，
类型：发明
国别省市：北京,11