设备控制方法及装置制造方法及图纸

本公开涉及设备控制方法及装置。该方法包括：当在设备的屏幕上显示控制界面时，若采集到人脸图像，则确定人脸图像的基准参考位置；若所述基准参考位置在所述屏幕中对应的控制位置从所述控制界面的第一按键区域外移动至所述第一按键区域中，则以第一频率执行所述第一按键区域对应的控制指令；若所述控制位置在所述第一按键区域中连续停留的时间达到第一阈值，则在所述第一按键区域中显示加速区域；若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率。本公开能够通过移动脸部控制设备，并能灵活调整控制指令的执行频率，从而能够利用人脸识别和跟踪技术方便地进行设备控制，提高了设备控制的灵活性和准确性。

Device control method and device

The disclosure relates to a device control method and device. The method includes: when the control interface is displayed on the screen of the device, if a face image is captured, the reference position of the face image is determined; if the reference position corresponding to the control position on the screen moves from the first key region of the control interface to the first key region, then the first key region is taken as the first key region. A control instruction corresponding to the first key region is executed at one frequency; if the control position continuously resides in the first key region for a period of time reaching a first threshold, the acceleration region is displayed in the first key region; if the control position is located in the acceleration region, the execution of the first key region is enhanced. The frequency of the control instruction corresponding to the domain. The invention can move the facial control device and flexibly adjust the execution frequency of control instructions, so that the facial recognition and tracking technology can be used to control the device conveniently, and the flexibility and accuracy of the device control are improved.

【技术实现步骤摘要】
设备控制方法及装置
本公开涉及信息
，尤其涉及一种设备控制方法及装置。
技术介绍
目前，人们主要通过遥控器控制电视、冰箱和空调等设备。由于各个设备的遥控器通常不兼容，因此需要通过各个设备相应的遥控器控制各个设备。为了解决该问题，相关技术通过万能遥控器或者手势交互进行设备控制。万能遥控器虽然统一了各个设备的遥控器，但还是需要利用手机等辅助工具来操作设备。另外，在万能遥控器的方案中，通常需要用户使用手机端的App(Application，应用)对万能遥控器进行配置。因此，用户初次使用万能遥控器时难度较大。在手势交互的方案中，为了设置足够多的遥控命令，需要开发较多的手势，导致用户需要记忆较多的手势动作，不方便用户使用。此外，手势交互需要用户频繁使用手部动作，不同的人的手部动作可能差别较大，因此难以达到较高的识别准确率。而且在有些情况下，用户可能不希望采用双手进行比划操作。
技术实现思路
有鉴于此，本公开提出了一种设备控制方法及装置。根据本公开的一方面，提供了一种设备控制方法，包括：当在设备的屏幕上显示控制界面时，若采集到人脸图像，则确定所述人脸图像的基准参考位置；若所述基准参考位置在所述屏幕中对应的控制位置从所述控制界面的第一按键区域外移动至所述第一按键区域中，则以第一频率执行所述第一按键区域对应的控制指令；若所述控制位置在所述第一按键区域中连续停留的时间达到第一阈值，则在所述第一按键区域中显示加速区域；若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率。在一种可能的实现方式中，所述基准参考位置为所述人脸图像中的人脸区域的几何中心；或者，所述基准参考位置为所述人脸区域中两个瞳孔中心的中点。在一种可能的实现方式中，所述方法还包括：根据所述人脸图像中的坐标与所述屏幕中的坐标之间的对应关系，将所述基准参考位置映射到所述屏幕中，确定所述控制位置。在一种可能的实现方式中，若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率，包括：若所述控制位置位于所述加速区域中，则以第二频率执行所述第一按键区域对应的控制指令，其中，所述第二频率大于所述第一频率。在一种可能的实现方式中，若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率，包括：若所述控制位置位于所述加速区域中，则在所述控制位置停留在所述加速区域的过程中，执行所述第一按键区域对应的控制指令的频率逐渐增大，直至达到第三频率，其中，所述第三频率大于所述第一频率。在一种可能的实现方式中，在所述第一按键区域中显示加速区域之后，所述方法还包括：若所述控制位置位于所述第一按键区域中所述加速区域以外的区域，则以所述第一频率执行所述第一按键区域对应的控制指令。在一种可能的实现方式中，所述方法还包括：确定所述人脸图像的人脸活动范围中的坐标与所述控制界面中的坐标之间的对应关系；根据所述人脸活动范围中的坐标与所述控制界面中的坐标之间的对应关系，确定所述人脸图像中的坐标与所述屏幕中的坐标之间的对应关系。在一种可能的实现方式中，所述方法还包括：若根据连续N帧人脸图像中的基准参考位置，确定在采集所述连续N帧人脸图像时人脸静止，则根据所述连续N帧人脸图像中的基准参考位置确定人脸静止位置，其中，N为大于1的整数；根据所述人脸静止位置与人脸活动范围之间的位置关系，确定所述人脸静止位置对应的人脸活动范围。根据本公开的另一方面，提供了一种设备控制装置，包括：第一确定模块，用于当在设备的屏幕上显示控制界面时，若采集到人脸图像，则确定所述人脸图像的基准参考位置；第一执行模块，用于若所述基准参考位置在所述屏幕中对应的控制位置从所述控制界面的第一按键区域外移动至所述第一按键区域中，则以第一频率执行所述第一按键区域对应的控制指令；显示模块，用于若所述控制位置在所述第一按键区域中连续停留的时间达到第一阈值，则在所述第一按键区域中显示加速区域；提高模块，用于若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率。在一种可能的实现方式中，所述基准参考位置为所述人脸图像中的人脸区域的几何中心；或者，所述基准参考位置为所述人脸区域中两个瞳孔中心的中点。在一种可能的实现方式中，所述装置还包括：映射模块，用于根据所述人脸图像中的坐标与所述屏幕中的坐标之间的对应关系，将所述基准参考位置映射到所述屏幕中，确定所述控制位置。在一种可能的实现方式中，所述提高模块用于：若所述控制位置位于所述加速区域中，则以第二频率执行所述第一按键区域对应的控制指令，其中，所述第二频率大于所述第一频率。在一种可能的实现方式中，所述提高模块用于：若所述控制位置位于所述加速区域中，则在所述控制位置停留在所述加速区域的过程中，执行所述第一按键区域对应的控制指令的频率逐渐增大，直至达到第三频率，其中，所述第三频率大于所述第一频率。在一种可能的实现方式中，所述装置还包括：第二执行模块，用于若所述控制位置位于所述第一按键区域中所述加速区域以外的区域，则以所述第一频率执行所述第一按键区域对应的控制指令。在一种可能的实现方式中，所述装置还包括：第二确定模块，用于确定所述人脸图像的人脸活动范围中的坐标与所述控制界面中的坐标之间的对应关系；第三确定模块，用于根据所述人脸活动范围中的坐标与所述控制界面中的坐标之间的对应关系，确定所述人脸图像中的坐标与所述屏幕中的坐标之间的对应关系。在一种可能的实现方式中，所述装置还包括：第四确定模块，用于若根据连续N帧人脸图像中的基准参考位置，确定在采集所述连续N帧人脸图像时人脸静止，则根据所述连续N帧人脸图像中的基准参考位置确定人脸静止位置，其中，N为大于1的整数；第五确定模块，用于根据所述人脸静止位置与人脸活动范围之间的位置关系，确定所述人脸静止位置对应的人脸活动范围。根据本公开的另一方面，提供了一种设备控制装置，包括：处理器；用于存储处理器可执行指令的存储器；其中，所述处理器被配置为执行上述方法。根据本公开的另一方面，提供了一种非易失性计算机可读存储介质，其上存储有计算机程序指令，其中，所述计算机程序指令被处理器执行时实现上述方法。本公开的各方面的设备控制方法及装置通过当在设备的屏幕上显示控制界面时，若采集到人脸图像，则确定人脸图像的基准参考位置，若基准参考位置在屏幕中对应的控制位置从控制界面的第一按键区域外移动至第一按键区域中，则以第一频率执行第一按键区域对应的控制指令，若控制位置在第一按键区域中连续停留的时间达到第一阈值，则在第一按键区域中显示加速区域，若控制位置位于加速区域中，则提高执行第一按键区域对应的控制指令的频率，由此能够通过移动脸部控制设备，并能灵活调整控制指令的执行频率，从而能够利用人脸识别和跟踪技术方便地进行设备控制，提高了设备控制的灵活性和准确性。根据下面参考附图对示例性实施例的详细说明，本公开的其它特征及方面将变得清楚。附图说明包含在说明书中并且构成说明书的一部分的附图与说明书一起示出了本公开的示例性实施例、特征和方面，并且用于解释本公开的原理。图1示出根据本公开一实施例的设备控制方法的流程图。图2示出根据本公开一实施例的设备控制方法的应用场景的示意图。图3示出根据本公开一实施例的设备控制方本文档来自技高网...

【技术保护点】
1.一种设备控制方法，其特征在于，包括：当在设备的屏幕上显示控制界面时，若采集到人脸图像，则确定所述人脸图像的基准参考位置；若所述基准参考位置在所述屏幕中对应的控制位置从所述控制界面的第一按键区域外移动至所述第一按键区域中，则以第一频率执行所述第一按键区域对应的控制指令；若所述控制位置在所述第一按键区域中连续停留的时间达到第一阈值，则在所述第一按键区域中显示加速区域；若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率。

【技术特征摘要】
1.一种设备控制方法，其特征在于，包括：当在设备的屏幕上显示控制界面时，若采集到人脸图像，则确定所述人脸图像的基准参考位置；若所述基准参考位置在所述屏幕中对应的控制位置从所述控制界面的第一按键区域外移动至所述第一按键区域中，则以第一频率执行所述第一按键区域对应的控制指令；若所述控制位置在所述第一按键区域中连续停留的时间达到第一阈值，则在所述第一按键区域中显示加速区域；若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率。2.根据权利要求1所述的方法，其特征在于，所述基准参考位置为所述人脸图像中的人脸区域的几何中心；或者，所述基准参考位置为所述人脸区域中两个瞳孔中心的中点。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：根据所述人脸图像中的坐标与所述屏幕中的坐标之间的对应关系，将所述基准参考位置映射到所述屏幕中，确定所述控制位置。4.根据权利要求1所述的方法，其特征在于，若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率，包括：若所述控制位置位于所述加速区域中，则以第二频率执行所述第一按键区域对应的控制指令，其中，所述第二频率大于所述第一频率。5.根据权利要求1所述的方法，其特征在于，若所述控制位置位于所述加速区域中，则提高执行所述第一按键区域对应的控制指令的频率，包括：若所述控制位置位于所述加速区域中，则在所述控制位置停留在所述加速区域的过程中，执行所述第一按键区域对应的控制指令的频率逐渐增大，直至达到第三频率，其中，所述第三频率大于所述第一频率。6.根据权利要求1所述的方法，其特征在于，在所述第一按键区域中显示加速区域之后，所述方法还包括：若所述控制位置位于所述第一按键区域中所述加速区域以外的区域，则以所述第一频率执行所述第一按键区域对应的控制指令。7.根据权利要求1所述的方法，其特征在于，所述方法还包括：确定所述人脸图像的人脸活动范围中的坐标与所述控制界面中的坐标之间的对应关系；根据所述人脸活动范围中的坐标与所述控制界面中的坐标之间的对应关系，确定所述人脸图像中的坐标与所述屏幕中的坐标之间的对应关系。8.根据权利要求7所述的方法，其特征在于，所述方法还包括：若根据连续N帧人脸图像中的基准参考位置，确定在采集所述连续N帧人脸图像时人脸静止，则根据所述连续N帧人脸图像中的基准参考位置确定人脸静止位置，其中，N为大于1的整数；根据所述人脸静止位置与人脸活动范围之间的位置关系，确定所述人脸静止位置对应的人脸活动范围。9.一种设备控制装置，其特征在于，包括：第一确定模块，用于当在设备的屏幕上显示控制界面时，若采集到人脸图像，则确定所述人脸图像的基准参考位置；第一执行...

【专利技术属性】
技术研发人员：叶剑勇，
申请(专利权)人：优酷网络技术北京有限公司，
类型：发明
国别省市：北京,11