设备控制方法、装置、设备控制装置及存储介质制造方法及图纸

本公开提供了一种设备控制方法、装置、设备控制装置及存储介质，属于智能家居技术领域。所述方法包括：当检测到目标对象面向所述智能设备时，采集所述目标对象的五官动作或肢体动作；根据采集到的动作，获取与所述动作对应的操作指令；响应于所述操作指令，执行所述操作指令对应的设备控制过程。本公开通过采集用户的五官动作或肢体动作，根据用户的动作来获取并响应相应的操作指令，即使在嘈杂环境中，也可以精确地接收到用户发出的指令，可以提高设备控制方法的成功率。

【技术实现步骤摘要】
设备控制方法、装置、设备控制装置及存储介质
本公开涉及智能家居
，尤其涉及一种设备控制方法、装置、设备控制装置及存储介质。
技术介绍
随着智能家居技术的发展，智能设备层出不穷，其所能够实现的功能也越来越多。有很多场景需要用户进行输入相关指令，以对智能设备进行控制。目前，用户控制智能设备的方法通常是用户发出声音，当智能设备采集到用户的声音时，可以对该声音进行语音识别，根据语音识别结果来确定该声音对应于哪种语音指令，再执行该声音所对应的语音指令，从而实现对智能设备的控制。
技术实现思路
本公开提供一种设备控制方法、装置、设备控制装置及存储介质，可以解决相关技术中成功率低的问题。根据本公开实施例的第一方面，提供一种设备控制方法，应用于智能设备，包括：当检测到目标对象面向所述智能设备时，采集所述目标对象的五官动作或肢体动作；根据采集到的动作，获取与所述动作对应的操作指令；响应于所述操作指令，执行所述操作指令对应的设备控制过程。在第一方面的一种可能实现方式中，所述方法还包括：实时进行图像采集，当在采集到的图像中检测到人脸五官时，确定检测到目标对象面向所述智能设备。在第一方面的一种可能实现方式中，所述方法还包括：实时进行图像采集，对采集到的图像进行人脸检测，定位目标对象的眼球中心与瞳孔中心；将所述眼球中心与所述瞳孔中心的连线的方向确定为目标对象的视线方向；当检测到所述目标对象的视线方向经过所述智能设备时，确定检测到目标对象面向所述智能设备。在第一方面的一种可能实现方式中，所述方法还包括：所述当检测到目标对象面向所述智能设备时，启动计时功能，在计时过程中实时进行图像采集；当计时未达到预设时长时，检测到所述目标对象已不再面向所述智能设备时，忽略所述操作指令。在第一方面的一种可能实现方式中，所述根据采集到的动作，获取与所述动作对应的操作指令，包括：当采集到的动作为唇部动作和/或手势动作时，对所述唇部动作进行唇语识别和/或对所述手势动作进行手势识别，得到唇语识别结果和/或手势识别结果；根据所述唇语识别结果和/或手势识别结果，获取所述动作所对应的操作指令。在第一方面的一种可能实现方式中，所述根据所述唇语识别结果和/或手势识别结果，获取所述动作所对应的操作指令，包括：当采集到的动作为唇部动作时，获取与所述唇语识别结果匹配的操作指令；当采集到的动作为手势动作时，获取与所述手势识别结果匹配的操作指令；当采集到的动作为唇部动作与手势动作时，分别计算各个识别结果所对应的权重，基于各个识别结果所对应的操作指令以及权重，获取与所述动作对应的操作指令。在第一方面的一种可能实现方式中，所述根据采集到的动作，获取与所述动作对应的操作指令，还包括：实时进行图像采集，当在采集到的图像中检测到人脸五官时，对采集到的图像进行人脸识别，得到目标对象的面部表情识别结果；分别计算所述面部表情识别结果和动作识别结果所对应的权重；基于各个识别结果所对应的操作指令以及权重，获取与所述动作对应的操作指令。在第一方面的一种可能实现方式中，所述分别计算各个识别结果所对应的权重，基于各个识别结果所对应的操作指令以及权重，获取与所述动作对应的操作指令，包括：分别将各个识别结果与各个识别结果的类型所对应的预设操作指令进行匹配，得到各个识别结果对应的至少一个操作指令，以及对应于每个操作指令时的概率；将各个识别结果的概率中的概率最大值所对应的操作指令确定为各个识别结果所对应的操作指令；按照预设的概率最大值与权重的对应关系，确定各个识别结果所对应的权重；基于所述各个识别结果所对应的权重，对各个识别结果所对应的操作指令进行加权计算，得到每个操作指令所对应的综合权重；获取所述综合权重最大的操作指令。在第一方面的一种可能实现方式中，所述方法还包括：实时进行语音采集，对采集到的语音进行语音识别，得到目标对象的语音识别结果；将所述语音识别结果与语音所对应的预设操作指令进行匹配，得到语音识别结果所对应的至少一个操作指令，以及对应于每个操作指令时的概率；当所述语音识别结果的概率中的概率最大值小于预设阈值时，分别计算各个识别结果所对应的权重；基于各个识别结果所对应的操作指令以及权重，执行所述获取与所述动作对应的操作指令的步骤。在第一方面的一种可能实现方式中，所述方法还包括：当所述语音识别结果的概率中的概率最大值大于或等于预设阈值时，获取所述语音识别结果的概率中的概率最大值所对应的操作指令；执行所述响应于所述操作指令，执行所述操作指令对应的设备控制过程的步骤。根据本公开实施例的第二方面，提供一种设备控制装置，应用于智能设备，包括：采集模块，用于当检测到目标对象面向所述智能设备时，采集所述目标对象的五官动作或肢体动作；获取模块，用于根据采集到的动作，获取与所述动作对应的操作指令；处理模块，用于响应于所述操作指令，执行所述操作指令对应的设备控制过程。在第二方面的一种可能实现方式中，所述装置还包括：第一检测模块，用于实时进行图像采集，当在采集到的图像中检测到人脸五官时，确定检测到目标对象面向所述智能设备。在第二方面的一种可能实现方式中，所述装置还包括：定位模块，用于实时进行图像采集，对采集到的图像进行人脸检测，定位目标对象的眼球中心与瞳孔中心；第一确定模块，用于将所述眼球中心与所述瞳孔中心的连线的方向确定为目标对象的视线方向；第二检测模块，用于当检测到所述目标对象的视线方向经过所述智能设备时，确定检测到目标对象面向所述智能设备。在第二方面的一种可能实现方式中，所述装置还包括：计时模块，用于所述当检测到目标对象面向所述智能设备时，启动计时功能，在计时过程中实时进行图像采集；所述处理模块，还用于当计时未达到预设时长时，检测到所述目标对象已不再面向所述智能设备时，忽略所述操作指令。在第二方面的一种可能实现方式中，所述装置还包括：动作识别模块，用于当采集到的动作为唇部动作和/或手势动作时，对所述唇部动作进行唇语识别和/或对所述手势动作进行手势识别，得到唇语识别结果和/或手势识别结果；所述获取模块，用于根据所述唇语识别结果和/或手势识别结果，获取所述动作所对应的操作指令。在第二方面的一种可能实现方式中，所述获取模块用于：当采集到的动作为唇部动作时，获取与所述唇语识别结果匹配的操作指令；或，当采集到的动作为手势动作时，获取与所述手势识别结果匹配的操作指令；或，当采集到的动作为唇部动作与手势动作时，分别计算各个识别结果所对应的权重，基于各个识别结果所对应的操作指令以及权重，获取与所述动作对应的操作指令。在第二方面的一种可能实现方式中，所述装置还包括：人脸识别模块，用于实时进行图像采集，当在采集到的图像中检测到人脸五官时，对采集到的图像进行人脸识别，得到目标对象的面部表情识别结果；第一计算模块，用于分别计算所述面部表情识别结果和动作识别结果所对应的权重；所述获取模块，还用于基于各个识别结果所对应的操作指令以及权重，获取与所述动作对应的操作指令。在第二方面的一种可能实现方式中，所述装置还包括：第一匹配模块，用于分别将各个识别结果与各个识别结果的类型所对应的预设操作指令进行匹配，得到各个识别结果对应的至少一个操作指令，以及对应于每个操作指令时的概率；第二确定模块，用于将各个识别结果的概率中的概率最大值所对应本文档来自技高网...

【技术保护点】
一种设备控制方法，其特征在于，应用于智能设备，所述方法包括：当检测到目标对象面向所述智能设备时，采集所述目标对象的五官动作或肢体动作；根据采集到的动作，获取与所述动作对应的操作指令；响应于所述操作指令，执行所述操作指令对应的设备控制过程。

【技术特征摘要】
1.一种设备控制方法，其特征在于，应用于智能设备，所述方法包括：当检测到目标对象面向所述智能设备时，采集所述目标对象的五官动作或肢体动作；根据采集到的动作，获取与所述动作对应的操作指令；响应于所述操作指令，执行所述操作指令对应的设备控制过程。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：实时进行图像采集，当在采集到的图像中检测到人脸五官时，确定检测到目标对象面向所述智能设备。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：实时进行图像采集，对采集到的图像进行人脸检测，定位目标对象的眼球中心与瞳孔中心；将所述眼球中心与所述瞳孔中心的连线的方向确定为目标对象的视线方向；当检测到所述目标对象的视线方向经过所述智能设备时，确定检测到目标对象面向所述智能设备。4.根据权利要求1所述的方法，其特征在于，所述方法还包括：所述当检测到目标对象面向所述智能设备时，启动计时功能，在计时过程中实时进行图像采集；当计时未达到预设时长时，检测到所述目标对象已不再面向所述智能设备时，忽略所述操作指令。5.根据权利要求1所述的方法，其特征在于，所述根据采集到的动作，获取与所述动作对应的操作指令，包括：当采集到的动作为唇部动作和/或手势动作时，对所述唇部动作进行唇语识别和/或对所述手势动作进行手势识别，得到唇语识别结果和/或手势识别结果；根据所述唇语识别结果和/或手势识别结果，获取所述动作所对应的操作指令。6.根据权利要求5所述的方法，其特征在于，所述根据所述唇语识别结果和/或手势识别结果，获取所述动作所对应的操作指令，包括：当采集到的动作为唇部动作时，获取与所述唇语识别结果匹配的操作指令；当采集到的动作为手势动作时，获取与所述手势识别结果匹配的操作指令；当采集到的动作为唇部动作与手势动作时，分别计算各个识别结果所对应的权重，基于各个识别结果所对应的操作指令以及权重，获取与所述动作对应的操作指令。7.根据权利要求1所述的方法，其特征在于，所述根据采集到的动作，获取与所述动作对应的操作指令，还包括：实时进行图像采集，当在采集到的图像中检测到人脸五官时，对采集到的图像进行人脸识别，得到目标对象的面部表情识别结果；分别计算所述面部表情识别结果和动作识别结果所对应的权重；基于各个识别结果所对应的操作指令以及权重，获取与所述动作对应的操作指令。8.根据权利要求6所述的方法，其特征在于，所述分别计算各个识别结果所对应的权重，基于各个识别结果所对应的操作指令以及权重，获取与所述动作对应的操作指令，包括：分别将各个识别结果与各个识别结果的类型所对应的预设操作指令进行匹配，得到各个识别结果对应的至少一个操作指令，以及对应于每个操作指令时的概率；将各个识别结果的概率中的概率最大值所对应的操作指令确定为各个识别结果所对应的操作指令；按照预设的概率最大值与权重的对应关系，确定各个识别结果所对应的权重；基于所述各个识别结果所对应的权重，对各个识别结果所对应的操作指令进行加权计算，得到每个操作指令所对应的综合权重；获取所述综合权重最大的操作指令。9.根据权利要求1-8任一项所述的方法，其特征在于，所述方法还包括：实时进行语音采集，对采集到的语音进行语音识别，得到目标对象的语音识别结果；将所述语音识别结果与语音所对应的预设操作指令进行匹配，得到语音识别结果所对应的至少一个操作指令，以及对应于每个操作指令时的概率；当所述语音识别结果的概率中的概率最大值小于预设阈值时，分别计算各个识别结果所对应的权重；基于各个识别结果所对应的操作指令以及权重，执行所述获取与所述动作对应的操作指令的步骤。10.根据权利要求9所述的方法，其特征在于，所述方法还包括：当所述语音识别结果的概率中的概率最大值大于或等于预设阈值时，获取所述语音识别结果的概率中的概率最大值所对应的操作指令；执行所述响应于所述操作指令，执行所述操作指令对应的设备控制过程的步骤。11.一种设备控制装置，其特征在于，应用于智能设备，所述装置包括：采集模块，用于当检测到目标对象面向所述智能设备时，采集所述目标对象的五官动作或肢体动作；获取模块，用于根据采集到的动作，获取与所述动作对应的操作指令；处理模块，用于响应于所述操作指令，执行所述操作指令对应的设备控制过程。12.根据权利要求11所述的装置，其特征在于，所述...

【专利技术属性】
技术研发人员：林形省，冯智勇，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：北京,11