一种终端设备控制方法和装置制造方法及图纸

本发明专利技术提供一种终端设备控制方法和装置，所述方法包括：通过所述终端设备连接的拍摄设备捕获用户行为信息；识别捕获到的用户行为信息对应的终端设备控制指令；根据识别出的终端设备控制指令控制所述终端设备。本发明专利技术提供的方案能够通过识别用户行为自动执行相应的终端设备控制指令。

【技术实现步骤摘要】
一种终端设备控制方法和装置
本专利技术涉及控制领域，尤其涉及一种终端设备控制方法和装置。
技术介绍
目前，在智能家居领域，对终端设备(如：空调、电视、风扇、电灯、窗帘等)的控制，尽管已经超越了传统的遥控器和按钮控制时代，但利用无线蓝牙、wifi和移动互联网技术的手机App控制技术依然停留在需要用户进行点击操作的阶段，并且功能越多，操作步骤越复杂，导致了很用户不会操作，例如不知道怎么对智能电视切换频道，不会用APP操作家里的空调。现有的技术，不论是人手动控制、遥控器控制还是手机APP控制终端设备，都是需要人的参与，终端设备被动接受控制指令。更为重要的是，终端设备不能够主动识别用户的行为，并自动下发指令。
技术实现思路
本专利技术的主要目的在于克服上述现有技术的缺陷，提供一种终端设备控制方法和装置，以解决现有技术中终端设备被动接受控制指令，不能够主动识别用户的行为的问题。本专利技术一方面提供了一种终端设备控制方法，包括：通过所述终端设备连接的拍摄设备捕获用户行为信息；识别捕获到的用户行为信息对应的终端设备控制指令；根据识别出的终端设备控制指令控制所述终端设备。可选地，识别捕获到的用户行为信息对应的终端设备控制指令，包括；对捕获到的用户行为信息进行识别，以转换成相应的行为含义信息；将转换成的行为含义信息进行终端设备控制指令匹配，以获取所述用户行为信息对应的终端设备控制指令。可选地，识别捕获到的用户行为信息对应的终端设备控制指令，还包括：若所述终端设备设置为使用用户自定义行为信息进行终端设备控制指令匹配，则根据预先设置的用户自定义信息与终端设备控制指令的对应关系，获取与所述捕获到的用户行为信息对应的终端设备控制指令。可选地，所述用户自定义信息与终端设备控制指令的对应关系通过如下方式进行预先设置：在任意终端设备控制指令的自定义行为信息设置模式下，采集用户自定义行为信息，并保存采集到的用户自定义信息与所述终端设备控制指令的对应关系。可选地，对捕获到的用户行为信息进行识别，以转换成相应的行为含义信息，包括：基于预先建立的行为信息识别模型对捕获到的用户行为信息进行识别，以获取所述捕获到的用户行为信息对应的行为含义信息；其中，所述用户行为信息包括用户行为图像和/或用户行为视频；所述行为信息识别模型包括图像识别模型和/或动作识别模型。可选地，对转换成的行为含义信息进行终端设备控制指令匹配，以获取所述用户行为信息对应的终端设备控制指令，包括：在预先保存的语义信息中查找与所述行为含义信息匹配的语义信息；根据预先配置的语义信息与终端设备控制指令的对应关系，查找与所述行为含义信息匹配的语义信息所对应的终端设备控制指令，以作为所述用户行为信息对应的终端设备控制指令；其中，所述预先配置的语义信息与终端设备控制指令的对应关系中每个终端设备控制指令对应至少一个语义信息。可选地，在预先保存的语义信息中查找与所述行为含义信息匹配的语义信息，包括：在预先保存的语义信息中查找与所述行为含义信息的相似度达到预定阈值的语义信息，作为候选语义信息；将所述候选语义信息中与所述行为含义信息的相似度最高的语义信息作为与所述行为含义信息匹配的语义信息。可选地，所述方法还包括：保存所述捕获到的用户行为信息与所述识别出的终端设备控制指令的对应关系，作为针对所述终端设备的终端设备控制指令的行为信息训练样本，以用于建立对用户行为信息进行识别的行为信息识别模型。可选地，所述方法还包括：采集多个用户触发所述终端设备的终端设备控制指令之前的用户行为信息，作为针对所述终端设备的终端设备控制指令的行为信息训练样本，以用于建立对用户行为信息进行识别的行为信息识别模型。可选地，识别捕获到的用户行为信息对应的终端设备控制指令，包括；将捕获到的用户行为信息上传到服务器，由服务器识别所述捕获到的用户行为信息对应的终端设备控制指令；接收所述服务器返回的所述捕获到的用户行为信息对应的终端设备控制指令。可选地，识别捕获到的用户行为信息对应的终端设备控制指令，包括：识别所述捕获到的用户行为信息中的用户，以获取所述用户对应行为信息识别模型；基于所述用户对应的行为信息识别模型对所述捕获到的用户行为信息进行识别，以转换成相应的行为含义信息；对转换成的行为含义信息进行终端设备控制指令匹配，以获取所述用户行为信息对应的终端设备控制指令。可选地，所述用户对应的行为信息识别模型通过如下方式建立：采集所述用户触发所述终端设备的终端设备控制指令之前的行为信息，作为所述用户的行为信息训练样本；基于所述用户的行为信息训练样本进行模型训练，建立用于对所述用户的用户行为信息进行识别的行为信息识别模型。可选地，根据识别出的终端设备控制指令控制所述终端设备，包括：通过语音信息提示用户是否执行所述识别出的终端设备控制指令；若用户确定执行所述识别出的终端设备控制指令，则根据所述识别出的终端设备控制指令控制所述终端设备。可选地，所述拍摄设备为3D拍摄设备。可选地，所述终端设备包括空调、洗衣机、冰箱、电视机、电风扇、窗帘、电灯。本专利技术另一方面提供了一种终端设备控制装置，包括：捕获单元，用于通过所述终端设备连接的拍摄设备捕获用户行为信息；识别单元，用于识别捕获到的用户行为信息对应的终端设备控制指令；控制单元，用于根据识别出的终端设备控制指令控制所述终端设备。可选地，所述识别单元包括；转换单元，用于对捕获到的用户行为信息进行识别，以转换成相应的行为含义信息；匹配单元，用于将转换成的行为含义信息进行终端设备控制指令匹配，以获取所述用户行为信息对应的终端设备控制指令。可选地，所述识别单元进一步用于：若所述终端设备设置为使用用户自定义行为信息进行终端设备控制指令匹配，则根据预先设置的用户自定义信息与终端设备控制指令的对应关系，获取与所述捕获到的用户行为信息对应的终端设备控制指令。可选地，所述用户自定义信息与终端设备控制指令的对应关系通过如下方式进行预先设置：在任意终端设备控制指令的自定义行为信息设置模式下，采集用户自定义行为信息；保存采集到的用户自定义信息与所述终端设备控制指令的对应关系。可选地，所述转换单元进一步用于：基于预先建立的行为信息识别模型对捕获到的用户行为信息进行识别，以获取所述捕获到的用户行为信息对应的行为含义信息；其中，所述用户行为信息包括用户行为图像和/或用户行为视频；所述行为信息识别模型包括图像识别模型和/或动作识别模型。可选地，所述匹配单元包括：第一查找子单元，用于在预先保存的语义信息中查找与所述行为含义信息匹配的语义信息；第二查找子单元，用于根据预先配置的语义信息与终端设备控制指令的对应关系，查找与所述行为含义信息匹配的语义信息所对应的终端设备控制指令，以作为所述用户行为信息对应的终端设备控制指令；其中，所述预先配置的语义信息与终端设备控制指令的对应关系中每个终端设备控制指令对应至少一个语义信息。可选地，所述第一查找子单元进一步用于：在预先保存的语义信息中查找与所述行为含义信息的相似度达到预定阈值的语义信息，作为候选语义信息；将所述候选语义信息中与所述行为含义信息的相似度最高的语义信息作为与所述行为含义信息匹配的语义信息。可选地，所述装置还包括：保存单元，用于保存所述捕获到的用户行为信息与所述识别出的所述捕获到的用户行本文档来自技高网...

【技术保护点】
一种终端设备控制方法，其特征在于，包括：通过所述终端设备连接的拍摄设备捕获用户行为信息；识别捕获到的用户行为信息对应的终端设备控制指令；根据识别出的终端设备控制指令控制所述终端设备。

【技术特征摘要】
1.一种终端设备控制方法，其特征在于，包括：通过所述终端设备连接的拍摄设备捕获用户行为信息；识别捕获到的用户行为信息对应的终端设备控制指令；根据识别出的终端设备控制指令控制所述终端设备。2.根据权利要求1所述的方法，其特征在于，识别捕获到的用户行为信息对应的终端设备控制指令，包括；对捕获到的用户行为信息进行识别，以转换成相应的行为含义信息；将转换成的行为含义信息进行终端设备控制指令匹配，以获取所述用户行为信息对应的终端设备控制指令。3.根据权利要求1或2所述的方法，其特征在于，识别捕获到的用户行为信息对应的终端设备控制指令，还包括：若所述终端设备设置为使用用户自定义行为信息进行终端设备控制指令匹配，则根据预先设置的用户自定义信息与终端设备控制指令的对应关系，获取与所述捕获到的用户行为信息对应的终端设备控制指令。4.根据权利要求3所述的方法，其特征在于，所述用户自定义信息与终端设备控制指令的对应关系通过如下方式进行预先设置：在任意终端设备控制指令的自定义行为信息设置模式下，采集用户自定义行为信息，并保存采集到的用户自定义信息与所述终端设备控制指令的对应关系。5.根据权利要求2-4任一项所述的方法，其特征在于，对捕获到的用户行为信息进行识别，以转换成相应的行为含义信息，包括：基于预先建立的行为信息识别模型对捕获到的用户行为信息进行识别，以获取所述捕获到的用户行为信息对应的行为含义信息；其中，所述用户行为信息包括用户行为图像和/或用户行为视频；所述行为信息识别模型包括图像识别模型和/或动作识别模型。6.根据权利要求2-5任一项所述的方法，其特征在于，对转换成的行为含义信息进行终端设备控制指令匹配，以获取所述用户行为信息对应的终端设备控制指令，包括：在预先保存的语义信息中查找与所述行为含义信息匹配的语义信息；根据预先配置的语义信息与终端设备控制指令的对应关系，查找与所述行为含义信息匹配的语义信息所对应的终端设备控制指令，以作为所述用户行为信息对应的终端设备控制指令；其中，所述预先配置的语义信息与终端设备控制指令的对应关系中每个终端设备控制指令对应至少一个语义信息。7.根据权利要求6所述的方法，其特征在于，在预先保存的语义信息中查找与所述行为含义信息匹配的语义信息，包括：在预先保存的语义信息中查找与所述行为含义信息的相似度达到预定阈值的语义信息，作为候选语义信息；将所述候选语义信息中与所述行为含义信息的相似度最高的语义信息作为与所述行为含义信息匹配的语义信息。8.根据权利要求5-7任一项所述的方法，其特征在于，还包括：保存所述捕获到的用户行为信息与所述识别出的终端设备控制指令的对应关系，作为针对所述终端设备的终端设备控制指令的行为信息训练样本，以用于建立对用户行为信息进行识别的行为信息识别模型。9.根据权利要求5-7任一项所述的方法，其特征在于，还包括：采集多个用户触发所述终端设备的终端设备控制指令之前的用户行为信息，作为针对所述终端设备的终端设备控制指令的行为信息训练样本，以用于建立对用户行为信息进行识别的行为信息识别模型。10.根据权利要求1所述的方法，其特征在于，识别捕获到的用户行为信息对应的终端设备控制指令，包括；将捕获到的用户行为信息上传到服务器，由服务器识别所述捕获到的用户行为信息对应的终端设备控制指令；接收所述服务器返回的所述捕获到的用户行为信息对应的终端设备控制指令。11.根据权利要求1所述的方法，其特征在于，识别捕获到的用户行为信息对应的终端设备控制指令，包括：识别所述捕获到的用户行为信息中的用户，以获取所述用户对应行为信息识别模型；基于所述用户对应的行为信息识别模型对所述捕获到的用户行为信息进行识别，以转换成相应的行为含义信息；对转换成的行为含义信息进行终端设备控制指令匹配，以获取所述用户行为信息对应的终端设备控制指令。12.根据权利要求11所述的方法，其特征在于，所述用户对应的行为信息识别模型通过如下方式建立：采集所述用户触发所述终端设备的终端设备控制指令之前的行为信息，作为所述用户的行为信息训练样本；基于所述用户的行为信息训练样本进行模型训练，建立用于对所述用户的用户行为信息进行识别的行为信息识别模型。13.根据权利要求1-12任一项所述的方法，其特征在于，根据识别出的终端设备控制指令控制所述终端设备，包括：通过语音信息提示用户是否执行所述识别出的终端设备控制指令；若用户确定执行所述识别出的终端设备控制指令，则根据所述识别出的终端设备控制指令控制所述终端设备。14.根据权利要求1-13任一项所述的方法，其特征在于，所述拍摄设备为3D拍摄设备。15.根据权利要求1-14任一项所述的方法，其特征在于，所述终端设备包括空调、洗衣机、冰箱、电...

【专利技术属性】
技术研发人员：谌进，宋德超，何贤俊，彭磊，曾春亮，
申请(专利权)人：珠海格力电器股份有限公司，
类型：发明
国别省市：广东,44