一种家用电器可视化控制方法技术

一种家用电器可视化控制方法，其特征在于，通过视频图像识别，提取视频流中的家居元素，并加入控制单元，清晰直观，准确无误，可视化控制，实现可视，可感，可触。在实时图像上，手工对需要控制的家用电器设备进行分类，并记录各个需要控制的家用电器圈选矩形框的相对坐标；对当前实时图像进行图像识别，对识别的物体绘制矩形框框选分类；与自动图像识别圈选物体矩形框进行掩模干涉，让自动识别学习家用电器框选规则，并锁定家用电器矩形框，记录为最终家用电器分类矩形框相对坐标；绘制相同大小的透明控件，覆盖到实时图像对应的家用电器上，并在分类时，确定各个家用电器对应控件的单击、双击、滑动等操作事件及相应动作；之后每次操作，第一次利用摄像头得到家居实时图像时，进行物体自动识别，生成组合矩形框控件，旋转摄像头获取图像时，自动计算控件的相对位移坐标，所掩模的家用电器进入或退出当前界面，控件自动生效或失效。从而达到可视化控制操作。

【技术实现步骤摘要】
一种家用电器可视化控制方法
本专利技术涉及家用电器控制、智能家居领域，尤其是一种家用电器可视化控制方法。
技术介绍
随着移动互联网的快速发展，很多智能家电控制系统也从原来的单个个体控制、本地控制、局域网络控制，转换到手机APP远程控制，极大地拓宽了家用电器的控制、使用范围，家用电器厂商、智能家居系统集成商等纷纷推出各自的APP控制程序，呈现的网络家用电器越来越多，控制功能越发复杂，而其中人机交互的APP也越来越复杂，不同的家用电器、智能家居系统，需要不同的页面、控制逻辑去实现，每个厂商都是按照自己的协议、理解去实现各种操作界面，使得使用者要花更多的时间去理解、认知繁琐的使用流程、控制功能，使得简单的操作更加复杂化，造成更多的新的困扰，远离了智能家电操作简单、容易上手，让生活更轻松简单舒适的初衷。
技术实现思路
为了解决上述问题，本专利技术提供一种家用电器可视化远程控制方法。本专利技术提供的技术方案实现如下。一种家用电器可视化控制方法，其特征在于，通过视频图像识别，提取视频流中的家居元素，并加入控制单元，清晰直观，准确无误，可视化控制，实现可视，可感，可触。一种家用电器可视化控制方法，在实时图像上，手工对需要控制的家用电器设备进行矩形框框选分类，并记录各个需要控制的家用电器圈选矩形框的相对坐标。一种家用电器可视化控制方法，对当前实时图像进行图像识别，对识别的物体绘制矩形框框选分类；与自动图像识别圈选物体矩形框进行掩模干涉，让自动识别学习家用电器框选规则，并锁定家用电器矩形框，记录为最终家用电器分类矩形框相对坐标。一种家用电器可视化控制方法，通过摄像头得到家居实时图像，进行物体自动识别，生成组合矩形框控件，和自动识别的物体分类进行掩模叠加，去除不相干物体，确定控件叠加位置。旋转摄像头获取图像时，自动计算控件的相对位移坐标，所掩模的家用电器进入或退出当前界面，控件自动生效或失效。达到可视化控制操作。一种家用电器可视化控制方法，在类似空调、电视等红外控制设备中，可以在框选生成控件后，单击控件即可在实时图像上弹出对应遥控界面，从而实现实时的、随心所欲的控制。一种家用电器可视化控制方法，其具体步骤如下：1、通过摄像头获取家居环境实时图像；2、在实时图像上，手工对需要控制的家用电器设备进行矩形框框选分类，并记录各个需要控制的家用电器圈选矩形框的相对坐标；3、对当前实时图像进行图像识别，对识别的物体绘制矩形框框选分类；利用步骤2记录的矩形框，与自动图像识别圈选物体矩形框进行掩模干涉，让自动识别学习家用电器框选规则，并锁定家用电器矩形框，记录为最终家用电器分类矩形框相对坐标；4、利用步骤3生成的矩形框相对坐标，绘制相同大小的透明控件，覆盖到实时图像对应的家用电器上，并在分类时，确定各个家用电器对应控件的单击、双击、滑动等操作事件及相应动作；5、之后每次操作，第一次利用摄像头得到家居实时图像时，利用步骤3的自学习规则，进行物体自动识别，并利用步骤4生成的组合矩形框控件，和自动识别的物体分类进行掩模叠加，去除不相干物体，确定控件叠加位置。旋转摄像头获取图像时，自动计算控件的相对位移坐标，所掩模的家用电器进入或退出当前界面，控件自动生效或失效。从而达到可视化控制操作。附图说明图1为手工圈定家用电器并分类，图2为实时图像自动识别圈定物体分类；图3为可视化控制方法的流程图。具体实施方式本专利技术实现一种家用电器可视化控制方法，首先，在可控的智能家居房间或通道内安装可捕获现场图像的摄像头，通过网络将实时图像传送到手机APP；在APP的实时图像中，手工选择可控的家用电器实体并框选出来，如图1所示，后台或APP记录框选的位置坐标，间距等，后台或APP对实时图像进行灰度处理，并根据色域深度自动生成矩形圈选框，如图2所示；将手动框选区域灰度化并与自动生成的矩形框进行对比匹配，当有一个以上匹配时即可根据相对坐标自动将手动框选的其他控制框叠加到实时图像灰度图中，并保存相关区域的灰度值；去掉实时图像中不相关的控制框，并将实际控制框生成透明控件覆盖到实时图像对应的家用电器上；将控件进行分类，在分类时，确定各个家用电器对应控件的单击、双击、滑动等操作事件及相应动作；将相应事件绑定到底层实际家用电器控制接口；以后每次控制相应家用电器时，只需要控制摄像头转动，将相应家用电器置于实时画面内，通过识别得到当前设置的控件，通过在相应家用电器位置触发事件，即可实现可视化控制。旋转摄像头获取图像时，自动计算控件的相对位移坐标，所掩模的家用电器进入或退出当前界面，控件自动生效或失效。如此，达到可视化控制操作。特别的，在类似空调、电视等红外家电设备中，可以在框选生成控件后，单击控件即可在实时图像上弹出对应遥控界面，从而实现实时的、随心所欲的控制。一种家用电器可视化控制方法在包含上面的一整套流程的同时，通过用户行为分析，智能家居环境采集，及每次控制数据收集处理，包括框选区域的图像随时间变化规律等，即可实现界面控制框随着物体的移动更改位置而更改，让视野内的家居实现可视化控制，不再局限于传统的智能家居、家用电器控制界面，让智能控制可视、可感、可触。以上所述仅为本专利技术的较佳实施例，凡依本专利技术申请专利范围所做的均等变化与修饰，皆应属本专利技术的涵盖范围。本文档来自技高网...

【技术保护点】
一种家用电器可视化控制方法，其特征在于，通过视频图像识别，提取视频流中的家居元素，并加入控制单元，清晰直观，准确无误，可视化控制，实现可视，可感，可触。

【技术特征摘要】
1.一种家用电器可视化控制方法，其特征在于，通过视频图像识别，提取视频流中的家居元素，并加入控制单元，清晰直观，准确无误，可视化控制，实现可视，可感，可触。2.如权利要求1所述的一种家用电器可视化控制方法，在实时图像上，手工对需要控制的家用电器设备进行矩形框框选分类，并记录各个需要控制的家用电器圈选矩形框的相对坐标。3.如权利要求1所述的一种家用电器可视化控制方法，对当前实时图像进行图像识别，对识别的物体绘制矩形框框选分类；与自动图像识别圈选物体矩形框进行掩模干涉，让自动识别学习家用电器框选规则，并锁定家用电器矩形框，记录为最终家用电器分类矩形框相对坐标。4.如权利要求1所述的一种家用电器可视化控制方法，通过摄像头得到家居实时图像，进行物体自动识别，生成组合矩形框控件，和自动识别的物体分类进行掩模叠加，去除不相干物体，确定控件叠加位置；旋转摄像头获取图像时，自动计算控件的相对位移坐标，所掩模的家用电器进入或退出当前界面，控件...

【专利技术属性】
技术研发人员：王建胜，蒋宏杰，
申请(专利权)人：云南爱家智慧家庭科技有限公司，
类型：发明
国别省市：云南,53