基于两位置深度图像识别的饮水机控制装置及其控制方法制造方法及图纸

本发明专利技术公开一种基于两位置深度图像识别的饮水机控制装置及其控制方法，包括：第一图像获取单元、第二图像获取单元、控制及信息储存/处理单元和电源；电源的输出端连接控制及信息储存/处理单元的电源输入端，用于直接或间接为控制及信息储存/处理单元、第一图像获取单元和第二图像获取单元提供工作电源；控制及信息储存/处理单元与二个图像获取单元电连接。本发明专利技术通过图像获取单元获得取水容器（杯子）的深度图像，提取饮水机取水容器（杯子）的口沿位置、杯子高度以及杯子中实时水位高度等特征信息，实现了智能控制饮水机的启动和关闭出水功能。

Water dispenser control device and its control method based on two-position depth image recognition

The invention discloses a water dispenser control device based on two-position depth image recognition and its control method, including: the first image acquisition unit, the second image acquisition unit, the control and information storage/processing unit and the power supply; the output end of the power supply connects the power input end of the control and information storage/processing unit for direct use. Or indirectly provide working power for the control and information storage/processing unit, the first image acquisition unit and the second image acquisition unit; the control and information storage/processing unit is electrically connected with the two image acquisition units. The invention obtains the depth image of the water intake container (cup) by the image acquisition unit, extracts the characteristic information such as the mouth edge position, cup height and real-time water level height in the cup of the water intake container (cup) of the water dispenser, and realizes the function of intelligent control of starting and closing the water outlet of the water dispenser.

【技术实现步骤摘要】
基于两位置深度图像识别的饮水机控制装置及其控制方法
本专利技术属于饮水机
，具体涉及一种饮水机的出水智能控制装置及其控制方法。
技术介绍
随着饮水机的不断普及，广大消费者对饮水机的功能要求也越来越高。目前的饮水机必须通过按键操作完成定量取水，不能实现智能控制取水过程，给使用者带来了一定的不便。
技术实现思路
本专利技术解决的技术问题是提供一种饮水机出水智能控制装置及其控制方法，以彩色相机和深度相机技术手段判断饮水机出水口下方是否有杯子存在，以及杯子口沿是否对准出水口，通过上述判断来控制打开或关闭饮水机的出水口水流，以及智能控制出水量。为实现上述控制装置及其控制方法，本专利技术所采取的技术方案如下：基于两位置深度图像识别的饮水机控制装置，包括第一图像获取单元、第二图像获取单元、控制及信息储存/处理单元和电源；电源的输出端连接控制及信息储存/处理单元的电源输入端，用于直接或间接为控制及信息储存/处理单元、第一图像获取单元和第二图像获取单元提供工作电源；控制及信息储存/处理单元分别与第一图像获取单元和第二图像获取单元电连接。进一步地，饮水机出水口下方出现杯子的空间为图像获取装置拍摄的目标区域，目标区域内包括多个位于饮水机上固定的标志点，作为建立三维坐标系标定点。进一步地，第一图像获取单元安装在饮水机机体的目标区域上部、近出水口位置，第一图像获取单元向下方向垂直拍摄杯子；第二图像获取单元安装在饮水机机体的目标区域侧部，从侧面位置水平方向拍摄杯子侧面。进一步地，第一图像获取单元和第二图像获取单元中包括以下两种相机之一：1）深度相机，2）深度相机结合彩色相机，深度相机结合彩色相机为RGB-D相机；深度相机拍摄获得深度图像，RGB-D相机拍摄获得深度图像和彩色图像；第一图像获取单元中深度相机拍摄的为第一深度图像，彩色相机拍摄的为第一彩色图像，第二图像获取单元中深度相机拍摄的为第二深度图像，彩色相机拍摄的为第二彩色图像。进一步地，第一图像获取单元和第二图像获取单元中深度相机的工作原理是以下四种原理中的一种：I）结构光测量原理、II）双目视差测量原理、III）结构光+双目视差测量原理、IV）TOF飞行时间测量原理。本专利技术基于两位置深度图像识别的饮水机控制装置的控制方法包括如下两种技术方案：技术方案一：基于两位置深度图像识别的饮水机控制方法，使用深度相机获得第一深度图像和第二深度图像的步骤包括：S1.建立目标区域的背景模型：目标区域没有杯子或其他外来物体,控制及信息储存/处理单元通过第一图像获取单元和第二图像获取单元分别获得目标区域的多帧背景深度图像并加以处理，将背景深度图像转换为背景点云图像；根据已知的标志点和出水口的位置三维坐标信息以及二图像获取单元的参数，建立目标区域的背景模型，控制及信息储存/处理单元存储该背景模型；S2.提取目标区域前景深度图像：目标区域放置杯子，饮水机出水口没有出水的情况下，控制及信息储存/处理单元通过第一图像获取单元和第二图像获取单元分别获得多帧目标区域的实时第一深度图像和第二深度图像，对第一深度图像和第二深度图像进行噪声阈值处理、平滑处理等，进行前景和背景分割，选择有效算法提取前景轮廓，即杯子的轮廓，并且提取杯子的特征点，通过第一深度图像获得杯子在xy平面上投影诸如最左像素点、最右像素点、最前像素点、最后像素点等特征点的三维坐标等杯子在xy平面上的位置信息；通过第二深度图像获得杯子的最高像素点的三维坐标信息，即获得了杯子的高度信息；S3.判断杯子是否对准饮水机出水口：根据已经建立的目标区域的背景模型及出水口在三维坐标系中的位置参数，以及杯子第一深度图像在xy平面上投影前后、左右对称具有明显的几何中心的特性，控制及信息储存/处理单元判断饮水机出水口在xy平面上投影是否落在杯子在xy平面上投影内部，并且计算出水口在xy平面上投影和杯子在xy平面上投影几何中心之间的位置关系和距离，即和该几何中心的对准程度，据此对准程度，设定在不同的特定杯中水位高度关闭饮水机出水，给杯子注入特定量的水；S4.饮水机向杯子里注水：通过以上步骤，所述控制及信息储存/处理单元确定出水口在xy平面上投影落在杯子口沿内部，即饮水机出水口对准了杯子的口沿，控制及信息储存/处理单元发出指令：开启饮水机出水口水流，向杯子里注水；S5.杯子中注入的水位高度实时检测：在饮水机向杯子里注水过程中，控制及信息储存/处理单元控制第一图像获取单元中深度相机和第二图像获取单元中深度相机以每秒一定帧数的速度实时分别获得第一深度图像和第二深度图像，提取其中杯子中水面的实时高度信息，其中：对于不透明的杯子，杯子中水面的实时高度信息从第一深度图像中提取，对于透明的杯子，杯子中水面的实时高度信息从第二深度图像中提取，或者从第一深度图像和第二深度图像中同时分别提取，取高度大的值为水面高度值；控制及信息储存/处理单元处理、分析、计算杯子中水位平面的深度图像过程包括：通过有效的算法滤除饮水机出水口流下的水流带来的噪声，以及剔除水流落下溅起的水花和水蒸气带来的噪声等干扰因素；S6.完成用杯子取水过程：当控制及信息储存/处理单元通过对实时第一深度图像和第二深度图像的处理、分析，计算出杯子中的水位到达预设定的特定水位高度时，控制及信息储存/处理单元发出指令：关闭饮水机出水，停止向杯子中注水，停止拍摄深度图像；S7.更新目标区域的背景模型：取水者从目标区域移走杯子后，一定时间内，没有物体或杯子再次进入目标区域，控制及信息储存/处理单元启动第一图像获取单元和第二图像获取单元中深度相机获得多帧目标区域的第一深度图像和第二深度图像，对目标区域再次建立更新的背景模型，并用该新建立的更新背景模型替代控制及信息储存/处理单元中存储的原有背景模型，作为下次取水的S1步骤：建立目标区域的背景模型。技术方案二：基于两位置深度图像识别的饮水机控制方法，使用RGB-D相加获得配准后的第一深度图像和配准后的第二深度图像的步骤包括：S1.建立目标区域的背景模型：使用RGB-D相机建立的背景模型为深度图像和彩色图像配准后的背景模型，目标区域没有杯子或其他外来物体,控制及信息储存/处理单元通过第一图像获取单元和第二图像获取单元中RGB-D相机同步获得目标区域的背景彩色图像和深度图像并加以处理，将图像转换为背景点云图像，对彩色图像和深度图像进行配准，建立彩色图像像素点和深度图像深度信息之间的对应关系，从而得出彩色图像的像素位置和深度图像变换模型；控制及信息储存/处理单元根据配准得出的像素位置和深度变换模型，配准方法包括：采用基于特征点匹配的配准，其中用尺度不变特征变换算法(SIFT)或者其他相关的特征点算法来检测RGB-D相机同步获得的彩色图像和深度图像的特征点，并对上述图像的特征点进行匹配；用随机一致性算法(RANSAC)或者其他算法去除上述图像错误的匹配点对，得到正确匹配的特征点对；根据正确匹配的特征点对的位置和深度信息，得到它们之间的对应关系，计算出这两帧图像之间的像素位置和深度变换模型，从而获得更高分辨率的配准后深度图像；根据已知的标志点和出水口的位置三维坐标信息以及RGB-D相机的参数，建立目标区域的配准后背景模型，控制及信息储存/处理单元存储该配准后背景模型；S2.提取目标区域前景本文档来自技高网...

【技术保护点】
1.基于两位置深度图像识别的饮水机控制装置，其特征在于：包括第一图像获取单元（1）、第二图像获取单元（2）、控制及信息储存/处理单元（3）和电源（4）；电源（4）的输出端连接控制及信息储存/处理单元（3）的电源输入端，用于直接或间接为控制及信息储存/处理单元（3）、第一图像获取单元（1）和第二图像获取单元（2）提供工作电源；控制及信息储存/处理单元（3）分别与第一图像获取单元（1）和第二图像获取单元（2）电连接。

【技术特征摘要】
1.基于两位置深度图像识别的饮水机控制装置，其特征在于：包括第一图像获取单元（1）、第二图像获取单元（2）、控制及信息储存/处理单元（3）和电源（4）；电源（4）的输出端连接控制及信息储存/处理单元（3）的电源输入端，用于直接或间接为控制及信息储存/处理单元（3）、第一图像获取单元（1）和第二图像获取单元（2）提供工作电源；控制及信息储存/处理单元（3）分别与第一图像获取单元（1）和第二图像获取单元（2）电连接。2.根据权利要求1所述的基于两位置深度图像识别的饮水机控制装置，其特征在于：饮水机出水口下方出现杯子的空间为图像获取装置拍摄的目标区域，目标区域内包括多个位于饮水机上固定的标志点，作为建立三维坐标系标定点。3.根据权利要求2所述的基于两位置深度图像识别的饮水机控制装置，其特征在于：第一图像获取单元（1）安装在饮水机机体的目标区域上部、近出水口位置，第一图像获取单元（1）向下方向垂直拍摄杯子；第二图像获取单元（2）安装在饮水机机体的目标区域侧部，从侧面位置水平方向拍摄杯子侧面。4.根据权利要求3所述的基于两位置深度图像识别的饮水机控制装置，其特征在于：第一图像获取单元（1）和第二图像获取单元（2）中包括以下两种相机之一：1）深度相机，深度相机拍摄获得深度图像；2）深度相机结合彩色相机，深度相机结合彩色相机为RGB-D相机，RGB-D相机拍摄获得彩色图像和深度图像。5.根据权利要求4所述的基于两位置深度图像识别的饮水机控制装置，其特征在于：第一图像获取单元（1）和第二图像获取单元（2）中深度相机的工作原理是以下四种原理中的一种：I）结构光测量原理、II）双目视差测量原理、III）结构光+双目视差测量原理、IV）TOF飞行时间测量原理。6.基于两位置深度图像识别的饮水机控制方法，特征在于包括如下步骤：S1.建立目标区域的背景模型：目标区域没有杯子或其他外来物体,控制及信息储存/处理单元（3）通过第一图像获取单元（1）和第二图像获取单元（2）分别获得目标区域的多帧背景深度图像并加以处理，将背景深度图像转换为背景点云图像；根据已知的标志点和出水口的位置三维坐标信息以及二图像获取单元的参数，建立目标区域的背景模型，控制及信息储存/处理单元（3）存储该背景模型；S2.提取目标区域前景深度图像：目标区域放置杯子，饮水机出水口没有出水的情况下，控制及信息储存/处理单元（3）通过第一图像获取单元（1）和第二图像获取单元（2）分别获得多帧目标区域的实时第一深度图像和第二深度图像，对第一深度图像和第二深度图像进行噪声阈值处理、平滑处理等，进行前景和背景分割，选择有效算法提取前景轮廓，即杯子的轮廓，并且提取杯子的特征点，通过第一深度图像获得杯子在xy平面上投影诸如最左像素点、最右像素点、最前像素点、最后像素点等特征点的三维坐标等杯子在xy平面上的位置信息；通过第二深度图像获得杯子的最高像素点的三维坐标信息，即获得了杯子的高度信息；S3.判断杯子是否对准饮水机出水口：根据已经建立的目标区域的背景模型及出水口在三维坐标系中的位置参数，以及杯子第一深度图像在xy平面上投影...

【专利技术属性】
技术研发人员：徐育，
申请(专利权)人：浙江安精智能科技有限公司，
类型：发明
国别省市：浙江,33