一种基于梯度变换的方形指针式仪表示数识别方法技术

本发明专利技术公开一种基于梯度变换的方形指针式仪表示数识别方法，方法首先采集方形指针式仪表的表盘RGB图像并转成灰度图；计算灰度图的水平梯度和垂直梯度，得到两个梯度变换矩阵；然后将梯度变换矩阵经过二值化留下所有梯度变化明显的直线，并过滤掉不满足仪表边缘的直线，并将矩阵合并；接着通过Harris角点检测定位方形仪表表盘四角坐标，通过坐标抠取仪表盘的图像，并统一表盘图像的大小；再然后利用霍夫直线检测的方法提取表盘图像中的所有直线，根据表盘的特征从检测出的直线中找出指针直线；最后根据指针直线与起点直线夹角、起点直线与终点直线夹角以及量程计算示数。本发明专利技术较模板匹配的方法可以提高仪表检测的速度，并能提高示数识别的准确度。能提高示数识别的准确度。

A method of identifying the indication of square pointer instrument based on gradient transformation

【技术实现步骤摘要】
一种基于梯度变换的方形指针式仪表示数识别方法


[0001]本专利技术涉及仪表示数监测
，尤其涉及一种基于梯度变换的方形指针式仪表示数识别方法。

技术介绍

[0002]近年来，煤炭一直是我国的主要能源及重要原材料。随着时代的发展，煤炭行业也将迎来智能化生产和建设的大步发展。而由于自动化、智能化程度越来越高，对多种多样的信息数据的处理成为智能化控制和无人化作业的前提条件。为了实现煤矿设备运行数据的测量、监控和采集，设备运行系统中使用了各种传感器和摄像头。通过这些仪器的使用，实现了井下设备的自动监控。
[0003]在井下环境中，传统指针式仪表与数显电子仪表相比具有防水、防尘、高精度、抗电磁干扰等诸多优点，因此常用于测量电压、电流、气压、温度等信息。方形指针式仪表的数据监控功能在煤矿生产活动中起着至关重要的作用。由于指针式仪表的机械检测原理，无法通过数据接口传输信息。因此，在井下，指针式仪表的识别主要还是通过人工观察和记录。但井下指针式仪表数量多，安装环境复杂，人工识别指针式仪表的工作量非常庞大。而在井下的一些危险场所，在抄表过程中，煤矿工人的生命安全受到威胁。通过工业相机代替人眼识别指针式仪表的示数，不仅节省了大量的人力，减少误检，提高企业的效率，还能最大程度的保护工人的生命安全，是个一举多得的方法。
[0004]目前指针式仪表大部分采用了模板匹配和深度学习的方法进行仪表检测。模板匹配识别速度相对较慢，并且需要搜集大量的模板，若摄像机距离仪表较近较远导致分辨率不同，就需要不同分辨率所对应的模板，假如模板不全会导致识别结果准确度非常低，甚至识别不出；而深度学习需要大量的基础样本进行训练，井下的环境无法提供大量的样本，难以实现。

技术实现思路

[0005]针对上述现有技术的不足，本专利技术提供一种基于梯度变换的方形指针式仪表示数识别方法。
[0006]为解决上述技术问题，本专利技术所采取的技术方案是：一种基于梯度变换的方形指针式仪表示数识别方法，包括如下步骤：
[0007]步骤1：采集方形指针式仪表的表盘RGB图像，将图像转成灰度图；根据灰度图中仪表边框为黑色、表盘中心为白色的特征利用水平梯度和垂直梯度的计算方式得到两个梯度变换矩阵，具体过程如下：
[0008]步骤1.1：利用基于OpenCV的cvtcolor(COLOR_RGB2GRAY)函数将方形指针式仪表的表盘RGB图像转成灰度图像；
[0009]步骤1.2：利用方形指针式仪表边缘为黑色，表盘中央位置为白色的特征计算水平梯度和竖直梯度，得到水平梯度矩阵和竖直梯度矩阵；
[0010]步骤1.3：利用梯度的基本定义，计算图像中的每个点在水平方向和竖直方向的方向导数，若方向导数为负数，则取相应梯度值的绝对值，若方向导数为正数，则梯度值不变。
[0011]步骤2：将这两个梯度变换矩阵经过二值化留下所有梯度变化明显的直线，并过滤掉不满足仪表边缘的直线，然后将矩阵合并，具体过程如下：
[0012]步骤2.1：利用基于OpenCV的Threshold函数分别对水平梯度和垂直梯度变换矩阵进行二值化处理，将变化率小的直线过滤掉，保留梯度变化明显的直线；
[0013]步骤2.2：利用合并n行或列以及过滤的方法对二值化后的水平梯度和垂直梯度变换矩阵进行不合理直线筛查，即删除过短或者过长的直线，保留满足仪表边缘长度的直线；
[0014]步骤2.3：利用基于OpenCV的bitwise_or函数将过滤后的水平梯度变换矩阵与竖直梯度变换矩阵进行逻辑或运算，得到合并之后的矩阵，该矩阵包含仪表边缘的水平直线和竖直直线。
[0015]步骤3：通过Harris角点检测定位方形仪表表盘四角坐标，通过坐标抠取仪表盘的图像，并统一表盘图像的大小，具体过程如下：
[0016]步骤3.1：利用基于harris的compute_harris_response函数将步骤2得到的图像进行角点检测；
[0017]步骤3.2：利用基于harris的get_harris_points函数将角点检测中高于阈值的4个角点坐标筛选出来；
[0018]步骤3.3：利用筛选出的4个角点坐标将仪表表盘从灰度图像中抠出来，形成检测后的表盘图；
[0019]步骤3.4：利用OpenCV的resize函数将抠出来的表盘图像统一为同一尺寸的正方形图像。
[0020]步骤4：利用霍夫直线检测的方法提取表盘图像中的所有直线，根据表盘的特征从检测出的直线中找出指针直线，具体过程如下：
[0021]步骤4.1：利用基于OpenCV的GaussianBlur、equalizeHis、threshhold、morphologyEx和resize函数对步骤3得到的统一大小后的图像进行图像的预处理；
[0022]步骤4.2：利用基于OpenCV的HoughLinesP函数对预处理后的图像进行霍夫直线提取；
[0023]步骤4.3：利用表盘内部直线的特征，通过计算步骤4.2提取的直线到表盘中心点的欧式距离和计算步骤4.2提取的直线距离表盘中心点较近的端点与表盘中心点的距离，从所有直线中找到两距离值均最小的直线，从而找出指针直线。
[0024]步骤5：根据指针直线与起点直线夹角、起点直线与终点直线夹角以及量程计算该仪表的示数，具体过程如下：
[0025]步骤5.1：利用两条直线夹角的基本公式求出起点直线与终点直线的夹角
ɑ
；
[0026]步骤5.2：利用两条直线夹角的基本公式求出指针直线与起点直线夹角β；
[0027]步骤5.3：判断起点直线与终点直线的夹角
ɑ
是否为锐角，若是则仪表示数计算公式为：
[0028][0029]否则，仪表的示数计算公式为：
[0030][0031]采用上述技术方案所产生的有益效果在于：
[0032]1、本专利技术提供的方法采用端到端的方形指针式仪表示数读取技术，可以减少前期人工裁取模板的过程或人工采集样本用于深度学习训练的工作，有效地改善了由于模板不足导致准确率低的问题，并且提高示数读取的速度。
[0033]2、本专利技术提供的方法对灰度图像进行梯度计算，能有效的保留仪表边缘信息的完整性，并结合Harris角点检测，能最大程度的检测出方形指针的四角坐标，从而快速的定位指针的坐标点，为后续示数的读取做准备。
附图说明
[0034]图1为本专利技术实施例中基于梯度变换的方形指针式仪表示数识别方法的流程图；
[0035]图2为本专利技术实施例中步骤1的具体流程图；
[0036]图3为本专利技术实施例中步骤2的具体流程图；
[0037]图4为本专利技术实施例中步骤3的具体流程图；
[0038]图5为本专利技术实施例中步骤4的具体流程图；
[0039]图6为本专利技术实施例中步骤5的具体流程图。
具体实施方式
[0040]下面结合附图和实施例，对本专利技术的具体实施方式作进一步本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于梯度变换的方形指针式仪表示数识别方法，其特征在于，包括如下步骤：步骤1：采集方形指针式仪表的表盘RGB图像，将图像转成灰度图；根据灰度图中仪表边框为黑色、表盘中心为白色的特征利用水平梯度和垂直梯度的计算方式得到两个梯度变换矩阵；步骤2：将这两个梯度变换矩阵经过二值化留下所有梯度变化明显的直线，并过滤掉不满足仪表边缘的直线，然后将矩阵合并；步骤3：通过Harris角点检测定位方形仪表表盘四角坐标，通过坐标抠取仪表盘的图像，并统一表盘图像的大小；步骤4：利用霍夫直线检测的方法提取表盘图像中的所有直线，根据表盘的特征从检测出的直线中找出指针直线；步骤5：根据指针直线与起点直线夹角、起点直线与终点直线夹角以及量程计算该仪表的示数。2.根据权利要求1所述的基于梯度变换的方形指针式仪表示数识别方法，其特征在于，所述步骤1的过程如下：步骤1.1：利用基于OpenCV的cvtcolor(COLOR_RGB2GRAY)函数将方形指针式仪表的表盘RGB图像转成灰度图像；步骤1.2：利用方形指针式仪表边缘为黑色，表盘中央位置为白色的特征计算水平梯度和竖直梯度，得到水平梯度矩阵和竖直梯度矩阵；步骤1.3：利用梯度的基本定义，计算图像中的每个点在水平方向和竖直方向的方向导数，若方向导数为负数，则取相应梯度值的绝对值，若方向导数为正数，则梯度值不变。3.根据权利要求1所述的基于梯度变换的方形指针式仪表示数识别方法，其特征在于，所述步骤2的过程如下：步骤2.1：利用基于OpenCV的Threshold函数分别对水平梯度和垂直梯度变换矩阵进行二值化处理，将变化率小的直线过滤掉，保留梯度变化明显的直线；步骤2.2：利用合并n行或列以及过滤的方法对二值化后的水平梯度和垂直梯度变换矩阵进行不合理直线筛查，即删除过短或者过长的直线，保留满足仪表边缘长度的直线；步骤2.3：利用基于OpenCV的bitwise_or函数将过滤后的水平梯度变换...

【专利技术属性】
技术研发人员：王雷，李媛媛，朱玉芹，张维娜，姜宇，李驰，赵红菊，赵文渤，张旭，
申请(专利权)人：中煤科工集团沈阳研究院有限公司，
类型：发明
国别省市：