基于计算机视觉的巡检机器人仪表图像识别方法及系统技术方案

技术编号:23400735 阅读:40 留言:0更新日期:2020-02-22 12:55
本公开提供了一种基于计算机视觉的巡检机器人仪表图像识别方法及系统,构建待巡检场景的三维空间模型,预设巡检机器人的巡检路线,并根据目标仪表的位置、朝向以及光照情况预设拍照点位;基于设计的巡检路线和拍照点,对指定仪表进行拍摄标定,得到指定仪表的型号、量程、仪表模版图片和拍照点编号;巡检机器人沿巡检路线按照指定的编号顺序到达各个巡检点,按照预设拍照点位对仪表进行拍摄,将得到的仪表照片编码后根据模板匹配算法进行仪表定位,然后利用指针仪表或数字仪表各自对应的仪表识别算法进行读数识别;本公开解决了人力巡检的不安全性、传统仪表图像识别方法的不稳定性和参数难调的问题,极大的提高了仪表图像识别的准确度。

Image recognition method and system of inspection robot instrument based on computer vision

【技术实现步骤摘要】
基于计算机视觉的巡检机器人仪表图像识别方法及系统
本公开涉及仪表图像识别
,特别涉及一种基于计算机视觉的巡检机器人仪表图像识别方法及系统。
技术介绍
本部分的陈述仅仅是提供了与本公开相关的
技术介绍
,并不必然构成现有技术。随着智能化时代的到来,利用新兴的计算机视觉技术,节约更多的人力成本,提高实际应用的效率是未来的发展趋势之一。图像识别技术在生活中有众多的应用场景,如何将基于计算机视觉的图像识别方法搭载于巡检机器人上实现自动化、智能化的巡检,是当今研究的热点之一。仪表图像识别的目的是在图片中准确找到仪表的位置,并且分析仪表的状态,例如:读数、开关等。搭载仪表图像识别算法的巡检机器人被广泛应用于电站、机房等场景的无人巡检、安全检查等任务中。本公开专利技术人发现,(1)目前的仪表图像识别算法主要是利用已有的计算机图形学方法,对目标的指定特征(直线、圆环等)进行提取,设置特定的判断逻辑实现仪表图像识别,这样的方法难以适应现实场景中的大量干扰,例如光照、划痕、遮挡等;(2)上述方法的效率一般较低,需要对整幅图像中的信息进行完整的处理本文档来自技高网...

【技术保护点】
1.一种基于计算机视觉的巡检机器人仪表图像识别方法,其特征在于,步骤如下:/n构建待巡检场景的三维空间模型,根据三维空间模型预设巡检机器人的巡检路线,并根据目标仪表的位置、朝向以及光照情况预设拍照点位;/n基于设计的巡检路线和拍照点,对指定仪表进行拍摄标定,得到指定仪表的型号、量程、仪表模版图片和拍照点编号;/n巡检机器人沿巡检路线按照指定的编号顺序到达各个巡检点,按照预设拍照点位对仪表进行拍摄,将得到的仪表照片编码后根据模板匹配算法进行仪表定位,然后利用指针仪表或数字仪表各自对应的仪表识别算法进行读数识别。/n

【技术特征摘要】
1.一种基于计算机视觉的巡检机器人仪表图像识别方法,其特征在于,步骤如下:
构建待巡检场景的三维空间模型,根据三维空间模型预设巡检机器人的巡检路线,并根据目标仪表的位置、朝向以及光照情况预设拍照点位;
基于设计的巡检路线和拍照点,对指定仪表进行拍摄标定,得到指定仪表的型号、量程、仪表模版图片和拍照点编号;
巡检机器人沿巡检路线按照指定的编号顺序到达各个巡检点,按照预设拍照点位对仪表进行拍摄,将得到的仪表照片编码后根据模板匹配算法进行仪表定位,然后利用指针仪表或数字仪表各自对应的仪表识别算法进行读数识别。


2.如权利要求1所述的基于计算机视觉的巡检机器人仪表图像识别方法,其特征在于,根据模板匹配算法进行仪表定位,具体为:
采用滑窗机制,通过提取仪表模版图片中的图像特征,再与目标图片上的每一个大小相近的滑窗窗口进行比对,得到最相似的部分作为仪表的定位结果。


3.如权利要求1所述的基于计算机视觉的巡检机器人仪表图像识别方法,其特征在于,指针仪表的仪表识别算法,具体为:
采用PointeNet算法,引入以表盘半径中点为中心点的锚点,将所有的锚点边框设计为对角长度为表盘半径,中心点在二分之一半径处的矩形,以所有的矩形锚点边框为基础基于SSD的卷积神经网络进行仪表指针的检测,得到指针候选框。


4.如权利要求3所述的基于计算机视觉的巡检机器人仪表图像识别方法,其特征在于,得到指针候选框后,根据标定好的仪表量程起点的坐标和刻度、中心点的坐标以及终点的坐标和刻度,计算指针仪表具体读数,具体为:



其中,中心点坐标为(xc,yc),量程起点坐标为(xs,ys),刻度为α量程终点坐标为(xe,ye),刻度为β,算法识别结果为(xr,yr)。


5.如权利要求1所述的基于计算机视觉的巡检机器人仪表图像识别方法,其特征在于,采用STR算法进行数字识别,包括数字区域的检测和检测区域的数字识别。


6.如权利要求5所述的基于计算机视觉的巡检机器人仪表图像识别方法,其特征在于,所述STR算法进行数字识别的具体步骤为:
(6-1)输入图像为X,通过文字检测网络CTPN进行数字区域的...

【专利技术属性】
技术研发人员:徐勇李传智郝朝阳李庆孙晓彬王树东武志强冯勇李志国宁利敏王明国
申请(专利权)人:山东欧玛嘉宝电气科技有限公司
类型:发明
国别省市:山东;37

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1