一种基于多源信息融合的焊缝智能在线检测装置制造方法及图纸

本发明专利技术公开了一种基于多源信息融合的焊缝智能在线检测装置，根据焊接余温获取高质量和随时间变化红外成像信息，通过红外线阵列传感器、可见光摄像头获取焊接过程中的实时焊缝的红外和可见光视频，通过视频信息采集模块和智能处理模块实现两种视频信息的融合和智能识别，获得焊缝的焊缝宽度、中心轨迹、焊缝纹理和表面温度场分布等信息，利用深度学习算法进行焊缝质量评价；并通过无线数据传输模块将视频信息和处理结果发送至服务器，服务器根据所获得的焊缝红外和可见光图像，进行整个焊缝图片拼接和匹配融合，构建整个焊接过程质量评价数据库，为焊接过程评价提供决策支持。

An Intelligent On-line Detection Device for Weld Seam Based on Multi-source Information Fusion

The invention discloses an intelligent on-line detection device for welding seam based on multi-source information fusion, which obtains high quality and time-varying infrared imaging information according to welding residual temperature, obtains real-time infrared and visible video of welding seam during welding process through infrared array sensor and visible camera, and realizes two kinds of video information through video information acquisition module and intelligent processing module. The fusion and intelligent recognition can obtain the information of weld width, center trajectory, weld texture and surface temperature field distribution, and evaluate the weld quality by depth learning algorithm. Video information and processing results are sent to the server through wireless data transmission module, and the server splices the whole weld image according to the obtained infrared and visible images. Matching fusion is used to construct the whole welding process quality evaluation database to provide decision support for welding process evaluation.

【技术实现步骤摘要】
一种基于多源信息融合的焊缝智能在线检测装置
：本专利技术涉及一种基于多源信息融合的焊缝智能在线检测装置，其属于焊缝检测

技术介绍
：焊接技术作为现代机械制造的一种重要技术手段，目前被广泛应用于机械制造中。焊接过程中，难免出现人为或非人为因素导致焊接方向发生改变，进而导致焊偏；焊接过程中，焊接参数的改变直接影响焊缝的形状的改变，进而产生焊接缺陷，严重影响焊接质量。在航空航天、核电、化学工业容器、高铁制造、汽车轮船等重要行业的焊接中，除了内部检测要求外，均需要进行严格的焊缝外观形状和表面缺陷检测。焊缝的质量检测主要包括：焊缝外观形状和表面缺陷检测、焊缝内部缺陷检测、焊缝各种性能检测。对于焊缝外观形状和表面缺陷检测主要通过人眼观察，目前也有采用可见光视觉检测方法进行焊缝的表面质量检测，而焊缝内部缺陷的检测主要采用X射线、超声波探伤、磁通检测等无损检测方法实现。X射线方法应采用辐射方式检测，需要采用防辐射装置来避免辐射危险，导致其成本过程，安全性不高，不适合大规模的部件大批量以及钢结构焊接；磁通检测虽然没有硬射线对人体危害那么可怕，但是它的电磁污染也非常大，对周边设备和环境都存在一定的影响；超声波探伤方法具有检测灵敏度高、速度快的优点，但在检测时需要超声耦合剂，并对操作人员的技术要求很高，同时超声波发射和接收装置较大，对于大规模的结构件焊接实现较困难。此外，目前的焊缝检测方法均是要在焊缝冷却之后进行检测，属于后评价，如果能够实现在线实时评价，在作业过程中对焊缝的质量进行检测，可以对焊接技术参数和工艺流程进行及时调整，进而可以降低由于焊接参数和操作导致的焊接缺陷，提高焊接作业质量和作业效率，减少重复劳动。可见光视觉检测方法可以检测焊缝是否漏焊、是否焊偏、焊缝的大小和形状，从总体上评估焊接质量。新兴的红外测温技术是一种新的非接触式在线检测方式。红外线探测测温测量速度快、范围宽、灵敏度高，对被测温度场无干扰，是一种快速有效的结构状态在线实时检验工具，检测可靠性较高。而在焊接过程中，不同焊接参数下所形成的焊接熔池后方焊缝温度变化不同，通过构建焊缝温度场变化图像，利用红外热成像获取焊接余温变化，以得到高质量和随时间变化的红外成像信息，从而实现焊接内部质量检测。另一方面，随着现代物联网、大数据和人工智能技术的发展，为多信息的融合和处理提供了基础，将焊接过程中焊缝红外视频、可见光视频、焊枪作业参数信息进行融合，并通过无线网络将整个焊接过程的信息传输服务器进行分析，可以进行整个焊接过程中的焊接质量的评价，同时也可以作为焊接工人考核和评价的依据。
技术实现思路
：本专利技术是为了解决上述现有技术存在的问题而提供一种基于多源信息融合的焊缝智能在线检测装置，能够在线测量焊缝的外观形状、大小、纹理以及温度场变化，进而进行焊缝质量以及焊接过程的评估。本专利技术所采用的技术方案有：一种基于多源信息融合的焊缝智能在线检测装置，由红外线阵列传感器、可见光摄像头、视频信息采集模块、智能处理模块、电源模块、焊机参数输入输出接口模块、无线数据传输模块和服务器组成，视频信息采集模块连接红外线阵列传感器和可见光摄像头以采集焊接过程的焊缝红外和可见光视频信息，并通过智能处理模块进行焊缝红外和可见光图像的识别和处理，并通过无线数据传输模块将采集的焊缝红外和可见光图像以及融合处理结果传输给服务器进行存储和处理。进一步地，红外线阵列传感器为红外线热辐射阵列传感器或红外成像芯片，可见光摄像头为数字或模拟CCD摄像头，并与视频信息采集模块相连。进一步地，视频信息采集模块进行红外线阵列传感器和可见光摄像头的图像数据编码、解码、匹配，并通过智能处理模块进行焊缝的焊缝宽度、中心轨迹、焊缝纹理、温度场分布信息的识别和处理，以判断焊缝质量。进一步地，智能处理模块根据历史焊缝温度场分布图进行当前焊缝红外图像进行识别和学习，构建焊缝内部缺陷的温度场分布特征库，进行焊缝内部缺陷识别。进一步地，智能处理模块对可见光摄像头所采集的焊缝表面视频图像进行图像的增强、去噪、平滑运算、阈值分割、图像二值化处理和边缘检测，得到预处理的图像，并根据所采集的焊缝历史可见光图像进行当前焊缝图像进行识别和学习，获得焊缝宽度、中心轨迹、焊缝纹理的表面特征。进一步地，智能处理模块根据所获得的焊缝宽度、中心轨迹、焊缝纹理的表面特征和焊缝温度场分布特征结合，并与红外图像特征结合，构建焊缝质量评价综合特征向量，根据所获得特征向量进行焊缝质量评价。进一步地，智能处理模块根据所获得焊缝质量评价综合特征向量和焊机参数输入输出接口模块获得的焊枪电流、电压、保护气体流量的信息，进行焊接作业过程的焊枪参数评价，并通过焊机参数输入输出接口模块进行焊枪参数反馈调节。进一步地，无线数据传输模块将焊缝红外和可见光视频信息、智能处理模块获得的焊缝质量检测信息和焊枪参数传输至服务器，服务器将所采集的信息进行存储和管理，服务器根据所获得的焊缝红外和可见光图像，进行整个焊缝图片拼接和匹配融合，构建整个焊接工程的焊缝宽度、中心轨迹、焊缝纹理以及温度场变化的焊接过程质量数据库。进一步地，通过无线数据传输模块进行数据同步，将焊接工程的历史红外和可见光图像以及焊接过程质量数据库与智能处理模块中的相应数据进行匹配和同步。本专利技术具有如下有益效果：本专利技术所建立的基于多信息融合的焊缝智能在线检测装置通过对焊接过程中焊缝余温变化监测以获取高质量和随时间变化的红外热成像信息，通过焊缝表面的温度分布来判断焊缝内部缺陷。同时融合可见光图像对焊缝宽度、中心轨迹、焊缝纹理等焊缝表面特征，通过人工智能方法实现焊缝质量评价，并能与焊机直接连接进行焊接参数的智能反馈调节。通过本专利技术的实施可以降低由于焊接参数和操作导致的焊接缺陷，提高焊接作业质量和作业效率，减少重复劳动。附图说明：图1是本专利技术基于多源信息融合的焊缝智能在线检测装置的结构示意图。图2是实施例1的结构示意图。图3是实施例2的结构示意图。具体实施方式：下面结合附图对本专利技术作进一步的说明。本专利技术基于多源信息融合的焊缝智能在线检测装置由红外线阵列传感器、可见光摄像头、视频信息采集模块、智能处理模块、电源模块、焊机参数输入输出接口模块、无线数据传输模块和服务器组成。通过视频信息采集模块连接红外线阵列传感器和可见光摄像头采集焊接过程的焊缝红外和可见光视频信息，并通过智能处理模块进行焊缝红外和可见光图像的识别和处理，从而获得焊缝宽度、中心轨迹、焊缝纹理以及温度场变化，并通过无线数据传输模块将采集的红外和可见光图像以及融合处理结果传输给服务器进行存储和处理。利用红外热成像获取焊接余温变化，以得到高质量和随时间变化红外成像信息；红外线阵列传感器为红外线热辐射阵列传感器或红外成像芯片，可见光摄像头为常见数字或模拟CCD摄像头，并与视频信息采集模块相连。在装置初始时通过双目视觉标定方式进行两个摄像头的标定，对可见光视频和红外视频之间的匹配。一般地，焊接熔池的温度随着热源的移动，其温度会发生变化，对正常焊缝，其温度场是均匀变化的，而如果焊接过程中内部有缺陷，会导致焊缝表面的温度变化不均匀，因此可以通过测量焊接余温变化以获取高质量和随时间变化的红外热成像信息，通过焊缝表面的温度分布来判断焊缝内部缺陷。基于这一原理，根据所采集本文档来自技高网...

【技术保护点】
1.一种基于多源信息融合的焊缝智能在线检测装置，其特征在于：由红外线阵列传感器、可见光摄像头、视频信息采集模块、智能处理模块、电源模块、焊机参数输入输出接口模块、无线数据传输模块和服务器组成，视频信息采集模块连接红外线阵列传感器和可见光摄像头以采集焊接过程的焊缝红外和可见光视频信息，并通过智能处理模块进行焊缝红外和可见光图像的识别和处理，并通过无线数据传输模块将采集的焊缝红外和可见光图像以及融合处理结果传输给服务器进行存储和处理。

【技术特征摘要】
1.一种基于多源信息融合的焊缝智能在线检测装置，其特征在于：由红外线阵列传感器、可见光摄像头、视频信息采集模块、智能处理模块、电源模块、焊机参数输入输出接口模块、无线数据传输模块和服务器组成，视频信息采集模块连接红外线阵列传感器和可见光摄像头以采集焊接过程的焊缝红外和可见光视频信息，并通过智能处理模块进行焊缝红外和可见光图像的识别和处理，并通过无线数据传输模块将采集的焊缝红外和可见光图像以及融合处理结果传输给服务器进行存储和处理。2.如权利要求1所述的基于多源信息融合的焊缝智能在线检测装置，其特征在于：红外线阵列传感器为红外线热辐射阵列传感器或红外成像芯片，可见光摄像头为数字或模拟CCD摄像头，并与视频信息采集模块相连。3.如权利要求2所述的基于多源信息融合的焊缝智能在线检测装置，其特征在于：视频信息采集模块进行红外线阵列传感器和可见光摄像头的图像数据编码、解码、匹配，并通过智能处理模块进行焊缝的焊缝宽度、中心轨迹、焊缝纹理、温度场分布信息的识别和处理，以判断焊缝质量。4.如权利要求3所述的基于多源信息融合的焊缝智能在线检测装置，其特征在于：智能处理模块根据历史焊缝温度场分布图进行当前焊缝红外图像进行识别和学习，构建焊缝内部缺陷的温度场分布特征库，进行焊缝内部缺陷识别。5.如权利要求4所述的基于多源信息融合的焊缝智能在线检测装置，其特征在于：智能处理模块对可见光摄像头所采集的焊缝表面视频图像进行图像的增强、去噪、平滑运算、阈值分...

【专利技术属性】
技术研发人员：朱清，王纪章，
申请(专利权)人：朱清，
类型：发明
国别省市：江苏,32