航空机匣铸造砂型砂芯智能识别与远程测温系统及方法技术方案

本发明专利技术设计航空机匣铸造砂型砂芯智能识别与远程测温系统及方法，首先通过远程测温系统采集现场砂型可见光图像，建立航空机匣铸件砂型图像训练数据集；对航空机匣铸件砂型网络识别模型进行训练；将识别到的航空机匣铸造砂型砂芯图像通过热成像与可见光图像的坐标关系映射到热成像图像中；通过图像处理方法提取热成像图像中目标航空机匣铸造砂型砂芯的温度数据，最终输出温度数据结果；该系统在复杂的生产环境下准确的识别航空机匣铸件砂型砂芯图像并实时采集目标温度数据，实现了全天无人检测目标砂型砂芯的温度数据，提高了生产环节的测温效率与检测精度

【技术实现步骤摘要】
航空机匣铸造砂型砂芯智能识别与远程测温系统及方法


[0001]本专利技术涉及航空机匣铸造砂型砂芯铸造领域，具体涉及航空机匣铸造砂型砂芯智能识别与远程测温系统及方法
。

技术介绍

[0002]在机械制造和加工设备行业中，铸件的生产占据非常重要的地位，其中温度是铸件生产过程中的一个重要因素
。
在航空镁铝合金机匣砂型砂芯铸造的过程中，针对使用树脂材质
(
材质为树脂砂
、
树脂材料一般为
PEP
‑
SET
，树脂砂舂制成型，密度在
1.6
左右，表面粗糙度一般在
Ra6.3
‑
Ra12.5
之间
)
的砂型
、
砂芯，在铸造过程中，若对生产温度把控不当，容易使砂型产生吸潮
、
变形
、
缺肉等缺陷，这些缺陷又会使合金液在浇筑过程中形成卷气
、
夹杂
、
多肉以及重要特征缺失，使得浇筑生产出的铸件机械性能降低，严重的还会造成铸件的报废，因此实现对温度的准确把控在航空镁铝合金机匣砂型砂芯铸件铸造生产过程中影响重大
。
[0003]在铸造领域中，美国亚什兰公司生产的
PEP
‑
SET
材料的树脂在航空铝镁合金砂型铸造中被大量应用，随着航空工业的快速发展，采用
PEP
‑
SET
树脂制造的铝镁合金航空机匣铸件也面临着许多生产问题，比如使用
PEP
‑
SET
树脂材料的铝镁合金砂型在铸造过程中温度的监测问题，尤其是在铸造流程中砂型合型过程中目标形状的重构及工人遮挡等问题造成识别率低下的问题
。
[0004]现有的测温方式主要分为接触式测温与非接触式测温
。
为了避免破坏铸体完整性，和减少布置温度传感器对温度场分布的影响，采用非接触式测温的方法对铸件进行温度的监控，传统的非接触式手持测温仪需要工人手持测温，操作过程繁琐，只能测量砂型的局部温度，测量效率低且无法
24
小时测温
。
[0005]目前目标识别技术在现实生活中有着广泛的应用，特别应用在汽车无人驾驶
、
视频检测
、
工业检测以及航空航天等领域，目标识别技术通过使用计算机视觉技术和图像处理算法，对铸件进行识别，准确地检测目标铸件的温度，并且可以适应不同形状和尺寸的铸件
。
因此结合目标识别和非接触测温对于铸造领域是非常有必要的
。

技术实现思路

[0006]为了解决航空机匣铸造过程中砂型砂芯的识别准确率低下以及温度变化导致的铸造缺陷问题，本专利技术提供了航空机匣铸造砂型砂芯智能识别与远程测温系统及方法
。
[0007]航空机匣铸造砂型砂芯智能识别与远程测温系统，包括：航空机匣铸件砂型砂芯图像采集模块
、
温湿度数据采集模块
、
航空机匣铸件砂型砂芯识别模块
、
环形光源
、
计算机和显示器；
[0008]其中，计算机通过航空机匣铸件砂型砂芯识别模块对图像采集模块采集到的现场砂型可见光图像进行预处理得到特征图像，将特征图像输入到基于深度学习的砂型砂芯识别模型中进行识别，将识别到的砂型砂芯边界框信息通过可见光图像与热成像图像之间的
坐标关系映射到热成像图像上，对热成像图像中映射出的砂型砂芯边界框进行图像处理，得到热成像图像中目标砂型砂芯图像，结合热成像温度数据，提取目标砂型砂芯图像的温度数据，记录温度数据；
[0009]所述航空机匣铸件砂型砂芯图像采集模块通过热成像双光谱相机采集可见光图像和热成像图像，并将可见光图像和热成像图像以电信号的形式传输给计算机；所述双光谱相机安装在距目标砂型作业区域一段距离墙壁处，以减少现场作业对相机采集图像的干扰；
[0010]所述温湿度数据采集模块通过温湿度传感器采集现场温湿度数据，并将现场环境的温湿度数据传输给计算机，所述温湿度传感器以阵列形式并联布置在砂型
、
砂芯四周，与所述计算机串口连接，以减少传输距离对数据传输性能的影响；
[0011]所述航空机匣铸件砂型砂芯识别模块用于识别目标航空机匣铸件砂型砂芯；采用
YOLOv5
网络模型；所述航空机匣铸造砂型砂芯识别模块构造航空机匣铸件图像的数据集，将采集到的图像数据划分为训练集
、
验证集
、
测试集；
[0012]所述环形光源用于现场航空机匣铸件砂型砂芯的打光；
[0013]所述计算机用于对系统程序的运行以及图像的识别与处理；
[0014]所述显示器用于展示采集到的图像信息以及温度数据
。
[0015]航空机匣铸造砂型砂芯智能识别与远程测温方法，基于上述航空机匣铸造砂型砂芯智能识别与远程测温系统实现，包括以下步骤：
[0016]步骤1：对目标航空机匣铸造砂型砂芯进行识别前，开启环形光源；利用图像采集模块的热成像双光谱相机对铸造现场采集可见光图像和热成像图像；并将其传输给计算机；通过温湿度传感器采集铸造现场温湿度数据，并传输给计算机；
[0017]步骤2：计算机对可见光图像进行图像预处理，包括对图像使用灰度化
、
图像增强与高斯滤波的方法增强图像特征；
[0018]步骤3：建立航空机匣铸造砂型砂芯深度学习识别网络模型，将特征图像输入到航空机匣铸造砂型砂芯深度学习识别网络模型中，对图像进行识别，若识别到目标砂型，则在可见光图像中显示目标砂型的识别框，保存识别框的参数并执行步骤4，若否，则执行步骤6；
[0019]所述航空机匣铸造砂型砂芯深度学习识别网络模型的建立，包括以下步骤：
[0020]步骤
S1、
计算机控制热成像双光谱相机，相机以设定的采集频率对目标航空机匣砂型砂芯的铸造流程的可见光图像进行采集；
[0021]步骤
S2、
多次重复步骤
S1
采集大量图像样本；
[0022]步骤
S3、
计算机对航空机匣铸造砂型砂芯可见光图像进行图像预处理，包括对图像使用灰度化
、
图像增强与高斯滤波的方法增强图像特征；
[0023]步骤
S4、
增广图像数据，通过对预处理后的可见光图像分别进行旋转
、
缩放
、
添加椒盐噪声
、
添加高斯噪声以及图像明暗化处理的图像处理方式，增加图像的数量，以此提高网络模型的泛化能力；
[0024]步骤
S5、
计算机通过
labelimg
软件对增广后的可见光图像中目标航空机匣铸造砂型砂芯进行目标图像边界框的标注，获得标注后的图像以及图像标注数据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
航空机匣铸造砂型砂芯智能识别与远程测温系统，其特征在于，包括：航空机匣铸件砂型砂芯图像采集模块
、
温湿度数据采集模块
、
航空机匣铸件砂型砂芯识别模块
、
环形光源
、
计算机和显示器；其中，计算机通过航空机匣铸件砂型砂芯识别模块对图像采集模块采集到的现场砂型可见光图像进行预处理得到特征图像，将特征图像输入到基于深度学习的砂型砂芯识别模型中进行识别，将识别到的砂型砂芯边界框信息通过可见光图像与热成像图像之间的坐标关系映射到热成像图像上，对热成像图像中映射出的砂型砂芯边界框进行图像处理，得到热成像图像中目标砂型砂芯图像，结合热成像温度数据，提取目标砂型砂芯图像的温度数据，记录温度数据
。2.
根据权利要求1所述的航空机匣铸造砂型砂芯智能识别与远程测温系统，其特征在于，所述航空机匣铸件砂型砂芯图像采集模块通过热成像双光谱相机采集可见光图像和热成像图像，并将可见光图像和热成像图像以电信号的形式传输给计算机；所述双光谱相机安装在距目标砂型作业区域一段距离墙壁处，以减少现场作业对相机采集图像的干扰；所述温湿度数据采集模块通过温湿度传感器采集现场温湿度数据，并将现场环境的温湿度数据传输给计算机，所述温湿度传感器以阵列形式并联布置在砂型
、
砂芯四周，与所述计算机串口连接，以减少传输距离对数据传输性能的影响；所述航空机匣铸件砂型砂芯识别模块用于识别目标航空机匣铸件砂型砂芯；采用
YOLOv5
网络模型；所述航空机匣铸造砂型砂芯识别模块构造航空机匣铸件图像的数据集，将采集到的图像数据划分为训练集
、
验证集
、
测试集；所述环形光源用于现场航空机匣铸件砂型砂芯的打光；所述计算机用于对系统程序的运行以及图像的识别与处理；所述显示器用于展示采集到的图像信息以及温度数据
。3.
航空机匣铸造砂型砂芯智能识别与远程测温方法，基于上述权利要求1航空机匣铸造砂型砂芯智能识别与远程测温系统实现，其特征在于，包括以下步骤：步骤1：对目标航空机匣铸造砂型砂芯进行识别前，开启环形光源；利用图像采集模块的热成像双光谱相机对铸造现场采集可见光图像和热成像图像；并将其传输给计算机；通过温湿度传感器采集铸造现场温湿度数据，并传输给计算机；步骤2：计算机对可见光图像进行图像预处理，包括对图像使用灰度化
、
图像增强与高斯滤波的方法增强图像特征；步骤3：建立航空机匣铸造砂型砂芯深度学习识别网络模型，将特征图像输入到航空机匣铸造砂型砂芯深度学习识别网络模型中，对图像进行识别，若识别到目标砂型，则在可见光图像中显示目标砂型的识别框，保存识别框的参数并执行步骤4，若否，则执行步骤6；步骤4：计算机输出可见光图像中目标砂型的识别框参数，包括边界框的中心点像素坐标
(u
rgb
,v
rgb
)、
边界框的长
h
rgb
和宽
w
rgb
；通过可见光图像与热成像图像的坐标映射关系公式，从而获得热成像图像中的目标砂型的边界框数据，目标砂型的边界框以点
(u
ir
,v
ir
)
作为边界框的中心点像素坐标
(u
ir
,v
ir
)
，以
h
ir
与
w
ir
作为边界框长和宽；对热成像图像的目标边界框进行图像处理，得到目标砂型砂芯图像，结合热成像图像本身温度数据，准确提取目标砂型砂芯图像的温度数据，并计算平均温度值；步骤5：判断航空机匣铸造砂型砂芯的平均温度
T
avg
是否大于预设在计算机系统中的正
常温度值，若大于，则为异常温度数据，若否，则为正常温度数据；步骤6：计算机控制显示器显示采集到的航空机匣铸造砂型砂芯的图像及温度数据，同时，生成温度数据表格保存在本地数据库中

【专利技术属性】
技术研发人员：纪俐，王伊翔，张永，赵伟，夏峰，张函力，方贵东，刘传宝，
申请(专利权)人：中国航发哈尔滨东安发动机有限公司，
类型：发明
国别省市：