用于混凝土结构超声断层扫描图像的数据增强方法及装置制造方法及图纸

本发明专利技术公开了一种用于混凝土结构超声断层扫描图像的数据增强方法，包括：步骤1、获取自制钢筋混凝土构件的超声B扫描图，以自制钢筋混凝土构件的截面裂缝情况进行标签标注，生成超声B扫描图对应的截面裂缝图，将超声B扫描图和截面裂缝图组成数据集；步骤2、基于pixel

【技术实现步骤摘要】
用于混凝土结构超声断层扫描图像的数据增强方法及装置


[0001]本专利技术涉及混凝土结构无损检测领域，尤其涉及一种基于深度学习的混凝土结构图像数据增强方法及装置。

技术介绍

[0002]混凝土结构在使用过程中不可避免地会受到荷载、环境侵蚀等各种因素的耦合作用，在表面和内部产生各种损伤从而严重影响其使用的安全性与实用性。目前超声断层扫描的方法可以获取混凝土结构内部损伤的相关信息，但扫描生成的原始图像不便于检测人员对损伤情况的判断。应用深度学习方法可以由原始B扫描图像重建出混凝土结构断面的真实形态，从而检测出其内部裂缝等缺陷。然而，深度学习以数据驱动，其实现需要大量的数据作为基础。
[0003]数据量过少容易导致模型的过拟合从而影响其在实际工程中的泛化能力。通过实验的方法获取B扫描图像需要消耗大量的人力物力，即仅靠实验和工程实践中获得的数据难以达到深度学习需要的数据量。因此，需要通过其他方法进行数据集的扩充。
[0004]专利文献CN114778693A公开了一种基于超声波的混凝土结构应力装检测系统，该方法包括超声传播走时测试模块，用于使超声波透射混凝土，并对混凝土中的超声传播走时进行测试，得到超声波在混凝土中的超声传播走时；结构应力计算模块，用于根据所述超声传播走时计算得到混凝土结构应力。该方法仅通过声波数据进行计算，但进一步的损伤状态判断仍需后续处理，且混凝土中声波的传播介质并不均匀，会导致最终结果并不准确。
[0005]专利文献CN115165910A公开了一种基于图像识别的混凝土表观质量缺陷检测系统及方法，系统包括预制生产线、状态转换平台、吊装系统以及检测流水线，通过预制生产线完成混凝土预制构件的生产和运输；通过状态转换平台进行脱模前的混凝土预制构件的姿态调整；通过吊装系统完成脱模前的混凝土预制构件的脱模和吊装，并运送至检测流水线；通过检测流水线的高清摄像头摄像，并通过图像处理系统，基于深度学习算法判断表观质量缺陷类型，实现质量检测。该方法需要大量样本图像对图像识别模型进行训练，成本较高且耗时长。

技术实现思路

[0006]为了解决上述问题，本专利技术提供了一种数据增强方法，该方法可以有效地解决了钢筋混凝土制备消耗大量人力物力的问题，从而提高用于训练算法模型的数据集体量，进一步提高了算法模型的泛化能力。
[0007]一种用于混凝土结构超声断层扫描图像的数据增强方法，包括：
[0008]步骤1、获取自制钢筋混凝土构件的超声B扫描图，以自制钢筋混凝土构件的截面裂缝情况进行标签标注，生成超声B扫描图对应的截面裂缝图，将超声B扫描图和截面裂缝图组成数据集；
[0009]步骤2、基于pixel
‑
to
‑
pixel结构构建的生成对抗网络，所述生成对抗网络包括生
成器与判别器，所述生成器包括U
‑
Net为结构基础的编码器和解码器，所述编码器用于对输入的截面裂缝图进行降采样操作，获得对应的特征图像，所述解码器用于对特征图像进行反卷积上采样，获得对应的虚拟超声B扫面图，所述判别器用于判断输入图像的真实性；
[0010]步骤3、利用步骤1获得的数据集，采用博弈手段对生成对抗网络进行训练，直至判别器无法判断图像是否由生成器生成，获得用于生成虚拟超声B扫描图的图像生成模型；
[0011]步骤4、将自制截面裂缝图输入至所述图像生成模型中，获得对应的虚拟超声B扫描图，将自制截面裂缝图与对应的虚拟超声B扫描图作为用于扩充数据集体量的增强数据集。
[0012]本专利技术基于pixel
‑
to
‑
pixel的深度神经网络，以对抗博弈的手段对神经网络进行训练使其学习到标注图像与B扫描图像的隐含关系，从而生成以假乱真的高质量虚拟超声B扫描图。
[0013]具体的，在步骤1中，所述超声B扫描图采用阵列超声断层成像设备对自制钢筋混凝土构件扫描获得。
[0014]具体的，所述自制钢筋混凝土构件为提前制备带有裂缝缺陷的钢筋混凝土构件，并在构件成型后在其表面一侧布置测点侧线方便扫描。
[0015]具体的，在步骤2中，所述生成器为包含16个模块的深度神经网络，其中前8个模块包括编码器进行特征提取，后8个模块包括解码器进行特征合成，所述编码器的卷积核尺寸为4
×
4共进行三次降采样操作，每次降采样操作后特征图像的通道数乘以2，所述解码器与所述编码器的每层网络结构相互对应，对特征图像进行反卷积上采样，每次上采样后特征图像的通道数除以2，解码器与编码器的每层网络结构相互对应，对应层之间使用拼接操作使特征图归一化。
[0016]具体的，所述生成器的输入图像尺寸为2304
×
1536，单位为像素。
[0017]具体的，在步骤2中，所述判别器采用PatchGAN策略，对输入图像的真实性进行判断。
[0018]具体的，在步骤3的训练过程中，所述博弈手段包括单独采用梯度上升策略循环对判别器进行多次训练后，再采用梯度下降策略对生成器进行优化。
[0019]优选的，在步骤4中，所述自制截面裂缝图通过随机数指定裂缝的水平向距离、垂直向距离和起始位置生成，所述裂缝生成的斜线与水平线的角度为0～45度。
[0020]本专利技术提供了一种数据增强装置，包括计算机存储器、计算机处理器以及存储在所述计算机存储器中并可在所述计算机处理器上执行的计算机程序，所述计算机程序采用权利要求1所述的图像生成模型；
[0021]所述计算机处理器执行所述计算机程序实现以下步骤：
[0022]将自制截面裂缝图输入至图像生成模型，输出用于扩充数据集的虚拟超声B扫描图。
[0023]与现有技术相比，本专利技术的有益效果：
[0024](1)本专利技术在首先利用实验的方法获取超声断层扫描图像数据后，为保证拥有足够的数据量用于钢筋混凝土结构断面重建神经网络模型的训练，采用深度学习的方法对已有实验数据进行扩增，在满足使用要求的前提下避免了过多的实验投入。
[0025](2)本专利技术通过搭建基于pixel
‑
to
‑
pixel的深度神经网络，以对抗博弈的手段对
神经网络进行训练使其学习到标注图像与B扫描图像的隐含关系，由训练好的网络模型生成的超声断层扫描图像具有与实验实际扫描图像同特征同分布且具有一定随机性的特点，从而扩增得到的数据集与真实情况拟合度高可以满足后续应用的需要。
附图说明
[0026]图1为本专利技术提供的一种用于混凝土结构超声断层扫描图像的数据增强方法的流程图；
[0027]图2为本实施例提供的超声B扫描图与对应的标注图；
[0028]图3为基于pixel
‑
to
‑
pixel结构的深度神经网络的生成器结构图；
[0029]图4为基于pixel
‑
to
‑
pixel结构的深度神经网络的判别器结构本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于混凝土结构超声断层扫描图像的数据增强方法，其特征在于，包括：步骤1、获取自制钢筋混凝土构件的超声B扫描图，以自制钢筋混凝土构件的截面裂缝情况进行标签标注，生成超声B扫描图对应的截面裂缝图，将超声B扫描图和截面裂缝图组成数据集；步骤2、基于pixel
‑
to
‑
pixel结构构建的生成对抗网络，所述生成对抗网络包括生成器与判别器，所述生成器包括以U
‑
Net为结构基础的编码器和解码器，所述编码器用于对输入的截面裂缝图进行降采样操作，获得对应的特征图像，所述解码器用于对特征图像进行反卷积上采样，获得对应的虚拟超声B扫描图，所述判别器用于判断输入图像的真实性；步骤3、利用步骤1获得的数据集，采用博弈手段对生成对抗网络进行训练，直至判别器无法判断图像是否由生成器生成，获得用于生成虚拟超声B扫描图的图像生成模型；步骤4、将自制截面裂缝图输入至所述图像生成模型中，获得对应的虚拟超声B扫描图，将自制截面裂缝图与对应的虚拟超声B扫描图作为用于扩充数据集体量的增强数据集。2.根据权利要求1所述的用于混凝土结构超声断层扫描图像的数据增强方法，其特征在于，在步骤1中，所述超声B扫描图采用阵列超声断层成像设备对自制钢筋混凝土构件扫描获得。3.根据权利要求1所述的用于混凝土结构超声断层扫描图像的数据增强方法，其特征在于，在步骤2中，所述生成器为包含16个模块的深度神经网络，其中前8个模块包括编码器进行特征提取，后8个模块包括解码器进行...

【专利技术属性】
技术研发人员：舒江鹏，杨涵，江天任，段元锋，
申请(专利权)人：浙江大学，
类型：发明
国别省市：