一种复杂背景下桥梁裂缝图像裂缝检测方法技术

技术编号:19550517 阅读:66 留言:0更新日期:2018-11-24 21:48
本发明专利技术涉及一种复杂背景下桥梁裂缝图像裂缝检测方法,首先,根据深度卷积生成式对抗网络原理,提出并利用桥梁路面裂缝图像生成模型对数据集进行扩增;然后,针对裂缝特征构建基于语义分割的桥梁路面裂缝图像分割模型;最后,利用桥梁路面裂缝图像分割模型提取裂缝图像中的裂缝。数据集扩增有效缓解了由于训练数据不足引起的欠拟合现象,精确率与召回率分别提高79.4%与74.7%。与现有语义分割算法相比,该算法参数量降低、训练时间减少、精确率、召回率、F1分数提高并达到92%以上。与现有桥梁路面裂缝检测和分割算法相比,该算法更适用于复杂背景下的桥梁路面裂缝检测和分割,且具有更强的识别效果与更好的泛化能力。

A Method of Crack Detection in Bridge Crack Image under Complex Background

The present invention relates to a crack detection method for bridge crack image under complex background. Firstly, according to the principle of depth convolution generation network, a crack image generation model for bridge pavement is proposed and used to expand the data set. Secondly, according to the crack characteristics, a crack image segmentation model for bridge pavement based on semantic segmentation is constructed. Finally, the cracks in the crack image are extracted by using the bridge pavement crack image segmentation model. Data set expansion effectively alleviates the under-fitting phenomenon caused by insufficient training data, and the accuracy and recall rates are increased by 79.4% and 74.7%, respectively. Compared with the existing semantics segmentation algorithms, the proposed algorithm has lower parameters, less training time, higher accuracy, recall rate and F1 score, and achieves 92% or more. Compared with existing bridge pavement crack detection and segmentation algorithms, this algorithm is more suitable for bridge pavement crack detection and segmentation under complex background, and has stronger recognition effect and better generalization ability.

【技术实现步骤摘要】
一种复杂背景下桥梁裂缝图像裂缝检测方法
本专利技术属于计算机视觉
,具体涉及一种复杂背景下桥梁裂缝图像裂缝检测方法。
技术介绍
交通运输是经济发展的基本需要和先决条件,现代社会的生存基础和文明标志,工业发展的基础设施和重要纽带,关系着国家经济的发展,承载着社会进步的命脉。据《2017年国民经济和社会发展统计公报》统计,在2017年,我国新改建高速公路里程6796公里,新建高速铁路投产里程2182公里,建成了世界上最大的高速公路网、高铁运营网,国际影响力显著增强。而在现代交通建设中,已开工建设的高速铁路中桥梁占线路比例达到50%,其中,京沪高速铁路桥梁占线路比竟高达81.5%。我国公路桥梁的管理中一直是重视建设,忽视养护,并且随着交通事业的不断进步,高速公路交通流量的迅速增长给高速公路桥梁的运营安全带来巨大的压力,这样的压力会导致加快桥梁与道路老化的速度,造成安全隐患。桥梁的质量安全关系国计民生,关系千家万户。因此,桥梁的维护和管理成为保障桥梁安全运营的关键。已有研究表明,大部分的混凝土桥梁的损坏由裂缝导致,因此对混凝土桥梁裂缝的检测与分割非常重要。采取有效手段对桥梁路面裂缝进行检测与分割,对确保公共交通的安全和正常运行起着十分重要的作用,长期以来已受到了国内外学术界、工程界的广泛关注。从传统的图像处理技术到如今深度学习的迅速发展,国内外的学者不断将新的技术用于桥梁路面裂缝的检测和分割,并且取得了一些优秀的研究成果。传统的图像处理算法中,基于阈值分割的路面裂缝分割算法是研究最早、最简单易用的分割算法。其中,OhH等人提出了迭代的阈值分割算法[OhH,GarrickNW,AchenieLEK.Segmentationalgorithmusingiterativeclippingforprocessingnoisypavementimages.ImagingTechnologies:TechniquesandApplicationsinCivilEngineering.SecondInternationalConference.1998:138-147];李媛媛等人提出了基于霍夫变换的OSTU改进算法[李媛媛,黄泉源,侯智新.基于霍夫变换的OSTU改进算法在路面裂缝检测中的研究[J].电子设计工程,2016,24(05):43-46];TalabAMA等人使用Otsu方法和图像处理技术中的多重滤波来检测图像中的裂缝[TalabAMA,HuangZ,XiF,etal.DetectioncrackinimageusingOtsumethodandmultiplefilteringinimageprocessingtechniques[J].Optik-InternationalJournalforLightandElectronOptics,2016,127(3):1030-1033];除此之外,FangCui等人通过改进的K-Means算法实现了图像裂缝检测[FangC,ZheL,LiY.ImagescrackdetectiontechnologybasedonimprovedK-meansalgorithm[J].JournalofMultimedia,2014,9(6)];任亮等人提出了基于Prim最小生成树的路面裂缝连接算法[任亮,徐志刚,赵祥模,等.基于Prim最小生成树的路面裂缝连接算法[J].计算机工程,2015,41(01):31-36+43];张晶晶等人提出了多尺度输入图像渗透模型,弥补了单一尺度特征提取的不足[ZhangJJ,NieHY,YuQ.Bridgecrackdetectionbasedonpercolationmodelwithmulti-scaleinputimage[J].ComputerEngineering,2017,43(02):273-279.[张晶晶,聂洪玉,喻强.基于多尺度输入图像渗透模型的桥梁裂缝检测[J].计算机工程,2017,43(02):273-279];这些传统算法均需要人工设置和调整参数,对人工操作具有较强依赖性。近几年,机器学习与深度学习成为人工智能方向飞速发展的热点,许多学者成功的将桥梁裂缝检测与之结合。例如,L.Zhang等人利用深度卷积神经网络对桥梁裂缝进行检测[ZhangL,YangF,ZhangYD,etal.Roadcrackdetectionusingdeepconvolutionalneuralnetwork[C]//IEEEInternationalConferenceonImageProcessing.IEEE,2016];Fu-ChenChen等人使用卷积神经网络和朴素贝叶斯数据融合的NB-CNN网络进行裂纹检测[ChenFC,JahanshahiMR.NB-CNN:Deeplearning-basedcrackdetectionusingconvolutionalneuralnetworkandbayesdatafusion[J].IEEETransactionsonIndustrialElectronics,2018,65(5):4392-4400];WendyD.Fisher等人巧妙运用支持向量机完成裂缝提取[]FisherW,CampT,KrzhizhanovskayaV.Crackdetectioninearthdamandleveepassiveseismicdatausingsupportvectormachines[J].ProcediaComputerScience,2016,80:577-586];YongShi等人利用随机结构森林进行自动路面裂缝提取[ShiY,CuiL,QiZ,etal.Automaticroadcrackdetectionusingrandomstructuredforests[J].IEEETransactionsonIntelligentTransportationSystems,2016,17(12):3434-3445];以上基于图像处理的桥梁路面裂缝检测算法之所以取得了良好的实验效果,是因为采集图像的对比度很高,噪声很低,且场景比较简单,不存在落叶、水渍、车道线、阴影等障碍物,低估了桥梁路面图像的复杂程度,难以满足工程应用的需要。在计算机视觉、图像处理领域,语义分割[陈鸿翔.基于卷积神经网络的图像语义分割[D].浙江大学,2016]作为一种针对像素级别的精确分割方法已被广泛应用。SegNet[BadrinarayananV,KendallA,CipollaR.SegNet:Adeepconvolutionalencoder-decoderarchitectureforscenesegmentation[J].IEEETransactionsonPatternAnalysis&MachineIntelligence,2015,PP(99):2481-2495]、FCN[ShelhamerE,LongJ,DarrellT.Fullyconvolutionalnetworksforsemanticsegmentation[J].IEEETransaction本文档来自技高网...

【技术保护点】
1.一种复杂背景下桥梁裂缝图像裂缝检测方法,其特征在于:包括以下步骤:步骤1,将采集的原始桥梁裂缝图像进行几何变换、空间滤波、线性变换后再通过生成子模型和判别子模型进行数据集扩增;所述生成子模型依次包括全连接层、维度转换层、第一转置卷积层、第二转置卷积层、第三转置卷积层、第四转置卷积层和第五转置卷积层;第一转置卷积层、第二转置卷积层、第三转置卷积层、第四转置卷积层和第五转置卷积层的卷积核大小均为5x5,步幅均为2,卷积核数目依次为512、256、128、64、3;所述判别子模型依次包括第一卷积层、第二卷积层、第三卷积层、第四卷积层、第五卷积层、第六卷积层、第七卷积层和Sigmoid激活函数层;第一卷积层、第二卷积层、第三卷积层、第四卷积层、第五卷积层和第六卷积层的卷积核大小均为5x5,步幅均为2,卷积核数目依次为64、128、256、512、1024、2048;所述第七卷积层的卷积核大小为1x1;步骤2,将扩增后的图像输入分割模型进行训练,具体方法如下:步骤2.1,将扩增后的图像进行一次5x5的卷积;步骤2.2:将卷积结果输入包含4个layers层的DenseBlock;步骤2.3:将步骤2.2结果进行Transition Down操作,降低裂缝图像分辨率;步骤2.4:将DenseBlock的layers层数量依次设置为5层、7层、10层,依次重复4次步骤2与步骤2.3;步骤2.5:将步骤2.4的结果输入由12个layers组成的Bottleneck,完成全部下采样,并进行多个特征的连接操作;步骤2.6:将上层输出结果输入由Transition Up和DenseBlock组成的上采样通道,DenseBlock对应下采样中的layers层数为10层;步骤2.7:将步骤2.6中DenseBlock的layers层数依次设为7、5、4,重复4次步骤2.6;步骤2.8:对步骤2.7的输出结果进行1x1卷积操作;步骤2.9:将步骤2.8结果输入softmax层进行判断,输出裂缝与非裂缝的概率;步骤3:所述步骤2训练完成后,将待检测裂缝图像输入训练完成的分割模型进行裂缝提取。...

【技术特征摘要】
1.一种复杂背景下桥梁裂缝图像裂缝检测方法,其特征在于:包括以下步骤:步骤1,将采集的原始桥梁裂缝图像进行几何变换、空间滤波、线性变换后再通过生成子模型和判别子模型进行数据集扩增;所述生成子模型依次包括全连接层、维度转换层、第一转置卷积层、第二转置卷积层、第三转置卷积层、第四转置卷积层和第五转置卷积层;第一转置卷积层、第二转置卷积层、第三转置卷积层、第四转置卷积层和第五转置卷积层的卷积核大小均为5x5,步幅均为2,卷积核数目依次为512、256、128、64、3;所述判别子模型依次包括第一卷积层、第二卷积层、第三卷积层、第四卷积层、第五卷积层、第六卷积层、第七卷积层和Sigmoid激活函数层;第一卷积层、第二卷积层、第三卷积层、第四卷积层、第五卷积层和第六卷积层的卷积核大小均为5x5,步幅均为2,卷积核数目依次为64、128、256、512、1024、2048;所述第七卷积层的卷积核大小为1x1;步骤2,将扩增后的图像输入分割模型进行训练,具体方法如下:步骤2.1,将扩增后的图像进行一次5x5的卷积;步骤2.2:将卷积结果输入包含4个layers层的DenseBlock;步骤2.3:将步骤2.2结果进行TransitionDown操作,降低裂缝图像分辨率;步骤2.4:将DenseBlock的layers层数量依次设置为5层、7层、10层,依次重复4次步骤2与步骤2.3;步骤2.5:将步骤2.4的结果输入由12个layers组成的Bottleneck,完成全部下采样,并进行多个特征的连接操作;步骤2.6:将上层输出结果输入由TransitionUp和DenseBlock组成的上采样通道,DenseBlock对应下采样中的layers层数为10层;步骤2.7:将步骤2.6中DenseBlock的layers层数依次设为7、5、4,重复4次步骤2.6;步骤2.8:对步骤2.7的输出结果进行1x1卷积操作;步骤2.9:将步骤2.8结果输入softmax层进行判断,输出裂缝与非裂缝的概率;步骤3:所述步骤2训练完成后,将待检测裂缝图像输入训练完成的分割模型进行裂缝提取。2.根据权利要求1所述的一种复杂背景下桥梁裂缝图像裂缝检测方法,其特征在于:所述第一转置卷积层...

【专利技术属性】
技术研发人员:李良福孙瑞赟
申请(专利权)人:陕西师范大学
类型:发明
国别省市:陕西,61

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1