【技术实现步骤摘要】
本专利技术涉及结构检测,尤其涉及一种结合多模态信息和人工智能的结构损伤识别方法及系统。
技术介绍
1、结构损伤是工程结构在服役过程中由于各种因素导致的结构完整性和性能的下降或丧失。准确识别结构损伤对于保障结构安全、进行维护和修复具有重要意义。
2、传统的结构损伤识别方法主要依赖人工检测和单一信息源,存在效率低、主观性强、适用范围有限等问题;近年来,多模态信息融合和人工智能技术的发展为结构损伤识别提供了新的思路和手段。而现有技术在结构损伤识别中仍然存在一些不足,不同模态信息的特征表示和语义对齐是一大挑战,需要设计有效的特征提取和融合方法。此外,结构损伤具有多尺度、多粒度的特点,单一深度学习模型难以同时捕捉不同层次的特征。
3、综上所述,能够解决现有技术中的问题,能够充分挖掘多源异构数据的互补信息,建立起跨模态和跨尺度的损伤特征表示,显著提高结构损伤识别的准确性、智能化水平和实用价值。
技术实现思路
1、本专利技术实施例提供一种结合多模态信息和人工智能的结构损伤识别方法
...【技术保护点】
1.结合多模态信息和人工智能的结构损伤识别方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,将所述图像信息输入图像特征提取模型,提取图像特征向量包括:
3.根据权利要求2所述的方法,其特征在于,所述图像特征提取模型的训练过程包括:
4.根据权利要求3所述的方法,其特征在于,所述鲁棒性正则化项,其公式如下:
5.根据权利要求1所述的方法,其特征在于,将所述声音信息输入声音特征提取模型,提取声音特征向量包括:
6.根据权利要求1所述的方法,其特征在于,基于多模态特征融合模块,通过构建模态间的流形
...【技术特征摘要】
1.结合多模态信息和人工智能的结构损伤识别方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,将所述图像信息输入图像特征提取模型,提取图像特征向量包括:
3.根据权利要求2所述的方法,其特征在于,所述图像特征提取模型的训练过程包括:
4.根据权利要求3所述的方法,其特征在于,所述鲁棒性正则化项,其公式如下:
5.根据权利要求1所述的方法,其特征在于,将所述声音信息输入声音特征提取模型,提取声音特征向量包括:
6.根据权利要求1所述的方法,其特征在于,基于多模态特征融合模块,通过构建模态间的流形映射和流形对齐,将所述图像特征向量和声音特征向量投影到同...
【专利技术属性】
技术研发人员:宋润钊,高涛,郑旭,王津津,苏思丽,许洪泰,吴洪斌,刘建民,张亚新,
申请(专利权)人:山东省地震工程研究院,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。