【技术实现步骤摘要】
本专利技术涉及电力巡检缺陷领域,具体涉及一种基于电力缺陷多模态模型的微调方法、设备和介质。
技术介绍
1、近年来,随着我国经济的快速发展和城市化进程的不断推进,电力需求呈现出爆发式增长的态势。电力系统作为能源传输和分配的重要环节,已经成为人民生产和生活中最不可或缺的基础设施之一。为了保证电力系统的正常运行,需要对电力工作人员在各个作业场景中的状态进行巡检,保证作业人员的高效率和作业安全。在电力巡检缺陷领域中,有着丰富的算法需求,例如:设备表计表盘模糊破损、绝缘子破裂、金属件锈蚀、螺母销钉缺失等场景,这些场景都需要使用算法进行准确的分析,提升作业规范性、安全性,降低成本等。本专利技术主要应用在电力巡检缺陷领域中的螺母销钉缺失与绝缘子破裂检测场景中。传统的判断方法通常使用视觉小模型结合人工来进行判断,该场景的判断规范细致复杂,需要对各类目标要素之间的关系进行综合逻辑分析才能判定是否违规,比如:螺母销钉是否成套搭配、绝缘子与其他相识目标的细微差异等。视觉小模型不具备逻辑思考能力,因此无法给出有效的缺陷告警,导致漏报率和误报率均较高。结合多模态
...【技术保护点】
1.一种基于电力缺陷多模态模型的微调方法,其特征在于,包括以下具体步骤:
2.根据权利要求1所述的基于电力缺陷多模态模型的微调方法,其特征在于,所述对目标微调数据进行数据预处理,具体包括:
3.根据权利要求1所述的基于电力缺陷多模态模型的微调方法,其特征在于,所述根据微调数据集的类型分布动态构建训练集,具体包括:
4.根据权利要求1所述的基于电力缺陷多模态模型的微调方法,其特征在于,所述采用KL散度对训练后的教师-学生模型进行模型拟合,具体包括:
5.根据权利要求1所述的基于电力缺陷多模态模型的微调方法,其特征在于,所述
...【技术特征摘要】
1.一种基于电力缺陷多模态模型的微调方法,其特征在于,包括以下具体步骤:
2.根据权利要求1所述的基于电力缺陷多模态模型的微调方法,其特征在于,所述对目标微调数据进行数据预处理,具体包括:
3.根据权利要求1所述的基于电力缺陷多模态模型的微调方法,其特征在于,所述根据微调数据集的类型分布动态构建训练集,具体包括:
4.根据权利要求1所述的基于电力缺陷多模态模型的微调方法,其特征在于,所述采用kl散度对训练后的教师-学生模型进行模型拟合,具体包括:
5.根据权利要求1所述的基于电力缺陷多模态模型的微调方法,其特征在于,所述对多模态微调模型进行训练和优化,包括:
6.根据权利要求5所述的基于电力缺陷多模态模型的微调方法,其特征在于,...
【专利技术属性】
技术研发人员:张凌浩,邝俊威,向思屿,滕予非,常政威,刘洪利,李旭旭,魏阳,庞博,刘昶,毛洋,杜佩珂,刘松嘉,李盛杰,
申请(专利权)人:国网四川省电力公司电力科学研究院,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。