【技术实现步骤摘要】
本专利技术涉及人工智能与机器学习领域,尤其涉及一种基于多模态大模型的电网安监视频分类方法、装置、终端设备及存储介质。
技术介绍
1、随着电网规模不断扩大和智能化发展,电网安全监测至关重要,传统电网安监主要依赖简单图像识别算法。简单图像识别算法局限性大,传统的简单图像识别算法通常仅基于单一视频模态,无法有效融合其他与电网安全相关的关键信息,在复杂电网环境下,单一视频模态难以全面准确识别异常,无法满足实时、精准监测需求。例如在光线条件变化、设备遮挡等复杂场景下,简单图像识别算法的准确率会大幅下降,容易出现误报或漏报的情况,难以实现对大量视频数据的实时处理,因此,现有的电网安监技术存在准确性差的问题,难以实现对电网安监视频的精准分类。
技术实现思路
1、本专利技术实施例提供了一种基于多模态大模型的电网安监视频分类方法、装置、终端设备及存储介质,本专利技术能够解决现有电网安监技术准确性差难以实现对电网安监视频精准分类的问题。
2、本专利技术一实施例提供了一种基于多模态大模型的电网安监视
...【技术保护点】
1.一种基于多模态大模型的电网安监视频分类方法,其特征在于,包括:
2.如权利要求1所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,通过以下方式,确定视频中的关键帧:
3.如权利要求2所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,通过以下步骤,对多模态大模型进行训练:
4.如权利要求3所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,所述交叉熵损失函数,包括:
5.如权利要求4所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,通过以下公式,对多模态大模型的当前参数进行
...
【技术特征摘要】
1.一种基于多模态大模型的电网安监视频分类方法,其特征在于,包括:
2.如权利要求1所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,通过以下方式,确定视频中的关键帧:
3.如权利要求2所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,通过以下步骤,对多模态大模型进行训练:
4.如权利要求3所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,所述交叉熵损失函数,包括:
5.如权利要求4所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,通过以下公式,对多模态大模型的当前参数进行更新:
6.如权利要求5所述的一种基于多模态大模型的电网安监视频分类方法,其特征在于,在得到电网安监视频数据的分类结果之后,还包括:
7.一...
【专利技术属性】
技术研发人员:李端姣,刘高,王从,廖如超,李昌煜,林俊省,郭锦超,谢卓君,谢春,冼世平,
申请(专利权)人:广东电网有限责任公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。