基于注意力引导和增量学习的生成式图像伪造检测方法技术

技术编号:46611510 阅读:1 留言:0更新日期:2025-10-14 21:09
本发明专利技术公开了一种基于注意力引导和增量学习的生成式图像伪造检测方法,构建端到端检测模型,包含多模态特征编码模块、A‑DTG模块、增量学习模块和分类模块。A‑DTG模块利用自注意力机制和多模态注意力融合技术生成域标签;增量学习模块结合在线增量学习算法、知识蒸馏和迁移学习技术实现模型实时更新;通过分类损失函数、蒸馏损失函数和总损失函数优化模型训练。本发明专利技术有效解决了现有技术对新型伪造技术检测能力不足、多模态数据处理弱以及模型无法实时更新的问题,在新闻媒体、司法取证、社交媒体等场景中,能显著提高图像伪造检测的准确性、泛化性和时效性。

【技术实现步骤摘要】

本专利技术属于图像识别与人工智能,具体涉及一种基于注意力引导和增量学习的生成式图像伪造检测方法,可应用于新闻媒体、司法取证、社交媒体等多场景下的图像真实性验证。


技术介绍

1、随着生成对抗网络(gan)、扩散模型等生成式人工智能技术的不断进步,生成式图像伪造技术愈发成熟且伪造效果逼真。在新闻领域,虚假图像可能误导公众舆论;在司法领域,伪造图像会干扰案件的公正裁决;在社交媒体中,虚假图像更是容易引发谣言传播。传统的图像伪造检测方法,如基于手工设计特征的方法,难以适应复杂多变的伪造手段;而现有的基于深度学习的检测方法,存在对新型伪造技术适应性差、泛化能力弱以及无法实时更新模型以应对新威胁等问题。域标签生成器(dtg)虽在一定程度上提升了检测能力,但在面对混合篡改、对抗样本攻击以及未知生成模型产生的伪造图像时,检测效果显著下降,且缺乏对多模态数据的有效分析能力。


技术实现思路

1、专利技术目的

2、本专利技术旨在提供一种基于注意力引导和增量学习的生成式图像伪造检测方法,解决现有技术中对新型伪造技术检测能本文档来自技高网...

【技术保护点】

1.一种基于注意力引导和增量学习的生成式图像伪造检测方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于注意力引导和增量学习的生成式图像伪造检测方法,其特征在于,所述自注意力机制具体为:对输入的特征图经过三个不同的线性变换得到查询矩阵、键矩阵和值矩阵,通过公式计算注意力权重,对特征图进行加权处理。

3.根据权利要求1所述的基于注意力引导和增量学习的生成式图像伪造检测方法,其特征在于,所述多模态注意力融合技术具体为:对多模态数据分别进行编码,将编码后的特征向量拼接后通过跨模态注意力模块,所述跨模态注意力模块包含多个注意力头,每个头分别计算不同模态特征之间的...

【技术特征摘要】

1.一种基于注意力引导和增量学习的生成式图像伪造检测方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于注意力引导和增量学习的生成式图像伪造检测方法,其特征在于,所述自注意力机制具体为:对输入的特征图经过三个不同的线性变换得到查询矩阵、键矩阵和值矩阵,通过公式计算注意力权重,对特征图进行加权处理。

3.根据权利要求1所述的基于注意力引导和增量学习的生成式图像伪造检测方法,其特征在于,所述多模态注意力融合技术具体为:对多模态数据分别进行编码,将编码后的特征向量拼接后通过跨模态注意力模块,所述跨模态注意力模块包含多个注意力头,每个头分别计算不同模态特征之间的相关性,最终融合得到综合特征向量。

4.根据权利要求1所述的基于注意力引导和增量学习的生成式图像伪造检测方法,其特征在于,所述在线增量学习算法具体为:当有新的图像数据输入时,获取其特征向量,通过a-dtg模块生成域标签,根据域标签将新数据分配到相应的篡改类别中,采用在线梯度下降算法,基于新数据及其标签对模型参数进行更新。

5.根据权利要求1所述的基于注意力引导和增量学习的生成式图像伪造检测方法,其特征在于,所述知识蒸馏技术具体为:定义原始预训练模型为教师模型,增量学习过程...

【专利技术属性】
技术研发人员:梁鹏刘裕宽李伟键刘伟莉张吴明郝刚麦春丽
申请(专利权)人:广东技术师范大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1