基于频率掩膜和注意力一致性的人脸伪造检测方法技术

技术编号:40020427 阅读:31 留言:0更新日期:2024-01-16 16:40
本发明专利技术公开了一种基于频率掩膜和注意力一致性的人脸伪造检测方法,包括:获取待检测视频后输入预训练的伪造检测模型,得到表征待检测视频是否为伪造视频的检测结果;预训练的伪造检测模型是采用带有标签的多张参考图像、样本视频、交叉伪造注意力一致性损失函数和交叉熵损失函数,对初始预训练伪造检测模型迭代训练得到的;初始预训练伪造检测模型是采用多张参考图像和交叉熵损失函数,对待训练伪造检测模型迭代训练得到的;每张参考图像是对对应的原始图像进行离散傅里叶变换和高频信息随机丢弃处理后得到的;交叉伪造注意力一致性损失函数用于衡量参考图像与样本视频中视频帧的梯度加权类激活映射图之间的差异。本发明专利技术能提高模型的泛化性。

【技术实现步骤摘要】

本专利技术属于机器视觉,具体涉及一种基于频率掩膜和注意力一致性的人脸伪造检测方法


技术介绍

1、随着深度图像生成技术的成功发展,视觉数据伪造检测将在社会经济安全领域发挥越来越重要的作用。

2、频域伪造检测:早期的频域人脸伪造检测任务侧重于开发能够检测主要已知伪造的模型。这些模型可以分为两类:使用空间线索和使用时间线索进行检测的模型。对于基于空间线索的频域人脸伪造检测而言,借鉴传统的人脸识别方法,例如,zhang等人率先提出了一种人脸伪造检测技术,该技术使用多个分类器在特征提取后对伪造图像进行判别。在此基础上,后续的研究者发现了人脸伪造图像中一些视觉细节不匹配的现象,并利用它们进行检测。例如,he等人结合了随机森林分类器,根据不同颜色空间中的图像残差信息来识别伪造图像。zhang揭示了gan模型生成的伪造图像具有一种特殊的失真特征,并在频域谱图中对其进行区分。luo等人通过高通滤波器对图像进行预处理,以增强检测效果。dong等人提出了使用图像预处理,如高斯模糊和噪声,来消除伪造和真实图像之间高频失真的差异,从而更好地学习伪造特征并提高检测性能。本文档来自技高网...

【技术保护点】

1.一种基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,包括:

2.根据权利要求1所述的基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,所述样本视频为所述待检测视频或除所述待检测视频之外的视频;所述多张参考图像中包括真实图像和伪造图像。

3.根据权利要求1所述的基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,所述交叉伪造注意力一致性损失函数的表达式为:

4.根据权利要求1所述的基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,在所述将所述待检测视频输入预训练的伪造检测模型,得到所述待检测视频的检测结果之前,包括:<...

【技术特征摘要】

1.一种基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,包括:

2.根据权利要求1所述的基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,所述样本视频为所述待检测视频或除所述待检测视频之外的视频;所述多张参考图像中包括真实图像和伪造图像。

3.根据权利要求1所述的基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,所述交叉伪造注意力一致性损失函数的表达式为:

4.根据权利要求1所述的基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,在所述将所述待检测视频输入预训练的伪造检测模型,得到所述待检测视频的检测结果之前,包括:

5.根据权利要求4所述的基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,所述对所述多张原始图像中的每张原始图像进行离散傅里叶变换和高频信息随机丢弃处理,得到多张处理图像,包括:

6.根据权利要求5所述的基于频率掩膜和注意力一致性的人脸伪造检测方法,其特征在于,所述原始图像对应的处理图像的表达式...

【专利技术属性】
技术研发人员:彭春蕾陈涛刘德成李腾郑昱胡瑞敏
申请(专利权)人:西安电子科技大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1