【技术实现步骤摘要】
本专利技术属于安防,尤其涉及一种伪造人脸视频检测方法,具体涉及一种基于区域化时空transformer的伪造人脸视频检测方法及系统。
技术介绍
1、伪造人脸视频检测旨在对人脸视频进行真伪判断,是一个二分类任务,对于维护信息安全至关重要。现有方法,特别是基于transformer的模型,虽在捕捉时空特征方面展现潜力,但大多采用全局视角进行分析。然而,伪造过程在人脸不同区域(如t区与边缘)产生的痕迹在时空维度上具有显著差异性。现有方法普遍忽略了这种区域特征差异性,未能进行针对性的建模,这限制了其检测精度和对复杂伪造的鲁棒性,难以满足实际应用需求。
2、随着深度学习在计算机视觉领域的发展,对伪造人脸视频检测方法的研究有了明显进步,取得了显著成果。2023年,zhao等人于ieee信息取证与安全汇刊上提出了基于分解式时空自注意力机制来进行人脸视频伪造检测;2023年,xu等人于ieee国际计算机视觉会议上提出了将视频片段中的时空特性信息有效地编码并保留在一个静态的缩略图中,利用swin-transformer来进行人脸视频伪造检测;
...【技术保护点】
1.一种基于区域化时空Transformer的伪造人脸视频检测方法,其特征在于,包括:
2.根据权利要求1所述一种基于区域化时空Transformer的伪造人脸视频检测方法,其特征在于,所述人脸解析与区域划分模块在得到人脸图像三区域对应的区域掩码矩阵时,还包括:
3.根据权利要求1所述一种基于区域化时空Transformer的伪造人脸视频检测方法,其特征在于,所述区域自适应特征提取模块生成区域引导矩阵的方式为:
4.根据权利要求3所述一种基于区域化时空Transformer的伪造人脸视频检测方法,其特征在于,所述区域自适应特征提取模
...【技术特征摘要】
1.一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,包括:
2.根据权利要求1所述一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,所述人脸解析与区域划分模块在得到人脸图像三区域对应的区域掩码矩阵时,还包括:
3.根据权利要求1所述一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,所述区域自适应特征提取模块生成区域引导矩阵的方式为:
4.根据权利要求3所述一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,所述区域自适应特征提取模块进行区域自适应卷积操作为:
5.根据权利要求1所述一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,所述区域化时空transformer模块进一步提取三区域关系,包括:
<...【专利技术属性】
技术研发人员:韩镇,易德康,王希豪,郑佳炜,王中元,
申请(专利权)人:武汉大学,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。