当前位置: 首页 > 专利查询>武汉大学专利>正文

一种基于区域化时空Transformer的伪造人脸视频检测方法及系统技术方案

技术编号:46076929 阅读:8 留言:0更新日期:2025-08-12 18:01
本发明专利技术公开了一种基于区域化时空Transformer的伪造人脸视频检测方法,包括:构建包含真实与伪造样本的伪造人脸视频数据集;构建包含人脸解析与区域划分模块、区域自适应特征提取模块、区域化时空Transformer模块、区域内特征融合模块、区域间特征融合模块的伪造人脸视频检测网络;使用数据集训练所述检测网络;并利用训练后的网络模型,预测输入视频序列的真伪标签。本发明专利技术利用伪造过程在人脸不同区域产生的时空特征差异性,通过区域化的处理策略贯穿特征提取(采用区域自适应卷积)、时空建模(采用具有区域内/间注意力的时空Transformer)及特征融合(采用区域内/间融合机制)等关键环节,所述方法旨在克服全局分析的局限性,能够更精准、鲁棒地检测伪造人脸视频。

【技术实现步骤摘要】

本专利技术属于安防,尤其涉及一种伪造人脸视频检测方法,具体涉及一种基于区域化时空transformer的伪造人脸视频检测方法及系统。


技术介绍

1、伪造人脸视频检测旨在对人脸视频进行真伪判断,是一个二分类任务,对于维护信息安全至关重要。现有方法,特别是基于transformer的模型,虽在捕捉时空特征方面展现潜力,但大多采用全局视角进行分析。然而,伪造过程在人脸不同区域(如t区与边缘)产生的痕迹在时空维度上具有显著差异性。现有方法普遍忽略了这种区域特征差异性,未能进行针对性的建模,这限制了其检测精度和对复杂伪造的鲁棒性,难以满足实际应用需求。

2、随着深度学习在计算机视觉领域的发展,对伪造人脸视频检测方法的研究有了明显进步,取得了显著成果。2023年,zhao等人于ieee信息取证与安全汇刊上提出了基于分解式时空自注意力机制来进行人脸视频伪造检测;2023年,xu等人于ieee国际计算机视觉会议上提出了将视频片段中的时空特性信息有效地编码并保留在一个静态的缩略图中,利用swin-transformer来进行人脸视频伪造检测;2024年,ba等人本文档来自技高网...

【技术保护点】

1.一种基于区域化时空Transformer的伪造人脸视频检测方法,其特征在于,包括:

2.根据权利要求1所述一种基于区域化时空Transformer的伪造人脸视频检测方法,其特征在于,所述人脸解析与区域划分模块在得到人脸图像三区域对应的区域掩码矩阵时,还包括:

3.根据权利要求1所述一种基于区域化时空Transformer的伪造人脸视频检测方法,其特征在于,所述区域自适应特征提取模块生成区域引导矩阵的方式为:

4.根据权利要求3所述一种基于区域化时空Transformer的伪造人脸视频检测方法,其特征在于,所述区域自适应特征提取模块进行区域自适应卷积...

【技术特征摘要】

1.一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,包括:

2.根据权利要求1所述一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,所述人脸解析与区域划分模块在得到人脸图像三区域对应的区域掩码矩阵时,还包括:

3.根据权利要求1所述一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,所述区域自适应特征提取模块生成区域引导矩阵的方式为:

4.根据权利要求3所述一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,所述区域自适应特征提取模块进行区域自适应卷积操作为:

5.根据权利要求1所述一种基于区域化时空transformer的伪造人脸视频检测方法,其特征在于,所述区域化时空transformer模块进一步提取三区域关系,包括:

<...

【专利技术属性】
技术研发人员:韩镇易德康王希豪郑佳炜王中元
申请(专利权)人:武汉大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1