基于多信息引导和渐进掩码Transformer的小篡改区域定位方法技术

本发明专利技术为基于多信息引导和渐进掩码Transformer的小篡改区域定位方法，该方法利用边缘和区域两种信息来引导小篡改区域的定位，在边缘信息引导阶段，首先利用浅层特征和深层特征来生成篡改区域的边缘引导信息，然后使用边缘引导信息与浅层特征进行逐元素相乘并与浅层特征进行残差连接，最后使用通道注意力来挖掘通道之间的关联；在区域信息引导阶段，首先提取并聚合各层频域相关信息并生成粗糙预测掩码，然后扩大可见的篡改区域并生成区域引导信息，最后将区域引导信息与深层特征逐元素相乘并与深层特征进行残差连接并对篡改特征的通道相关性进行建模；同时以渐进的方式使用掩码Transformer来细化各层特征。能更加精确地定位篡改区域。

【技术实现步骤摘要】

本专利技术的技术方案涉及深度学习图像处理和模式识别领域，具体的说是基于多信息引导和渐进掩码transformer的小区域篡改图像定位方法。

技术介绍

1、图像篡改定位的目的是检测出一幅图像中被人为修改的部分，图像编辑技术的发展使得篡改图像具有真实感和广泛的可取性。图像篡改通常可以分为三种类型：拼接，将一幅图像的区域分割并粘贴到另一幅图像中；复制粘贴，将对象从给定图像中的一个区域复制粘贴到该图像的另一个区域；移除，从图像中移除某个区域并修复移除区域。通过这三种篡改技术已经产生了大量的篡改图像，但定位图像的篡改区域仍然是一个挑战。

2、目前，图像篡改定位技术的研究方法主要包括传统方法和基于深度学习的图像篡改定位方法。传统的方法主要通过设计手工特征来检测图像篡改，例如滤波器阵列(colorfilter array，cfa)、噪声不一致性(noise inconsistencies，noi)、横向色差(lateralchromatic aberration，lca)、光响应非均匀性(photo response non-uniformity，prnu)本文档来自技高网...

【技术保护点】

1.一种基于多信息引导和渐进掩码Transformer的小篡改区域定位方法，其特征在于，该方法利用边缘和区域两种信息来引导小篡改区域的定位，在边缘信息引导阶段，首先利用浅层特征和深层特征来生成篡改区域的边缘引导信息，然后使用边缘引导信息与浅层特征进行逐元素相乘并与浅层特征进行残差连接，最后使用通道注意力来挖掘通道之间的关联；在区域信息引导阶段，首先提取并聚合各层频域相关信息并生成粗糙预测掩码，然后扩大可见的篡改区域并生成区域引导信息，最后将区域引导信息与深层特征逐元素相乘并与深层特征进行残差连接并对篡改特征的通道相关性进行建模；同时以渐进的方式使用掩码Transformer来细化各层特征...

【技术特征摘要】

1.一种基于多信息引导和渐进掩码transformer的小篡改区域定位方法，其特征在于，该方法利用边缘和区域两种信息来引导小篡改区域的定位，在边缘信息引导阶段，首先利用浅层特征和深层特征来生成篡改区域的边缘引导信息，然后使用边缘引导信息与浅层特征进行逐元素相乘并与浅层特征进行残差连接，最后使用通道注意力来挖掘通道之间的关联；在区域信息引导阶段，首先提取并聚合各层频域相关信息并生成粗糙预测掩码，然后扩大可见的篡改区域并生成区域引导信息，最后将区域引导信息与深层特征逐元素相乘并与深层特征进行残差连接并对篡改特征的通道相关性进行建模；同时以渐进的方式使用掩码transformer来细化各层特征，从而更加精确地定位篡改区域。

2.一种基于多信息引导和渐进掩码transformer的小篡改区域定位方法，其特征在于，所述定位方法包括以下内容：

3.根据权利要求2所述的基于多信息引导和渐进掩码transformer的小篡改区域定位方法，其特征在于，所述边缘生成模块的流程是：

4.根据权利要求3所述的基于多信息引导和渐进掩码transformer的小篡改区域定位方法，其特征在于，所述边缘引导模块...

【专利技术属性】
技术研发人员：朱叶，刘剑，于洋，吕华，刘依，阎刚，郭迎春，师硕，
申请(专利权)人：河北工业大学，
类型：发明
国别省市：