【技术实现步骤摘要】
一种基于生成式自我注意机制的无监督图像翻译方法
[0001]本专利技术涉及图像处理
,具体涉及一种基于生成式自我注意机制的无监督图像翻译方法。
技术介绍
[0002]图像到图像的翻译是计算机视觉和图形问题研究的一个重要分支,它指的是将图像从源域转换到目标域的过程,其应用涉及超分辨率、图像着色、图像修复、图像生成、风格迁移等。在保持图像内容不变的情况下,利用原始域和目标域的映射关系生成翻译图像。在图像到图像的翻译过程中,可以分为有监督式图像翻译和无监督式图像翻译,根据图像数据集是否成对,又分为成对式图像翻译和非成对式图像翻译。在现实生活中,由于成对的数据集极难获取且获取成本非常高,所以对图像数据集的翻译,采用无监督式图像翻译对非成对式图像进行图像翻译,因此,非成对的无监督图像翻译已经成为研究的主流趋势。
[0003]GAN(Generative adversarial network,生成对抗网络)是一种强大的生成模型,未来有明显的改进空间。现有GAN的图像到图像的翻译方法来自源域的真实图像传递到U型编码器网络结 ...
【技术保护点】
【技术特征摘要】
1.一种基于生成式自我注意机制的无监督图像翻译方法,其特征在于,包括以下步骤:获取待翻译图像,将待翻译图像输入到独立编码器,对待翻译图像进行图像预处理,得到待翻译图像的DSI深浅信息空间,进而得到组合和叠加后的DSI深浅信息空间;将组合和叠加后的DSI深浅信息空间输入到预先构建并训练好的含有生成式自我注意机制的生成器,得到待翻译图像对应的目标翻译图像;获取目标域图像,将目标域图像和目标翻译图像输入到预先构建并训练好的含有生成式自我注意机制的多尺度判别器,判断目标翻译图像是否为真实图像,使生成器生成接近目标域的图像。2.根据权利要求1所述的一种基于生成式自我注意机制的无监督图像翻译方法,其特征在于,所述独立编码器用于对待翻译图像进行图像预处理,所述生成器用于输出待翻译图像对应的目标翻译图像,所述多尺度判别器用于判别生成器所生成的待翻译图像对应的目标翻译图像的真假,所述目标翻译图像为虚假图像,所述待翻译图像和真实图像均为源域图像。3.根据权利要求1所述的一种基于生成式自我注意机制的无监督图像翻译方法,其特征在于,构建含有生成式自我注意机制的生成器的步骤包括:构建生成式自我注意机制模块,将生成式自我注意机制模块嵌入到生成器中的残差层模块与上采样层模块之间,得到含有生成式自我注意机制的生成器。4.根据权利要求1所述的一种基于生成式自我注意机制的无监督图像翻译方法,其特征在于,构建含有生成式自我注意机制的多尺度判别器的步骤包括:将生成...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。