一种基于扩散模型和注意力机制的跨视角全景合成方法技术

技术编号:41974904 阅读:36 留言:0更新日期:2024-07-10 16:54
本发明专利技术涉及计算机视觉技术领域,公开了一种基于扩散模型和注意力机制的跨视角全景合成方法,包括以下步骤:对全景图像和卫星图像进行跨视角的像素级对齐,得到对齐后的像素;将对齐后的像素进行地理空间自适应纹理混合,得到掩码图像;通过卷积神经网络对全景图像和卫星图像进行特征提取,分别得到全景特征图和卫星特征图;通过掩码跨视角注意力机制对全景特征图和卫星特征图进行融合,得到优化后的特征;通过优化后的特征,指导跨视角扩散模型进行去噪,得到合成图;能够生成纹理细节更加丰富、更贴合真实全景、更符合人眼感官的全景图像。

【技术实现步骤摘要】

本专利技术涉及计算机视觉,具体涉及一种基于扩散模型和注意力机制的跨视角全景合成方法


技术介绍

1、基于卫星图像和全景图像合成全景图是一个涉及多个步骤的过程,包括图像获取、预处理、配准、融合。以下是一个基本的流程:

2、图像获取:首先,需要获取卫星图像和全景图像。卫星图像和全景图像均可以通过专业的遥感软件获取。确保获取的图像分辨率足够高,以便在合成全景图时获得清晰的细节。

3、预处理:对获取的图像进行预处理是必要的步骤。这可能包括去除噪声、调整色彩平衡、增强对比度等,以改善图像质量。

4、图像配准:配准是将不同来源的图像对齐的过程。对于卫星图像和全景图像,可能需要手动或自动地调整它们的位置和角度,以确保它们在合成时能够无缝衔接。

5、图像融合:在图像配准后,下一步是将它们融合成一个全景图。这通常涉及到一些复杂的算法,用于处理图像之间的过渡区域,以确保合成的全景图在视觉上是一致的。

6、需要注意的是,由于卫星图像和全景图像在获取方式、分辨率和视角等方面存在差异,因此合成全景图可能会面临一些挑战。例如本文档来自技高网...

【技术保护点】

1.一种基于扩散模型和注意力机制的跨视角全景合成方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于扩散模型和注意力机制的跨视角全景合成方法,其特征在于,步骤一中,对全景图像和卫星图像进行跨视角的像素级对齐得到对齐后的像素时,具体包括:

3.根据权利要求1所述的基于扩散模型和注意力机制的跨视角全景合成方法,其特征在于,步骤二中,所述将对齐后的像素进行地理空间自适应纹理混合得到掩码图像,具体包括:

4.根据权利要求3所述的基于扩散模型和注意力机制的跨视角全景合成方法,其特征在于,步骤三中,所述通过掩码跨视角注意力机制对全景特征图和卫星特征图进行...

【技术特征摘要】

1.一种基于扩散模型和注意力机制的跨视角全景合成方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于扩散模型和注意力机制的跨视角全景合成方法,其特征在于,步骤一中,对全景图像和卫星图像进行跨视角的像素级对齐得到对齐后的像素时,具体包括:

3.根据权利要求1所述的基于扩散模型和注意...

【专利技术属性】
技术研发人员:陈源坤叶五一
申请(专利权)人:中国科学技术大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1