一种基于多视角图像特征融合的图像和谐化方法技术

技术编号:41506961 阅读:21 留言:0更新日期:2024-05-30 14:47
本发明专利技术公开了一种能够同时利用多个视角图像进行人像颜色调整的图像和谐化方法。该方法由三个模块组成,分别为语义解析模块、和谐化骨干模块和特征融合模块。其中,语义解析模块负责提取图像中的语义特征,并输出特征图嵌入到和谐化骨干模块中;和谐化骨干模块是一个由编码器、解码器组成的对称网络结构;融合模块将不同图像经过和谐化骨干模块编码器的特征图进行融合,然后送入到解码器中,得到最终的和谐化图像。

【技术实现步骤摘要】

本专利技术公开了一种基于多视角图像特征融合的图像和谐化方法,属于图像合成领域。


技术介绍

1、图像和谐化是图像编辑中的常见操作之一。在图像合成中,由于前景和背景是在不同的环境条件(如光照、角度等)下获取的,因此在合成后前景和背景之间会出现明显的视觉不一致性,降低了合成图像的真实度。因此,图像和谐化旨在调节合成图像中的前景物体的外观与背景相匹配,使得整张图像呈现视觉风格的一致性,提高合成图像的真实感。随着元宇宙的兴起,在虚拟世界中重建现实人物,并形成逼真视觉图像的需求急剧增加,但是传统的三维重建方法需要使用专门的设备对人物进行细致的扫描,再将扫描数据导入三维软件中进行建模和渲染,不仅价格昂贵耗时漫长,也十分不便,限制了元宇宙的相关应用在普通用户之间的大规模普及。因此,使用图像和谐化的方法,从人物的图像中获取人物的外观特征,并在虚拟世界中进行人物图像与背景图像的真实合成,是很有必要的。

2、图像和谐化方法主要分为两种,一种是基于手工提取的特征的方法,另一种是基于深度学习的方法。基于手工提取的特征的方法主要是根据人类的知识来提取图像的低层次外观统计信本文档来自技高网...

【技术保护点】

1.一种基于多视角图像特征融合的图像和谐化方法,该方法同时提取若干幅从不同拍摄角度获取的图像的特征,并将提取的特征进行融合处理,得到单一图片无法完全反映的完整场景信息,进而产生最终的和谐化图像结果,该方法具体包括以下步骤:

2.根据权利要求1所述的基于多视角图像特征融合的图像和谐化方法,其特征在于:步骤S2中的所述语义解析模块包含两部分,分别为高分辨率学习表示部分和物体上下文表示部分,高分辨率学习表示部分包括依次相连的第一阶段模块、第二阶段模块、第三阶段模块、第四阶段模块:第一阶段由高分辨率卷积块组成,第二、三、四阶段由并行支数依次增加的高分辨率卷积块组成;物体上下文部分表示...

【技术特征摘要】

1.一种基于多视角图像特征融合的图像和谐化方法,该方法同时提取若干幅从不同拍摄角度获取的图像的特征,并将提取的特征进行融合处理,得到单一图片无法完全反映的完整场景信息,进而产生最终的和谐化图像结果,该方法具体包括以下步骤:

2.根据权利要求1所述的基于多视角图像特征融合的图像和谐化方法,其特征在于:步骤s2中的所述语义解析模块包含两部分,分别为高分辨率学习表示部分和物体上下文表示部分,高分辨率学习表示部分包括依次相连的第一阶段模块、第二阶段模块、第三阶段模块、第四阶段模块:第一阶段由高分辨率卷积块组成,第二、三、四阶段由并行支数依次增加的高分辨率卷积块组成;物体上下文部分表示由一个物体注意力块和批正则化随机丢弃块组成,物体注意力块使用注意力机制的原理对高分辨率学习表示部分输出的特征图进行处理,再送入批正则化丢弃块中进行批正则化和随机丢弃。将最终得到的特征图送入到和谐化骨干模块的编码器的第2层中;

3.根据权利要求1所述的基于多视角图像特征融合的图像和谐化方法,其特征在...

【专利技术属性】
技术研发人员:孙建德苏成李静万文博张凯王建张善心
申请(专利权)人:山东师范大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1