当前位置: 首页 > 专利查询>武汉大学专利>正文

用于合成图像和谐优化的模型构建、生成方法及装置制造方法及图纸

技术编号:42220105 阅读:16 留言:0更新日期:2024-07-30 19:00
本发明专利技术涉及图像合成技术领域,具体涉及用于合成图像和谐优化的模型构建、生成方法及装置,该用于合成图像和谐的模型构建、生成方法包括以下步骤:根据具有重光照前景物体图像和背景图像的合成图像中关于参考物体及其阴影的有效信息,生成前景物体的投射阴影;以背景图像环境相同且具有前景物体的真实图像作为监督信息,将具有投射阴影的合成图像作为条件指导迭代和谐扩散模型进行训练和迭代,直至迭代和谐扩散模型生成预测的具有可控前景物体和合理投射阴影的和谐图像与真实图像之间的误差小于设定值或者迭代达到次数,则完成迭代和谐扩散模型的训练。能够解决现有技术中在真实的户外数据集上,并不能生成合理的符合场景光照条件阴影效果的问题。

【技术实现步骤摘要】

本专利技术涉及图像合成,具体涉及一种于合成图像和谐优化的模型构建、生成方法及装置。


技术介绍

1、图像合成在计算机视觉任务中发挥了重大作用,特别是在增强现实等领域,但是这是一项有挑战性的问题,因为它通常涉及多个子任务,例如位置置换,图像和谐,阴影生成等。其中,和谐的前景以及合理的投射阴影对图像的真实感影响很大。但是现有很多方法往往把图像和谐和阴影生成当作两个独立的任务进行,而在真实场景中,光照在导致前景物体具有不同的色彩亮度的同时,也会会导致物体产生相应的阴影效果,色彩亮度可以反应和背景的一致状态,通过阴影,可以为观察者呈现出物体的体积感和深度信息。因此在图像合成和虚拟现实应用中,前景和谐和阴影生成对于实现光照一致性和场景融合至关重要。

2、目前,存在方法通过双分支任务来解决这两个子任务,通过多尺度注意力机制以及照明交换策略来直接推断插入的前景对象和相应背景场景之间的映射关系,考虑了照亮对象和生成对象的投影阴影,并实现了整个场景的照明协调。但是这种方法在合成数据集上完成很难泛化到真实数据集上,并且生成的阴影在边缘,形状上还需要进一步提高。...

【技术保护点】

1.一种用于合成图像和谐优化的模型构建方法,其特征在于,包括以下步骤:

2.如权利要求1所述的用于合成图像和谐优化的模型构建方法,其特征在于,获取合成图像,包括:

3.如权利要求2所述的用于合成图像和谐优化的模型构建方法,其特征在于:采用摄像机获取设定环境下的背景图像后,保持摄像机不动,放置前景物体,拍摄获取带前景物体的真实图像。

4.如权利要求2所述的用于合成图像和谐优化的模型构建方法,其特征在于,所述的根据具有重光照前景物体图像和背景图像的合成图像中关于参考物体及其阴影的有效信息,生成前景物体的投射阴影,包括:

5.如权利要求4所述的用...

【技术特征摘要】

1.一种用于合成图像和谐优化的模型构建方法,其特征在于,包括以下步骤:

2.如权利要求1所述的用于合成图像和谐优化的模型构建方法,其特征在于,获取合成图像,包括:

3.如权利要求2所述的用于合成图像和谐优化的模型构建方法,其特征在于:采用摄像机获取设定环境下的背景图像后,保持摄像机不动,放置前景物体,拍摄获取带前景物体的真实图像。

4.如权利要求2所述的用于合成图像和谐优化的模型构建方法,其特征在于,所述的根据具有重光照前景物体图像和背景图像的合成图像中关于参考物体及其阴影的有效信息,生成前景物体的投射阴影,包括:

5.如权利要求4所述的用于合成图像和谐优化的模型构建方法,其特征在于:<...

【专利技术属性】
技术研发人员:肖春霞周静
申请(专利权)人:武汉大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1