一种基于隐空间扩散模型的合成图像阴影生成方法技术

技术编号:41438390 阅读:30 留言:0更新日期:2024-05-28 20:32
本发明专利技术公开了一种基于隐空间扩散模型的合成图像阴影生成方法,涉及背景环境阴影领域,采用两阶段的方式生成合成图片前景物体的阴影,在第一阶段中训练一个用于生成合成图像阴影遮罩的扩散模型,为合成图像中的前景物体生成纯白色的阴影形状;第二阶段中,训练一个用于预测前景物体阴影颜色的扩散模型,为合成图像中的前景物体阴影生成颜色。本发明专利技术采用上述的一种基于隐空间扩散模型的合成图像阴影生成方法,重点关注预测结果与真实标签在形状及颜色上的差异,降低传统绝对值损失或平方损失带来的图像平滑以及细节缺失的问题。

【技术实现步骤摘要】

本专利技术涉及背景环境生成领域,尤其是涉及一种基于隐空间扩散模型的合成图像阴影生成方法


技术介绍

1、图像合成作为一种常见的图像编辑操作,其旨在从一副图像中剪切出前景物体并将其粘贴到另一幅背景图像上,从而得到合成的图像。图像合成可用于组合不同来源的多个视觉元素以构建虚拟图像。作为一种常见的图像编辑操作,图像合成在娱乐、艺术和商业广告的各种应用及数据增强等都有广泛的运用。其中,前景物体拥有阴影与否又对合成图像的真实感有着巨大的影响。目前,阴影生成方法中,大多使用生成对抗网络进行阴影生成。然而,使用生成对抗网络进行训练时,往往容易出现模式崩溃以及训练不稳定的问题,且对于形状细节复杂的物体,阴影生成结果较差。

2、因此,有必要提供一种基于隐空间扩散模型的合成图像阴影生成方法,来解决上述问题。


技术实现思路

1、本专利技术的目的是提供一种基于隐空间扩散模型的合成图像阴影生成方法,解决现有使用对抗生成网络生成合成图像阴影方法存在的模型难以训练以及阴影生成效果不佳的问题。

2、为实现上述目的,本本文档来自技高网...

【技术保护点】

1.一种基于隐空间扩散模型的合成图像阴影生成方法,其特征在于:采用两阶段的方式生成合成图片前景物体的阴影,在第一阶段中训练一个用于生成合成图像阴影遮罩的扩散模型,为合成图像中的前景物体生成纯白色的阴影形状;第二阶段中,训练一个用于预测前景物体阴影颜色的扩散模型,为合成图像中的前景物体阴影生成颜色。

2.根据权利要求1所述的一种基于隐空间扩散模型的合成图像阴影生成方法,其特征在于:第一阶段具体包括以下步骤:

3.根据权利要求1所述的一种基于隐空间扩散模型的合成图像阴影生成方法,其特征在于:第二阶段具体包括以下步骤:

4.根据权利要求2所述的一种基于隐空间...

【技术特征摘要】

1.一种基于隐空间扩散模型的合成图像阴影生成方法,其特征在于:采用两阶段的方式生成合成图片前景物体的阴影,在第一阶段中训练一个用于生成合成图像阴影遮罩的扩散模型,为合成图像中的前景物体生成纯白色的阴影形状;第二阶段中,训练一个用于预测前景物体阴影颜色的扩散模型,为合成图像中的前景物体阴影生成颜色。

2.根据权利要求1所述的一种基于隐空间扩散模型的合成图像阴影生成方法,其特征在于:第一阶段具体包括以下步骤:

3.根据权利要求1所述的一种基于隐空间扩散模型的合成图像阴影生成方法,其特征在于:第二阶段具体包括以下步骤:

4.根据权利要求2所述的一种基于隐空间扩散模型的合成图像阴影生成方法,其特征在于:在步骤s2中,具体包括以下步骤:

5.根据权利要求2所述的一种基于隐空间扩散模型的合成图像阴影生成方法,其特征在于:在步骤s3中,物体遮罩输入特征和背景物体阴影引导特征将作为第一层交叉注意力层的两个输入,引导模型在以物体遮罩输入特征作为条件的同时,...

【专利技术属性】
技术研发人员:陈光喜陆勇黄继蓉
申请(专利权)人:桂林电子科技大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1