【技术实现步骤摘要】
本公开涉及图像处理，尤其涉及一种场景图像合成方法及装置。
技术介绍
1、为目标图像配合给定的背景，生成自然融合的目标场景图，这项技术在图像合成、效果图渲染、海报设计以及虚拟试穿等多个应用领域均表现出广泛的实用性。目前图像与背景合成新的场景图像质量不高，无法完全保留图像中目标的细节信息，目标无法适应场景中的局部变化(包括图像中的光线和目标姿态)，无法实现目标与各种环境场景之间的无缝适配。
技术实现思路
1、有鉴于此，本公开实施例提供了一种场景图像合成方法、装置、电子设备及计算机可读存储介质，以解决现有技术中使用图像与背景合成新的场景图像质量低的问题。
2、本公开实施例第一方面，提供了一种场景图像合成方法，包括：构建特征提取分支和特征融合分支，利用特征提取分支、特征融合分支、多模态编码器以及扩散网络构建场景图像合成模型；获取待合成的目标图像和目标背景图像，将目标图像和目标背景图像输入场景图像合成模型：通过特征提取分支处理目标图像，得到目标对象特征、目标边缘特征和目标关键点特征；通过特征融合分支处理目标背景图像、目标边缘特征和目标关键点特征，得到目标融合特征；通过多模态编码器提取目标背景图像的目标背景多模态特征；通过扩散网络处理目标对象特征、目标融合特征和目标背景多模态特征，得到目标图像和目标图像对应的目标场景图像。
3、本公开实施例第二方面，提供了一种场景图像合成装置，包括：建模模块，被配置为构建特征提取分支和特征融合分支，利用特征提取分支、特征融合分支、多模态
4、本公开实施例的第三方面，提供了一种电子设备，包括存储器、处理器以及存储在存储器中并且可在处理器上运行的计算机程序，该处理器执行计算机程序时实现上述方法的步骤。
5、本公开实施例的第四方面，提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现上述方法的步骤。
6、本公开实施例与现有技术相比存在有益效果是：构建特征提取分支和特征融合分支，利用特征提取分支、特征融合分支、多模态编码器以及扩散网络构建场景图像合成模型；获取待合成的目标图像和目标背景图像，将目标图像和目标背景图像输入场景图像合成模型：通过特征提取分支处理目标图像，得到目标对象特征、目标边缘特征和目标关键点特征；通过特征融合分支处理目标背景图像、目标边缘特征和目标关键点特征，得到目标融合特征；通过多模态编码器提取目标背景图像的目标背景多模态特征；通过扩散网络处理目标对象特征、目标融合特征和目标背景多模态特征，得到目标图像和目标图像对应的目标场景图像。采用上述技术手段，可以解决现有技术中使用图像与背景合成新的场景图像质量低的问题，进而保留图像中目标的细节信息，使得目标适应场景中的局部变化，实现目标与环境场景之间的无缝适配。
本文档来自技高网...【技术保护点】
1.一种场景图像合成方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，构建特征提取分支和特征融合分支，包括：
3.根据权利要求2所述的方法，其特征在于，通过所述特征提取分支处理所述目标图像，得到目标对象特征、目标边缘特征和目标关键点特征，包括：
4.根据权利要求2所述的方法，其特征在于，通过所述特征融合分支处理所述目标背景图像、所述目标边缘特征和所述目标关键点特征，得到目标融合特征，包括：
5.根据权利要求1所述的方法，其特征在于，通过所述扩散网络处理所述目标对象特征、所述目标融合特征和所述目标背景多模态特征，得到所述目标图像和所述目标图像对应的目标场景图像，包括：
6.根据权利要求1所述的方法，其特征在于，利用所述特征提取分支、所述特征融合分支、多模态编码器以及扩散网络构建场景图像合成模型之后，所述方法还包括：
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
8.一种场景图像合成装置，其特征在于，包括：
9.一种电子设备，包括存储器、处理器以及存储在所述
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
...【技术特征摘要】
1.一种场景图像合成方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，构建特征提取分支和特征融合分支，包括：
3.根据权利要求2所述的方法，其特征在于，通过所述特征提取分支处理所述目标图像，得到目标对象特征、目标边缘特征和目标关键点特征，包括：
4.根据权利要求2所述的方法，其特征在于，通过所述特征融合分支处理所述目标背景图像、所述目标边缘特征和所述目标关键点特征，得到目标融合特征，包括：
5.根据权利要求1所述的方法，其特征在于，通过所述扩散网络处理所述目标对象特征、所述目标融合特征和所述目标背景多模态特征，得到所述目标图像和所述目标图像对应的目标场景图像，包括：
【专利技术属性】
技术研发人员：石雅洁，
申请(专利权)人：深圳须弥云图空间科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。