基于扩散模型的AI摄影方法、装置及设备制造方法及图纸

技术编号:41873000 阅读:20 留言:0更新日期:2024-07-02 00:24
本申请提供一种基于扩散模型的AI摄影方法、装置及设备。其中,通过对原始图像中的皮肤区域进行精确分割和生成遮罩保护,有效避免了手部等部位由于重绘导致的形态失真。同时,组合使用了两个控制模型,包括利用控制景深的景深控制模型,通过分析原始图像的景深对扩散模型进行控制,确保重绘服装等与原人物的景深一致性,显著提高了服装等与人物的贴合度;以及利用控制局部重绘的重绘控制模型,通过加强对原始图像的信息理解,增强重绘区域与非重绘区域的一致性控制,从而使生成图像的内容和细节与非重绘区域有更好的融合度,边缘衔接更自然。因此,采用本申请的方案,能够提高AI摄影的实用性和艺术效果。

【技术实现步骤摘要】

本申请涉及一种基于扩散模型的ai摄影方法、装置及设备,属于计算机图像视觉处理。


技术介绍

1、ai摄影是指运用ai技术在维持人物原始形象不变的前提下,生成富有艺术感的场景、服装、发型等元素,并与原始人物形象结合创作出类似真实摄影作品的效果。现阶段,ai摄影主要利用扩散模型实现,即输入文本提示词,并根据文本提示词的内容对原始人像图的部分区域进行局部扩散重绘。

2、然而,现有技术存在一定局限性,例如,由于手部等部位在图像中占比小,信息量有限,在扩散模型的训练过程中难以精确重建,易导致扩散生成形态失真。同时,由于扩散模型在理解服装形态方面存在不足,使得重绘的服装与人物身体结合度不高,缺乏自然的贴合感。此外,由于重绘区域是完全重新扩散生成,如果缺少对于非重绘区域的信息理解和控制,在边缘处常会出现内容衔接不自然的问题,产生明显的割裂感。


技术实现思路

1、为解决上述问题,本申请提供一种基于扩散模型的ai摄影方法。

2、为了实现上述目的,本申请提供如下技术方案:

3、第一方面,本申请实本文档来自技高网...

【技术保护点】

1.一种基于扩散模型的AI摄影方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述原始图像分别生成人脸遮罩图和皮肤遮罩图,包括:

3.根据权利要求1所述的方法,其特征在于,还包括:

4.根据权利要求1所述的基于扩散模型的AI摄影方法,其特征在于,所述重绘结果图的分辨率小于所述原始图像的分辨率;所述方法还包括:

5.根据权利要求4所述的基于扩散模型的AI摄影方法,其特征在于,所述对所述重绘结果图进行画质增强处理,得到高分辨率的重绘结果图,包括:

6.根据权利要求4或5所述的基于扩散模型的AI摄影方法,其...

【技术特征摘要】

1.一种基于扩散模型的ai摄影方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述原始图像分别生成人脸遮罩图和皮肤遮罩图,包括:

3.根据权利要求1所述的方法,其特征在于,还包括:

4.根据权利要求1所述的基于扩散模型的ai摄影方法,其特征在于,所述重绘结果图的分辨率小于所述原始图像的分辨率;所述方法还包括:

5.根据权利要求4所述的基于扩散模型的ai摄影方...

【专利技术属性】
技术研发人员:廖睿勇
申请(专利权)人:广州光锥元信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1