一种风格化人像生成方法、设备及介质技术

技术编号:41874495 阅读:32 留言:0更新日期:2024-07-02 00:26
本发明专利技术公开了一种风格化人像生成方法,包括如下步骤:由用户上传图像数据并进行数据处理得到训练用数据集。将训练用数据集放入模型中进行模型训练,得到生成模型,完成模型部署。由用户输入提示词,根据提示词和生成模型优先以较低权重合并人像LoRA生成初步人像图片。通过人脸检测模型对初步人像图片进行自动检测,检测到人像位置后,以人像区域的包围框作为掩码,对其进行图像膨胀以及高斯模糊,然后通过生成模型以较高权重再次合并人像LoRA进行细节重绘,得到高保真人像图片。本发明专利技术能实现人脸ID的高效提取、高保真的人脸重绘、隐私友好的生图流程。使得本发明专利技术实现了高效、灵活且用对户友好的风格化人像生成,提供更加丰富和个性化的图像生成体验。

【技术实现步骤摘要】

本专利技术属于图像处理领域,尤其涉及一种风格化人像生成方法、设备及介质


技术介绍

1、本专利技术旨在开发一种风格化人像生成方法,以满足用户对高保真、风格多样的个性化人像生成需求。该方法能够让用户在不前往线下照相馆的情况下,通过线上平台生成写真照、艺术照、动漫头像等风格化人像。现有技术中的风格化人像生成效率不高,且生成的图像的质量以及清晰度无法保证,因此,亟需一种新型的风格化人像生成方法。


技术实现思路

1、本专利技术的技术目的是提供一种风格化人像生成方法、设备及介质,以实现高保真人像图片地生成。

2、为解决上述问题,本专利技术的技术方案为:

3、一种风格化人像生成方法,包括如下步骤:

4、由用户上传图像数据并进行数据处理得到训练用数据集;

5、构建模型,将训练用数据集放入模型中进行模型训练,得到生成模型,完成模型部署;

6、生成模型采用stable diffusion模型,生成模型基于dreambooth进行损失函数建模,并在生成模型中采用局部重参本文档来自技高网...

【技术保护点】

1.一种风格化人像生成方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的风格化人像生成方法,其特征在于,得到训练用数据集的具体步骤为:

3.根据权利要求1所述的风格化人像生成方法,其特征在于,损失函数为如下公式:

4.根据权利要求3所述的风格化人像生成方法,其特征在于,在完成模型部署之前还需要对所述生成模型进行模型评估,使用人脸识别模型对上述生成模型生成的人像进行评估是否合格,若合格则完成模型部署,反之则跳转至模型训练。

5.根据权利要求3所述的风格化人像生成方法,其特征在于,在所述生成模型中采用局部重参数化LoRA,具体在其特定层...

【技术特征摘要】

1.一种风格化人像生成方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的风格化人像生成方法,其特征在于,得到训练用数据集的具体步骤为:

3.根据权利要求1所述的风格化人像生成方法,其特征在于,损失函数为如下公式:

4.根据权利要求3所述的风格化人像生成方法,其特征在于,在完成模型部署之前还需要对所述生成模型进行模型评估,使用人脸识别模型对上述生成模型生成的人像进行评估是否合格,若合格则完成模型部署,反之则跳转至模型训练。

5.根据权利要求3所述的风格化人像生成方法,其特...

【专利技术属性】
技术研发人员:胡扬
申请(专利权)人:派欧云计算上海有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1