一种基于统计数据特征的文生图方法及系统技术方案

技术编号:44162807 阅读:20 留言:0更新日期:2025-01-29 10:34
本发明专利技术公开一种基于统计数据特征的文生图方法及系统,涉及广告设计技术领域,包括:统计目标群体的特征直方图并转换为prompt;采集训练样本;为m种风格并分配权重并转换为prompt;计算损失函数;训练CLIP模型;形成单一风格的风格特征库;将单一风格的风格特征库、内容特征库和第一prompt送入SD模型进行融合;将各个尺度融合后的图像特征输入SD模型生成结果图。本发明专利技术通过统计直方图转prompt的方式,设计了一种新的模型损失函数,并通过融合SD卷积特征、广告风格特征、广告内容特征,进行图像生成,实现了模型的稳定训练和图像的准确生成。

【技术实现步骤摘要】

本专利技术涉及广告设计,具体而言,涉及一种基于统计数据特征的文生图方法及系统


技术介绍

1、随着广告成本的上,精准的投放广告,提高有效转化率是广告设计的一个重要目标。人工进行广告设计工作量大,周期长且无法快速设计不同样式、不同风格以达到捕获受众喜好的能力。

2、随着文生图大模型技术的发展,精准广告设计成为可能。基于stable difusion(sd)的文生图方法能够实现文字生成图像,但是目前这个映射结果看起来会比较生硬,而且往往出现生成的结果并非想要的结果,这主要是因为文本的描述与最终图像之间并非完全一一对应的。图像的冗余度非常高,语言文本冗余度非常低,因此在很多生成图像上其细节不够明确,不够清晰。

3、因此学术界提出controlnet通过图像条件特征来引导sd图像的生成,这种方法极大化的提高了生成图像的质量。目前图像的生成还是基于人工设计或者人工调整文生图模型产生图像。在应用到广告生成方面,该类模型还存在如下问题:一方面,需要不断的调整prompt和模型参数,达到生成目标图像的目的;无法自适应产生prompt,在一些对广告图本文档来自技高网...

【技术保护点】

1.一种基于统计数据特征的文生图方法,其特征在于,包括:

2.根据权利要求1所述的基于统计数据特征的文生图方法,其特征在于,统计目标群体的特征直方图,并将所述特征直方图转换为prompt,具体为:

3.根据权利要求1所述的基于统计数据特征的文生图方法,其特征在于,利用所述第二prompt及对应的设计图像,计算损失函数,具体为:

4.根据权利要求2所述的基于统计数据特征的文生图方法,其特征在于,对所述训练样本中的设计图像进行编码,形成单一风格的风格特征库,具体为:

5.根据权利要求4所述的基于统计数据特征的文生图方法,其特征在于,将单一风格的...

【技术特征摘要】

1.一种基于统计数据特征的文生图方法,其特征在于,包括:

2.根据权利要求1所述的基于统计数据特征的文生图方法,其特征在于,统计目标群体的特征直方图,并将所述特征直方图转换为prompt,具体为:

3.根据权利要求1所述的基于统计数据特征的文生图方法,其特征在于,利用所述第二prompt及对应的设计图像,计算损失函数,具体为:

4.根据权利要求2所述的基于统计数据特征的文生图方法,其特征在于,对所述训练样本中的设计图像进行编码,形成单一风格的风格特征库,具体为:

5.根据权利要求4所述的基于统计数据特征的文生图方法,其特征在于,将单一风格的风格特征...

【专利技术属性】
技术研发人员:王言伟王锋鄂小松金深刘晨哲李勇
申请(专利权)人:树蛙信息科技南京有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1