一种图像生成方法及系统、电子设备、存储介质技术方案

本公开提供了一种图像生成方法及系统、电子设备、存储介质，包括获取输入的第一描述信息；基于第一描述信息生成绘制请求，将绘制请求发送给图像信息生成模型；图像信息生成模型根据绘制请求生成预设格式的绘制信息，将绘制信息发送至绘图引擎；绘图引擎根据绘制信息生成目标图像；展示目标图像；本方法中，图像信息生成模型不需要生成完整的图像，仅生成可用于目标图像绘制的绘制信息，通过这种方式大幅降低了对计算资源的需求，与目前直接生成图像的文生图方案相比，本申请在算力消耗方面实现了显著优化，有效降低了对硬件资源的需求。

【技术实现步骤摘要】

本专利技术涉及图像处理，尤其涉及一种图像生成方法及系统、电子设备、存储介质。

技术介绍

1、ai文生图能够根据用户的文本描述快速生成图像，为用户提供了快速实现创意想法的途径，这大大缩短了从想法到视觉表现的时间，提高了工作效率。通过文生图技术，用户可以根据自己的喜好和需求，定制个性化的图像。目前ai文生图主要使用的模型包括clip跨模态模型、u-net卷积神经网络等，以及一些大公司和研究机构提出的特定模型，如pangu-draw(华为)、imagen&imagen2(谷歌)、sdxl turbo(stabi l ity ai)等。文生图大模型的训练和推断需要大量的计算资源，在卡内基梅隆大学和hugging face的研究中，图片生成模型每千次交互的能耗相当于为手机充950次电，而聊天机器人和文本生成模型每千次交互的能耗仅为手机充一次电的16％。这一数据表明，图片生成模型在算力消耗上显著高于文本生成模型。

2、由于算力资源的有限性，高算力消耗可能导致一些用户在使用文生图技术时遇到资源限制的问题。目前，很多云服务提供商会限制用户的使用时间或频本文档来自技高网...

【技术保护点】

1.一种图像生成方法，其特征在于：所述方法包括

2.根据权利要求1所述的图像生成方法，其特征在于所述获取输入的第一描述信息，还包括：图像信息的描述界面，所述描述界面包括至少一个用于描述图像的配置项，用户通过所述描述界面的所述配置项输入所述第一描述信息。

3.根据权利要求2所述的图像生成方案，其特征在于：所述配置项包括图像主体项、图像颜色项、图像风格项和图像分辨率项中的至少一种。

4.根据权利要求1所述的图像生成方法，其特征在于所述图像信息生成端根据所述绘制请求生成预设格式的绘制信息，并将所述绘制信息发送至绘图引擎，还包括：所述绘制信息包括图像的坐标。<...

【技术特征摘要】

1.一种图像生成方法，其特征在于：所述方法包括

2.根据权利要求1所述的图像生成方法，其特征在于所述获取输入的第一描述信息，还包括：图像信息的描述界面，所述描述界面包括至少一个用于描述图像的配置项，用户通过所述描述界面的所述配置项输入所述第一描述信息。

3.根据权利要求2所述的图像生成方案，其特征在于：所述配置项包括图像主体项、图像颜色项、图像风格项和图像分辨率项中的至少一种。

4.根据权利要求1所述的图像生成方法，其特征在于所述图像信息生成端根据所述绘制请求生成预设格式的绘制信息，并将所述绘制信息发送至绘图引擎，还包括：所述绘制信息包括图像的坐标。

5.根据权利要求1所述的图像生成方法，其特征在于所述绘图引擎根据所述绘制信息生成目标图像，还包括：从所述绘制信息中过滤出绘制目标图像所需的数据，所述绘图引擎根据过滤出的绘制目标图像所需的数据生成所述目标图像。

6.根据权利要求1所述的图像生成方法，其特征在于所述基于所述第一描述信息生成绘制请求，将所述绘制请求发送给图像信息生成端，还包括：所述绘...

【专利技术属性】
技术研发人员：湛振波，
申请(专利权)人：旷明智能科技无锡有限公司，
类型：发明
国别省市：