图像生成方法、装置、文生图网络架构及电子设备制造方法及图纸

技术编号:43946501 阅读:22 留言:0更新日期:2025-01-07 21:35
本申请公开了一种图像生成方法、装置、文生图网络架构及电子设备,属于人工智能技术领域。该文生图网络架构,包括:文字图像特征提取模块,用于基于文生图要求信息,生成文字图像特征向量;文本编码模块,用于将所述文生图要求信息转换成文本描述特征向量;图像编码模块,用于基于所述文生图要求信息,生成图像特征矩阵;噪音预测模块,用于基于所述文字图像特征向量、所述文本描述特征向量和所述图像特征矩阵,得到预测图像特征矩阵;图像解码模块,用于基于所述预测图像特征矩阵,生成与所述文生图要求信息匹配的图像。

【技术实现步骤摘要】

本申请属于人工智能,具体涉及一种图像生成方法、装置、文生图网络架构及电子设备


技术介绍

1、随着技术的发展,文生图算法在海报、广告设计等领域得到了广泛的应用,有效的提升了图像创作和设计的效率。然而,由于常规的文生图模型不具备生成文字的能力,使得海报、广告设计等图像方案的文字内容仍需要人工参与,如通过人工编辑的方式在图像上添加相应地文字内容,导致文生图的效率低。


技术实现思路

1、本申请实施例的目的是提供一种图像生成方法、装置、文生图网络架构及电子设备,能够有效提高文生图图像的生成效率,降低了图像生成的时间成本。

2、第一方面,本申请实施例提供了一种文生图网络架构,包括:

3、文字图像特征提取模块,用于基于文生图要求信息,生成文字图像特征向量;

4、文本编码模块,用于将所述文生图要求信息转换成文本描述特征向量;

5、图像编码模块,用于基于所述文生图要求信息,生成图像特征矩阵;

6、噪音预测模块,用于基于所述文字图像特征向量、所述文本描述特征向量和所述本文档来自技高网...

【技术保护点】

1.一种文生图网络架构,其特征在于,包括:

2.一种图像生成方法,其特征在于,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于所述文字图像特征向量、所述文本描述特征向量和所述图像特征矩阵,得到预测图像特征矩阵,包括:

4.根据权利要求3所述的方法,其特征在于,所述基于所述第一预测噪音向量和所述第二预测噪音向量,得到预测图像特征矩阵,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于所述第一预测噪音向量和所述第二预测噪音向量,得到加权平均噪音向量,包括:

6.根据权利要求2至5中任一项所述的方法,其特征在于,所述...

【技术特征摘要】

1.一种文生图网络架构,其特征在于,包括:

2.一种图像生成方法,其特征在于,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于所述文字图像特征向量、所述文本描述特征向量和所述图像特征矩阵,得到预测图像特征矩阵,包括:

4.根据权利要求3所述的方法,其特征在于,所述基于所述第一预测噪音向量和所述第二预测噪音向量,得到预测图像特征矩阵,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于所述第一预测噪音向量和所述第二预测噪音向量,得到加权平均噪音向量,包括:

6.根据权利要求2至5中任一项所述的方法,其特征在于,所述基于文生图要求信息,生成文字图像特征向量,包括:

7.根据权利要求6所述的方法,其特征在于,所述提取所述文字图像中的文字图像特征,得到文字图像特征向量,包括:

8.根据权利要求2至5中任一项所述的方法,其特征在于,所述基于文生图要求信息,生成文字图像特征向量和图像特征矩阵之前,所述方法还包括:

9.根据权利要求2至5中任一项所述的方法...

【专利技术属性】
技术研发人员:罗龙强
申请(专利权)人:维沃移动通信有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1