一种文本生成图像的方法技术

技术编号:42552401 阅读:28 留言:0更新日期:2024-08-29 00:25
本发明专利技术公开了一种文本生成图像的方法,涉及图像生成领域,所述方法包括:获取单实体样本数据,基于所述单实体样本数据获得多实体样本数据,基于所述多实体样本数据获得识别模型;基于所述识别模型对所述多实体样本数据进行识别获得若干第一实体,对每个所述第一实体进行编码获得若干单一向量,将所有所述单一向量进行融合获得综合向量;基于所述综合向量和生成器获得第二图像,基于所述第二图像获得所述生成器的第一损失L<subgt;G</subgt;,基于所述第一损失L<subgt;G</subgt;获得所述生成器的目标生成参数,基于所述目标生成参数获得生成模型;获取文本数据,基于所述识别模型对所述文本数据进行识别获得若干第二实体,所述生成模型基于所有所述第二实体获得所述文本数据对应的图像,可以解决现有跨模态学习方法缺少对文本和图像的结构化处理,导致跨模态学习中信息损失增加,从而导致生成图像的多样性和真实性降低的问题。

【技术实现步骤摘要】

本专利技术涉及图像生成领域,具体地,涉及一种文本生成图像的方法


技术介绍

1、随着科学技术的快速发展,互联网上的数据类型变得更加丰富多样,包括但不限于文本、图像、语音和视频等数据类型,在处理不同类型的数据时,将某种模态的数据转换为另一种数据类型可以有效打破不同类型数据之间的特征表述壁垒。目前通常使用跨模态学习方法进行互相转换,但该方法中缺少对于文本和图像等非结构化数据的结构化处理,导致跨模态学习中信息损失的增加,从而导致生成图像的多样性和真实性降低。


技术实现思路

1、为了解决现有跨模态学习方法缺少对文本和图像的结构化处理,导致跨模态学习中信息损失增加的问题,本专利技术提供了一种文本生成图像的方法,所述方法包括:获取单实体样本数据,基于所述单实体样本数据获得多实体样本数据,基于所述多实体样本数据获得识别模型;基于所述识别模型对所述多实体样本数据进行识别获得若干第一实体,对每个所述第一实体进行编码获得若干单一向量,将所有所述单一向量进行融合获得综合向量;基于所述综合向量和生成器获得第二图像,基于所述第二图像获本文档来自技高网...

【技术保护点】

1.一种文本生成图像的方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种文本生成图像的方法,其特征在于,基于所述单实体样本数据获得多实体样本数据的具体步骤包括:

3.根据权利要求1所述的一种文本生成图像的方法,其特征在于,基于所述综合向量和生成器获得第二图像的具体步骤包括:

4.根据权利要求1所述的一种文本生成图像的方法,其特征在于,所述方法还包括获取判别器,判断所述判别器是否能判断所述第二图像的真假,具体步骤包括:

5.根据权利要求4所述的一种文本生成图像的方法,其特征在于,基于所述第二图像获得所述生成器的第一损失LG,基于所...

【技术特征摘要】

1.一种文本生成图像的方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种文本生成图像的方法,其特征在于,基于所述单实体样本数据获得多实体样本数据的具体步骤包括:

3.根据权利要求1所述的一种文本生成图像的方法,其特征在于,基于所述综合向量和生成器获得第二图像的具体步骤包括:

4.根据权利要求1所述的一种文本生成图像的方法,其特征在于,所述方法还包括获取判别器,判断所述判别器是否能判断所述第二图像的真假,具体步骤包括:

5.根据权利要求4所述的一种文本生成图像的方法,其特征在于,基于所述第二图像获得所述生成器的第一损失lg,基于所述第一损失lg获得所...

【专利技术属性】
技术研发人员:李勇鲁晓浩文立玉岳希许翔燕
申请(专利权)人:成都信息工程大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1