一种基于多尺度风格融合和字形控制的单样本字体生成方法技术

本发明专利技术公开了一种基于多尺度风格融合和字形控制的单样本字体生成方法。本发明专利技术方法包括：一、输入文字的风格图像和内容图像；二、使用风格编码器对输入的风格图像进行特征提取，收集编码器网络每一层的输出以得到多尺度的风格特征；三、将内容图像和噪声图像在通道上进行相连后作为噪声预测模型的输入；四、利用交叉注意力机制将提取出的多尺度风格特征融入噪声预测模型；五、根据损失函数训练风格编码器和噪声预测模型；六、对训练好的模型进行采样，生成目标风格和目标内容的字体图像。本发明专利技术将扩散模型用于单样本字体生成任务上，通过内容图像对字形的控制，提高了字符结构的准确性。将多尺度风格融入扩散模型，实现了对风格图像信息更全面的保留。

【技术实现步骤摘要】

本专利技术涉及图像生成领域，主要涉及一种基于多尺度风格融合和字形控制的单样本字体生成方法。

技术介绍

1、网络技术的进步导致人们在网上每天都会消耗大量的文本来进行信息传输和存储。字体作为文本的表现形式，与我们的日常生活息息相关。然而，由于传统的字库制作方法在很大程度上依赖于专家设计师手动设计每个字形，因此对于字形丰富的文本如中文(超过50000个字形)、韩文(11172个字形)或泰文(11088个字形)来说，创建一个新的字体库是极其昂贵和耗费人力的。字体生成是一项具有挑战性的任务，其目标是根据参考样本的风格创建不同字符的风格化图像。该技术可以极大地节省专业设计师在创建新字体库时的时间和精力，因为他们只需要手动设计一些参考图像就能生成整个字库。字体生成具有广泛的应用场景，包括字体库的创建、手写笔迹模仿、书法文物的修复等。

2、在早期，大多数字体生成方法都是基于生成对抗网络(gan)。zi2zi(tian,y.zi2zi:master chinese calligraphy with conditional adversarialnetworks.本文档来自技高网...

【技术保护点】

1.一种基于多尺度风格融合和字形控制的单样本字体生成方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的一种基于多尺度风格融合和字形控制的单样本字体生成方法，其特征在于，步骤S1中所述噪声预测模型Hu使用U-Net网络结构，U-Net网络结构包含一个编码器模块和一个解码器模块，所述风格编码器Hs使用U-Net网络结构中的编码器模块。

3.根据权利要求1所述的一种基于多尺度风格融合和字形控制的单样本字体生成方法，其特征在于，步骤S2中，多尺度特征集合Fs表示如下：

4.根据权利要求1所述的一种基于多尺度风格融合和字形控制的单样本字体生成方法，其特征...

【技术特征摘要】

1.一种基于多尺度风格融合和字形控制的单样本字体生成方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的一种基于多尺度风格融合和字形控制的单样本字体生成方法，其特征在于，步骤s1中所述噪声预测模型hu使用u-net网络结构，u-net网络结构包含一个编码器模块和一个解码器模块，所述风格编码器hs使用u-net网络结构中的编码器模块。

3.根据权利要求1所述的一种基于多尺度风格融合和字形控制的单样本字体生成方法，其特征在于，步骤s2中，多尺度特征集合fs表示如下：

4.根据权利要求1所述的一种基于多...

【专利技术属性】
技术研发人员：冯书谊，陈思懿，梁栋，李振华，
申请(专利权)人：南京航空航天大学，
类型：发明
国别省市：