基于语义匹配的藏式建筑彩绘线稿图上色方法及装置制造方法及图纸

本发明专利技术涉及一种基于语义匹配的藏式建筑彩绘线稿图上色方法及装置，包括预构建线稿上色模型；所述深度神经网络模型包括预训练的语义分割网络、生成器以及判别器，对所述线稿上色模型进行训练，将待处理线稿图和需要生成的工艺类型输入所述训练好的线稿上色模型中，输出目标上色图像。本发明专利技术通过预训练的语义分割网络划彩绘线稿图中的不同部件的语义区域，指导预训练图像的颜色定位到藏式建筑彩绘线稿图的不同位置，能够精准着色到不同区域，同时也提升了渐变色的模拟效果。本申请对语义标签进行赋色并完成颜色扩展，从而达到辅助上色的目的。目的。目的。

【技术实现步骤摘要】
基于语义匹配的藏式建筑彩绘线稿图上色方法及装置


[0001]本专利技术属于计算机
，具体涉及一种基于语义匹配的藏式建筑彩绘线稿图上色方法及装置。

技术介绍

[0002]藏式建筑彩绘是热贡艺术中的重要组成部分，也是国家级非物质文化遗产之一。其中最具有代表性的就是唐卡(Thang
‑
ga)，指的是用彩缎装裱后悬挂供奉的宗教卷轴画，是藏族文化中一种独具特色的绘画艺术形式，具有鲜明的民族特色。藏式建筑彩绘传统工艺包含的工序极其繁琐，最为重要的一道工序就是着色，首先对线笔勾勒出的佛像等构件形成的线稿图结合主客观因素灵活涂色完成线稿的着色，然后对着色后的唐卡进行晕染，赋予唐卡绘画中的事物真实的质感与立体感。藏式建筑彩绘的颜料配制极其考究，传统上用黄金、白银、珊瑚、珍珠、孔雀石、松石、朱砂等珍贵矿物原料以及藏红花、大黄、蓝靛等植物原料经过加工作为绘画颜料，绘制出来的艺术品可以保存上千年之久。传统的藏式建筑彩绘主要分为普通彩绘、黑金、红金、蓝金、黄金等绘制工艺类型，这对仿真上色算法生成效果的多样性要求较高。计算机仿真难以模拟传统的绘画工本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于语义匹配的藏式建筑彩绘线稿图上色方法，其特征在于，包括：S101，预构建线稿上色模型；所述深度神经网络模型包括预训练的语义分割网络、生成器以及判别器；S102，对所述线稿上色模型进行训练，包括：对高分辨率线稿图和彩色高清图进行预处理，得到语义标签图；将高分辨率线稿图和彩色高清图输入生成器的子生成器中，生成彩色图像；将所述彩色图像和语义标签图输入到生成器的辅助生成器中，所述辅助生成器根据所述语义标签图对所述彩色图像进行上色处理，生成带有语义信息及语义匹配颜色标注的渲染图像；将所述高分辨率线稿图和所述渲染图像作为假样本数据集，将高分辨率线稿图和彩色高清图作为正样本数据集，将所述负样本数据集和正样本数据集输入到判别器中，利用概率输出函数判断真伪概率以确定所述线稿上色模型的目标函数，得到训练好的线稿上色模型；S103，将待处理线稿图和需要生成的工艺类型输入所述训练好的线稿上色模型中，输出带有语义信息及语义匹配颜色标注的目标上色图像。2.根据权利要求1所述的方法，其特征在于，所述语义标签图包括线稿标签图和高清标签图；所述对高分辨率线稿图和彩色高清图进行预处理，得到语义标签图，包括：将彩绘线稿图输入到预训练的语义分割网络中，得到线稿标签图；将彩绘高清图输入到预训练的语义分割网络中，得到高清标签图。3.根据权利要求1或2所述的方法，其特征在于，所述利用概率输出函数判断真伪概率以确定所述线稿上色模型的目标函数，得到训练好的线稿上色模型，包括：将所述渲染图像和高分辨率线稿图输入到判别器中，所述判别器将所述彩色高清图和所述渲染图像划分为多个预设尺寸的图像块，将所述彩色高清图的图像块与所述渲染图像中对应的图像块进行对比，评估所述渲染图像的每个图像块的生成质量，将所有评估结果的平均值作为目标函数的损失函数以更新所述生成器和判别器的网络参数，得到训练好的线稿上色模型。4.根据权利要求1所述的方法，其特征在于，所述将待处理线稿图和需要生成的工艺类型输入所述训练好的线稿上色模型中，包括：将待处理线稿图和需要生成的工艺类型输入到生成器中；所述生成器调用所述工艺类型相应的接口对所述待处理线稿图进行颜色渲染；其中，颜色来源于预存储的彩图RGB值。5.根据权利要求3所述的方法，其特征在于，所述判别器采用多尺度判别器；采用平均...

【专利技术属性】
技术研发人员：耿生玲，王福波，张丹，
申请(专利权)人：青海师范大学，
类型：发明
国别省市：