【技术实现步骤摘要】
一种可交互任意形变风格人脸漫画自动生成方法
本专利技术涉及一种可交互任意形变风格人脸漫画自动生成方法,属于计算机应用领域。
技术介绍
人脸漫画是一种通过夸大强调任务的特征,从而表达特定情感并给人留下深刻印象的艺术形式,它具有丰富灵活的多样性,深受大众喜爱。一方面,人脸漫画可以有不同的刻画形式,例如简笔画、素描、油画等;另一方面,人脸漫画也可以通过不同的夸大风格表达不同的情感。同时,漫画创作者也有各自的艺术风格和表达方式,从而进一步增加了人脸漫画这一艺术形式的多样性。总之,人脸漫画的特点和多样性主要体现在色彩风格和形状风格两方面。因此,人脸漫画的生成技术主要关注生成的漫画在色彩和形状方面是否逼真,以及是否具有风格多样性。人脸漫画通常需要由一些具有专业技能的艺术家创作而成,因此往往只有一些名人等少数人才会有自己个人的漫画形象。随着互联网和移动互联网的发展普及,越来越多的普通人希望拥有属于自己的漫画形象,而通过专业艺术家创作的形式不仅不方便,而且成本较高。因此,通过计算机技术根据人脸照片自动生成对应的漫画形象受到了人们的关 ...
【技术保护点】
1.一种可交互任意形变风格人脸漫画自动生成方法,包括如下步骤:/n步骤(1)选取人脸照片漫画图像数据集,并划分训练集和测试集;/n步骤(2)将人脸照片和漫画图像分别输入到照片编码器和漫画编码器中,分别将照片和漫画图像分解为内容编码和风格编码;/n步骤(3)照片/漫画重建:将照片/漫画的内容编码和风格编码分别输入到照片/漫画生成器中,重建出照片/漫画;/n步骤(4)色彩风格转换:将照片的内容编码与随机采样的风格编码输入到漫画生成器中,将照片转换为漫画的色彩风格;将漫画的内容编码与随机采样的风格编码输入到照片生成器中,将漫画转换为照片的色彩风格;/n步骤(5)生成关键点偏移量: ...
【技术特征摘要】
1.一种可交互任意形变风格人脸漫画自动生成方法,包括如下步骤:
步骤(1)选取人脸照片漫画图像数据集,并划分训练集和测试集;
步骤(2)将人脸照片和漫画图像分别输入到照片编码器和漫画编码器中,分别将照片和漫画图像分解为内容编码和风格编码;
步骤(3)照片/漫画重建:将照片/漫画的内容编码和风格编码分别输入到照片/漫画生成器中,重建出照片/漫画;
步骤(4)色彩风格转换:将照片的内容编码与随机采样的风格编码输入到漫画生成器中,将照片转换为漫画的色彩风格;将漫画的内容编码与随机采样的风格编码输入到照片生成器中,将漫画转换为照片的色彩风格;
步骤(5)生成关键点偏移量:将照片的内容编码与随机采样的形变编码输入到照片转漫画的形变生成器中,得到照片关键点到漫画关键点的偏移量;将漫画的内容编码与随机采样的形变编码输入到漫画转照片的形变生成器中,得到漫画关键点到照片关键点的偏移量;
步骤(6)基于关键点的身份保持:将照片关键点与照片到漫画关键点的偏移量相加可得生成的漫画关键点,同理可得生成的照片关键点;将原本的照片关键点、漫画关键点和生成的照片关键点、漫画关键点输入到基于关键点的人脸身份分类器中,具有对应关系的关键点应被分类为同一身份;
步骤(7)Warping操作:根据照片关键点和照片到漫画的关键点偏移量,对转换为漫画色彩风格的照片进行warping操作,从而得到根据照片生成的漫画;根据漫画关键点和漫画到照片的关键点偏移量,对转换为照片色彩风格的漫画进行warping操作,可以得到根据漫画生成的照片;
步骤(8)基于图像的身份保持:将原本的照片、漫画和生成的照片漫画输入到基于图像人脸身份分类器中,具有对应关系的图像应被分类为同一身份;
步骤(9)基于训练数据集上采集的人脸照片和漫画图像,训练人脸漫画生成深度网络,待模型收敛后保存模型参数;
步骤(10)用训练好的深度网络在测试数据集上进行从照片到漫画的转换,通过采样不同的色彩风格编码和形变编码,生成不同色彩风格和形变的漫画;
步骤(11)用户通过...
【专利技术属性】
技术研发人员:霍静,侯昊迪,高阳,
申请(专利权)人:南京大学,江苏万维艾斯网络智能产业创新中心有限公司,
类型:发明
国别省市:江苏;32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。