一种基于结构约束的人物肖像风格化方法及系统技术方案

技术编号:42468364 阅读:39 留言:0更新日期:2024-08-21 12:54
本发明专利技术属于计算机视觉与图像处理技术领域,尤其涉及一种基于结构约束的人物肖像风格化方法及系统,方法包括:基于图像中的人脸的结构特征计算仿射变换矩阵;将人物图像和风格图像输入至卷积神经网络中进行特征提取;基于卷积神经网络的特征提取结果,在风格图像中相应位置的局部邻域上进行块匹配操作并重建人物图像得到目标图;计算目标图与人物图像和风格图像的总损失函数,以最小化总损失函数为目标对卷积神经网络进行迭代优化,得到最终的目标图像,完成风格迁移过程。本发明专利技术使用了人脸的普遍结构来建立映射关系,以更好地获得局部风格的不变性,平衡生成图像的内容因素和风格因素,获得更好的整体效果。

【技术实现步骤摘要】

本专利技术属于计算机视觉与图像处理,尤其涉及一种基于结构约束的人物肖像风格化方法及系统


技术介绍

1、本部分的陈述仅仅是提供了与本专利技术相关的
技术介绍
信息,不必然构成在先技术。

2、风格迁移是一种从给定绘画作品中学习其绘画风格,并将该风格用于渲染另一幅画或照片的技术,比如,把一个人的照片变成梵高画作的风格。与风格迁移相关的研究可以追溯到图像类比,它以一对图像(未经过滤的和过滤的)作为输入来学习一个过滤器,然后将得到的过滤器应用到另一张图片,以获得相同风格的结果图像。

3、但是这种学习图像风格的方法通常并不总是实用的,因为它需要使用一对内容相同、风格不同的图像作为输入,满足这种条件的资源很难获得。近年来,深度学习的研究成果提供了更易于理解和实现的风格迁移方法。使用卷积神经网络从图像中提取内容和风格的特征表示,然后通过执行原像搜索来匹配样例图像的特征表达从而重建新图像;这种方法把风格迁移问题简化为单一神经网络上的优化问题。

4、但人物肖像的风格化问题比其它图像(如风景、花卉画)的风格化问题更复杂,因为其对保持肖像的逼真度本文档来自技高网...

【技术保护点】

1.一种基于结构约束的人物肖像风格化方法,其特征在于,包括:

2.如权利要求1所述的一种基于结构约束的人物肖像风格化方法,其特征在于,所述基于人物图像与风格图像中的人脸结构特征计算仿射变换矩阵,包括:

3.如权利要求1所述的一种基于结构约束的人物肖像风格化方法,其特征在于,所述在风格图像中相应位置的局部r-邻域上进行块匹配操作,包括:

4.如权利要求1所述的一种基于结构约束的人物肖像风格化方法,其特征在于,所述总损失函数为全局内容损失、全局风格损失和局部风格损失的加权和。

5.如权利要求1所述的一种基于结构约束的人物肖像风格化方法,其特征在...

【技术特征摘要】

1.一种基于结构约束的人物肖像风格化方法,其特征在于,包括:

2.如权利要求1所述的一种基于结构约束的人物肖像风格化方法,其特征在于,所述基于人物图像与风格图像中的人脸结构特征计算仿射变换矩阵,包括:

3.如权利要求1所述的一种基于结构约束的人物肖像风格化方法,其特征在于,所述在风格图像中相应位置的局部r-邻域上进行块匹配操作,包括:

4.如权利要求1所述的一种基于结构约束的人物肖像风格化方法,其特征在于,所述总损失函数为全局内容损失、全局风格损失和局部风格损失的加权和。

5.如权利要求1所述的一种基于结构约束的人物肖像风格化方法,其特征在于,还包括对输入卷积神经网络的图像进行预处理;

6.一种基于结构约束的人物肖像风格化系...

【专利技术属性】
技术研发人员:戚文静刘宇祺
申请(专利权)人:齐鲁师范学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1