【技术实现步骤摘要】
图像融合方法和装置
本申请实施例涉及计算机
，具体涉及图像融合方法和装置。
技术介绍
随着科学技术的发展，人工智能技术在各个领域得到了广泛的应用。人工智能技术应用于图像处理技术中，得到了较好的处理的效果。为了满足用户对图像的各种需求，图像处理技术中包括图像风格迁移技术。图像风格迁移技术，是将其中一幅图像中的对象作为内容、将另外一幅图像作为风格，将内容图像与风格图像进行融合。相关图像风格迁移技术中，通常是基于风格图像中的整体布局，将内容图像中的对象迁移至风格图像中。
技术实现思路
本申请实施例提出了图像融合方法和装置。第一方面，本申请实施例提供了一种图像融合方法，包括：获取待融合的内容图像和风格图像；对内容图像和风格图像分别进行特征提取，得到基于内容图像的特征图像和风格图像的特征图像的特征图像集合；将特征图像集合中的特征图像和预先生成的约束图像输入至预先训练的图像融合网络，得到融合后的图像，其中，约束图像用于约束内容图像所呈现的对象与风格图像所呈现的风格之间的融合方式。...
【技术保护点】
1.一种图像融合方法，包括：/n获取待融合的内容图像和风格图像；/n对所述内容图像和所述风格图像分别进行特征提取，得到基于所述内容图像的特征图像和所述风格图像的特征图像的特征图像集合；/n将所述特征图像集合中的特征图像和预先生成的约束图像输入至预先训练的图像融合网络，得到融合后的图像，其中，所述约束图像用于约束内容图像所呈现的对象与风格图像所呈现的风格之间的融合方式。/n
【技术特征摘要】
1.一种图像融合方法，包括：
获取待融合的内容图像和风格图像；
对所述内容图像和所述风格图像分别进行特征提取，得到基于所述内容图像的特征图像和所述风格图像的特征图像的特征图像集合；
将所述特征图像集合中的特征图像和预先生成的约束图像输入至预先训练的图像融合网络，得到融合后的图像，其中，所述约束图像用于约束内容图像所呈现的对象与风格图像所呈现的风格之间的融合方式。
2.根据权利要求1所述的方法，其中，所述对所述内容图像和所述风格图像分别进行特征提取，得到基于所述内容图像的特征图像和所述风格图像的特征图像的特征图像集合，包括：
将所述内容图像和所述风格图像输入至预先训练的特征提取网络，得到所述内容图像的特征图像和所述风格图像的特征图像。
3.根据权利要求1所述的方法，其中，所述约束图像通过如下步骤生成：
获取所述风格图像中的第一位置区域，所述第一位置区域用于指定所述内容图像呈现的对象在风格图像中位置；
对所述风格图像进行视觉显著性检测，得到基于视觉显著性检测结果的第二位置区域；
基于所述第一位置区域和所述第二位置区域，生成约束图像。
4.根据权利要求1所述的方法，其中，所述图像融合网络通过如下步骤训练得到：
获取训练样本集，所述训练样本集中的训练样本包括样本风格图、样本内容图和样本约束图；
对于所述训练样本集合中的训练样本，执行如下训练步骤：
对样本风格图和样本内容图进行特征提取，得到样本风格特征图、样本内容特征图；
将样本风格特征图、样本内容特征图和样本约束图输入至待训练的神经网络，得到融合图；
基于预设损失函数，确定预设损失函数的损失值是否达到预设目标值，其中，预设损失函数用于指示所得到的融合图集合中的融合图呈现的风格与对应的样本风格图之间的误差和融合图呈现的对象与对应的样本内容图呈现的对象之间的误差；
响应于确定预设损失函数的损失值达到预设目标值，将待训练的神经网络确定为训练完成的图像融合网络；
响应于确定预设损失函数的损失值未达到所述预设目标值，调整待训练的神经网络的参数，继续执行所述训练步骤。
5.根据权利要求4所述的方法，其中，所述预设损失函数包括第一损失函数和第二损失函数的加权和；其中，所述第一损失函数用于指示融合图与样本内容图之间的误差；所述第二损失函数用于指示融合图与样本风格图之间的误差。
6.一种图像融合装置，包括：
获取单元，被配置成获取待融合的内容图像和风格图像；
提取单元，被配置成对所述内容图像和所述风格图像分别进行特征提取...
【专利技术属性】
技术研发人员：刘帝麟，叶韵，
申请(专利权)人：北京京东尚科信息技术有限公司，北京京东世纪贸易有限公司，
类型：发明
国别省市：北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。