一种人像背景分离方法、装置、服务器及存储介质制造方法及图纸

本发明专利技术提供一种人像背景分离方法、装置、服务器及存储介质，通过确定待进行人像背景分离的图像；提取表征图像的高层语义特征的第一特征图像并增加第一特征图像的感受野生成第二特征图像；根据第二特征图像和表征图像的低层语义特征的第三特征图像生成图像的至少一张掩码图，图像的至少一张掩码图包括与人物相关的第一掩码图、与配饰相关的第二掩码图以及与背景相关的第三掩码图；基于至少一张掩码图对图像进行处理生成目标图像。基于本发明专利技术，可以实现人像背景分离的目的。

An image background separation method, device, server and storage medium

【技术实现步骤摘要】
一种人像背景分离方法、装置、服务器及存储介质
本专利技术涉及图像处理
，更具体地说，涉及一种人像背景分离方法、装置、服务器及存储介质。
技术介绍
抠图技术(ImageMatting)就是将图像中的前景从背景中分离出来的技术，该技术能够将人们需要的区域提取出来，便于对图像关键信息进行后续操作。人像背景分离技术是指通过机器自动分离出图像中人物和背景的一种技术，其是抠图
的重要研究方向。
技术实现思路
有鉴于此，本专利技术提出一种人像背景分离方法、装置、服务器及存储介质，以实现人像背景分离的目的。为了实现上述目的，现提出的方案如下：本专利技术第一方面公开一种人像背景分离方法，包括：确定待进行人像背景分离的图像；提取表征所述图像的高层语义特征的第一特征图像并增加所述第一特征图像的感受野生成第二特征图像；根据所述第二特征图像和表征所述图像的低层语义特征的第三特征图像生成所述图像的至少一张掩码图，所述图像的至少一张掩码图包括与人物相关的第一掩码图、与配饰相关的第二掩码图以及与背景相关的第三掩码图；基于所述至少一张掩码图对所述图像进行处理生成目标图像。可选的，所述提取表征所述图像的高层语义特征的第一特征图像并增加所述第一特征图像的感受野生成第二特征图像，包括：基于预训练的编码器提取表征所述图像的高层语义特征的第一特征图像并增加所述第一特征图像的感受野生成第二特征图像。可选的，所述根据所述第二特征图像和表征所述图像的低层语义特征的第三特征图像生成所述图像的至少一张掩码图，包括：将所述第二特征图像和所述编码器生成的表征所述图像的低层语义特征的第三特征图像输入预训练的解码器得到所述图像的至少一张掩码图。可选的，还包括：将所述第四特征图像的通道数量压缩至预设数量，所述预设数量与所述至少一张掩码图中掩码图的张数相同。可选的，所述基于所述至少一张掩码图对所述图像进行处理生成目标图像，包括：结合所述至少一张掩码图生成目标图层；将所述目标图层覆盖所述图像生成目标图像。可选的，所述结合所述至少一张掩码图生成目标图层，包括：确定所述至少一张掩码图中相对位置相同的像素中目标像素所属的目标掩码图，所述目标像素为所述至少一张掩码图中相对位置相同的像素中像素值最大的像素；根据所述目标掩码图携带的标签信息生成所述目标像素的目标像素值，所述第一掩码图携带第一标签信息，所述第二掩码图携带第二标签信息，所述第三掩码图携带第三标签信息；利用生成的各个所述目标像素的目标像素值生成目标图层。可选的，所述利用生成的各个所述目标像素的目标像素值生成目标图层，包括：利用生成的各个所述目标像素的目标像素值生成第一目标图层；将所述第一目标图层中与所述第一标签信息相关的目标像素的像素值修改为第一预设像素值、将所述第一图层中与所述第二标签信息相关的目标像素的像素值修改为第二预设像素值，和/或，将所述第一目标图层中与所述第三标签信息相关的目标像素的像素值修改为第三预设像素值，生成第二目标图层；对进行开运算后的所述第二目标图层进行闭运算生成第三目标图层；对所述第三目标图层中各个目标像素的像素值进行处理生成目标图层。可选的，所述编码器和所述解码器构成人像背景分离模型，所述人像背景分离模型的生成过程包括：获取图像样本的至少一张掩码图样本，所述至少一张掩码图样本包括携带第一标签信息的第一掩码图样本，携带第二标签信息的第二掩码图样本和携带第三标签信息的第三掩码图样本；将所述图像样本输入至待训练人像背景分离模型得到所述待训练人像背景分离模型对所述图像样本的至少一张掩码图的预测结果；基于携带的标签信息相同的掩码图样本和所述预测结果中的掩码图生成损失函数；根据所述损失函数对所述待训练人像背景分离模型进行训练生成人像背景分离模型。本专利技术第二方面公开一种人像背景分离装置，包括：第一确定单元，用于确定待进行人像背景分离的图像；第二特征图像生成单元，用于提取表征所述图像的高层语义特征的第一特征图像并增加所述第一特征图像的感受野生成第二特征图像；掩码图生成单元，用于根据所述第二特征图像和表征所述图像的低层语义特征的第三特征图像生成所述图像的至少一张掩码图，所述图像的至少一张掩码图包括与人物相关的第一掩码图、与配饰相关的第二掩码图以及与背景相关的第三掩码图；目标图像生成单元，用于基于所述至少一张掩码图对所述图像进行处理生成目标图像。本专利技术第三方面公开一种服务器，包括：至少一个存储器和至少一个处理器；所述存储器存储有程序，所述处理器调用所述存储器存储的程序，所述程序用于实现如上述本专利技术第一方面任意一项公开的人像背景分离方法。本专利技术第四方面公开一种计算机可读存储介质，所述存储介质中存储有计算机可执行指令，所述计算机可执行指令用于执行如上述本专利技术第一方面任意一项公开的人像背景分离方法。本专利技术提供一种人像背景分离方法、装置、服务器及存储介质，通过提取表征待进行人像背景分离的图像的高层语义特征的第一特征图像，并增加第一特征图像的感受野生成第二图像，根据第二特征图像和表征待进行人像背景分离的图像的低层语义特征的第三特征图像生成图像的至少一张掩码图，至少一张掩码图包括与人物相关的第一掩码图、与配饰相关的第二掩码图以及与背景相关的第三掩码图，基于至少一张掩码图对待进行人像背景分离的图像进行处理生成目标图像，进而实现人像背景分离的目的。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。图1为本专利技术实施例提供的一种人像背景分离模型的结构示意图；图2为本专利技术实施例提供的一种人像背景分离模型的生成过程的方法的流程示意图；图3为本专利技术实施例提供的一种人像背景分离方法的流程示意图；图4为本专利技术实施例提供的一种结合各个目标像素的目标像素值生成目标图层的方法的流程示意图；图5为本专利技术实施例提供的一种确定目标像素的方法一示例图；图6为本专利技术实施例提供的一种人像背景分离装置的结构示意图；图7为本专利技术实施例提供的一种服务器的硬件结构框图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。在本申请中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没本文档来自技高网...

【技术保护点】
1.一种人像背景分离方法，其特征在于，包括：/n确定待进行人像背景分离的图像；/n提取表征所述图像的高层语义特征的第一特征图像并增加所述第一特征图像的感受野生成第二特征图像；/n根据所述第二特征图像和表征所述图像的低层语义特征的第三特征图像生成所述图像的至少一张掩码图，所述图像的至少一张掩码图包括与人物相关的第一掩码图、与配饰相关的第二掩码图以及与背景相关的第三掩码图；/n基于所述至少一张掩码图对所述图像进行处理生成目标图像。/n

【技术特征摘要】
1.一种人像背景分离方法，其特征在于，包括：
确定待进行人像背景分离的图像；
提取表征所述图像的高层语义特征的第一特征图像并增加所述第一特征图像的感受野生成第二特征图像；
根据所述第二特征图像和表征所述图像的低层语义特征的第三特征图像生成所述图像的至少一张掩码图，所述图像的至少一张掩码图包括与人物相关的第一掩码图、与配饰相关的第二掩码图以及与背景相关的第三掩码图；
基于所述至少一张掩码图对所述图像进行处理生成目标图像。


2.根据权利要求1所述的方法，其特征在于，所述提取表征所述图像的高层语义特征的第一特征图像并增加所述第一特征图像的感受野生成第二特征图像，包括：
基于预训练的编码器提取表征所述图像的高层语义特征的第一特征图像并增加所述第一特征图像的感受野生成第二特征图像。


3.根据权利要求2所述的方法，其特征在于，所述根据所述第二特征图像和表征所述图像的低层语义特征的第三特征图像生成所述图像的至少一张掩码图，包括：
将所述第二特征图像和所述编码器生成的表征所述图像的低层语义特征的第三特征图像输入预训练的解码器得到所述图像的至少一张掩码图。


4.根据权利要求3所述的方法，其特征在于，还包括：
将所述第四特征图像的通道数量压缩至预设数量，所述预设数量与所述至少一张掩码图中掩码图的张数相同。


5.根据权利要求1所述的方法，其特征在于，所述基于所述至少一张掩码图对所述图像进行处理生成目标图像，包括：
结合所述至少一张掩码图生成目标图层；
将所述目标图层覆盖所述图像生成目标图像。


6.根据权利要求5所述的方法，其特征在于，所述结合所述至少一张掩码图生成目标图层，包括：
确定所述至少一张掩码图中相对位置相同的像素中目标像素所属的目标掩码图，所述目标像素为所述至少一张掩码图中相对位置相同的像素中像素值最大的像素；
根据所述目标掩码图携带的标签信息生成所述目标像素的目标像素值，所述第一掩码图携带第一标签信息，所述第二掩码图携带第二标签信息，所述第三掩码图携带第三标签信息；
利用生成的各个所述目标像素的目标像素值生成目标图层。


7.根据权利要求6所述的方法，其特征在于，所述利用生成的各个所述目标像素的目标像素值生成目标图层，...

【专利技术属性】
技术研发人员：钟艺豪，陈维江，李百川，
申请(专利权)人：江西开心玉米网络科技有限公司，
类型：发明
国别省市：江西;36