一种图像处理方法、装置、设备、介质及程序产品制造方法及图纸

本申请实施例公开了一种图像处理方法、装置、设备、介质及程序产品，其中的方法包括：获取包含目标对象的初始图像，并对初始图像中的目标对象进行姿态扭转处理，得到姿态扭转图像；对姿态扭转图像和初始图像进行图像融合，得到融合图像；从融合图像中截取出包含目标对象的指定部位的部位图像，并对部位图像进行图像超分处理，得到超分后的部位图像；融合超分后的部位图像和融合图像，得到目标图像。采用本申请实施例能够提高姿态迁移后的目标对象的质量。的质量。的质量。

【技术实现步骤摘要】
一种图像处理方法、装置、设备、介质及程序产品


[0001]本申请涉及计算机
，具体涉及图像处理领域，尤其涉及一种图像处理方法、一种图像处理装置、一种图像处理设备、一种计算机可读存储介质以及一种计算机程序产品。

技术介绍

[0002]随着科学技术的飞速发展，人体姿态迁移技术受到大众广泛关注；人体姿态迁移可以简单理解为：将图像所包含的目标对象的姿态转换成目标姿态的过程。因此，如何对目标对象的姿态进行姿态迁移，以提高姿态迁移后的目标对象的质量，成为研究的热点话题。

技术实现思路

[0003]本申请实施例提供一种图像处理方法、装置、设备、介质及程序产品，能够提高姿态迁移后的目标对象的质量。
[0004]一方面，本申请实施例提供一种图像处理方法，该方法包括：
[0005]获取包含目标对象的初始图像，并对初始图像中的目标对象进行姿态扭转处理，得到姿态扭转图像；
[0006]对姿态扭转图像和初始图像进行图像融合，得到融合图像；融合图像中的目标对象的姿态，与姿态扭转图像中的目标对象的姿态相同；
[0007]从融合图像中截取出包含目标对象的指定部位的部位图像，并对部位图像进行图像超分处理，得到超分后的部位图像；
[0008]融合超分后的部位图像和融合图像，得到目标图像。
[0009]另一方面，本申请实施例提供一种图像处理装置，该装置包括：
[0010]获取单元，用于获取包含目标对象的初始图像，并对初始图像中的目标对象进行姿态扭转处理，得到姿态扭转图像；/>[0011]处理单元，用于对姿态扭转图像和初始图像进行图像融合，得到融合图像；融合图像中的目标对象的姿态，与姿态扭转图像中的目标对象的姿态相同；
[0012]获取单元，用于从融合图像中截取出包含目标对象的指定部位的部位图像，并对部位图像进行图像超分处理，得到超分后的部位图像；
[0013]处理单元，用于融合超分后的部位图像和融合图像，得到目标图像。
[0014]在一种实现方式中，初始图像中的目标对象呈现初始姿态，处理单元，用于对初始图像中的目标对象进行姿态扭转处理，得到姿态扭转图像时，具体用于：
[0015]获取素材图像，素材图像包括素材对象且素材对象呈现目标姿态；
[0016]对初始图像中目标对象进行建模，得到第一模型；对素材图像中素材对象进行建模，得到第二模型；对任一对象进行建模得到的模型包括：构成任一对象所呈现的姿态的多个网格，每个网格关联有任一对象的纹理信息；
[0017]基于第一模型与第二模型之间的网格对应关系，将第一模型中的各个网格所关联
的纹理信息，映射至第二模型中的相应网格中；
[0018]采用映射后的第二模型，生成姿态扭转图像。
[0019]在一种实现方式中，处理单元用于获取素材图像时，具体用于：
[0020]获取素材视频，素材视频包括N帧图像帧，N为大于零的整数；
[0021]遍历素材视频中的各个图像帧，并将当前被遍历的图像帧确定为素材图像。
[0022]在一种实现方式中，处理单元，还用于：
[0023]当素材视频中的各个图像帧均被遍历后，得到N个目标图像，一个目标图像对应素材视频中的一个图像帧；
[0024]按照各个目标图像对应的图像帧在素材视频中的播放顺序，对N个目标图像进行按序排列，得到目标视频。
[0025]在一种实现方式中，处理单元用于对姿态扭转图像和初始图像进行图像融合，得到融合图像时，具体用于：
[0026]对初始图像中的目标对象进行特征提取处理，得到第一特征图；以及，对姿态扭转图像进行特征提取处理，得到第二特征图；其中，任一特征图中包括多个特征；
[0027]按照第一特征图和第二特征图之间的特征对应关系，采用第一特征图中的各个特征，替换第二特征图中的对应特征；
[0028]基于特征替换后的第二特征图进行图像重建，得到融合图像。
[0029]在一种实现方式中，处理单元用于对初始图像中的目标对象进行特征提取处理，得到第一特征图时，具体用于：
[0030]对初始图像进行前景分割处理，得到包含目标对象的前景图像；
[0031]对前景图像进行特征提取处理，得到第一特征图。
[0032]在一种实现方式中，处理单元用于基于特征替换后的第二特征图进行图像重建，得到融合图像时，具体用于：
[0033]基于特征替换后的第二特征图，重建出包含呈现目标姿态的目标对象的色彩模式图像，以及包含呈现目标姿态的目标对象的掩膜图像；
[0034]根据色彩模式图像和掩膜图像，生成融合图像。
[0035]在一种实现方式中，处理单元用于根据色彩模式图像和掩膜图像，生成融合图像时，具体用于：
[0036]获取目标背景图像，目标背景图像包括：初始图像的背景图像，或者素材图像的背景图像，或者自定义背景图像；
[0037]对色彩模式图像和掩膜图像进行图像融合，得到中间图像；
[0038]将目标背景图像叠加至中间图像中，得到融合图像。
[0039]在一种实现方式中，当目标背景图像是自定义背景图像时，处理单元，还用于：
[0040]显示数据推荐界面，数据推荐界面中包括一个或多个多媒体数据；
[0041]当数据推荐界面中的任一多媒体数据被选中时，从被选中的多媒体数据中分割出目标背景图像；
[0042]其中，被选中的多媒体数据为图像或者视频流，当被选中的多媒体数据为视频流时，目标背景图像是从被选中的多媒体数据中的任一图像帧中分割出的。
[0043]在一种实现方式中，处理单元用于对部位图像进行图像超分处理，得到超分后的
部位图像时，具体用于：
[0044]从初始图像中截取出包含目标对象的指定部位的图像，作为参考图像；其中，参考图像的清晰度高于部位图像的清晰度；
[0045]对参考图像进行特征提取得到参考图像特征，以及对部位图像进行特征提取得到部位图像特征；
[0046]融合参考图像特征和部位图像特征，并基于融合后的特征进行图像重建，得到超分后的部位图像。
[0047]另一方面，本申请实施例提供了一种图像处理设备，该图像处理设备包括：
[0048]处理器，用于加载并执行计算机程序；
[0049]计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，该计算机程序被处理器执行时，实现上述图像处理方法。
[0050]另一方面，本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，该计算机程序适于由处理器加载并执行上述图像处理方法。
[0051]另一方面，本申请实施例提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。图像处理设备的处理器从计算机可读存储介质读取该计算机指令，计算机指令被处理器执行时实现上述的图像处理方法。
[0本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：获取包含目标对象的初始图像，并对所述初始图像中的目标对象进行姿态扭转处理，得到姿态扭转图像；对所述姿态扭转图像和所述初始图像进行图像融合，得到融合图像；所述融合图像中的所述目标对象的姿态，与所述姿态扭转图像中的所述目标对象的姿态相同；从所述融合图像中截取出包含所述目标对象的指定部位的部位图像，并对所述部位图像进行图像超分处理，得到超分后的部位图像；融合所述超分后的部位图像和所述融合图像，得到目标图像。2.如权利要求1所述的方法，其特征在于，所述初始图像中的目标对象呈现初始姿态，所述对所述初始图像中的目标对象进行姿态扭转处理，得到姿态扭转图像，包括：获取素材图像，所述素材图像包括素材对象且所述素材对象呈现目标姿态；对所述初始图像中目标对象进行建模，得到第一模型；对所述素材图像中素材对象进行建模，得到第二模型；对任一对象进行建模得到的模型包括：构成所述任一对象所呈现的姿态的多个网格，每个网格关联有所述任一对象的纹理信息；基于所述第一模型与所述第二模型之间的网格对应关系，将所述第一模型中的各个网格所关联的纹理信息，映射至所述第二模型中的相应网格中；采用映射后的第二模型，生成姿态扭转图像。3.如权利要求2所述的方法，其特征在于，所述获取素材图像，包括：获取素材视频，所述素材视频包括N帧图像帧，N为大于零的整数；遍历所述素材视频中的各个图像帧，并将当前被遍历的图像帧确定为素材图像。4.如权利要求3所述的方法，其特征在于，所述方法还包括：当所述素材视频中的各个图像帧均被遍历后，得到N个目标图像，一个目标图像对应所述素材视频中的一个图像帧；按照各个目标图像对应的图像帧在所述素材视频中的播放顺序，对所述N个目标图像进行按序排列，得到目标视频。5.如权利要求2所述的方法，其特征在于，所述对所述姿态扭转图像和所述初始图像进行图像融合，得到融合图像，包括：对所述初始图像中的目标对象进行特征提取处理，得到第一特征图；以及，对所述姿态扭转图像进行特征提取处理，得到第二特征图；其中，任一特征图中包括多个特征；按照所述第一特征图和所述第二特征图之间的特征对应关系，采用所述第一特征图中的各个特征，替换所述第二特征图中的对应特征；基于特征替换后的第二特征图进行图像重建，得到融合图像。6.如权利要求5所述的方法，其特征在于，所述对所述初始图像中的目标对象进行特征提取处理，得到第一特征图，包括：对所述初始图像进行前景分割处理，得到包含所述目标对象的前景图像；对所述前景图像进行特征提取处理，得到第一特征图。7.如权利要求5所述的方法，其特征在于，所述基于特征替换后的第二特征图进行图像重建，得到融合图像，包括：基于特征替换后的第二特征图，重建出包含呈现目标姿态的目标对象的色彩模式图
像，以及包含呈现目标...

【专利技术属性】
技术研发人员：丁杨，周潇，程培，俞刚，傅斌，严宇轩，徐超，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：