虚拟形象生成方法、装置、电子设备及存储介质制造方法及图纸

本公开提供了一种虚拟形象生成方法、装置、电子设备及存储介质，涉及图像处理技术领域，尤其涉及虚拟/增强现实技术领域。具体实现方案为：基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。维虚拟形象。维虚拟形象。

【技术实现步骤摘要】
虚拟形象生成方法、装置、电子设备及存储介质


[0001]本公开涉及图像处理
，尤其涉及虚拟/增强现实领域的虚拟形象生成方法、装置、电子设备及存储介质。

技术介绍

[0002]随着人工智能技术和5G的发展，越来越多的虚拟人物出现在短视频、直播、虚拟助手、虚拟客服等场景。其中用户对于个性化、人格化的虚拟人物有了进一步的需求，用户希望形象生动可人，活泼灵动。随着需求的增长，市面传统的虚拟形象方案，不能很好的满足市场的需求。

技术实现思路

[0003]本公开提供了一种虚拟形象生成方法、装置、电子设备以及存储介质。
[0004]根据本公开的第一方面，提供了一种虚拟形象生成方法，包括：
[0005]基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；
[0006]获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；
[0007]基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。
[0008]根据本公开的第二方面，提供了一种虚拟形象生成装置，包括：
[0009]确定单元，用于基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；
[0010]获取单元，用于获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；
[0011]生成单元，用于基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。
[0012]本公开第三方面提供一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述所述的信息处理方法。
[0013]本公开第四方面提供一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行上述所述的信息处理方法。
[0014]本公开第五方面提供一种计算机程序产品，包括计算机程序/指令，所述计算机程序/指令在被处理器执行时实现上述所述的信息处理方法。
[0015]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0016]附图用于更好地理解本方案，不构成对本公开的限定。其中：
[0017]图1示出了本公开实施例提供的虚拟形象生成方法的一种可选流程示意图；
[0018]图2示出了本公开实施例提供的虚拟形象生成方法的另一种可选流程示意图；
[0019]图3示出了本公开实施例提供的虚拟形象生成方法的又一种可选流程示意图；
[0020]图4示出了本公开实施例提供的确定待生成图像的三维发型模型的可选示意图；
[0021]图5示出了本公开实施例提供的虚拟形象生成方法的还一种可选流程示意图；
[0022]图6示出了本公开实施例提供的虚拟形象生成装置的一种可选结构示意图；
[0023]图7示出了可以用来实施本公开的实施例的示例电子设备的示意性框图。
具体实施方式
[0024]以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0025]图1示出了本公开实施例提供的虚拟形象生成方法的一种可选流程示意图，将根据各个步骤进行说明。
[0026]步骤S101，基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型。
[0027]在一些实施例中，虚拟形象生成装置(以下简称装置)基于待生成图像中包括的头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型。
[0028]具体实施时，所述装置可以预先基于不同的头部的生物学信息(以及所述头部的生物学信息所包括的不同类型的参数的组合)，确定对应的三维虚拟形象的头部的生物学类型；和/或，所述装置可以预先基于不同的配饰信息(以及所述配饰信息所包括的不同类型的参数的组合)，确定对应的三维虚形象的配饰类型。
[0029]例如，所述装置可以预先基于不同的头部的生物学信息所包括的不同类型参数进行组合，确认N种头部的生物学类型；基于所述待生成图像中头部的生物学信息，从所述N种头部的生物学类型中，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型。
[0030]步骤S102，获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型。
[0031]在一些实施例中，所述装置可以预先基于不同的所述头部的生物学类型，生成对应的所述三维头部模型；以及，基于不同的所述配饰类型，生成对应的所述三维配饰模型。所述装置还可以建立所述头部的生物学类型与三维头部模型之间的对应关系；以及，建立所述配饰类型与三维配饰模型之间的对应关系。
[0032]在一些实施例中，所述装置基于所述头部的生物学类型与三维头部模型之间的对应关系，和所述待生成图像中的所述头部的生物学类型，获取与所述头部的生物学类型对应的第一三维模型；以及，基于所述配饰类型与三维配饰模型之间的对应关系，和所述待生成图像中的所述配饰类型，获取与所述配饰类型对应的所述第二三维模型。
[0033]如此，通过所述头部的生物学类型与三维头部模型之间的对应关系；以及，所述配饰类型与三维配饰模型之间的对应关系，可以基于所述待生成的图像快速匹配到对应的三维头部模型和三维配饰模型。
[0034]步骤S103，基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。
[0035]在一些实施例中，所述装置获取所述第一三维模型和所述第二三维模型之后，可以结合基于所述待生成图像对应生成的三维五官模型，和三维身体模型，生成所述待生成图像对应的三维虚拟形象。
[0036]其中，所述三维虚拟形象可以应用于短视频、直播、车载、游戏、虚拟客服和虚拟助手等场景。
[0037]如此，通过本申请实施例提供的虚拟形象生成方法，基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。无需生成默认的头部的生物学模型和配饰模型，由客户后期手动选择适合的头部的生物学模型和配饰模型；可以直接基于用户提供的待生成图像中包括的头部的生物学信息和配饰信息，生本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚拟形象生成方法，包括：基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。2.根据权利要求1所述的方法，其中，所述获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型之前，所述方法还包括：建立所述头部的生物学类型与三维头部模型之间的对应关系；建立所述配饰类型与三维配饰模型之间的对应关系。3.根据权利要求2所述的方法，其中，所述获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型，包括：基于所述头部的生物学类型与三维头部模型之间的对应关系，和所述待生成图像中的所述头部的生物学类型，获取与所述头部的生物学类型对应的第一三维模型；以及，基于所述配饰类型与三维配饰模型之间的对应关系，和所述待生成图像中的所述配饰类型，获取与所述配饰类型对应的所述第二三维模型。4.根据权利要求1所述的方法，其中，所述获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型之前，所述方法还包括：基于不同的所述头部的生物学类型，生成对应的所述三维头部模型；以及，基于不同的所述配饰类型，生成对应的所述三维配饰模型。5.根据权利要求1所述的方法，其中，所述头部的生物学信息包括：头发的信息和/或脸型的信息；其中，所述头发的信息包括以下至少之一：所述头发的长度、所述头发的状态、所述头发的弯曲度以及待生成图像中人像的前额是否有头发；所述脸型的信息包括以下至少之一：圆形脸、杏仁形脸、卵圆形脸、长圆形脸、方形脸、长方形脸、菱形脸和三角形脸。6.根据权利要求1所述的方法，其中，所述配饰信息包括：眼镜的信息和/或饰品的信息；所述眼镜的信息包括以下至少之一：所述眼镜的材质、所述眼镜的形状、所述眼镜的镜片类型、所述眼镜的框线类型和所述眼镜的颜色；所述饰品的信息包括以下至少之一：所述饰品的材质、所述饰品的形状、所述饰品的长度和所述饰品的颜色。7.根据权利要求5所述的方法...

【专利技术属性】
技术研发人员：丁春晓，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：