三维虚拟形象生成方法、装置及电子设备制造方法及图纸

本公开提供了一种三维虚拟形象生成方法、装置及电子设备，涉及人工智能技术领域，尤其涉及计算机视觉、增强现实、虚拟现实、深度学习等技术领域，可应用元宇宙、虚拟数字人等场景，三维虚拟形象生成方法，包括：获取目标图像；根据所述目标图像确定三维重建基底，所述目标区域为所述目标图像包括的区域；基于预先获取的标准基底的拓扑，对所述三维重建基底进行重新拓扑构造，得到所述目标区域的目标三维基底；将所述目标三维基底和所述标准基底进行融合，得到所述目标区域的三维虚拟形象。得到所述目标区域的三维虚拟形象。得到所述目标区域的三维虚拟形象。

【技术实现步骤摘要】
三维虚拟形象生成方法、装置及电子设备


[0001]本公开涉及人工智能
，尤其涉及计算机视觉、增强现实、虚拟现实、深度学习等
，可应用元宇宙、虚拟数字人等场景，具体涉及一种三维虚拟形象生成方法、装置及电子设备。

技术介绍

[0002]随着虚拟形象技术的不断发展，三维虚拟形象越来越受到用户的欢迎。当前可以根据用户的需求，生成各种各样风格的三维虚拟形象。但是在实际的使用过程中，通常是将用户的图像与各种风格进行融合，以得到三维虚拟形象。

技术实现思路

[0003]本公开提供了一种三维虚拟形象生成方法、装置及电子设备。
[0004]根据本公开的第一方面，提供了一种三维虚拟形象生成方法，包括：
[0005]获取目标图像；
[0006]根据所述目标图像确定三维重建基底，所述目标区域为所述目标图像包括的区域；
[0007]基于预先获取的标准基底的拓扑，对所述三维重建基底进行重新拓扑构造，得到所述目标区域的目标三维基底；
[0008]将所述目标三维基底和所述标准基底进行融合，得到所述目标区域的三维虚拟形象。
[0009]根据本公开的第二方面，提供了一种三维虚拟形象生成装置，包括：
[0010]第一获取模块，用于获取目标图像；
[0011]确定模块，用于根据所述目标图像确定三维重建基底，所述目标区域为所述目标图像包括的区域；
[0012]拓扑构造模块，用于基于预先获取的标准基底的拓扑，对所述三维重建基底进行重新拓扑构造，得到所述目标区域的目标三维基底；
[0013]融合模块，用于将所述目标三维基底和所述标准基底进行融合，得到所述目标区域的三维虚拟形象。
[0014]根据本公开的第三方面，提供了一种电子设备，包括：
[0015]至少一个处理器；以及
[0016]与至少一个处理器通信连接的存储器；其中，
[0017]存储器存储有可被至少一个处理器执行的指令，该指令被至少一个处理器执行，以使至少一个处理器能够执行第一方面中的任一项方法。
[0018]根据本公开的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，该计算机指令用于使计算机执行第一方面中的任一项方法。
[0019]根据本公开的第五方面，提供了一种计算机程序产品，包括计算机程序，该计算机
程序在被处理器执行时实现第一方面中的任一项方法。
[0020]本公开实施例中，可以根据目标图像确定三维重建基底，并基于预先获取的标准基底的拓扑，对三维重建基底进行重新拓扑构造，得到目标区域的目标三维基底，从而提高了目标三维基底的拓扑与标准基底的拓扑的匹配度，进而增强了对目标三维基底和标准基底进行融合得到的三维虚拟形象的显示效果。
[0021]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0022]图1是本公开实施例提供的三维虚拟形象生成方法的流程图之一；
[0023]图2是本公开实施例提供的三维虚拟形象生成方法的流程图之二；
[0024]图3是本公开实施例提供的三维虚拟形象装置的结构示意图之一；
[0025]图4是本公开实施例提供的三维虚拟形象装置的结构示意图之二；
[0026]图5是本公开实施例提供的三维虚拟形象装置包括的第一确定子模块的结构示意图；
[0027]图6是本公开实施例提供的三维虚拟形象装置包括的第三获取模块的结构示意图；
[0028]图7是本公开实施例提供的三维虚拟形象装置包括的修正子模块的结构示意图；
[0029]图8是本公开实施例提供的三维虚拟形象装置包括的融合模块的结构示意图之一；
[0030]图9是本公开实施例提供的三维虚拟形象装置包括的融合模块的结构示意图之二；
[0031]图10是本公开实施例提供的三维虚拟形象装置的结构示意图之三；
[0032]图11是用来实施本公开的实施例的示例电子设备的示意性框图。
具体实施方式
[0033]以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0034]参见图1，图1为本公开实施例提供的一种三维虚拟形象生成方法的流程图，如图1所示，三维虚拟形象生成方法，包括如下步骤：
[0035]步骤S101、获取目标图像。
[0036]其中，目标图像的获取方式在此不做限定，例如：可以接收用户通过电子设备拍摄并发送的目标图像，或者，在检测到满足预设条件时，获取目标图像，上述预设条件具体在此不做限定，例如：预设条件可以为：显示界面上包括用于输入目标图像，以生成是哪位虚拟形象的输入框。
[0037]步骤S102、根据所述目标图像确定三维重建基底，所述目标区域为所述目标图像包括的区域。
[0038]其中，目标区域的具体内容在此不做限定，例如：目标区域可以为人脸区域，也就是说：目标图像的内容可以包括人脸，而人脸所在的区域即为上述目标区域。
[0039]另外，目标区域还可以为人体的其他部位区域，例如：目标区域可以为人体的手区域或者人体的腿区域。
[0040]需要说明的是，根据目标图像确定三维重建基底的方式在此不做具体限定，作为一种可选的实施方式，识别目标图像中包括的目标区域的信息，并根据上述目标区域的信息进行三维重建，以得到三维重建基底。这样，根据识别得到的目标区域的信息进行三维重建得到的三维重建基底的准确度较高。
[0041]作为另一种可选的实施方式，获取目标图像中包括的目标区域的信息，并根据上述目标区域的信息从数据库中查找与上述目标区域的信息匹配度大于预设数值的目标信息，并根据上述目标信息进行三维重建，以得到三维重建基底。
[0042]这样，由于目标信息存储在上述数据库中，而数据库中可以预先重建三维重建基底的至少部分结构，从而无需完全重建整个三维重建基底，可以提高三维重建基底的重建速率，且降低计算资源的消耗，另外，由于目标信息与上述目标区域的信息的匹配度大于预设数值，即可以保证得到的三维重建基底与目标区域的匹配度较高，即可以保证三维重建基底的准确度较好。
[0043]上述数据库也可以被称作为数资库或者数字资料库，可以用于存储多种信息。
[0044]步骤S103、基于预先获取的标准基底的拓扑，对所述三维重建基底进行重新拓扑构造，得到所述目标区域的目标三维基底。
[0045]其中，拓扑可以理解为基底包括的点、面和链接关系等，若一种基底与另一种基底之间的拓扑不一致(即匹配度小于预设阈值)，则导致上述一种基底与另一种基底的融合效果较差。
[00本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种三维虚拟形象生成方法，包括：获取目标图像；根据所述目标图像确定三维重建基底，所述目标区域为所述目标图像包括的区域；基于预先获取的标准基底的拓扑，对所述三维重建基底进行重新拓扑构造，得到所述目标区域的目标三维基底；将所述目标三维基底和所述标准基底进行融合，得到所述目标区域的三维虚拟形象。2.根据权利要求1所述的方法，其中，所述根据所述目标图像确定三维重建基底，包括：根据所述目标图像确定预设融合变形系数；基于所述预设融合变形系数对预先获取的预设重建基底进行修正，得到所述三维重建基底；还包括：获取目标基底；基于所述目标基底与所述预设融合变形系数获取所述标准基底。3.根据权利要求2所述的方法，所述目标区域为所述目标图像的人脸区域，所述根据所述目标图像确定预设融合变形系数，包括：获取所述目标区域的二维人脸关节点；计算所述二维人脸关节点和预先从数据库中获取的三维人脸关节点之间的重投影误差；根据所述重投影误差确定所述预设融合变形系数。4.根据权利要求2所述的方法，其中，所述目标基底包括第一基础基底和M个第一特征基底，M为大于1的整数；所述基于所述目标基底与所述预设融合变形系数获取所述标准基底，包括：计算每个第一特征基底对应的第一基底向量，与所述第一基础基底对应的第一特征向量之间的第一差值向量，以得到M个第一差值向量；计算每个第一差值向量与所述预设融合变形系数之间的乘积，以得到M个第一乘积向量；计算所述M个第一乘积向量的第一和向量；计算所述第一基础基底对应的第一基底向量与所述第一和向量的第二和向量，并获取所述第二和向量；将所述第二和向量对应的基底确定为所述标准基底。5.根据权利要求2所述的方法，其中，所述预设重建基底包括第二基础基底和N个第二特征基底，N为大于1的整数；所述基于所述预设融合变形系数对预先获取的预设重建基底进行修正，得到所述三维重建基底，包括：计算每个第二特征基底对应的第二基底向量，与所述第二基础基底对应的第二特征向量之间的第二差值向量，以得到N个第二差值向量；计算每个第二差值向量与所述预设融合变形系数之间的乘积，以得到N个第二乘积向量；计算所述N个第二乘积向量的第三和向量；计算所述第二基础基底对应的第二基底向量与所述第三和向量的第四和向量，并获取
所述第四和向量；将所述第四和向量对应的基底确定为所述三维重建基底。6.根据权利要求1至5中任一项所述的方法，其中，所述将所述目标三维基底和所述标准基底进行融合，得到所述目标区域的三维虚拟形象，包括：对所述目标三维基底进行划分，得到L个第一基底区域，以及，对所述标准基底进行划分，得到L个第二基底区域，L为大于1的整数；基于预先获取的L个相似度融合系数将L个所述第一基底区域和L个所述第二基底区域进行融合，得到所述目标区域的三维虚拟形象，所述相似度融合系数、所述第一基底区域和所述第二基底区域一一对应。7.根据权利要求6所述的方法，所述基于预先获取的L个相似度融合系数将L个所述第一基底区域和L个所述第二基底区域进行融合，得到所述目标区域的三维虚拟形象，包括：基于预先获取的L个相似度融合系数确定S个第一顶点的相似度融合系数和S个第二顶点对应的相似度融合系数，S个所述第一顶点为L个所述第一基底区域对应的顶点，S个所述第二顶点为L个所述第二基底区域对应的顶点，S为大于1的整数；根据S个所述第一顶点的相似度融合系数和S个所述第二顶点对应的相似度融合系数，将L个所述第一基底区域和L个所述第二基底区域进行融合，得到所述目标区域的三维虚拟形象。8.根据权利要求6所述的方法，还包括：获取I个相似度融合系数，I个所述相似度融合系数分别与I个所述第一基底区域和I个所述第二基底区域一一对应，I个所述第一基底区域为所述目标三维基底中包括的顶点所在区域，I个所述第二基底区域为所述标准基底中包括的顶点所在区域；根据I个所述相似度融合系数计算得到H个相似度融合系数，H个所述相似度融合系数中每个相似度融合系数对应的第一基底区域，为I个所述第一基底区域中任意相邻两个第一基底区域之间的区域，H个所述相似度融合系数中每个相似度融合系数对应的第二基底区域，为I个所述第二基底区域中任意相邻两个第二基底区域之间的区域；I和H均为大于1，且小于L的整数，且L等于I和H的和。9.一种三维虚拟形象生成装置，包括：第一获取模块，用于获取目标图像；确定模块，用于根据所述目标图像确定三维重建基底，所述目标区域为所述目标图像包括的区域；拓扑构造模块，用于基于预先获取的标准基底的拓扑，对所述三维重建基底进行重新拓扑构造，得到所述目标区域的目标三维基底；融合模块，用于将所述目标三维基底和所述标准基底进行融合，得到所述目标区域的三维虚拟形象。10.根据权利要求9所述的装置，其中，所述确定模...

【专利技术属性】
技术研发人员：刘豪杰，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：