虚拟形象处理方法及装置制造方法及图纸

本说明书实施例提供了虚拟形象处理方法及装置，其中，一种虚拟形象处理方法包括：获取用户的多视角图像，并根据所述用户选择的基础元素生成所述用户在虚拟世界的虚拟形象；基于所述多视角图像和所述虚拟形象进行图像重建，获得所述虚拟形象的虚拟形象特征；将所述虚拟形象特征输入分类模型，以执行如下处理：基于所述虚拟形象特征进行虚拟形象分类，并将分类获得的形象类别对应的虚拟形象原型作为所述用户在所述虚拟世界中数字孪生的目标虚拟形象并输出。象并输出。象并输出。

【技术实现步骤摘要】
虚拟形象处理方法及装置


[0001]本文件涉及虚拟化
，尤其涉及一种虚拟形象处理方法及装置。

技术介绍

[0002]虚拟世界提供了对真实世界的模拟，用户可以在虚拟世界中进行各种活动、交流、甚至是和真实世界一样的生活，此外，虚拟世界甚至能够提供在真实世界难以实现的场景，因此虚拟世界越来越多地应用在各种场景。在虚拟世界场景中，如何在虚拟世界中对用户的行为进行记录，也即是用户如何在虚拟世界中进行活动，如何辨别虚拟世界中的不同用户，是虚拟世界的提供者和参与虚拟世界的用户日益关注的重点。

技术实现思路

[0003]本说明书一个或多个实施例提供了一种虚拟形象处理方法。所述虚拟形象处理方法，包括：获取用户的多视角图像，并根据所述用户选择的基础元素生成所述用户在虚拟世界的虚拟形象。基于所述多视角图像和所述虚拟形象进行图像重建，获得所述虚拟形象的虚拟形象特征。将所述虚拟形象特征输入分类模型，以执行如下处理：基于所述虚拟形象特征进行虚拟形象分类，并将分类获得的形象类别对应的虚拟形象原型作为所述用户在所述虚拟世界中数字孪生的目标虚拟形象并输出。
[0004]本说明书一个或多个实施例提供了一种虚拟形象处理装置，包括：图像获取模块，被配置为获取用户的多视角图像，并根据所述用户选择的基础元素生成所述用户在虚拟世界的虚拟形象。图像重建模块，被配置为基于所述多视角图像和所述虚拟形象进行图像重建，获得所述虚拟形象的虚拟形象特征。分类模块，被配置为将所述虚拟形象特征输入分类模型，以执行如下处理：基于所述虚拟形象特征进行虚拟形象分类，并将分类获得的形象类别对应的虚拟形象原型作为所述用户在所述虚拟世界中数字孪生的目标虚拟形象并输出。
[0005]本说明书一个或多个实施例提供了一种虚拟形象处理设备，包括：处理器；以及，被配置为存储计算机可执行指令的存储器，所述计算机可执行指令在被执行时使所述处理器：获取用户的多视角图像，并根据所述用户选择的基础元素生成所述用户在虚拟世界的虚拟形象。基于所述多视角图像和所述虚拟形象进行图像重建，获得所述虚拟形象的虚拟形象特征。将所述虚拟形象特征输入分类模型，以执行如下处理：基于所述虚拟形象特征进行虚拟形象分类，并将分类获得的形象类别对应的虚拟形象原型作为所述用户在所述虚拟世界中数字孪生的目标虚拟形象并输出。
[0006]本说明书一个或多个实施例提供了一种存储介质，用于存储计算机可执行指令，所述计算机可执行指令在被处理器执行时实现以下流程：获取用户的多视角图像，并根据所述用户选择的基础元素生成所述用户在虚拟世界的虚拟形象。基于所述多视角图像和所述虚拟形象进行图像重建，获得所述虚拟形象的虚拟形象特征。将所述虚拟形象特征输入分类模型，以执行如下处理：基于所述虚拟形象特征进行虚拟形象分类，并将分类获得的形象类别对应的虚拟形象原型作为所述用户在所述虚拟世界中数字孪生的目标虚拟形象并
输出。
附图说明
[0007]为了更清楚地说明本说明书一个或多个实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本说明书中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图；
[0008]图1为本说明书一个或多个实施例提供的一种虚拟形象处理方法处理流程图；
[0009]图2为本说明书一个或多个实施例提供的一种应用于虚拟形象创建的虚拟形象处理方法处理流程图；
[0010]图3为本说明书一个或多个实施例提供的一种虚拟形象处理装置示意图；
[0011]图4为本说明书一个或多个实施例提供的一种虚拟形象处理设备的结构示意图。
具体实施方式
[0012]为了使本
的人员更好地理解本说明书一个或多个实施例中的技术方案，下面将结合本说明书一个或多个实施例中的附图，对本说明书一个或多个实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本说明书的一部分实施例，而不是全部的实施例。基于本说明书一个或多个实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本文件的保护范围。
[0013]本说明书提供的一种虚拟形象处理方法实施例：
[0014]本实施例提供的虚拟形象处理方法，通过对用户的多视角图像和选择的基础元素生成的虚拟形象进行图像重建，进一步根据图像重建后的虚拟形象特征进行目标虚拟形象的生成，以此，获得用户在虚拟世界中数字孪生的虚拟形象；具体的，本实施例提供的虚拟形象处理方法，基于用户的多视角图像和用户在虚拟世界的虚拟形象进行图像重建，获得虚拟形象的虚拟形象特征，基于虚拟形象特征进行虚拟形象分类，获得形象类别；读取形象类别对应的虚拟形象原型作为用户在虚拟世界中数字孪生的目标虚拟形象；以此，通过结合用户的多视角图像和虚拟形象进行图像重建，提升进行目标虚拟形象的生成效率。
[0015]参照图1，本实施例提供的虚拟形象处理方法，具体包括步骤S102至步骤S106。
[0016]步骤S102，获取用户的多视角图像，并根据所述用户选择的基础元素生成所述用户在虚拟世界的虚拟形象。
[0017]本实施例中，所述多视角图像，包括用户在真实世界中的针对一个目标采集的多视角的目标图像；其中，该目标可以为一个用户，也可以为用户的身体部位；例如脸部，肢体。此外，该目标还可以为环境、物品等。可选的，所述多视角图像，包括在真实世界中针对所述用户采集的至少一个视角的用户图像。例如，针对一个用户从前、后、左、右等视角进行图像采集，获得四张用户图像作为用户的多视角图像。本实施例以针对用户进行多视角图像采集以及确定用户在虚拟世界中数字孪生的目标虚拟形象为例对虚拟形象处理过程进行说明。
[0018]所述虚拟世界，是指基于去中心化协作实现并且具有开放经济系统的虚拟的拟真世界；所述虚拟世界中，通过生成非同质化标识进行去中心化的交易，且通过交易战友虚拟
资产的所有权。具体的，真实世界中的用户可通过接入设备接入虚拟世界，以在虚拟世界中进行去中心化的交易和其他行为。所述接入设备，用于接入所述虚拟世界，可以是连接虚拟世界的VR(Virtual Reality，虚拟现实)设备、AR(Augmented Reality，增强现实)设备等，比如连接虚拟世界的头戴式VR设备。
[0019]所述数字孪生，是指生成的目标虚拟形象与真实世界中的用户的相似度高于预设阈值，用户可基于虚拟世界中数字孪生的目标虚拟形象在虚拟世界中进行交易或者其他行为。其中，生成的用户在虚拟世界中数字孪生的目标虚拟形象，还可以被替换为生成用户在所述虚拟世界中的数字孪生形象。
[0020]所述虚拟形象，包括在虚拟世界中表征该用户的形象；用户可基于该虚拟形象在虚拟世界中进行交易、参与各种活动、交流甚至是和真实世界中一样的生活；用户在虚拟世界中基于该虚拟形象进行的行为，要符合虚拟世界或者真实世界中的行为规范；若用户基于该虚拟形象进行本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚拟形象处理方法，包括：获取用户的多视角图像，并根据所述用户选择的基础元素生成所述用户在虚拟世界的虚拟形象；基于所述多视角图像和所述虚拟形象进行图像重建，获得所述虚拟形象的虚拟形象特征；将所述虚拟形象特征输入分类模型，以执行如下处理：基于所述虚拟形象特征进行虚拟形象分类，并将分类获得的形象类别对应的虚拟形象原型作为所述用户在所述虚拟世界中数字孪生的目标虚拟形象并输出。2.根据权利要求1所述的虚拟形象处理方法，所述分类模型，对所述虚拟形象特征进行虚拟形象分类获得形象类别；读取所述形象类别对应的虚拟形象原型作为所述目标虚拟形象并输出；其中，各形象类别对应的虚拟形象原型，基于所述各形象类别对应的类别特征进行图像重建获得。3.根据权利要求2所述的虚拟形象处理方法，所述各形象类别和对应的类别特征，采用如下方式确定：按照标注信息对形象特征样本集进行分类处理，获得至少一个初始形象类别；计算各初始形象类别下的形象特征样本的平均特征；基于所述平均特征对所述形象特征样本集中的形象特征样本进行聚类处理，获得至少一个形象类别，并确定各形象类别的类别特征。4.根据权利要求3所述的虚拟形象处理方法，所述基于所述平均特征对所述形象特征样本集中的形象特征样本进行聚类处理，包括：计算各形象特征样本与各平均特征的特征差值；将所述各形象特征样本分类至所述特征差值满足回归条件的目标形象类别；计算所述目标形象类别下的形象特征样本的目标平均特征，基于所述目标平均特征对所述各形象特征样本进行回归处理。5.根据权利要求1所述的虚拟形象处理方法，所述基于所述多视角图像和所述虚拟形象进行图像重建，获得所述虚拟形象的虚拟形象特征，包括：将所述多视角图像和所述虚拟形象输入图像重建模型进行图像重建，输出所述虚拟形象特征；其中，所述图像重建模型，包括辐射场模型。6.根据权利要求5所述的虚拟形象处理方法，所述图像重建模型，采用如下方式训练：将多视角样本图像和虚拟形象样本输入初始图像重建模型进行图像重建，输出所述虚拟形象样本在所述虚拟世界中的样本特征；计算所述样本特征的色彩重建损失和元素重建损失，基于所述色彩重建损失和所述元素重建损失计算训练损失；基于所述训练损失对所述初始图像重建模型进行参数调整，在训练完成后获得所述图像重建模型。7.根据权利要求1所述的虚拟形象处理方法，所述基于所述多视角图像和所述虚拟形象进行图像重建，获得所述虚拟形象的虚拟形象特征步骤执行之后，且所述将所述虚拟形
象特征输入分类模型操作执行之前，还包括：基于所述虚拟形象特征进行形象渲染，并将渲染获得的虚拟形象向所述用户进行展示；根据所述用户对渲染获得的虚拟形象的调整数据，对所述虚拟形象特征进行更新；相应的，所述将所述虚拟形象输入分类模型，包括：将更新后的虚拟形象输入所述分类模型。8.根据权利要...

【专利技术属性】
技术研发人员：曹佳炯，
申请(专利权)人：支付宝杭州信息技术有限公司，
类型：发明
国别省市：