【技术实现步骤摘要】
虚拟对象的处理方法、装置、设备及存储介质
本申请涉及计算机视觉
，尤其涉及一种虚拟对象的处理方法、装置、设备及存储介质。
技术介绍
随着计算机视觉技术的发展，通过虚拟对象例如数字人与用户进行交互变得越来越流行，如何生成生动自然的虚拟人物对象成为了关注的焦点。在一种技术方案中，通过对人体参考模型进行三维扫描得到扫描数据，基于扫描数据建立虚拟人物模型。然而，在这种技术方案中，一方面，仅根据扫描数据得到的虚拟人物模型无法实现模型的骨骼动画；另一方面，由于光照或阴影等原因，三维扫描结果难以反映人体参考模型的皮肤的细节信息，容易出现“恐怖谷”现象。因此，如何实现虚拟人物模型的骨骼动画以及避免出现“恐怖谷”现象成为了亟待解决的技术难题。
技术实现思路
本申请实施例提供一种虚拟对象的处理方法、装置、设备及存储介质，用于解决如何实现虚拟人物模型的骨骼动画以及避免出现“恐怖谷”现象的问题。第一方面，本申请提供一种虚拟对象的处理方法，包括：基于人体参考模型建立三维的第一人体模型；...
【技术保护点】
1.一种虚拟对象的处理方法，其特征在于，包括：/n基于人体参考模型建立三维的第一人体模型；/n将所述第一人体模型与人体骨骼模型进行绑定，生成第二人体模型；/n基于所述人体参考模型的皮肤的图像，重建所述第二人体模型的皮肤。/n
【技术特征摘要】
1.一种虚拟对象的处理方法，其特征在于，包括：
基于人体参考模型建立三维的第一人体模型；
将所述第一人体模型与人体骨骼模型进行绑定，生成第二人体模型；
基于所述人体参考模型的皮肤的图像，重建所述第二人体模型的皮肤。
2.根据权利要求1所述的方法，其特征在于，所述将所述第一人体模型与人体骨骼模型进行绑定，生成第二人体模型，包括：
建立所述第一人体模型的顶点与所述人体骨骼模型中的对应骨骼之间的关联关系；
基于所述关联关系，调整所述第一人体模型的顶点对应骨骼的骨骼权重，生成所述第二人体模型。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
将所述第二人体模型与面部变形器进行绑定，其中，所述面部变形器用于驱动所述第二人体模型的面部动作。
4.根据权利要求1所述的方法，其特征在于，所述基于所述人体参考模型的皮肤的图像，重建所述第二人体模型的皮肤，包括：
基于所述人体参考模型的皮肤的图像，确定所述人体参考模型的皮肤贴图和皮肤材质；
基于所述人体参考模型的皮肤贴图以及皮肤材质，重建所述第二人体模型的皮肤。
5.根据权利要求4所述的方法，其特征在于，所述方法还包括：
基于所述人体参考模型的服装的图像，确定所述人体参考模型的服装贴图和服装材质；
基于所述人体参考模型的服装贴图以及服装材质，重建所述第二人体模型的服装。
6.根据权利要求4所述的方法，其特征在于，所述重建所述第二人体模型的皮肤，包括：
通过三维结构重建以及次表面散射的材质运算，重建所述第二人体模型的皮肤。
7.根据权利要求1所述的方法，其特征在于，在所述生成所述第二人体模型之前，所述方法还包括：
对绑定后的所述第一人体模型的面数、材质的复杂度以及投影的计算次数中的一种或多种进行缩减。
8.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取目标用户发出的语音信息；
从所述语音信息中解析出对应的关键字和/或情绪信息；
基于所述关键字和/或所述情绪信息，结合当前交互的上下文信息，驱动所述第二人体模型对所述目标用户进行反馈操作，所述反馈操作包括语音反馈、动作反馈以及表情反馈中的一种或多种。
9.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取目标用户的图像信息；
根据所述图像信息确定所述目标用户的当前状态，所述当前状态包括：所述目标用户的动作、表情、环境中的一种或多种；
根据所述当前状态和/或所述目标用户的语音信息，驱动所述第二人体模型对所述目标用户进行反馈。
10.一种虚拟对象的处理装置，其特征在于，包括：
第一模型生成模块，用于基于人体参考模型建立三维的第一人体模型；
第二模型生成模块，用于将所述第一人体模型与人体骨骼模型进行绑定，生成第二人体模型；
皮肤重建模块，用于基于所述人体参考模型的皮肤的图像，重建所述第二人体模型的皮肤。
1...
【专利技术属性】
技术研发人员：张晓东，李士岩，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。