【技术实现步骤摘要】
人脸嘴部重建方法及装置
[0001]本申请涉及计算机视觉、计算机图形学
，特别涉及一种人脸嘴部重建方法及装置。
技术介绍
[0002]人脸的重建与表情运动迁移是计算机图形学与视觉中一个非常重要的问题，嘴部的重建与运动迁移则伴随着非常大的困难，与人脸其他部分不同，嘴部会发生非常大的运动并且伴随着明显的拓扑变化，如人在张嘴的时候口腔内部会显露出来，从而导致出现很多包括牙齿在内的新表面。
[0003]然而，相关技术中，对于由表情运动，尤其是嘴部运动引起的拓扑变化的处理效果较差，无法实现嘴部动态及完整头部的高精度重建，从而导致无法实现高精度的表情运动的迁移，亟待改进。
技术实现思路
[0004]本申请提供一种人脸嘴部重建方法及装置，以解决相关技术中对于由嘴部运动引起的拓扑变化的处理效果较差，嘴部动态重建精度较低，不利于表情运动迁移的技术问题。
[0005]本申请第一方面实施例提供一种人脸嘴部重建方法，包括以下步骤：采集目标对象各个表情的多视角图像；根据所述多视角图像获取所述目标对象的2D嘴部特征...
【技术保护点】
【技术特征摘要】
1.一种人脸嘴部重建方法，其特征在于，包括以下步骤：采集目标对象各个表情的多视角图像；根据所述多视角图像获取所述目标对象的2D嘴部特征点，并基于所述2D嘴部特征点计算所述目标对象的3D嘴部特征点；以及由所述3D嘴部特征点生成嘴部特征向量，并利用所述嘴部特征向量重建最终的不透明度与表面颜色值，生成人脸嘴部重建图像。2.根据权利要求1所述的方法，其特征在于，所述由所述3D嘴部特征点生成嘴部特征向量，包括：将所述3D嘴部特征点输入至预先构建的编码嘴部特征的多层感知器MLP网络，得到所述嘴部特征向量。3.根据权利要求2所述的方法，其特征在于，所述利用所述嘴部特征向量重建最终的不透明度与表面颜色值，生成人脸嘴部重建图像，包括：将所述嘴部特征向量输入至基于神经辐射场的MLP网络，重建所述最终的不透明度与表面颜色值，并利用空间中的多个点的最终的不透明度与对应任一视角下的表面颜色值进行渲染，得到所述人脸嘴部重建图像。4.根据权利要求3所述的方法，其特征在于，还包括：将其他对象的嘴部特征向量输入至所述基于神经辐射场的MLP网络，重建新的最终的不透明度与表面颜色值，并利用空间中的多个点的新的最终的不透明度与对应任一视角下的表面颜色值进行渲染，得到所述其他对象的人脸嘴部重建图像，生成嘴部表情运动的迁移结果。5.根据权利要求3所述的方法，其特征在于，在将所述嘴部特征向量输入至所述基于神经辐射场的MLP网络之前，还包括：基于加入预设隐编码的预设神经辐射场，使用多层感知器得到所述基于...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。