一种人脸关键点检测方法及电子设备技术

技术编号:41921421 阅读:20 留言:0更新日期:2024-07-05 14:20
本申请涉及三维重建技术领域,提供的一种人脸关键点检测方法及电子设备,用于提高人脸关键点检测的准确性和效率。该方法针对预先生成的多个人脸三维模型,分别从不同视角进行虚拟人脸图像的采集,并将各人脸三维模型中自定义的3D网格点向2D虚拟人脸图像中进行透视投影,自动获得虚拟人脸图像中的标注关键点。由于不同人脸三维模型的几何拓扑结构是一致的,因此能够保证每次透视投影的人脸关键点的数量和语义是相同的,且该标注方式减少了人脸关键点数量的限制,提高了关键点标注的准确性和效率,进一步地,基于各虚拟人脸图像和标注关键点生成的训练样本集进行模型训练时,能够有效提高人脸关键点的检测精度,进而提高人脸三维重建的精度。

【技术实现步骤摘要】

本申请涉及三维重建,提供一种人脸关键点检测方法及电子设备


技术介绍

1、随着元宇宙概念的提出,人们都希望拥有形象逼真的虚拟角色,而人脸作为人体最重要的部分之一,通过一个人的面部特征,可以感知这个人的性别、年龄、脸型等各种信息,且通过面部丰富的姿势、表情变化,可以感知这个人情绪的变化,因此,人们对利用计算机进行三维人脸建模的效果和质量要求也越来越严格,不再仅仅满足于动作僵硬、表情呆板的三维人脸及其动画。

2、考虑到重建成本、实时性和便携性的需求,目前大多数方法主要通过检测人脸图像中的关键点来计算驱动参数,从而完成人脸三维重建,因此,人脸关键点的检测结果直接影响了人脸三维重建的精度。

3、目前,在进行人脸关键点检测时,往往需要手动标注人脸图像中的关键点,此标注方式对于稀疏人脸关键点的检测结果较好,但利用稀疏人脸关键点难以重建出满足高精度的人脸三维模型,而稠密人脸关键点的数量较多,手动标注的误差较大,也会影响人脸三维重建的精度。

4、因此,提高稠密人脸关键点检测的准确性成为高精度人脸三维重建中亟待解决的问题。


...

【技术保护点】

1.一种人脸关键点检测方法,其特征在于,应用于人脸三维重建,所述方法包括:

2.如权利要求1所述的方法,其特征在于,采集虚拟人脸图像集后,所述方法还包括:

3.如权利要求1所述的方法,其特征在于,所述提取多张虚拟人脸图像中的虚拟关键点,包括:

4.如权利要求3所述的方法,其特征在于,所述将所述人脸特征向量输入到多层感知机中,获得所述人脸图像中的虚拟关键点,包括:

5.如权要求4所述的方法,其特征在于,所述关键点损失值的计算公式如下:

6.如权利要求1-4中任一项所述的方法,其特征在于,所述网格点是基于所述人脸三维模型中表征面部特...

【技术特征摘要】

1.一种人脸关键点检测方法,其特征在于,应用于人脸三维重建,所述方法包括:

2.如权利要求1所述的方法,其特征在于,采集虚拟人脸图像集后,所述方法还包括:

3.如权利要求1所述的方法,其特征在于,所述提取多张虚拟人脸图像中的虚拟关键点,包括:

4.如权利要求3所述的方法,其特征在于,所述将所述人脸特征向量输入到多层感知机中,获得所述人脸图像中的虚拟关键点,包括:

5.如权要求4所述的方法,其特征在于,所述关键点损失值的计算公式如下:

6.如权利要求1-4中任一项所述的方法,其特征在于,...

【专利技术属性】
技术研发人员:成九成
申请(专利权)人:聚好看科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1