人脸关键点检测方法、装置、设备及存储介质制造方法及图纸

技术编号:26531528 阅读:30 留言:0更新日期:2020-12-01 14:12
本发明专利技术公开了一种人脸关键点检测方法、系统、设备以及存储介质,涉及计算机视觉技术领域,该方法包括:获取视频的图像帧信息,其中,视频的图像帧信息包含关键帧信息和非关键帧信息;根据关键帧信息确定人脸框位置信息;基于人脸框位置信息,通过预先训练的第一神经网络进行人脸关键点检测,得到初始关键点位置信息;基于初始关键点位置信息,通过预先训练的第二神经网络进行人脸关键点检测,得到视频的人脸关键点检测结果。本发明专利技术解决了现有技术采用单个深度卷积网络实现人脸关键点检测方案中存在的计算复杂度高、计算量大、实时处理效果差等问题,能够快速地、稳定地检测到人脸的关键点位置。

【技术实现步骤摘要】
人脸关键点检测方法、装置、设备及存储介质
本专利技术涉及计算机视觉
,尤其涉及一种人脸关键点检测方法、装置、设备及存储介质。
技术介绍
在计算机视觉领域,基于视频数据的算法开发一直以来都受到学术界和工业界的广泛关注。其中,人脸视频数据由于其在生物信息验证、监控安防、视频直播等领域拥有非常现实的应用场景而占有很重要的地位。人脸关键点的检测属于人脸图像处理当中非常重要的一步,其主要功能是准确地定位出人脸上的关键点在图片上的位置,以为后续的操作作准备,如定位眼睛、鼻子、嘴角、脸部轮廓点等人脸关键点在图片上的位置,以为后续的人脸对齐、人脸识别等操作作准备。在具体实现中,人脸关键点检测通常是位于人脸检测之后的一个环节。人脸检测器通常将检测到的人脸位置信息已及相应的人脸图片输入到关键点检测算法,得到当前人脸的关键点位置,如将以一个矩形框或者正方形框的形式给出的人脸位置信息输入到关键点检测算法中进行计算,以将计算得到的结果确定为当前人脸的关键点位置。近年来,基于深度卷积网络的人脸关键点检测算法在精度上相比传统人脸关键点算法有了很大的提高。然而,本文档来自技高网...

【技术保护点】
1.一种人脸关键点检测方法,其特征在于,包括:/n获取视频的图像帧信息,其中,所述视频的图像帧信息包含关键帧信息和非关键帧信息;/n根据所述关键帧信息确定人脸框位置信息,并基于所述人脸框位置信息,通过预先训练的第一神经网络进行人脸关键点检测,得到初始关键点位置信息;/n基于所述初始关键点位置信息,通过预先训练的第二神经网络进行人脸关键点检测,得到所述视频的人脸关键点检测结果,其中,所述人脸关键点检测结果包含所述关键帧信息对应的人脸关键点位置信息和所述非关键帧信息对应的人脸关键点位置信息。/n

【技术特征摘要】
1.一种人脸关键点检测方法,其特征在于,包括:
获取视频的图像帧信息,其中,所述视频的图像帧信息包含关键帧信息和非关键帧信息;
根据所述关键帧信息确定人脸框位置信息,并基于所述人脸框位置信息,通过预先训练的第一神经网络进行人脸关键点检测,得到初始关键点位置信息;
基于所述初始关键点位置信息,通过预先训练的第二神经网络进行人脸关键点检测,得到所述视频的人脸关键点检测结果,其中,所述人脸关键点检测结果包含所述关键帧信息对应的人脸关键点位置信息和所述非关键帧信息对应的人脸关键点位置信息。


2.根据权利要求1所述的人脸关键点检测方法,其特征在于,所述基于所述初始关键点位置信息,通过预先训练的第二神经网络进行人脸关键点检测,得到所述视频的人脸关键点检测结果,包括:
根据所述初始关键点位置信息生成图片裁剪框;
通过所述图片裁剪框对所述关键帧信息进行裁剪处理,得到关键帧人脸图片信息,并将所述关键帧人脸图片信息输入到所述第二神经网络进行人脸关键点检测,得到所述关键帧信息对应的人脸关键点位置信息。


3.根据权利要求2所述的人脸关键点检测方法,其特征在于,所述根据所述关键帧信息确定人脸框位置信息之前,还包括:
从所述视频的图像帧信息中,选取出关键帧信息和所述关键帧信息对应的非关键帧信息;
其中,所述基于所述初始关键点位置信息,通过预先训练的第二神经网络进行人脸关键点检测,得到所述视频的人脸关键点检测结果,还包括:通过所述图片裁剪框对所述关键帧信息对应的非关键帧信息裁剪处理,得到非关键帧图片信息;当所述非关键帧图片信息包含人脸图片信息时,依据所述关键帧信息对应的人脸关键点位置信息生成非关键帧人脸图片信息,并将所述非关键帧人脸图片信息输入到所述第二神经网络进行人脸关键点检测,得到所述非关键帧信息对应的人脸关键点位置信息。


4.根据权利要求3所述的人脸关键点检测方法,其特征在于,在得到非关键帧图片信息之后,还包括:
将所述非关键帧图片信息输入到人脸检测跟踪网络中,得到人脸检测跟踪网的输出信息,所述输出信息包含人脸概率信息;
基于所述人脸概率信息确定所述非关键帧图片信息是否包含人脸图片信息。


5.根据权利要求4所述的人脸关键点检测方法,其特征在于,所述输出信息还包含人脸框相对位置信息和关键点相对位置信息,所述依据所述关键帧信息对应的人脸关键点位置信息生成非关键帧人脸图片信息之前,还包括:
依据所述人脸框相对位置信息和关键点相对位置信息,确...

【专利技术属性】
技术研发人员:项伟张小伟
申请(专利权)人:广州市百果园信息技术有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1