一种融合2D和3D人脸的智能瞄准方法技术

本发明专利技术属于计算机视觉、图像识别技术领域提出一种融合2D和3D人脸的智能瞄准方法。包括通过智能瞄准系统同步采集左、右RGB图像；以左RGB图像为基础，通过左、右RGB图像计算得到点云数据；对左RGB图像，根据retinaface 2D检测方法检测人脸，5个人脸关键点；将5个人脸关键点映射到对应的5个XYZ关键点的点云上，对XYZ点云数据集检测到的三维人脸数据点云进行标准化；根据标准化后的三维人脸数据点云，将其正交投影至指定平面，进行网格拟合，网格拟合后将三维人脸数据点云转变为二维人脸深度图；将二维人脸深度图采用人脸识别方法进行识别，得到人脸识别结果。该方法适合移植到智能瞄准系统的嵌入式平台，具有快速安全、高准确率进行3D人脸识别的特点。行3D人脸识别的特点。行3D人脸识别的特点。

【技术实现步骤摘要】
一种融合2D和3D人脸的智能瞄准方法


[0001]本专利技术属于计算机视觉、图像识别
，特别涉及一种融合2D和3D人脸的智能瞄准方法。

技术介绍

[0002]人脸识别作为一种有效的非侵入性的生物识别技术，相对于其他生物识别技术，如虹膜识别、指纹和掌纹识别等，具有非接触式、交互性强、易于采集等特点，因此人脸识别技术在安防、医疗、金融和教育等各个领域已经有了较为广泛的应用。而在战场上，人脸识别技术同样有着不容小觑的应用潜力。以人脸识别技术为依托建立的敌我身份认知系统，能极大提升战场辨别和侦察能力，以便于精准锁定目标。另外，人脸识别技术还在部队精细化管理中发挥重要作用。美军自2008年就开始生物探测身份识别技术研究，欧盟也相继投入资源用于开发先进的战场生物信息身份识别方案。目前已经出现利用人脸识别开展营区出入管控和枪械管理的解决方案，即便是出现枪械失窃，也能快速进行事后追查。人脸识别技术势必成为未来智慧军营和军事物联网的重要组成部分。
[0003]2D与3D人脸识别同属计算机视觉领域。由于2D图像是三维物体在平面上的投影，对于战场上的目本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种融合2D和3D人脸的智能瞄准方法，其特征是：包括由左、右平行放置的两个RGB摄像头、一个IR摄像头和图像处理模块组成的智能瞄准系统；所述左、右两个RGB摄像头和IR摄像头均为长焦摄像头；还包括以下步骤：S100：通过智能瞄准系统同步采集左、右RGB图像；S200：以左RGB图像为基础，通过左、右RGB图像计算得到点云数据；S300：对左RGB图像，根据retinaface 2D检测方法检测人脸，框出人脸边界框以及鼻尖、左右眼、左右嘴角这5个人脸关键点；S400：将所得到的5个人脸关键点映射到对应的5个XYZ关键点的点云上，对XYZ点云数据集检测到的三维人脸数据点云进行标准化；S500：根据标准化后的三维人脸数据点云，将其正交投影至指定平面，进行网格拟合，网格拟合后将三维人脸数据点云转变为二维人脸深度图；S600：将所述二维人脸深度图采用人脸识别方法进行识别，得到人脸识别结果。2.如权利要求1所述的一种融合2D和3D人脸的智能瞄准方法，其特征在于，步骤S200中以左RGB图像为基础，通过左、右RGB图像计算得到点云数据具体方法为：(1)通过相机标定，分别得到左、右RGB的内参矩阵K
L
、K
R
，及两个摄像头的外参R、T，其中K
L
、K
R
分别为3x3矩阵，R为3x3旋转矩阵，T为3x1平移向量；(2)根据相机标定的内、外参对两个相机进行极线校正，校正后两个相机的光轴平行，两张图像位于同一平面且互相平行，即图像的每行像素之间共线；(3)通过立体匹配，将校正后的图像，进行像素点的匹配，得到视差图；(4)通过视差图计算每个像素对应的深度值，获得点云数据。3.如权利要求1所述的一种融合2D和3D人脸的智能瞄准方法，其特征在于，步骤S300...

【专利技术属性】
技术研发人员：童飞飞，
申请(专利权)人：河南中光学集团有限公司，
类型：发明
国别省市：