一种双目摄像头的人脸识别方法及系统技术方案

本发明专利技术公开了一种双目摄像头的人脸识别方法及系统，涉及人脸特征识别领域。本发明专利技术包括如下步骤：目摄像机的左、右摄像头同时完成人脸二维图像采集；步骤S02：利用处理器中的主动形状模型技术对二维图像进行二维特征；步骤S03：结合摄像机标定参数得出特征点的三维坐标；步骤S04：将标定的三维坐标发送至比对数据平台；步骤S05：利用数据平台神经网络进行识别；步骤S06：将识别结果反馈至处理器；步骤S07：处理器控制设备执行相关操作。本发明专利技术通过双目摄像头中左右两摄像头采集不同的人脸图像，进行二维特征点标定，利用标定的参数构造三维特征输入至神经网络进行识别，相较于现有的二维识别提高了识别的准确率，避免了使用照片进行欺骗的情况发生。

A Face Recognition Method and System with Binocular Camera

【技术实现步骤摘要】
一种双目摄像头的人脸识别方法及系统
本专利技术属于人脸特征识别领域，特别是涉及一种双目摄像头的人脸识别方法，及一种双目摄像头的人脸识别系统。
技术介绍
目前人脸识别技术在电视及各种电子显示产品中的应用相当广泛。由于其便捷而独特的生物识别性能，使得其在未来电视功能中的应用具有不可或缺的一席之地。特别如其中的电视等作为一种家用电器，其所面对的家庭成员具有一些普通人脸识别应用环境所不同的地方，即家庭成员之间极容易获得相互的个人资料，比如脸部的照片，从而可以通过有效的照片进行人脸识别的欺骗，使得人脸识别在这些产品上的应用出现缺陷。现有的人脸识别技术在电视及各种电子显示产品上的应用，容易通过照片进行欺骗，从而使得识别的功能缺乏有效性；本申请文件通过双目摄像头采集人脸图像信息，利用三维重建人脸识别算法有效解决上述问题。
技术实现思路
本专利技术的目的在于提供一种双目摄像头的人脸识别方法及系统，通过双目摄像头中左右两摄像头采集不同的人脸图像，进行二维特征点标定，利用标定的参数构造三维特征输入至神经网络进行识别，解决了现有的人脸识别采用二维识别、容易通过照片进行欺骗，识别精准度不足的问题。为解决上述技术问题，本专利技术是通过以下技术方案实现的：本专利技术为一种双目摄像头的人脸识别方法，包括双目摄像头、位于双目摄像头内部的处理器以及比对数据平台，所述双目摄像头上设置有一左摄像头和一右摄像头；所述左摄像头和右摄像头处于同一水平线上；所述人脸识别方法包括如下步骤：步骤S01：双目摄像机的左、右摄像头同时完成人脸二维图像采集；步骤S02：利用处理器中的主动形状模型技术对二维图像进行二维特征点自动定位；步骤S03：结合摄像机标定参数得出特征点的三维坐标；步骤S04：将标定的三维坐标发送至比对数据平台；步骤S05：利用数据平台神经网络进行识别；步骤S06：将识别结果反馈至处理器；步骤S07：处理器控制设备执行相关操作。优选地，所述步骤S01中，左、右摄像头采集完人脸二维图像时，需要先根据肤色信息对左、右人脸图像进行人脸特征提取，并利用极线变化对图像进行校正，将校正完成后的图片发送至步骤S02中进行特征点定位。优选地，所述步骤S02中，利用主动形状模型技术分别从左、右人脸图像上提取若干特征点，确定好的人脸区域作为初始位置，标注出每个特征点对应的坐标并将所得的特征点用线段连接起来。优选地，所述步骤S03中，每个特征点三维坐标根据三角测量原理和左右摄像头可得：其中，b为左右摄像机光心c1和c2之间的距离，f是摄像机的焦距，特征点P(X，Y，Z)对应在左右摄像机坐标系中的坐标分别为(x1,y1,z1)和(x2,y2,z2)，对应在左右平面上的像素坐标为(u1,v1)和(u2,v2)；则特征点P的空间坐标表示为：优选地，所述步骤S04中，每个标定的三维坐标发送至比对数据平台后，根据标定点的几何特征，将形成若干几何向量用于神经网络进行识别；其中，几何特征包括：直线距离特征、角度特征、人脸比例特征、周长特征、曲线特征、体积特征以及表面积特征。本专利技术为一种双目摄像头的人脸识别系统，包括双目摄像头和比对数据平台，所述双目摄像头内部设置有处理器、MCU控制器、左摄像头、右摄像头LED液晶显示屏和GSM模块；所述处理器分别与MCU控制器、左摄像头、右摄像头和GSM模块连接；所述MUC控制器与多种外设连接；所述GSM模块用于将左摄像头和右摄像头拍摄图像数据通过GSM网络发送至对比数据平台；所述比对数据平台包括广告推送模块和数据对比模块；所述广告推送模块用于将广告数据推送至双目摄像头的LED显示屏展示；所述数据对比模块用于将左摄像头和右摄像头拍摄的图像数据进行对比识别并将结果反馈至处理器优选地，所述外设包括闸机、按键、蜂鸣器、指示灯和USB接口中的一种或多种。本专利技术具有以下有益效果：本专利技术通过双目摄像头中左右两摄像头采集不同的人脸图像，进行二维特征点标定，利用标定的参数构造三维特征输入至神经网络进行识别，相较于现有的二维识别提高了识别的准确率，避免了使用照片进行欺骗的情况发生。当然，实施本专利技术的任一产品并不一定需要同时达到以上所述的所有优点。附图说明为了更清楚地说明本专利技术实施例的技术方案，下面将对实施例描述所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术的一种双目摄像头的人脸识别方法步骤图；图2为本专利技术的一种双目摄像头的人脸识别系统结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。请参阅图1所示，本专利技术为一种双目摄像头的人脸识别方法及系统，包括双目摄像头、位于双目摄像头内部的处理器以及比对数据平台，双目摄像头上设置有一左摄像头和一右摄像头；左摄像头和右摄像头处于同一水平线上；人脸识别方法包括如下步骤：步骤S01：双目摄像机的左、右摄像头同时完成人脸二维图像采集；步骤S02：利用处理器中的主动形状模型技术对二维图像进行二维特征点自动定位；步骤S03：结合摄像机标定参数得出特征点的三维坐标；步骤S04：将标定的三维坐标发送至比对数据平台；步骤S05：利用数据平台神经网络进行识别；步骤S06：将识别结果反馈至处理器；步骤S07：处理器控制设备执行相关操作。其中，步骤S01中，左、右摄像头采集完人脸二维图像时，需要先根据肤色信息对左、右人脸图像进行人脸特征提取，并利用极线变化对图像进行校正，将校正完成后的图片发送至步骤S02中进行特征点定位。其中，步骤S02中，利用主动形状模型技术分别从左、右人脸图像上提取若干特征点，确定好的人脸区域作为初始位置，标注出每个特征点对应的坐标并将所得的特征点用线段连接起来。其中，步骤S03中，每个特征点三维坐标根据三角测量原理和左右摄像头可得：其中，b为左右摄像机光心c1和c2之间的距离，f是摄像机的焦距，特征点P(X，Y，Z)对应在左右摄像机坐标系中的坐标分别为(x1,y1,z1)和(x2,y2,z2)，对应在左右平面上的像素坐标为(u1,v1)和(u2,v2)；则特征点P的空间坐标表示为：其中，步骤S04中，每个标定的三维坐标发送至比对数据平台后，根据标定点的几何特征，将形成若干几何向量用于神经网络进行识别；其中，几何特征包括：直线距离特征、角度特征、人脸比例特征、周长特征、曲线特征、体积特征以及表面积特征。请参阅图2所示，本专利技术为一种双目摄像头的人脸识别系统，包括双目摄像头和比对数据平台，双目摄像头内部设置有处理器、MCU控制器、左摄像头、右摄像头LED液晶显示屏和GSM模块；处理器分别与MCU控制器、左摄像头、右摄像头和GSM模块连接；MUC控制器与多种外设连接；GSM模块用于将左摄像头和右摄像头拍摄图像数据通过GSM网络发送至对比数据平台；比对数据平台包括广告推送模块和数据对比模块；广告推送模块用于将广告数据推送至双目摄像头的LED显示屏展示，双目摄像头上设置有本文档来自技高网...

【技术保护点】
1.一种双目摄像头的人脸识别方法，包括双目摄像头、位于双目摄像头内部的处理器以及比对数据平台，所述双目摄像头上设置有一左摄像头和一右摄像头；所述左摄像头和右摄像头处于同一水平线上，其特征在于：所述人脸识别方法包括如下步骤：步骤S01：双目摄像机的左、右摄像头同时完成人脸二维图像采集；步骤S02：利用处理器中的主动形状模型技术对二维图像进行二维特征点自动定位；步骤S03：结合摄像机标定参数得出特征点的三维坐标；步骤S04：将标定的三维坐标发送至比对数据平台；步骤S05：利用数据平台神经网络进行识别；步骤S06：将识别结果反馈至处理器；步骤S07：处理器控制设备执行相关操作。

【技术特征摘要】
1.一种双目摄像头的人脸识别方法，包括双目摄像头、位于双目摄像头内部的处理器以及比对数据平台，所述双目摄像头上设置有一左摄像头和一右摄像头；所述左摄像头和右摄像头处于同一水平线上，其特征在于：所述人脸识别方法包括如下步骤：步骤S01：双目摄像机的左、右摄像头同时完成人脸二维图像采集；步骤S02：利用处理器中的主动形状模型技术对二维图像进行二维特征点自动定位；步骤S03：结合摄像机标定参数得出特征点的三维坐标；步骤S04：将标定的三维坐标发送至比对数据平台；步骤S05：利用数据平台神经网络进行识别；步骤S06：将识别结果反馈至处理器；步骤S07：处理器控制设备执行相关操作。2.根据权利要求1所述的一种双目摄像头的人脸识别方法，其特征在于，所述步骤S01中，左、右摄像头采集完人脸二维图像时，需要先根据肤色信息对左、右人脸图像进行人脸特征提取，并利用极线变化对图像进行校正，将校正完成后的图片发送至步骤S02中进行特征点定位。3.根据权利要求1所述的一种双目摄像头的人脸识别方法及系统，其特征在于，所述步骤S02中，利用主动形状模型技术分别从左、右人脸图像上提取若干特征点，确定好的人脸区域作为初始位置，标注出每个特征点对应的坐标并将所得的特征点用线段连接起来。4.根据权利要求1所述的一种双目摄像头的人脸识别方法，其特征在于，所述步骤S03中，每个特征点三维坐标根据三角测量原理和左右摄像头可得：其中，b为左...

【专利技术属性】
技术研发人员：张杰，杨少军，
申请(专利权)人：安徽柏络智能科技有限公司，
类型：发明
国别省市：安徽,34