一种基于多分辨LBP的人脸检索方法技术

本发明专利技术公开了一种基于多分辨LBP的人脸检索方法，其特征是，包括如下执行步骤：首先对输入的人脸的图像10执行基于多分类器融合的人脸检测单元20；然后执行人脸图像中关键部位的检测单元30；接下来执行人脸图像形状归一化处理单元40；接下来执行关键部位局部区域采样图像单元50；接下来执行多分辨LBP特征描述单元60；接下来执行视觉词汇生成与索引建立单元70；最后执行基于TF-IDF的相似性度量单元80；最终的检索结果在单元90中进行显示。

A face retrieval method based on multiresolution LBP

The invention discloses a face retrieval method based on multi resolution LBP, which is characterized in that comprises the following steps: first, implementation of the input face image 10 performs face detection based on multi classifier fusion unit 20; then the implementation of key parts of face image detection unit in 30; next to perform face image shape normalization processing unit 40 the next key parts of the local area; implementation of image sampling unit 50; the next implementation of multi-resolution LBP feature description unit 60; the next execution unit 70 to establish visual word generation and indexing; finally performing similarity measure based on TF-IDF unit 80; the final retrieval results in unit 90 display.

【技术实现步骤摘要】

本专利技术是针对现有人脸识别与检索系统中计算复杂度高以及人脸视觉区域判别 能力不足等问题提出的，具体涉及一种基于多分辨LBP (local binarypattern,局部二值模 式)的人脸检索方法。
技术介绍
人脸检索是信息检索与信息安全领域中的一个重要内容。利用人脸信息进行检索 也是网络图像视频媒体分析和分类的一个重要环节。在机场，海关等重要的场所检查到得 人脸进行身份确认是确定是否非法入境以及和罪犯追踪的重要依据。以人脸识别为例，在中国专利ZL01136577. 3中公开了一种基于部件主分量分析 的多模式人脸识别方法。在中国专利ZL200810104401. 6中所公开的人脸部件特征和Gabor 人脸特征融合的人脸识别方法及其装置。现有的专利及文献中大都采用基于部件分析的人 脸融合方法进行人脸识别。通常情况下在特征描述中采用Gabor变换的多尺度特征，这种 特征描述方法维数很高，但是对于存在大量人脸数据的人脸库而言，现有的人脸识别方法 采用基于特征匹配和特征融合的方法来进行。这是一一匹配的方法，其处理的速度受到严 重影响，因此本专利技术中提出采用基于多分辨分析与视觉词汇索引的方法进行快速的人脸检 索。有效地提升人脸识别方法的速度和性能。
技术实现思路
本专利技术是针对人脸识别方法采用基于特征匹配方法在处理海量人脸数据库中的 不足而提出的一种基于多分辨LBP的人脸检索方法。为达到以上目的，本专利技术是采用如下技术方案予以实现的一种基于多分辨LBP的人脸检索方法，其特征在于，包括下述步骤对输入的人脸 图像10执行基于多分类器融合的人脸检测单元20，进行图像中人脸区域的检测，并用矩 形框标出人脸在图像中的位置；然后执行人脸图像中关键部位的检测单元30，对人脸中的 两只眼睛的中心，鼻尖以及左右嘴角5个关键部位进行定位；接下来执行人脸图像形状归 一化处理单元40，按照左右眼角或者眼睛中心的位置，对输入的图像进行形状归一化处理； 接下来执行关键部位局部区域采样图像单元50，以所述的5个关键部位为中心划分成具有 一定交叠的栅格，设每个局部区域划分的栅格数目为P*Q，假定两个眼睛中心的距离为L， 鼻尖到眼睛中心垂直距离为T，那么在栅格划分中的栅格的高度记为GH，宽度记为GW，分别 由如下公式计算得出GH = 2T/Q ；Gff = L/P ；接下来执行多分辨LBP特征描述单元60，分别 对5个关键部位的局部区域的每个栅格进行多分辨的LBP特征提取；接下来执行视觉词汇 生成与索引建立单元70 ；最后执行基于TF-IDF的相似性度量单元80 ；最终在检索结果显 示单元90中显示检索结果。上述方案中，所述的多分辨LBP特征描述单元60包括下述步骤对输入图像61， 一次执行如下3个步骤多级图像滤波与低分辨图像生成步骤62，低分辨图像的空间金字塔采样步骤63，以及多分辨的LBP特征描述步骤64。所述的视觉词汇生成与索引建立单元70包括下述步骤首先对于训练的人脸图 像71，从现有的图像库中选取10000幅图像作为训练集；然后执行人脸中关键部位的手动 标定步骤72，对所选取的人脸图像分别标注其中的关键部位，关建部位包括2个眼睛的中 心位置，一个鼻尖和2个嘴角的位置；然后根据标注的人脸中的关键部位，对所选取的训练 图像执行人脸图像形状归一化处理步骤73 ；接下来执行关键部位局部区域采样图像步骤 74 ；然后执行多分辨LBP特征描述步骤75，提取多分辨的LBP特征；最后执行基于K均值聚 类的聚类中心生成步骤76，对所选取的图像中的局部区域的局部图像块所对应的LBP特征 进行聚类中心生成，在聚类中心生成中，聚类中心的数目K设置为10万个。本专利技术所提供的基于多分辨LBP的人脸检索方法与现有的人脸识别方法相比，其 有益效果表现在，特征描述中采用多分辨分析的LBP描述方法，该方法的优点是特征即具 有抵抗图像在发生尺度变化时的鲁棒性，有有效地降低了算法处理的时间复杂度。另外通 对关键位所在的局部区域划分成具有交叠的网格，这种方法有效地凸显了主要区域在人脸 检索和识别中的权重。有效地削弱了非重要区域在人脸检索性能的影响。另外基于视觉词 汇的检索方法，相对于现有的基于特征匹配方法而言，能够有效地降低匹配中的算法复杂 度。以下结合附图及实施例对本专利技术作进一步的详细说明。附图说明图1为本专利技术中基于多分辨LBP的人脸检索方法的总体步骤示意图。图2示例地给出了图1中关键步骤结果示意照片。首先对输入图像边，经过基于 多分类器融合的人脸检测单元之后得出的检测结果为照片巡；为了后续处理的鲁棒性，在 照片巡的基础上进行扩展得到显示结果的照片巡i ；在检测结果照片巡中，人脸图像中关 键部位用黒色圆点标记出来，其中分别为两个眼睛的中心，鼻尖，和两个嘴角共5个关键位 置；以照片迎中的5个关键点为中心，划分P*Q的网格，照片迎中显示了 P = 5，Q = 7的 情况。对于照片迎所划分的网格所对应的局部图像如照片Mi所示；照片Mi中每个网格 所对应的局部区域如照片_所示；■中的每个局部区域经过多分辨的LBP特征描述之 后，进行量化所得出的相应的索引如照片巡所示。图3为图1中多分辨LBP特征执行单元的具体流程。图4为图像在金字塔采样级数为3的情况下所对应的形式。图像在x-，y_方向上 的下采样率分别为Rx = Ry = 2。其中，图4(a)为原始图像，图4(b)为对图4(a)作下采样 图像，图4(c)为对图4(b)作下采样图像，图4(d)为对图4(c)作下采样图像。图5为图1中训练人脸图像库视觉词汇生成与索引建立执行单元的具体流程。具体实施例方式图1给出了本专利技术中基于多分辨LBP的人脸检索方法总体实施步骤结构框图。包 含输入的人脸图像单元10，对输入的人脸图像执行基于多分类器融合的人脸检测单元20 ； 然后执行人脸图像中关键部位的检测单元30 ；接下来执行人脸图像形状归一化处理单元 40 ；接下来执行关键部位局部区域采样图像单元50 ；接下来执行多分辨LBP特征描述单元60 ；接下来执行视觉词汇生成与索引建立单元70 ；最后执行基于TF-IDF的相似性度量单元 80 ；最终的检索结果在单元90中进行显示。本专利技术执行步骤20中对于输入的人脸图像进行基于多分类器融合的人脸检测方 法采用公知的方法(P. viola and Μ. Jones, "Rapid Object Detection usinga boosted cascade of simple features，”in Proc. CVPR 2001)进行图像中人脸区域的检测，并用矩 形框标出人脸在图像中的位置。图2中示例地给出了一幅输入的人脸图像边，经过多分类 器融合的方法检测之后得出的人脸区域图像为照片迎。在照片迎的基础上进行扩展得到 显示结果照片m。在图1的人脸图像中关键部位的检测单元30中，实现对人脸中的两只眼睛的中 心，鼻尖以及左右嘴角5个关键部位进行定位。其中关键部位的定位方法采用现有公开文 献中的方法(L. Iang, R.Xiao, F. Wen, and J. Sun, "facealignment via component based discriminative search”，in Proc.本文档来自技高网...

【技术保护点】
１．一种基于多分辨ＬＢＰ的人脸检索方法，其特征在于，包括下述步骤：对输入的人脸图像（１０）执行基于多分类器融合的人脸检测单元（２０），进行图像中人脸区域的检测，并用矩形框标出人脸在图像中的位置；然后执行人脸图像中关键部位的检测单元（３０），对人脸中的两只眼睛的中心，鼻尖以及左右嘴角５个关键部位进行定位；接下来执行人脸图像形状归一化处理单元（４０），按照左右眼角或者眼睛中心的位置，对输入的图像进行形状归一化处理；接下来执行关键部位局部区域采样图像单元（５０），以所述的５个关键部位为中心划分成具有一定交叠的栅格，设每个局部区域划分的栅格数目为Ｐ＊Ｑ，假定两个眼睛中心的距离为Ｌ，鼻尖到眼睛中心垂直距离为Ｔ，那么在栅格划分中的栅格的高度记为ＧＨ，宽度记为ＧＷ，分别由如下公式计算得出：ＧＨ＝２Ｔ／Ｑ；ＧＷ＝Ｌ／Ｐ；接下来执行多分辨ＬＢＰ特征描述单元（６０），分别对５个关键部位的局部区域的每个栅格进行多分辨的ＬＢＰ特征提取；接下来执行视觉词汇生成与索引建立单元（７０）；最后执行基于ＴＦ－ＩＤＦ的相似性度量单元（８０）；最终在检索结果显示单元（９０）中显示检索结果。

【技术特征摘要】

【专利技术属性】
技术研发人员：钱学明，汪欢，
申请(专利权)人：西安交通大学，
类型：发明
国别省市：87