一种基于多方案并联关注机制的行人重识别方法及系统技术方案

本发明专利技术公开了一种基于多方案并联关注机制的行人重识别方法及系统，该方法包括：将待识别的行人图片a和在库图片g分别输入到特征提取网络以及特征增强网络，提取得到对应的原始行人特征向量t

【技术实现步骤摘要】
一种基于多方案并联关注机制的行人重识别方法及系统


[0001]本专利技术涉及计算机视觉中的行人图像处理领域，尤其涉及一种基于多方案并联关注机制的行人重识别方法及系统。

技术介绍

[0002]跨摄像头下的行人重识别是计算机视觉领域的一大研究热点。它是在非重叠视角域多摄像头网络下进行行人匹配，即确认不同位置的摄像头在不同时刻拍摄所得的行人目标是否为同一人。拍摄场景中的光线亮暗、摄像头机位的视角差异、行人自身的姿势变化等因素，会造成视觉模糊性，给行人重识别带来一大难点；与此同时，行人出现的时间和地点也是随机不定的，这种时空不确定性同样给行人重识别带来挑战。
[0003]当前主流的行人重识别技术可以分为表征学习和度量学习。假如数据集中存在两张图片是关于同一行人的不同图片，则它们被称为正样本对；假如存在两张图片是关于不同行人的，则它们是负样本对。基于度量学习的行人重识别方法是把重识别过程看作聚类问题，目标是直接将同一行人的若干图片映射到高维空间中，形成聚类效应。此类方法的本质是训练模型使得高维空间中的正样本对距离尽可能小、负样本对距离尽可能大。关注机制的使用能对图片行人的局部特征加以突出并加强，让系统忽略无关信息，只关注有用的信息。目前，学术界一些较为经典关注机制设计方法，均使得模型性能有所提升，但是这样单一方案的关注机制对局部特征的这种处理是不够全面和细粒度的。

技术实现思路

[0004]为了解决上述技术问题，本专利技术的目的是提供一种基于多方案并联关注机制的行人重识别方法及系统，解决现有使用关注机制的技术对行人重识别性能不足的问题。
[0005]本专利技术所采用的第一技术方案是：一种基于多方案并联关注机制的行人重识别方法，包括以下步骤：
[0006]将待识别的行人图片a和在库图片g分别输入到特征提取网络以及特征增强网络，提取得到对应的原始行人特征向量t
a
和t
g
；
[0007]将原始行人特征向量t
a
和t
g
各自输入到全连接层，得出行人类别c
a
和c
g
；
[0008]对行人类别c
a
和c
g
进行特征比对，求取欧氏距离，并与阈值进行比较，得到判断结果。
[0009]进一步，所述将待识别的行人图片a和在库图片g分别输入到特征提取网络以及特征增强网络，提取得到对应的原始行人特征向量t
a
和t
g
这一步骤之前，还包括对特征提取网络和特征增强网络进行训练，具体包括以下步骤：
[0010]获取行人图片训练集和在库图片训练集；
[0011]将行人图片训练集和在库图片训练集输入待训练的特征提取网络和待训练的特征增强网络，得到训练用的行人类别；
[0012]将训练用的行人类别与行人图片训练集和在库图片训练集中的类别标签进行比
较并计算欧氏距离损失函数；
[0013]根据损失函数对待训练的特征提取网络和待训练的特征增强网络进行参数调整，训练完成，得到特征提取网络和特征增强网络。
[0014]进一步，所述特征提取网络包括4个综合卷积层。
[0015]进一步，所述欧氏距离损失函数的表达式如下：
[0016]L＝||c
a
‑
c
g
||2[0017]上式中，L表示欧氏距离损失函数，||
·
||2为求2
‑
范数运算。
[0018]进一步，所述将原始行人特征向量t
a
和t
g
各自输入到全连接层，得出行人类别c
a
和c
g
这一步骤，其计算公式如下：
[0019]c
a
＝FC(t
a
)＝W
a
t
a
+b
a
[0020]c
g
＝FC(t
g
)＝W
g
t
g
+b
g
[0021]上式中，W
a
、W
g
分别表示待识别图片和在库图片的全连接层的权重参数，b
a
、b
g
分别表示偏置参数。
[0022]进一步，所述阈值的具体设置步骤包括：
[0023]基于训练用的行人类别分别计算欧氏距离，依次将其设为初始阈值；
[0024]依次求取在各个初始阈值下所有训练行人图片对的识别准确率，最后选取准确率最高的初始阈值作为最终阈值。
[0025]进一步，所述对行人类别c
a
和c
g
进行特征比对，求取欧氏距离，并与阈值进行比较，得到判断结果这一步骤，其具体包括：
[0026]对行人类别c
a
和c
g
进行特征比对，求取欧氏距离并将欧氏距离与阈值进行比较；
[0027]判断到欧氏距离小于阈值则判定行人图片g和g具有同一身份；
[0028]判断到欧氏距离不小于阈值判定行人图片a和g具有不同身份。
[0029]本专利技术所采用的第二技术方案是：一种基于多方案并联关注机制的行人重识别系统，包括：
[0030]特征向量提取模块，用于将待识别的行人图片a和在库图片g分别输入到特征提取网络以及特征增强网络，提取得到对应的原始行人特征向量t
a
和t
g
；
[0031]类别提取模块，用于将原始行人特征向量t
a
和t
g
各自输入到全连接层，得出行人类别c
a
和c
g
；
[0032]特征比对模块，用于对行人类别c
a
和c
g
进行特征比对，求取欧氏距离，并与阈值进行比较，得到判断结果。
[0033]本专利技术方法及系统的有益效果是：本专利技术以并联的方式同时进行特征提取和特征增强，从而能在全局和局部两个层面上对特征加以最大程度的关注，以更有判别力的表征提高模型在不同场景下的鲁棒性，进而提高行人重识别的效果。
附图说明
[0034]图1是本专利技术一种基于多方案并联关注机制的行人重识别方法的处理示意图；
[0035]图2是本专利技术一种基于多方案并联关注机制的行人重识别方法的步骤流程图；
[0036]图3是本专利技术一种基于多方案并联关注机制的行人重识别系统的结构框图；
[0037]图4是本专利技术多方案并联关注机制的结构图。
具体实施方式
[0038]下面结合附图和具体实施例对本专利技术做进一步的详细说明。对于以下实施例中的步骤编号，其仅为了便于阐述说明而设置，对步骤之间的顺序不做任何限定，实施例中的各步骤的执行顺序均可根据本领域技术人员的理解来进行适应性调整。
[0039]参照图1和图2，本专利技术本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于多方案并联关注机制的行人重识别方法，其特征在于，包括以下步骤：将待识别的行人图片a和在库图片g分别输入到特征提取网络以及特征增强网络，提取得到对应的原始行人特征向量t
a
和t
g
；将原始行人特征向量t
a
和t
g
各自输入到全连接层，得出行人类别c
a
和c
g
；对行人类别c
a
和c
g
进行特征比对，求取欧氏距离，并与阈值进行比较，得到判断结果。2.根据权利要求1所述一种基于多方案并联关注机制的行人重识别方法，其特征在于，所述将待识别的行人图片a和在库图片g分别输入到特征提取网络以及特征增强网络，提取得到对应的原始行人特征向量t
a
和t
g
这一步骤之前，还包括对特征提取网络和特征增强网络进行训练，具体包括以下步骤：获取行人图片训练集和在库图片训练集；将行人图片训练集和在库图片训练集输入待训练的特征提取网络和待训练的特征增强网络，得到训练用的行人类别；将训练用的行人类别与行人图片训练集和在库图片训练集中的类别标签进行比较并计算欧氏距离损失函数；根据损失函数对待训练的特征提取网络和待训练的特征增强网络进行参数调整，训练完成，得到特征提取网络和特征增强网络。3.根据权利要求2所述一种基于多方案并联关注机制的行人重识别方法，其特征在于，所述特征提取网络包括4个综合卷积层。4.根据权利要求3所述一种基于多方案并联关注机制的行人重识别方法，其特征在于，所述欧氏距离损失函数的表达式如下：L＝||c
a
‑
c
g
||2上式中，L表示欧氏距离损失函数，||
·
||2为求2
‑
范数运算。5.根据权利要求4所述一种基于多方案并联关注机制的行人重识别方法，其特征在于，所述将原始行人特征向量t
a
和t
g
各自输入到全连接层，得出行人类别c
a
和c
g
这一步骤，其计算公式...

【专利技术属性】
技术研发人员：胡海峰，刘柏宏，卢泽丰，
申请(专利权)人：中山大学，
类型：发明
国别省市：