当前位置: 首页 > 专利查询>安徽大学专利>正文

一种基于图嵌入典型相关分析的特征层融合方法及其装置制造方法及图纸

技术编号:24686348 阅读:135 留言:0更新日期:2020-06-27 08:46
本发明专利技术公开了一种基于图嵌入典型相关分析的特征层融合方法及其装置。该特征层融合方法包括:将所有模态中样本映射到同一分类结果的空间的投影矩阵,并对所述投影矩阵施加L21范数正则化,以实现同时在多个单模态特征空间中选择出独立互补特征;构造数据相似图矩阵,以表示所述单模态特征空间中样本点的相近关系;通过所述正则化目标函数为每个模态学习相应的投影矩阵,将多个模态数据投影到具备最大辨别力、最大相关性及最小冗余性的投影子空间中,实现多模态数据融合。本发明专利技术实现多模态数据融合,消除了原特征空间中冗余信息的干扰,提高单模态特征鉴别力,增强多模态样本集间的相关性,提升识别性能和稳定性,特征融合效果好,识别效果佳。

A feature layer fusion method and its device based on graph embedding canonical correlation analysis

【技术实现步骤摘要】
一种基于图嵌入典型相关分析的特征层融合方法及其装置
本专利技术涉及数据特征融合
的一种特征层融合方法,尤其涉及一种基于图嵌入典型相关分析的特征层融合方法,还涉及应用该方法的基于图嵌入典型相关分析的特征层融合装置。
技术介绍
生物特征识别技术具有唯一性、稳定性等特点,已经被应用于多种身份验证场景,如指静脉识别、虹膜识别、手势识别、人脸识别等。这些识别方法虽然取得了较好的效果,但是由于仅利用单一的生物特征,难以满足高安全领域的应用要求,融合并分析多个模态数据显得至关重要。多模态融合已经在多个领域得到很好的应用,包括视听语音识别,情感识别,医学图像分析,多媒体事件检测等。多模态融合一般可分为四类:传感器层融合、分数层融合、决策层融合和特征层融合。其中,传感器层融合旨在对未处理的原始数据进行分析和融合处理,此类融合方案在医学图像融合研究相对较多。分数层融合中,将多个生物特征匹配器输出的匹配分数合并在一起,将融合后分数作为新特征输入到分类算法中。决策层融合中,使用基于规则方法融合不同模态的分类器的输出来得到最终结果。特征层融合首先对每个模态本文档来自技高网...

【技术保护点】
1.一种基于图嵌入典型相关分析的特征层融合方法,其特征在于,其包括以下步骤:/n(1)将所有模态中样本映射到同一分类结果的空间的投影矩阵,并对所述投影矩阵施加L21范数正则化,以实现同时在多个单模态特征空间中选择出独立互补特征;其中,所述独立互补特征的选择方法包括以下步骤:/n(1.1)建立初始目标函数;所述初始目标函数用于学习各种模态的投影矩阵,且包括第一项和第二项;所述第一项用于学习不同模态数据投影到公共空间的投影矩阵,所述第二项用于对投影矩阵进行约束,并在不同的单模态特征空间中实现特征选择;/n(1.2)对所述初始目标函数进行半二次最小化优化,获得优化目标函数;以及/n(1.3)通过元素...

【技术特征摘要】
1.一种基于图嵌入典型相关分析的特征层融合方法,其特征在于,其包括以下步骤:
(1)将所有模态中样本映射到同一分类结果的空间的投影矩阵,并对所述投影矩阵施加L21范数正则化,以实现同时在多个单模态特征空间中选择出独立互补特征;其中,所述独立互补特征的选择方法包括以下步骤:
(1.1)建立初始目标函数;所述初始目标函数用于学习各种模态的投影矩阵,且包括第一项和第二项;所述第一项用于学习不同模态数据投影到公共空间的投影矩阵,所述第二项用于对投影矩阵进行约束,并在不同的单模态特征空间中实现特征选择;
(1.2)对所述初始目标函数进行半二次最小化优化,获得优化目标函数;以及
(1.3)通过元素正则化对所述优化目标函数进行更新,获得正则化目标函数;
(2)构造数据相似图矩阵,以表示所述单模态特征空间中样本点的相近关系;以及
(3)通过所述正则化目标函数为每个模态学习相应的投影矩阵,将多个模态数据投影到具备最大辨别力、最大相关性及最小冗余性的投影子空间中,实现多模态数据融合;其中,多模态数据融合方法包括以下步骤:
(3.1)确定多模态类内样本之间的相关性约束;
(3.2)根据所述相关性约束,建立准则函数以保持典型变量的唯一性;
(3.3)先将(1)获得的投影矩阵与(2)获得的投影矩阵进行并集,再将并集获得的投影矩阵与原样本集融合获得投影后的特征集。


2.如权利要求1所述的基于图嵌入典型相关分析的特征层融合方法,其特征在于,所述初始目标函数为:



式中,Ui∈Rdi×c为对应的第i个模态的投影矩阵,Xi∈Rdi×n为第i个模态的样本集;Y∈Rn×c为类标签矩阵,P为需要特征选择的模态数。


3.如权利要求2所述的基于图嵌入典型相关分析的特征层融合方法,其特征在于,在步骤(1.2)中,通过在一个共轭函数对所述初始目标函数优化进行优化,且所述共轭函数为:



式中,φ(.)表示最小化函数,a由所述最小化函数相对所述共轭函数确定。


4.如权利要求3所述的基于图嵌入典型相关分析的特征层融合方法,其特征在于,所述正则化目标函数为:



式中,Tr(.)为矩阵跟踪算子;Si=diag(si),si∈Rdi为一个辅助函数,且si中第j元素满足元素正则化公式为:



式中,ε为平滑项。


5.如权利要求4所述的基于图嵌入典型相关分析的特征层融合方法,其特征在于,对所述优化目标函数的更新方法包括以下步骤:
(1.3.1)根据所述元素正则化公式计算
(1.3.2)根据以下公式更新



(1.3.3)增大t并返回至步骤(1.3.1)直至收敛。


6.如权利要求1所述的基于图嵌入典型相关分析的特征层融合方法,其特...

【专利技术属性】
技术研发人员:余程年王华彬申燕兰江浩李鑫王雨情施余峰陶亮
申请(专利权)人:安徽大学
类型:发明
国别省市:安徽;34

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1