一种多模态欺诈情绪识别方法及装置制造方法及图纸

技术编号:43314233 阅读:18 留言:0更新日期:2024-11-15 20:16
本发明专利技术涉及欺诈情绪识别技术领域,公开了一种多模态欺诈情绪识别方法及装置,该方法包括:采集人脸视频数据,分别提取人脸视频数据中的面部运动信息和语音信号流信息,得到光流运动特征和语音特征;对光流运动特征进行自适应模糊聚类,并对自适应模糊聚类后的光流运动特征进行自适应模糊运动编码,得到光流自模糊运动编码特征;基于语音特征进行语音识别,得到语音编码特征;基于光流自模糊运动编码特征和语音编码特征进行欺诈情绪识别,得到欺诈情绪识别结果。本发明专利技术能够有效捕捉和分析用户面部的细微运动变化,提高了欺诈识别的准确性和鲁棒性。

【技术实现步骤摘要】

本专利技术涉及欺诈情绪识别,具体涉及一种多模态欺诈情绪识别方法及装置


技术介绍

1、随着移动互联网的迅猛发展,互联网远程环境的特性使得传统面对面审核和风险控制手段无法有效实施,电信网络欺诈、互联网短信欺诈等线上欺诈活动严重侵害了公民财产安全。

2、采用情绪识别技术实现对欺诈的识别,但是,相关的欺诈识别方法欺诈识别容易出现偏差,在极大程度上降低了欺诈识别的准确率。


技术实现思路

1、有鉴于此,本专利技术提供了一种多模态欺诈情绪识别方法及装置,以解决相关的欺诈识别方法欺诈识别容易出现偏差,在极大程度上降低了欺诈识别的准确率问题。

2、第一方面,本专利技术提供了一种多模态欺诈情绪识别方法,该方法包括:

3、采集人脸视频数据,分别提取人脸视频数据中的面部运动信息和语音信号流信息,得到光流运动特征和语音特征;

4、对光流运动特征进行自适应模糊聚类,并对自适应模糊聚类后的光流运动特征进行自适应模糊运动编码,得到光流自模糊运动编码特征;

5、基于语音特征进行语音本文档来自技高网...

【技术保护点】

1.一种多模态欺诈情绪识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述分别提取所述人脸视频数据中的面部运动信息和语音信号流信息,得到光流运动特征和语音特征,包括:

3.根据权利要求1所述的方法,其特征在于,所述对所述光流运动特征进行自适应模糊聚类,并对自适应模糊聚类后的光流运动特征进行自适应模糊运动编码,得到光流自模糊运动编码特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述将所述光流运动特征数据聚类分配到多个模糊簇中,得到自适应模糊运动特征和所述自适应模糊运动特征对应的隶属度,包括:</p>

5.根据...

【技术特征摘要】

1.一种多模态欺诈情绪识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述分别提取所述人脸视频数据中的面部运动信息和语音信号流信息,得到光流运动特征和语音特征,包括:

3.根据权利要求1所述的方法,其特征在于,所述对所述光流运动特征进行自适应模糊聚类,并对自适应模糊聚类后的光流运动特征进行自适应模糊运动编码,得到光流自模糊运动编码特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述将所述光流运动特征数据聚类分配到多个模糊簇中,得到自适应模糊运动特征和所述自适应模糊运动特征对应的隶属度,包括:

5.根据权利要求1所述的方法,其特征在于,所述基于所述语音特...

【专利技术属性】
技术研发人员:陈燚敏吴立辉李永恒董慧洁
申请(专利权)人:中电科东方通信集团有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1