一种多模态信息融合的站点识别方法及装置制造方法及图纸

技术编号:43500442 阅读:20 留言:0更新日期:2024-11-29 17:06
本申请公开了一种多模态信息融合的站点识别方法及装置,涉及计算机技术领域,该方法包括:获取待识别网站的图像以及文本;通过图像特征提取模型对图像进行图像特征提取,以得到待识别网站的视觉特征;通过第一多头注意力层捕捉视觉特征的特征关系,以得到视觉自注意力权重矩阵;通过文本特征提取模型对文本进行文本特征提取,以得到待识别网站的文本特征;通过第二多头注意力层捕捉文本特征的特征关系,以得到文本自注意力权重矩阵;将视觉多头注意力权重矩阵以及文本字自注意力权重矩阵转换为融合特征;通过全连接层对基于融合特征输出待识别网站的识别结果;从而提高了赌博网站的识别效率。

【技术实现步骤摘要】

本申请涉及计算机,尤其涉及一种多模态信息融合的站点识别方法及装置


技术介绍

1、赌博站点识别是一项重要的网络安全任务,它可以帮助用户识别和避免访问可能带有恶意软件、网络钓鱼攻击或其他威胁的网站。在传统方案上,赌博站点识别技术主要依赖于一线民警人工识别,工作繁琐且效率极低。

2、但随着计算机技术的全面发展,黑客技术和网络诈骗团伙的技术也在升级。赌博网站往往设立在境外,并采用不定期更换ip地址的方式来反跟踪。这使得公安机关难以迅速获取赌博网站的实际信息,并且不能时刻利用屏蔽网络地址的方式避免赌博网站的侵蚀。

3、多数网络赌博犯罪组织设置繁琐的服务器层级结构,利用单向联系的方式联络参与赌博人员。同时,一些犯罪人员反侦查意识强,使用不同的黑客技术屏蔽或转移公安机关的嗅探工具。公安机关在获取数字证据时面临困难,在线取证工作受挫。

4、因此,如何提高赌博网站的识别效率成为了亟需解决的技术问题。


技术实现思路

1、有鉴于此,本申请的主要目的在于提供一种多模态信息融合的站点识别方法及装置本文档来自技高网...

【技术保护点】

1.一种多模态信息融合的站点识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述获取待识别网站的图像以及文本,包括:

3.根据权利要求1所述的方法,其特征在于,图像特征提取模型为预先完成训练后平均池化层和全连接层被替换为大小为1*1的池化层的深度残差网络ResNet50模型。

4.根据权利要求3所述的方法,其特征在于,所述ResNet50模型通过以下方式训练得到:

5.根据权利要求1所述的方法,其特征在于,所述文本特征提取模型包括:语义理解模型以及所述语义理解模型对应的分词器。

>6.根据权利要求5...

【技术特征摘要】

1.一种多模态信息融合的站点识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述获取待识别网站的图像以及文本,包括:

3.根据权利要求1所述的方法,其特征在于,图像特征提取模型为预先完成训练后平均池化层和全连接层被替换为大小为1*1的池化层的深度残差网络resnet50模型。

4.根据权利要求3所述的方法,其特征在于,所述resnet50模型通过以下方式训练得到:

5.根据权利要求1所述的方法,其特征在于,所述文本特征提取模型包括:语义理解模型以及所述语义理解模型对应的分词器。

6....

【专利技术属性】
技术研发人员:张璇涂帅高综蔚李佳忆李婧雅赵浩添王云攀郭绍暄衣峻辰张艺研
申请(专利权)人:山东警察学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1