【技术实现步骤摘要】
本专利技术涉及信息安全,特别是涉及一种基于多头注意力机制的多模态内容检测方法及其系统。
技术介绍
1、近年来,人工智能领域飞速发展,在图像识别、语音识别和文本分析等单一模态信息处理方面已取得显著成就,一方面,现有检测系统在处理大规模多模态数据时,但在面对大规模多模态数据时,传统检测系统往往局限于分别处理不同类型的模态数据,这种孤立的处理方式未能充分利用各模态之间的互补性和关联性,限制了系统整体性能和检测精度,另一方面是现有的多头注意力机制在处理多模态数据融合时,只将不同模态的数据进行通道堆叠后再进行处理,未能充分利用不同模态数据的深度特征,导致最终模型的识别精度受限;此外,由于大量的特征堆叠增加了输入数据的维度,导致计算复杂度高,降低了检测精度。
技术实现思路
1、鉴于此,本专利技术实施例提供一种基于多头注意力机制的多模态内容检测方法及其系统,首先使用数据采集设备从社交媒体内容、媒资内容等应用场景中收集多模态数据,并对采集到的数据执行清洗和规范化处理,确保数据质量满足深度学习模型的要求。接
...【技术保护点】
1.一种基于多头注意力机制的多模态内容检测方法,其特征在于,包括以下步骤:
2.根据权利要求1所述的方法,其特征在于,所述基于多头注意力机制的特征融合模块还包括:
3.根据权利要求1所述的方法,其特征在于,所述检测模块包括迁移学习机制和自适应特征重标定组件,以提高检测精度并减少训练成本。
4.一种基于权利要求1-3任一项所述方法的多模态内容检测系统,其特征在于,该系统包括:
5.根据权利要求4所述的系统,其特征在于,还包括:
【技术特征摘要】
1.一种基于多头注意力机制的多模态内容检测方法,其特征在于,包括以下步骤:
2.根据权利要求1所述的方法,其特征在于,所述基于多头注意力机制的特征融合模块还包括:
3.根据权利要求1所述的方法,其特征在于,所述检测...
【专利技术属性】
技术研发人员:王晶,刘才果,
申请(专利权)人:空间视创重庆科技股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。