面向公共安全领域的智能体认知图谱的构建方法和系统技术方案

本发明专利技术公开的一种面向公共安全领域的智能体认知图谱的构建方法和系统，其中方法包括：构建初始智能体认知图谱，其中，所述初始智能体认知图谱至少包括空间坐标系、虚拟现实场景以及多模态认知关系图谱；基于所述初始智能体认知图谱对公共安全领域数据进行多模态识别和认知抽取，其中，多模态识别方式至少包括图像分割、视频理解、音频识别以及自然语言处理，认知抽取方式至少包括实体抽取、实体消歧、实体属性抽取、实体关系抽取以及事件抽取；对公共安全领域抽取得到的多模态认知数据进行融合，其中，融合方式至少包括多模态实体链接和认知合并；根据公共安全领域预设的逻辑推理规则进行认知加工，以完成智能体认知图谱的构建。建。建。

【技术实现步骤摘要】
面向公共安全领域的智能体认知图谱的构建方法和系统


[0001]本专利技术涉及大数据与人工智能
，更具体的，涉及一种面向公共安全领域的智能体认知图谱的构建方法和系统。

技术介绍

[0002]人工智能已经从计算智能、感知智能，进入到认知智能阶段。智能体图谱作为人工智能技术的重要组成部分，因其强大的多模态语义处理、互联组织、信息检索以及认知推理能力，将为各领域的人工智能应用提供技术基础。本质上，智能体图谱是一张巨大的多模态语义网络图，描述各种具象实体和抽象概念以及其关系。
[0003]公共安全领域随着大数据、云计算、人工智能等技术的应用，提升了情报研判、侦查打击等能力。但是随着公共安全形势的变化，以及技术手段的变化，公共安全对更加深入、更加智能化、更加全面的预警预测、分析研判能力提出了更迫切的需求。将智能体图谱应用于公共安全领域，运用智能体图谱强大的认知推理能力，进行预警预测、分析研判，在公共安全领域的应用还处于空白阶段。

技术实现思路

[0004]本专利技术的目的是提供一种面向公共安全领域的智能体认知图谱的构建方法和系本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种面向公共安全领域的智能体认知图谱的构建方法，其特征在于，包括以下步骤：构建初始智能体认知图谱，其中，所述初始智能体认知图谱至少包括空间坐标系、虚拟现实场景以及多模态认知关系图谱；基于所述初始智能体认知图谱对公共安全领域数据进行多模态识别和认知抽取，其中，多模态识别方式至少包括图像分割、视频理解、音频识别以及自然语言处理，认知抽取方式至少包括实体抽取、实体消歧、实体属性抽取、实体关系抽取以及事件抽取；对公共安全领域抽取得到的多模态认知数据进行融合，其中，融合方式至少包括多模态实体链接和认知合并；根据公共安全领域预设的逻辑推理规则进行认知加工，以完成智能体认知图谱的构建。2.根据权利要求1所述的一种面向公共安全领域的智能体认知图谱的构建方法，其特征在于，所述构建初始智能体认知图谱具体包括：基于OpenGL构建所述空间坐标系与比例尺，其中，所述空间坐标系至少包括物体坐标系、世界坐标系以及观察坐标系；基于OpenGL建立景物模型以构建所述虚拟现实场景，其中，所述景物模型通过光栅化转换成像素；基于所述空间坐标系和时序，映射各种事物在时空上的对应关系以及逻辑上的关联关系，从而构建所述多模态认知关系图谱。3.根据权利要求1所述的一种面向公共安全领域的智能体认知图谱的构建方法，其特征在于，基于所述初始智能体认知图谱对公共安全领域数据进行多模态识别，具体包括：基于DeepLabV3以及预设网络进行图像分割，其中，所述预设网络包括Encoder以及Decoder两部分；基于TSM网络进行视频理解，其中，基于双向TSM来构建离线视频识别模型，利用单向TSM将特征图从前一帧转移到当前帧；利用ARS算法进行音频识别；利用BERT网络进行自然语言处理。4.根据权利要求1所述的一种面向公共安全领域的智能体认知图谱的构建方法，其特征在于，基于所述初始智能体认知图谱对公共安全领域数据进行实体抽取时采用LSTM+CRF模型进行抽取。5.根据权利要求1所述的一种面向公共安全领域的智能体认知图谱的构建方法，其特征在于，所述对公共安全领域抽取得到的多模态认知数据进行融合，具体包括：运用图像分割识别网络、视频理解网络以及BERT网络进行实体链接；合并外部认知库以及关系数据库以完成认知合并，其中，合并外部认知库包括融合数据层和模式层，模式层的融合包括概念的融合、概念上下位关系的融合以及概念属性定义的融合，数据层的融合包括实体的融合以及实体属性的融合。6.根据权利要求1所述的一种面向公共安全领域的智能体认知图谱的构建方法，其特征在于，所述根据公共安全领域预设的逻辑推理规则进行认知加工，以完成智能体认知图谱的构建，具体包括：识别实体并列关系以及实体上下位关系...

【专利技术属性】
技术研发人员：于笑博，张广志，成立立，刘畔青，
申请(专利权)人：北京融信数联科技有限公司，
类型：发明
国别省市：