一种基于多维数据的画像中心组合查询方法技术

技术编号:37517345 阅读:34 留言:0更新日期:2023-05-12 15:39
本发明专利技术公开了一种基于多维数据的画像中心组合查询方法及系统,方法包括:统一标准化各种数据;通过关系计算获得各个数据之间的关系;通过语义分析功能分析现有数据,对于数据给予标签;通过画像中心配置需要展示的档案及对应的各种数据;业务系统调用画像中心单一接口获得档案所有相关数据。本发明专利技术依靠数据治理平台提供的能力,就能够对接标准化数据,方便后续开发工作;依靠画像中心的配置调配,可以让系统对应功能的开发更加简洁,维护工作更加方便。方便。方便。

【技术实现步骤摘要】
一种基于多维数据的画像中心组合查询方法


[0001]本专利技术涉及大数据查询
,具体来说,涉及一种基于多维数据的画像中心组合查询方法。

技术介绍

[0002]近年来,随着大数据,人工智能,云计算等技术的成熟和普及,推动着安防产业的数字化、网络化、智能化发展的同时也产生了大量相关数据。
[0003]这些数据的特点是:数据量大(部分数据达到TG,PG级别),数据种类多(有常规的关系数据库数据,非关系型数据库的数据,有图片,有视频,有图数据库数据。),数据增长速度快(每天可能增加千万甚至上亿数据),数据价值低(有价值的数据所占比例很小)。
[0004]我们很多时候都需要建立对应的档案信息,以便更加方便的统一查询展示相关信息。现有的各个系统对于这些数据的使用效率是很低的,对于不同的系统,不同的数据都需要针对性的开发,做了很多重复性的工作。同时如果有新的种类的数据新增,对于新增数据的展示也是困难的,耗费了大量的时间开发,也增加了维护工作的难度。
[0005]综上所述,如何通过对多维数据方便快捷的组合查询显示对应的档案(画像)信息,目前尚缺乏有效的解决方案。

技术实现思路

[0006]本专利技术的目的在于提出一种基于多维数据的画像中心组合查询方法,以克服现有技术中存在的上述不足。
[0007]为实现上述技术目的,本专利技术的技术方案是这样实现的:
[0008]一种基于多维数据的画像中心组合查询方法,所述方法包括以下步骤:
[0009]1)统一标准化各种数据;<br/>[0010]2)通过关系计算获得各个数据之间的关系;
[0011]3)通过语义分析功能分析现有数据,对于数据给予标签;
[0012]4)通过画像中心配置需要展示的档案及对应的各种数据;
[0013]5)业务系统调用画像中心单一接口获得档案所有相关数据。
[0014]进一步的,步骤1)包括:
[0015]接入数据;
[0016]按照部标文档对接入数据进行标准化操作,所述标准化操作包括数据清洗和数据转换;
[0017]对标准化处理后的数据进行处理,生成主题库和业务库。
[0018]进一步的,步骤2)包括:
[0019]通过页面配置的方式,配置数据及数据之间的关系;
[0020]后台离线计算图谱关系;
[0021]保存关系图谱结果。
[0022]进一步的,步骤3)包括:
[0023]使用人工智能技术对人员要素数据进行分析;
[0024]按照标签所属实体、标签分类和标签等级区分标签;
[0025]将分析出的标签赋予对应人员。
[0026]进一步的,步骤4)包括:
[0027]通过页面配置的方式,设置档案展示布局及风格;
[0028]通过页面配置的方式,配置常规数据、关系数据和标签数据;
[0029]统一对外提供访问接口。
[0030]一种基于多维数据的画像中心组合查询系统,所述系统包括:
[0031]数据治理平台,包括数据接入模块、数据治理模块和数据处理模块,所述数据接入模块用于接入数据,所述数据治理模块用于按照部标文档对接入数据进行标准化操作,所述标准化操作包括数据清洗和数据转换,所述数据处理模块用于对标准化处理后的数据进行处理,生成主题库和业务库;
[0032]关系中心模块,包括关系图谱构建模块、关系运算模块和关系图谱存储模块,所述关系图谱构建模块用于通过页面配置的方式,配置数据及数据之间的关系,所述关系运算模块用于后台离线计算图谱关系,所述关系图谱存储模块用于保存关系图谱结果;
[0033]语义分析模块,包括数据分析模块、标签设定模块和关联模块,所述数据分析模块用于使用人工智能技术对人员要素数据进行分析,所述标签设定模块用于按照标签所属实体、标签分类和标签等级区分标签,所述关联模块用于将分析出的标签赋予对应人员;
[0034]画像中心模块,包括画像布局管理模块、画像数据管理模块和画像服务管理模块,所述画像布局管理模块用于通过页面配置的方式,设置档案展示布局及风格,所述画像数据管理模块用于通过页面配置的方式,配置常规数据、关系数据和标签数据,所述画像服务管理模块用于统一对外提供访问接口;
[0035]业务调用模块,用于调用画像中心单一接口获得档案所有相关数据。
[0036]进一步的,所述关系图谱存储模块使用neo4j图数据库保存关系图谱结果。
[0037]本专利技术的有益效果:本专利技术依靠数据治理平台提供的能力,就能够对接标准化数据,方便后续开发工作;依靠画像中心的配置调配,可以让系统对应功能的开发更加简洁,维护工作更加方便。
附图说明
[0038]图1是本专利技术实施例所述方法的流程图;
[0039]图2是本专利技术实施例所述系统的结构框图。
具体实施方式
[0040]下面结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述。
[0041]如图1所示,根据本专利技术的实施例所述的一种基于多维数据的画像中心组合查询方法,包括以下步骤:
[0042]1、数据治理平台是覆盖大数据治理全业务场景的高效数据治理工具,具有数据接
入,数据治理,数据处理,数据服务功能。首先,我们利用数据治理平台的数据接入功能接入数据;
[0043]2、我们利用数据治理平台的数据治理功能按照部标文档对接入数据进行清洗/转换;
[0044]3、我们利用数据治理平台的数据处理功能对标准化后的数据进行处理,生成主题库、业务库;
[0045]4、关系中心是为了帮助业务系统快速构建关系图谱而建立的中心功能,具有关系图谱构建,关系运算,关系图谱查询功能。首先,我们利用关系图谱构建功能,通过页面配置的方式,配置数据及数据之间的关系;
[0046]5、我们利用关系运算功能,后台离线计算图谱关系;
[0047]6、我们使用neo4j图数据库保存关系图谱结果;
[0048]7、标签中心是实现标签的打、管、用的全方位管理服务中心,依靠数据治理平台的开发中心,辅助数据处理团队完成标签开发。首先,我们使用人工智能技术对人员要素数据进行分析;
[0049]8、按照标签所属实体,标签分类,标签等级等区分标签;
[0050]9、将分析出的标签赋予对应人员;
[0051]10、画像中心是为了帮助业务系统快速构建画像而建立的中心功能,具有画像布局管理,画像数据管理,画像服务管理功能。首先,我们利用画像数据管理,通过页面配置的方式,配置常规数据,关系数据,标签数据;
[0052]11、我们利用画像布局管理,通过页面配置的方式,设置档案展示布局及风格;
[0053]12、我们利用画像服务管理功能,统一对外提供访问接口;
[0054]13、业务系统调用画像中心单一接口获得档案所有相关数据。
[0055]如图2所示,本专利技术还公开了一种基于本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于多维数据的画像中心组合查询方法,其特征在于,所述方法包括以下步骤:1)统一标准化各种数据;2)通过关系计算获得各个数据之间的关系;3)通过语义分析功能分析现有数据,对于数据给予标签;4)通过画像中心配置需要展示的档案及对应的各种数据;5)业务系统调用画像中心单一接口获得档案所有相关数据。2.根据权利要求1所述的方法,其特征在于,步骤1)包括:接入数据;按照部标文档对接入数据进行标准化操作,所述标准化操作包括数据清洗和数据转换;对标准化处理后的数据进行处理,生成主题库和业务库。3.根据权利要求2所述的方法,其特征在于,步骤2)包括:通过页面配置的方式,配置数据及数据之间的关系;后台离线计算图谱关系;保存关系图谱结果。4.根据权利要求3所述的方法,其特征在于,步骤3)包括:使用人工智能技术对人员要素数据进行分析;按照标签所属实体、标签分类和标签等级区分标签;将分析出的标签赋予对应人员。5.根据权利要求4所述的方法,其特征在于,步骤4)包括:通过页面配置的方式,设置档案展示布局及风格;通过页面配置的方式,配置常规数据、关系数据和标签数据;统一对外提供访问接口。6.一种基于多维数据的画像中心组合查询系统,其特征在于,所述系统包括:数据治理平台,包括数据接入模块、数据治理模块和数据处理...

【专利技术属性】
技术研发人员:种传民李小波张登王继能刘其峰
申请(专利权)人:上海熙菱信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1