一种针对多种数据库的特殊群体会员层级分析方法及系统技术方案

本发明专利技术公开了一种针对多种数据库的特殊群体会员层级分析方法及系统，主要包括数据预处理模块、会员基础信息分析模块、基于专家规则的会员研判模块和多种格式数据输出模块四大模块；四大模块依次运行，首先将数据中的异常会员信息标记剔除，接着通过算法对会员层级关系进行分析，然后基于法律法规对分析结果中的重点会员进行标记，最后输出数据分析结果。本发明专利技术提供了一种针对多种数据库的特殊群体会员层级分析方法及系统，其可以精准快速分析出会员信息表中会员组织架构以及层级关系。出会员信息表中会员组织架构以及层级关系。出会员信息表中会员组织架构以及层级关系。

【技术实现步骤摘要】
一种针对多种数据库的特殊群体会员层级分析方法及系统


[0001]本专利技术属于数据分析
，具体涉及一种针对多种数据库的特殊群体会员层级分析方法及系统。

技术介绍

[0002]随着我国经济社会和互联网产业的高速发展，特殊群体犯罪成持续高发态势，犯罪技术和手段层出不穷，打击难度不断提升，对于人民财产以及社会稳定带来极大的影响。
[0003]在常规的特殊群体分析过程中，涉及特殊群体会员数量一般都是在几十上百万，对于如此庞大的会员数量，想要将其层级关系，涉案金额分析清楚是非常困难的，所以，如何快速准确的分析出会员层级关系以及涉案金额成为了特殊群体分析过程中的一个难题。

技术实现思路

[0004]针对上述现有技术存在难以快速准确的分析出会员层级关系以及涉案金额的问题，本专利技术提供了一种针对多种数据库的特殊群体会员层级分析方法及系统，可以精准快速分析出会员信息表中会员组织架构以及层级关系。本专利技术的会员层级分析方法及系统，主要包括数据预处理模块、会员基础信息分析模块、基于专家规则的会员研判模块和多种格式数据输出模块四大模块。四大模块依次运行，首先将数据中的异常会员信息标记剔除，接着通过算法对会员层级关系进行分析，然后基于法律法规对分析结果中的重点会员进行标记，最后输出数据分析结果。
[0005]为实现上述目的本专利技术所采用的技术方案是：提供一种针对多种数据库的特殊群体会员层级分析系统，包括以下模块：数据预处理模块：基于会员数据散列函数值的计算，以及提前设定好会员基础数据，将会员数据表中的冗余数据进行预处理；会员层级信息分析模块：根据会员上下级邀请字段，基于树型数据结构分析模型，对会员上下级进行邀请路径线分析，添加以会员为基础点的向上的层级邀请路径的字段，计算每位会员的相关信息，将分析结果依次新建字段进行添加；会员身份研判模块：根据数据分析结果新增字段，基于分类标准，将会员分为各种类型会员，便于后期相关单位对不同类型会员开展工作；数据输出模块：将已经经过处理、分析、研判的会员数据表，根据数据需求，以不同文件格式导出或直接导入到已搭建的数据库中。
[0006]根据本专利技术所述的一种针对多种数据库的特殊群体会员层级分析系统，其进一步的优选技术方案是：所述数据预处理模块还会运行对会员数据表是否连接数据库进行判断的步骤：若连接了数据库，则配置数据库连接信息文件，再运行程序；若未连接数据库，则手工将表格导出为CSV格式，再运行程序。
[0007]根据本专利技术所述的一种针对多种数据库的特殊群体会员层级分析系统，其进一步的优选技术方案是：在数据预处理模块中，将会员数据表中的冗余数据进行预处理之后，会
生成预处理临时表。
[0008]根据本专利技术所述的一种针对多种数据库的特殊群体会员层级分析系统，其进一步的优选技术方案是：在会员层级信息分析模块中，计算是基于已经分析好的层级邀请路径线。
[0009]根据本专利技术所述的一种针对多种数据库的特殊群体会员层级分析系统，其进一步的优选技术方案是：在会员层级信息分析模块中，在将分析结果依次新建字段进行添加之后，还会生成分析结果临时表。
[0010]根据本专利技术所述的一种针对多种数据库的特殊群体会员层级分析系统，其进一步的优选技术方案是：在会员身份研判模块中，在将会员分为各种类型会员之后，会生成最终结果表。
[0011]根据本专利技术所述的一种针对多种数据库的特殊群体会员层级分析系统，其进一步的优选技术方案是：所述不同文件格式包括Excel、SQL、CSV和TXT。
[0012]根据本专利技术所述的一种针对多种数据库的特殊群体会员层级分析系统，其进一步的优选技术方案是：在数据预处理模块中还会进行以下步骤：在对会员数据表中的冗余数据进行预处理之前，还会完成多种数据库查询语句自动构建。
[0013]在本专利技术进一步的实施例中，还提供一种采用上述系统进行特殊群体会员层级分析的方法，该方法依次运行以下各步骤：数据预处理：基于会员数据散列函数值的计算，以及提前设定好会员基础数据，将会员数据表中的冗余数据进行预处理；会员层级信息分析：根据会员上下级邀请字段，基于树型数据结构分析模型，对会员上下级进行邀请路径线分析，添加以会员为基础点的向上的层级邀请路径的字段，计算每位会员的相关信息，将分析结果依次新建字段进行添加；会员身份研判：根据数据分析结果新增字段，基于分类标准，将会员分为各种类型会员，便于后期相关单位对不同类型会员开展工作；数据输出：将已经经过处理、分析、研判的会员数据表，根据数据需求，以不同文件格式导出或直接导入到已搭建的数据库中。
[0014]根据本专利技术所述的一种针对多种数据库的特殊群体会员层级分析方法，其进一步的优选技术方案是：在数据预处理中还包括以下步骤：在对会员数据表中的冗余数据进行预处理之前，还会完成多种数据库查询语句自动构建。
[0015]相比现有技术，本专利技术的技术方案具有如下优点/有益效果：1.面对当前市场上技术种类众多，平台架构迥异的特殊群体数据库，实现了多种数据库数据输入的兼容；2.实现一次配置，全自动分析；3.基于数据预处理模型，自动化解决重复数据，垃圾数据的处理问题，保证数据的准确性；4.既可直连数据库分析，也可以读取已导出表格进行分析；5.准确清晰的将会员以组织人员、网头会员、重点会员进行标记区分，为后期处理提供直接性导向。
附图说明
[0016]为了更清楚地说明本专利技术实施方式的技术方案，下面将对实施方式中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本专利技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
[0017]图1是本专利技术的会员层级分析流程图。
[0018]图2是本专利技术的会员层级分析结构图。
具体实施方式
[0019]为使本专利技术目的、技术方案和优点更加清楚，下面对本专利技术实施方式中的技术方案进行清楚、完整地描述，显然，所描述的实施方式是本专利技术的一部分实施方式，而不是全部的实施方式。基于本专利技术中的实施方式，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式，都属于本专利技术保护的范围。因此，以下提供的本专利技术的实施方式的详细描述并非旨在限制要求保护的本专利技术的范围，而是仅仅表示本专利技术的选定实施方式。
[0020]应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中可以不对其进行进一步定义和解释。
[0021]如图1所示，此分析系统分析特殊群体层级的过程，其是基于数据预处理模块、会员层级信息分析模块、会员身份研判模块以及多格式数据输出模块四个模块，依次进行。其具体的分析过程如下：首先，数据分析人员在已经搭建完成的数据库中进行初步分析，找到对应的会员信息表，并根据经验，将会员信息表中的上下级邀请字段和会员基本信息字段找出，并填写在分析系统的配置文件中；接着，可以选择是否导出数据来进行分析，如果需要导出数据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种针对多种数据库的特殊群体会员层级分析系统，其特征在于，包括以下模块：数据预处理模块：基于会员数据散列函数值的计算，以及提前设定好会员基础数据，将会员数据表中的冗余数据进行预处理；会员层级信息分析模块：根据会员上下级邀请字段，基于树型数据结构分析模型，对会员上下级进行邀请路径线分析，添加以会员为基础点的向上的层级邀请路径的字段，计算每位会员的相关信息，将分析结果依次新建字段进行添加；会员身份研判模块：根据数据分析结果新增字段，基于分类标准，将会员分为各种类型会员，便于后期相关单位对不同类型会员开展工作；数据输出模块：将已经经过处理、分析、研判的会员数据表，根据数据需求，以不同文件格式导出或直接导入到已搭建的数据库中。2.根据权利要求1所述的一种针对多种数据库的特殊群体会员层级分析系统，其特征在于，所述数据预处理模块还会运行对会员数据表是否连接数据库进行判断的步骤：若连接了数据库，则配置数据库连接信息文件，再运行程序；若未连接数据库，则手工将表格导出为CSV格式，再运行程序。3.根据权利要求1所述的一种针对多种数据库的特殊群体会员层级分析系统，其特征在于，在数据预处理模块中，将会员数据表中的冗余数据进行预处理之后，会生成预处理临时表。4.根据权利要求1所述的一种针对多种数据库的特殊群体会员层级分析系统，其特征在于，在会员层级信息分析模块中，计算是基于已经分析好的层级邀请路径线。5.根据权利要求1所述的一种针对多种数据库的特殊群体会员层级分析系统，其特征在于，在会员层级信息分析模块中，在将分析结果依次新建字段进行添加之后，还会生...

【专利技术属性】
技术研发人员：伍仪洲，王剑辉，张瑞冬，童永鳌，朱鹏，
申请(专利权)人：成都无糖信息技术有限公司，
类型：发明
国别省市：