一种基于大数据分析的人员流动性分析方法技术

技术编号:39294810 阅读:7 留言:0更新日期:2023-11-07 11:02
本发明专利技术公开了一种基于大数据分析的人员流动性分析方法,包括:将人员社会性数据通过抽取、数据对标和清洗后存储到数据库中;使用HIVE脚本配置比对流程;人员数据依次进行常住人口库信息、暂住人口库信息、流动人口库信息和轨迹库信息进行比对,统计人员轨迹信息数量,若超过设定的阈值,则将人员数据保存至疑似流动人员库;推送疑似流动人员信息至轨迹相关管理人员;由相关管理人员根据相关轨迹信息排查确认此人员是否是流动人员;保存人员数据至相关暂口或者流动人口库中。至相关暂口或者流动人口库中。至相关暂口或者流动人口库中。

【技术实现步骤摘要】
一种基于大数据分析的人员流动性分析方法


[0001]本专利技术涉及计算机大数据分析
,具体来说,涉及一种基于大数据分析的人员流动性分析方法。

技术介绍

[0002]伴随经济的不断发展,各地人口流动性显著增加,流动人口由于其居所经常变动,因此,如何及时准确的发现管理未登记的流动人员是一个新的难题。

技术实现思路

[0003]本专利技术的目的在于提出一种基于大数据分析的人员流动性分析方法,能够及时准确的发现流动人口。
[0004]为实现上述技术目的,本专利技术的技术方案是这样实现的:
[0005]1.一种基于大数据分析的人员流动性分析方法,其特征在于,所述方法包括以下步骤:
[0006]1)将人员社会性数据通过抽取、数据对标和清洗后存储到数据库中;
[0007]2)使用HIVE脚本配置比对流程;
[0008]3)人员数据进行常住人口库信息比对,不是常住人口库人员进行下一步比对;
[0009]4)人员数据进行暂住人口库信息比对,不是暂住人口库人员进行下一步比对;
[0010]5)人员数据进行流动人口库信息比对,不是流动人口库人员进行下一步比对;
[0011]6)人员数据进行轨迹库信息比对,统计人员轨迹信息数量,若超过设定的阈值,则将人员数据保存至疑似流动人员库;
[0012]7)推送疑似流动人员信息至轨迹相关管理人员;
[0013]8)由相关管理人员根据相关轨迹信息排查确认此人员是否是流动人员;
[0014]9)保存人员数据至相关暂口或者流动人口库中。
[0015]本专利技术的有益效果:本专利技术将海量数据的分析压力放在了大数据模块下HIVE层面,不需要额外的计算机内存用于计算分析,大大减少了人员数据碰撞模型的资源占用并提高了计算效率。
附图说明
[0016]图1是本专利技术实施例所述方法的流程图。
具体实施方式
[0017]下面结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述。
[0018]如图1所示,根据本专利技术的实施例所述的一种基于大数据分析的人员流动性分析方法,所述方法包括以下步骤:
[0019]1、将人员社会性数据通过抽取、数据对标和清洗后存储到数据库中;
[0020]2、使用HIVE脚本配置比对流程;
[0021]3、人员数据进行常住人口库信息比对,不是常住人口库人员进行下一步比对;
[0022]4、人员数据进行暂住人口库信息比对,不是暂住人口库人员进行下一步比对;
[0023]5、人员数据进行流动人口库信息比对,不是流动人口库人员进行下一步比对;
[0024]6、人员数据进行轨迹库信息比对,统计人员轨迹信息数量,若超过设定的阈值,则将人员数据保存至疑似流动人员库;
[0025]7、推送疑似流动人员信息至轨迹相关管理人员,例如负责相关片区的民警;
[0026]8、由相关管理人员根据相关轨迹信息排查确认此人员是否是流动人员;
[0027]9、保存人员数据至相关暂口或者流动人口库中。
[0028]在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
[0029]以上所述仅为本专利技术的较佳实施例而已,并不用以限制本专利技术,凡在本专利技术的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本专利技术的保护范围之内。
本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于大数据分析的人员流动性分析方法,其特征在于,所述方法包括以下步骤:1)将人员社会性数据通过抽取、数据对标和清洗后存储到数据库中;2)使用HIVE脚本配置比对流程;3)人员数据进行常住人口库信息比对,不是常住人口库人员进行下一步比对;4)人员数据进行暂住人口库信息比对,不是暂住人口库人员进行下一步比对;5)人员数据进...

【专利技术属性】
技术研发人员:种传民王继能赵新军赵天丽
申请(专利权)人:新疆熙菱信息技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1