基于大数据技术处理方式的数字乡村人口信息管理系统技术方案

本发明专利技术公开了一种基于大数据技术处理方式的数字乡村人口信息管理系统，包括数据采集层、数据清洗转换层、数据层、应用层和基础支撑层；数据层主要由基础库、专题库、政务数据主权库三部分组成；基础支撑层包括硬件运行环境，管理平台软件运行环境两大内容；本发明专利技术通过对乡村实质的数据化，利用乡村业务管理及人口数据统计方式，结合智能设备设施及信息化系统软件，合理有效的提供城乡乡村治理、居民公共服务、智慧民生服务。最终，所有业务系统数据将沉淀为一套完整的数据底层，形成三大数据库，通过安全技术手段，实现民生数据的共享与交融。

【技术实现步骤摘要】
基于大数据技术处理方式的数字乡村人口信息管理系统
本专利技术属于大数据处理技术，具体涉及一种基于大数据技术处理方式的数字乡村人口信息管理系统。
技术介绍
城乡乡村治理第一阶段中，以村级为单位的全域人口的数据管理以及数据应用问题是“数字乡村战略”所关注的重点领域；为了从根本上解决乡村人口信息采集难、归集难、人口底数不清、情况不明、如何高效应用的问题，建立村级人口、劳动力信息管理平台，主要解决人口数据不精准、各归口数据不一致、人口数据更新率低、管理成本高、人员变动情况无法及时掌握、无法发挥人口信息价值。数据技术是指大数据的应用技术，涵盖各类大数据平台、大数据指数体系等大数据应用技术。大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。随着云时代的来临，大数据也吸引了越来越多的关注。
技术实现思路
本专利技术要解决的技术问题是，将基础数据采集融合，为城乡乡村居民的管理提供保障且便利城乡乡村居民生活的基于大数据技术处理方式的数字乡村人口信息管理系统。本专利技术的技术方案是：一种基于大数据技术处理方式的数字乡村人口信息管理系统，包括数据采集层、数据清洗转换层、数据层、应用层和基础支撑层；所述数据采集层实现数据的采集功能，可提供多种采集方式，以满足数据接入不同IT平台特定现状的数据采集需求；所述数据清洗转换层实现采集数据的清洗功能，提供多种清洗转换组件，以满足不同格式、不同内容数据转换的要求；管理平台同时提供数据加载的功能，实现清洗转换完成后的数据能及时、高效、正确地加载到目标存储中心，目标存储中心即云上服务器搭载的业务中台数据仓库；所述数据层主要由基础库、专题库、政务数据主权库三部分组成，其中：基础数据库：基础库是不同的IT平台、对内数据信息共享、对外信息开放的基础，也是构建设专题应用的重要依据；该部分主要由人员基础库、地区信息及户基础信息组成；专题数据库：建立在基础数据库之上，并依据专题业务需求形成面向不同领域的专题库数据；政务数据主权库：归集采集过来的审批数据信息等；所述应用层包含两个方面的内容，一是业务应用，激活、完善数据层数据；二是数据融合与共享的应用；所述基础支撑层包括硬件运行环境，管理平台软件运行环境两大内容；硬件运行环境包括：计算资源、网络资源、存储资源等；为数字乡村人口管理平台提供计算能力；存储资源为各类信息资源提供数据存储服务；软件运行环境包括：数据库、应用中间件及其他中间件和功能组件等。具体地，所述数据采集层的采集功能，包括政务资源的数据采集、社会资源的数据采集；所述数据清洗层的清洗转换组件包括格式转换组件、字符转换组件、去重、转义、合并、计算等。具体地，所述计算资源主要包括服务器；所述存储资源可采用本机磁盘或磁盘阵列。具体地，所述采集方式包括全数据新增的方式，使用移动设备采取线上对人员数据进行采集，也可根据业务平台内已有数据回填，补充采集项，减轻核查工作、或根据各职能部门间的数据共享，补充所需采集项，进行自动回填。具体地，所述管理平台的建立如下：1）建立多维度人口数据采集渠道：建立村级人口采集小程序、数据采集人员和乡村网格员，打开采集小程序，即客户端，采集包括家庭户信息、家庭地理位置信息、户主基本信息、户成员信息、转移就业意向和职业技能培训需求、贫困信息、参保信息等；这些数据通过在线采集的方式，上传至人口信息管理平台后台数据库进行存储；同时，通过与政府大数据共享平台，第三方公司数据共享平台打通，保持人口数据动态化更新，实时获取；2）建立数字乡村人口管理系统：通过建立数字乡村人口管理系统，将村级人口信息采集勘误后动态录入管理平台，以可视化动态监管模式进行呈现，数字乡村人口管理系统可根据用户需求自动生成智能统计表及政府台账，能够实时了解该地区人口概貌，建立智能管理体系，智能村域公共管理，智能人员管理等，以实现管理家庭户的基础户信息、房屋信息、住址信息、享受政策、扶持政策、智能预警，管理村/社区级别的公共信息、固定资产、经营产业、扶持政策、第三产业，建立个人智能画像，可以为个人用户提供就业、培训、社保等业务的办理，同时可以作为个人用户的实名基础信息，减少政务事件的实名办理流程；3）建立数字乡村人口可视化BI大屏：基于数字数字乡村人口管理平台的数据归集，通过以区域为单位的人口基础信息，文化程度，贫困情况，技能掌握情况，就业情况等维度的统计，建立可视化视窗，能够快速的了解该地区劳动力的基本信息及动态变化情况，可以提供数据支撑。具体地，所述数据层负责项目中业务功能实现流程的管理工作；同时数据层还要负责与应用层、基础支撑层的通信，这个过程需要bean类来协助传递信息，另外数据层还要负责请求的转发与从定向。与现有技术比较，本专利技术的有益效果是：本专利技术通过对乡村实质的数据化，利用乡村业务管理及人口数据统计方式，结合智能设备设施及信息化系统软件，合理有效的提供城乡乡村治理、居民公共服务、智慧民生服务。最终，所有业务系统数据将沉淀为一套完整的数据底层，形成三大数据库，通过安全技术手段，实现民生数据的共享与交融。附图说明图1是本专利技术系统功能架构图；图2是本专利技术系统技术架构图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术的部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。一种基于大数据技术处理方式的数字乡村人口信息管理系统其特征在于：包括数据采集层、数据清洗转换层、数据层、应用层和基础支撑层；数据采集层实现数据的采集功能，包括政务资源的数据采集、社会资源的数据采集，并提供多种采集方式，采集方式包括全数据新增的方式，使用移动设备采取线上对人员数据进行采集，也可根据业务平台内已有数据回填，补充采集项，减轻核查工作、或根据各职能部门间的数据共享，补充所需采集项，进行自动回填；以满足数据接入单位不同IT平台特定现状的数据采集需求。为保障数据采集的执行效率、异常处理，达到资源合理的利用；数据清洗转换层实现采集数据的清洗功能，提供多种清洗转换组件，如：格式转换组件、字符转换组件、去重、转义、合并、计算等；以满足不同格式、不同内容数据转换的要求；平台同时提供数据加载的功能，实现清洗转换完成后的数据能及时、高效、正确地加载到目标存储中心；目标存储中心即云上服务器搭载的业务中台数据仓库；数据层主要由基础库、专题库、政务数据主权库三部分组成，其中：基础数据库：基础库是各单位IT平台、对内数据信息共享、对外信息开放的基础，也是构建设专题应用的重要依据；该部分主要由人员基础库、地区信息及户基础信息组成；专题数据库：建立在本文档来自技高网...

【技术保护点】
1.一种基于大数据技术处理方式的数字乡村人口信息管理系统，其特征在于：包括数据采集层、数据清洗转换层、数据层、应用层和基础支撑层；/n所述数据采集层实现数据的采集功能，可提供多种采集方式，以满足数据接入不同IT平台特定现状的数据采集需求；/n所述数据清洗转换层实现采集数据的清洗功能，提供多种清洗转换组件，以满足不同格式、不同内容数据转换的要求；管理平台同时提供数据加载的功能，实现清洗转换完成后的数据能及时、高效、正确地加载到目标存储中心，目标存储中心即云上服务器搭载的业务中台数据仓库；/n所述数据层主要由基础库、专题库、政务数据主权库三部分组成，其中：/n基础数据库：基础库是不同的IT平台、对内数据信息共享、对外信息开放的基础，也是构建设专题应用的重要依据；该部分主要由人员基础库、地区信息及户基础信息组成；/n专题数据库：建立在基础数据库之上，并依据专题业务需求形成面向不同领域的专题库数据；/n政务数据主权库：归集采集过来的审批数据信息等；/n所述应用层包含两个方面的内容，一是业务应用，激活、完善数据层数据；二是数据融合与共享的应用；/n所述基础支撑层包括硬件运行环境，管理平台软件运行环境两大内容；/n硬件运行环境包括：计算资源、网络资源、存储资源等；为数字乡村人口管理平台提供计算能力；存储资源为各类信息资源提供数据存储服务；/n软件运行环境包括：数据库、应用中间件及其他中间件和功能组件等。/n...

【技术特征摘要】
1.一种基于大数据技术处理方式的数字乡村人口信息管理系统，其特征在于：包括数据采集层、数据清洗转换层、数据层、应用层和基础支撑层；
所述数据采集层实现数据的采集功能，可提供多种采集方式，以满足数据接入不同IT平台特定现状的数据采集需求；
所述数据清洗转换层实现采集数据的清洗功能，提供多种清洗转换组件，以满足不同格式、不同内容数据转换的要求；管理平台同时提供数据加载的功能，实现清洗转换完成后的数据能及时、高效、正确地加载到目标存储中心，目标存储中心即云上服务器搭载的业务中台数据仓库；
所述数据层主要由基础库、专题库、政务数据主权库三部分组成，其中：
基础数据库：基础库是不同的IT平台、对内数据信息共享、对外信息开放的基础，也是构建设专题应用的重要依据；该部分主要由人员基础库、地区信息及户基础信息组成；
专题数据库：建立在基础数据库之上，并依据专题业务需求形成面向不同领域的专题库数据；
政务数据主权库：归集采集过来的审批数据信息等；
所述应用层包含两个方面的内容，一是业务应用，激活、完善数据层数据；二是数据融合与共享的应用；
所述基础支撑层包括硬件运行环境，管理平台软件运行环境两大内容；
硬件运行环境包括：计算资源、网络资源、存储资源等；为数字乡村人口管理平台提供计算能力；存储资源为各类信息资源提供数据存储服务；
软件运行环境包括：数据库、应用中间件及其他中间件和功能组件等。


2.根据权利要求1所述的基于大数据技术处理方式的数字乡村人口信息管理系统，其特征在于：所述数据采集层的采集功能，包括政务资源的数据采集、社会资源的数据采集；所述数据清洗层的清洗转换组件包括格式转换组件、字符转换组件、去重、转义、合并、计算等。


3.根据权利要求1所述的基于大数据技术处理方式的数字乡村人口信息管理系统，其特征在于：所述计算资源主要包括服务器；所述存储资源可采用本机磁盘或磁盘阵列。


4.根据权利要求1所述的基于大数据技术处理方式的数字乡村人口信息管理系统，其特征在于：所述采集方...

【专利技术属性】
技术研发人员：代露露，
申请(专利权)人：贵州人和致远数据服务有限责任公司，
类型：发明
国别省市：贵州;52