【技术实现步骤摘要】
本专利技术涉及数据处理，特别涉及一种跨平台的数据上报服务方法。
技术介绍
1、政府部门因为数据管理的要求，往往需要下级平台将政务数据汇总后上报至上级平台，例如：县级或市级政府部分的平台将政务数据上报至省级部门的平台，再由省级部门的平台收集汇总后上报至部级部门的平台。
2、由于有些政府部门的下级平台的业务种类繁多，因此需要开发诸多的业务系统，导致数据源具有很大的差异，导致数据治理困难。且对于省级部门的平台而言，由于各个省级部门的平台与部级部门的平台均为各自自行开发，并不统一，因此也会导致各个省级部门的平台在数据上报时产生一定的困难。
技术实现思路
1、本专利技术要解决的技术问题，在于提供一种平台数据上报服务方法，对多源的业务数据进行汇聚，按照部标完成标准化转换，大大方便了多源数据的持续性上报，并进行质量检测以便于整改，从根源上提高上报数据质量。
2、本专利技术是这样实现的：一种平台数据上报服务方法，包括下述步骤：
3、多源数据的获取：下级平台通过变化的数据捕获接入下级平台的各个业务系统数据库，通过fink及kafka流计算引擎实时获取上报所需业务数据和基础字典数据；
4、多源数据的汇聚：对所述上报所需业务数据进行实时分类汇聚，并完成数据源的探查、数据接入、数据抽取及数据对账，得到下级平台的各个类型的业务汇聚数据，保存在原始库中；
5、标准转换：依据上级平台的数据标准，通过多项业务数据上报表单和字典数据上报表单完成所述业务汇聚
6、数据映射：对所述数据上报应用库进行映射转换成数据上报专题库；
7、数据质量检测：基于质量检测任务对所述数据上报专题库中的业务上报数据及字典上报数据进行实时或周期性质量检测，生成质量检测报告，并按照检测主题对数据质量报告进行分类统计；
8、数据上报：即通过数据上报专题库将质量检测合格后的业务上报数据及字典上报数据上报给上级平台。
9、进一步的，本专利技术还包括：
10、数据整改，即当所述质量检测不合格，则输出质量检测报告，发给到下级业务平台的业务部门要求对不合格的业务上报数据进行整改；
11、数据重新上报，在业务上报数据及字典上报数据上报给上级平台后，上级平台下发了数据质量问题，则根据所述数据质量问题进行处理后重新上报；所述处理包括对汇聚规则或标准化服务规则进行梳理后，重新汇聚至数据上报应用库。
12、进一步的，所述标准转换是通过上报服务模块实现的，所述上报服务模块具体包括：
13、(a)依据上级平台的数据标准，对所述业务汇聚数据和所述基础字典数据进行治理，提供元数据标准、数据标准梳理服务，输出元数据和数据标准文件；
14、(b)提供数据标准化服务，分别通过业务数据上报表单和字典数据上报表单对所述业务汇聚数据和所述基础字典数据进行梳理，通过风险隐患排查信息表对所述业务汇聚数据和所述基础字典数据进风险隐患排查，数据治理的标准目标以及业务治理的治理标准目标；
15、所述字典数据数据上报表单包括通用字典码表、上下级平台联合码表和自定义码表；
16、所述业务治理是指业务名称的合并分解和对应关系转换；
17、(c)提供治理规则服务，并输出相应治理规则表，确保数据从原始数据到上报数据，基础字典数据、业务主数据和交易数据的数据一致性和合规性。
18、进一步的，报告从多个维度进行统计，多个维度包括数据源、组织机构、体检对象和数据字段，统计指标包括检查记录数、异常记录数、准确率，统计结束时显示异常记录的清单，并提供所述清单的下载功能。
19、本专利技术实施例中提供的一个或多个技术方案，至少具有如下技术效果或优点：本专利技术一种平台数据上报服务方法，对多源的业务数据进行汇聚，完成数据源的探查、数据接入、数据抽取及数据对账，保证数据的完整和统一；依据上级平台的数据标准，通过多项业务数据上报表单和字典数据上报表单完成业务汇聚数据和基础字典数据的标准转换，得到业务上报数据及字典上报数据，从而打破了上下级平台的数据壁垒；通过建设上报应用库和字典上报应用库来保存数据，从而适应于数据上报的持续过程；再将数据上报应用库映射转换成数据上报专题库，以应对上级平台对数据的各种专题需求，还可通过检测模型对专题库进行质量检测以便于整改，从而能从根源上提高上报数据质量。
20、上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术的技术手段，而可依照说明书的内容予以实施，并且为了让本专利技术的上述和其它目的、特征和优点能够更明显易懂，以下特举本专利技术的具体实施方式。
本文档来自技高网...【技术保护点】
1.一种平台数据上报服务方法，其特征在于：包括下述步骤：
2.根据权利要求1所述的一种平台数据上报服务方法，其特征在于：还包括：
3.根据权利要求1所述的一种平台数据上报服务方法，其特征在于：所述标准转换是通过上报服务模块实现的，所述上报服务模块具体包括：
4.根据权利要求1所述的一种平台数据上报服务方法，其特征在于：
5.根据权利要求1所述的一种平台数据上报服务方法，其特征在于：报告从多个维度进行统计，多个维度包括数据源、组织机构、体检对象和数据字段，统计指标包括检查记录数、异常记录数、准确率，统计结束时显示异常记录的清单，并提供所述清单的下载功能。
【技术特征摘要】
1.一种平台数据上报服务方法，其特征在于：包括下述步骤：
2.根据权利要求1所述的一种平台数据上报服务方法，其特征在于：还包括：
3.根据权利要求1所述的一种平台数据上报服务方法，其特征在于：所述标准转换是通过上报服务模块实现的，所述上报服务模块具体包括：
4.根据权...
【专利技术属性】
技术研发人员：巫利荣，王毅青，郑家麟，朱潇，张智华，吴大炜，
申请(专利权)人：福建省电子政务建设运营有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。