一种基于大数据的数据治理方法和系统技术方案

本发明专利技术适用于计算机领域，提供了一种基于大数据的数据治理方法和系统，通过对数据录入端上传的初始数据进行监控，并且按照数据录入标准对初始数据的质量进行质检，能够将无用的错误的数据排除，避免无效数据占用存储空间，保证数据质量；然后根据质检结果对每一个数据录入端进行数据质量评分；根据数据质量评分对每一个数据录入端进行绩效考核。能够实现对数据录入端人员的监管和约束，进一步保证了数据录入端上传的初始数据的质量，保证数据的一致性，从而解决了企业信息化发展过程中对于数据缺乏有效的管理机制，导致数据质量残次不齐，数据信息流通受阻的问题。数据信息流通受阻的问题。数据信息流通受阻的问题。

【技术实现步骤摘要】
一种基于大数据的数据治理方法和系统


[0001]本专利技术属于计算机领域，尤其涉及一种基于大数据的数据治理方法和系统。

技术介绍

[0002]数据已成为企业的核心资产和重要的生产要素。在数据驱动的信息化时代，企业只有管理好核心业务数据，才能从中优化产品、开拓市场新渠道，打造企业核心竞争力。
[0003]但在探索与数据相关的开发技术、应用场景和商业模式时，并非所有项目都能取得预期效果，许多预期需求无法实现，重要原因之一就是数据质量因素导致的。而数据治理正是企业管理和提高数据质量的重要手段。加强数据治理已成为企业提升管理能力的重要任务。所有为提高数据质量而开展的业务、技术和管理活动都属于数据治理范畴。
[0004]目前各行业的信息化发展和建设水平并不均衡，对于部分行业，信息化还处于刚刚起步的阶段。但我们可以从金融行业、通讯行业、地产行业、传统制造业以及农业领域总结出规律：企业信息化大致经历了初期的烟囱式系统建设、中期的集成式系统建设和后期的数据管理式系统建设三个大阶段，也由此导致了数据质量残次不齐，数据信息流通受阻，缺乏有效的管理机本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于大数据的数据治理方法，其特征在于，所述方法包括：获取数据录入端上传的初始数据；按照数据录入标准对初始数据的质量进行质检；根据质检结果对每一个数据录入端进行数据质量评分；根据数据质量评分对每一个数据录入端进行绩效考核。2.如权利要求1所述的基于大数据的数据治理方法，其特征在于，所述按照数据录入标准对初始数据的质量进行质检具体包括：将初始数据样式与数据录入标准样式进行一一对比，判断初始数据样式是否符合数据录入标准样式；当初始数据样式不符合数据录入标准样式时，向数据录入端反馈数据质量问题，并督促数据录入端的使用者及时整改问题；当初始数据样式符合数据录入标准样式时，对初始数据进行保存。3.如权利要求2所述的基于大数据的数据治理方法，其特征在于，所述将初始数据样式与数据录入标准样式进行一一对比，判断初始数据样式是否符合数据录入标准样式具体包括：根据数据录入标准样式中必要数据所在位置质检初始数据样式的相应位置，判断初始数据样式中必要数据所在位置处是否存在数据；当初始数据样式中必要数据所在位置处不存在数据，说明初始数据在形式上不符合要求，直接将该初始数据进行删除，并向数据录入端反馈数据质量问题，并督促数据录入端的使用者及时整改问题；当初始数据样式中必要数据所在位置处存在数据，说明初始数据在形式上符合要求，并判断必要数据的大小是否在设定值域内；当必要数据的大小不在设定值域内时，说明初始数据的数值不符合要求，直接将该初始数据的问题反馈给数据录入端，并督促数据录入端的使用者及时整改问题；当必要数据的大小在设定值域内时，说明初始数据中的必要数据录入正确，对初始数据进行保存。4.如权利要求2所述的基于大数据的数据治理方法，其特征在于，所述将初始数据样式与数据录入标准样式进行一一对比，判断初始数据样式是否符合数据录入标准样式具体包括：根据数据录入标准样式中非必要数据所在位置质检初始数据样式的相应位置，判断初始数据样式中非必要数据所在位置处是否存在数据；当初始数据样式中非必要数据所在位置...

【专利技术属性】
技术研发人员：宋宁宁，王晓军，刘增友，
申请(专利权)人：山东木丁信息技术有限公司，
类型：发明
国别省市：