【技术实现步骤摘要】
本专利技术涉及数据处理，特别涉及一种数据处理监控系统。
技术介绍
1、数据监控是指对数据流、数据存储和数据处理进行实时监测和管理，以确保数据的质量、准确性和安全性，数据监控通常通过技术手段来实现，如监控软件、传感器、数据仓库等。
2、数据监控可以帮助企业识别数据质量问题，如数据质量低、数据不准确等，并及时采取措施进行修复和纠正，以保证数据的可靠性，因此，提出一种数据处理监控系统。
技术实现思路
1、本专利技术的主要目的在于提供一种数据处理监控系统，通过设置数据质量管理模块，数据分析单元将数据获取单元所获取的关于数据处理的数据信息和数据标准管理单元内的标准数据信息进行数值化呈现，分析数据获取单元所获取的关于数据处理的数据信息的数值化数值是否在数据标准管理单元的数值化范围内，并根据分析结果得出数据质量报告，可以有效解决
技术介绍
中的问题。
2、为实现上述目的，本专利技术提供了一种数据处理监控系统，包括数据收集模块、数据质量管理模块和数据预警模块；
3、所述数据收集模块包括数据获取单元和数据标准管理单元，所述数据获取单元用于获取关于数据处理的数据信息，所述数据标准管理单元用于对数据标准规范的管理；
4、所述数据质量管理模块包括数据分析单元和数据比对单元，所述数据分析单元用于分析所述数据获取单元所获取的数据信息和所述数据标准管理单元内的标准数据信息，并分别将所述数据获取单元所获取的关于数据处理的数据信息和所述数据标准管理单元内的标准数据信息进行
5、所述数据预警模块用于对所述数据比对单元的分析结果进行判定，当所述数据获取单元所获取的关于数据处理的数据信息的数值化数值不在数据标准管理单元的数值化范围内时，所述数据预警模块发出异常警报。
6、在上述技术方案的基础上，本专利技术还可以做如下改进。
7、进一步地，所述数据分析单元在分析所述数据获取单元所获取的数据信息前，所述数据分析单元将检查所述数据获取单元所获取的数据信息的完整性、准确性和时效性。
8、进一步地，该种数据处理监控系统还包括数据修复模块，当所述数据分析单元分析所述数据获取单元所获取的数据信息存在缺失时，所述数据修复模块根据所述数据标准管理单元内数据信息对所述数据获取单元所获取的数据信息进行修复，当所述数据修复模块无法修复缺失的数据信息时，所述数据预警模块发出异常警报。
9、进一步地，所述数据修复模块与所述数据收集模块相连，所述数据修复模块根据缺失数据的信息特征，对出现字符缺失的数据信息进行标记，所述数据的信息特征包括数据信息的字符长度和数据类型，所述数据类型为组成数据信息的字符种类，所述字符长度包括数据信息的字符总长度和单一数据类型的字符总长度。
10、进一步地，所述数据分析单元将所述数据获取单元所获取的关于数据处理的数据信息进行数值化呈现，计算数据信息的数值化a，所述数据分析单元将所述数据标准管理单元内的标准数据信息进行数值化范围呈现，计算数据信息的标准范围a1-a2。
11、进一步地，该种数据处理监控系统还包括存储模块，所述存储模块包括异常单元和非异常单元，当a1≤a≤a2时，所述数据获取单元所获取的关于数据处理的数据信息将存储于非异常单元，当a＜a1或a＞a2时，所述数据获取单元所获取的关于数据处理的数据信息将存储于异常单元。
12、进一步地，所述数据比对单元将数值化的数据处理的数据信息与数据标准管理单元的数值化范围进行对比后，根据分析结果得出数据质量报告。
13、本专利技术的有益效果是：本专利技术提供了一种数据处理监控系统，具有以下优点：
14、1、本专利技术通过设置数据质量管理模块，数据获取单元将获取关于数据处理的数据信息，数据分析单元将检查数据获取单元所获取的数据信息的完整性、准确性和时效性，在符合条件的情况下，数据分析单元将数据获取单元所获取的关于数据处理的数据信息和数据标准管理单元内的标准数据信息进行数值化呈现，数据比对单元对数值化的数据处理的数据信息与数据标准管理单元的数值化范围进行对比，分析数据获取单元所获取的关于数据处理的数据信息的数值化数值是否在数据标准管理单元的数值化范围内，并根据分析结果得出数据质量报告，通过数据质量管理模块对数据信息进行分析和比对，可以对数据流、数据存储和数据处理进行实时监测，及时发现数据异常和错误，如数据缺失、重复、格式错误等，通过及时发现和修复这些问题，可以提高数据的可靠性和准确性，确保数据的高质量产出，实现数据向优质资产的转变，进而解决数据质量低、数据不准确以及数据可靠性欠缺的问题。
15、2、本专利技术通过设置数据修复模块，数据修复模块与数据收集模块相连，数据修复模块根据缺失数据的信息特征，对出现字符缺失的数据信息进行标记，数据的信息特征包括数据信息的字符长度和数据类型，数据修复模块根据数据标准管理单元内数据信息对数据获取单元所获取的数据信息进行修复。
16、上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术的技术手段，并可依照说明书的内容予以实施，以下以本专利技术的较佳实施例并配合附图详细说明如后。本专利技术的具体实施方式由以下实施例及其附图详细给出。
本文档来自技高网...【技术保护点】
1.一种数据处理监控系统，其特征在于，包括数据收集模块、数据质量管理模块和数据预警模块；
2.根据权利要求1所述的一种数据处理监控系统，其特征在于，所述数据分析单元在分析所述数据获取单元所获取的数据信息前，所述数据分析单元将检查所述数据获取单元所获取的数据信息的完整性、准确性和时效性。
3.根据权利要求2所述的一种数据处理监控系统，其特征在于，该种数据处理监控系统还包括数据修复模块，当所述数据分析单元分析所述数据获取单元所获取的数据信息存在缺失时，所述数据修复模块根据所述数据标准管理单元内数据信息对所述数据获取单元所获取的数据信息进行修复，当所述数据修复模块无法修复缺失的数据信息时，所述数据预警模块发出异常警报。
4.根据权利要求3所述的一种数据处理监控系统，其特征在于，所述数据修复模块与所述数据收集模块相连，所述数据修复模块根据缺失数据的信息特征，对出现字符缺失的数据信息进行标记，所述数据的信息特征包括数据信息的字符长度和数据类型，所述数据类型为组成数据信息的字符种类，所述字符长度包括数据信息的字符总长度和单一数据类型的字符总长度。
<...【技术特征摘要】
1.一种数据处理监控系统，其特征在于，包括数据收集模块、数据质量管理模块和数据预警模块；
2.根据权利要求1所述的一种数据处理监控系统，其特征在于，所述数据分析单元在分析所述数据获取单元所获取的数据信息前，所述数据分析单元将检查所述数据获取单元所获取的数据信息的完整性、准确性和时效性。
3.根据权利要求2所述的一种数据处理监控系统，其特征在于，该种数据处理监控系统还包括数据修复模块，当所述数据分析单元分析所述数据获取单元所获取的数据信息存在缺失时，所述数据修复模块根据所述数据标准管理单元内数据信息对所述数据获取单元所获取的数据信息进行修复，当所述数据修复模块无法修复缺失的数据信息时，所述数据预警模块发出异常警报。
4.根据权利要求3所述的一种数据处理监控系统，其特征在于，所述数据修复模块与所述数据收集模块相连，所述数据修复模块根据缺失数据的信息特征，对出现字符缺失的数据信息进行标记，所述数据的信息特征包括数据信息的字符长度和数据类型，所述数...
【专利技术属性】
技术研发人员：徐博，
申请(专利权)人：智雅南京科技发展有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。