一种工程管理数据处理系统及方法技术方案

本发明专利技术公开了一种工程管理数据处理系统及方法，包括数据输入装置、数据清洗模块、判断模块、数据标签化模块、数据处理单元、特征值管理模块、数据存储单元。本发明专利技术通过多决策树形成随机森林对数据进行分类，将数据存储单元与索引进行关联，建立不同区域块链，系统采用Spark作为计算引擎可以采取分布式操作，可以同时进行多个模型建立和分析，方便对复杂的工程数据进行规范化管理以及数据的整合，方便后期进行调用分析。期进行调用分析。期进行调用分析。

【技术实现步骤摘要】
一种工程管理数据处理系统及方法


[0001]本专利技术涉及工程项目数据处理相关领域，尤其涉及一种工程管理数据处理系统及方法。

技术介绍

[0002]工程项目是以工程建设为载体的项目，是作为被管理对象的一次性工程建设任务，它以建筑物或构筑物为目标产出物，需要支付一定的费用、按照一定的程序、在一定的时间内完成，并应符合质量要求。
[0003]当前处于信息高速发展的时代，工程项目管理过程中产生数据规模正大幅增长，在海量数据中，存在着大量的社交信息、文本信息、图片信息和互联网交互信息等各种类型的数据，大量不规则数据不易进行存储管理，不易查询使用。

技术实现思路

[0004]因此，为了解决上述不足，本专利技术提供一种工程管理数据处理系统及方法。
[0005]为了实现上述目的，本专利技术采取以下技术方案：一种工程管理数据处理系统及方法，包括包括数据输入装置、数据清洗模块、判断模块、数据标签化管理模块、数据处理单元、特征值管理模块、数据存储单元，还包括获取工程项目的数据以及特征值集合；对获取的数据进行数据清理，数据标签判定和处本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种工程管理数据处理系统及方法，其特征在于：包括数据输入装置(10)、数据清洗模块(20)、判断模块(40)、数据标签化模块(20)、数据处理单元(50)、特征值管理模块(70)、数据存储单元(60)。其特征在于：一种工程管理数据处理系统及方法，具体方法如下：S1获取工程项目的数据以及特征值集合；S2对获取数据进行数据清理，数据标签判定和处理，生成目标数据进行存储；S3将目标数据集拆分为训练集和测试集，利用算法生成特征值。S4判断是否是分类字段,按照生成的特征值采用分布式计算进行多个决策树生成和验证；S5按照生成的多个决策树节点存储为特征值，建立索引建立数据区域块链接，对应数据的按照不同分类之后，进行一定的整合，将数据存储于不同区域内。2.根据权利要求1所述一种工程管理数据处理系统及方法，其特征在于：所述一种工程项目管理数据处理系统包括数据输入装置，用于将系统外数据传输给系统内部；数据清洗模块，发现和纠正数据文件中的错误；所述数据标签化模块，管理数据的标签向量；判断模块，用于判断数据标签变量的类型；特征管理模块，用于管理和分析特征值。3.根据权利要求1所述一种工程管理数据处理系统及方法，其特征在于：所述数据处理单元包括：数据分类，系统经过计算得到特质值，建立索引，进行数据库分类；数据转换，对不符合要求的数据进行转换成符合规则的进行存储。4.根据权利要求1所述一种工程管理数据处理系统及方法，其特征在于：所述数据存储单元包括：临时存储单元，临时数据的存储；目标存储单元，用于原始数据经过数据清理产生的数据存储；数据库单元，最终分类好的数据处理。5.根据权利要求1所述一种工程管理数据处理系统及方法，其特征在于：所述特征管理模块，用于管理和分析特征值。6.根据权利要求1所述一种工程管理数据处理系统及方法，所...

【专利技术属性】
技术研发人员：邹锐，
申请(专利权)人：泉州市思途科技有限公司，
类型：发明
国别省市：