当前位置: 首页 > 专利查询>徐伟专利>正文

一种高效的大数据智能调控系统技术方案

技术编号:34187741 阅读:42 留言:0更新日期:2022-07-17 14:39
本发明专利技术公开了一种高效的大数据智能调控系统,包括数据处理模块、分析调控模块与校正更新模块,所述数据处理模块与分析调控模块电连接,所述分析调控模块与校正更新模块电连接,所述数据处理模块用于对大数据信息进行处理,所述分析调控模块用于对大数据信息进行计算分析,所述校正更新模块用于对大数据信息进行实时更新与错误校正,数据处理模块包括目的确定模块、去噪模块与溯源定位模块,所述目的确定模块用于确定大数据信息的应用目的场景,所述去噪模块用于对大数据信息进行去噪处理,所述去噪模块包括滤波去噪子模块与数据去噪声子模块,所述滤波去噪子模块与数据去噪声子模块电连接,本发明专利技术,具有有效数据质量的特点。具有有效数据质量的特点。具有有效数据质量的特点。

An efficient big data intelligent regulation system

【技术实现步骤摘要】
一种高效的大数据智能调控系统


[0001]本专利技术涉及智能调控
,具体为一种高效的大数据智能调控系统。

技术介绍

[0002]现在的社会是一个高速发展的社会,科技发达,信息流通,人们之间的交流越来越密切,生活也越来越方便,大数据就是这个高科技时代的产物。在现在,几乎每个企业都会用到大数据,利用大数据为其做决策提供参考,生活中方方面面用到大数据也使生活变得便利。
[0003]由于数据集是庞大且复杂的,在数据分析工作中,必须确保大数据信息的准确性,如果不解决大数据质量的问题,易导致企业产生错误的决策、影响用户的使用体验。现在对大数据质量的把控通常都由人工或算法来进行,但通过人工对大数据质量进行把控易出现人工误差,而算法只能单一的根据其设计原理进行大数据质量把控分析,无法对超出其分析范围的问题进行及时解决排除。因此,设计有效数据质量的一种高效的大数据智能调控系统是很有必要的。

技术实现思路

[0004]本专利技术的目的在于提供一种高效的大数据智能调控系统,以解决上述
技术介绍
中提出的问题。
[0005]为了解决上述技术问题,本专利技术提供如下技术方案:一种高效的大数据智能调控系统,包括数据处理模块、分析调控模块与校正更新模块,所述数据处理模块与分析调控模块电连接,所述分析调控模块与校正更新模块电连接,所述数据处理模块用于对大数据信息进行处理,所述分析调控模块用于对大数据信息进行计算分析,所述校正更新模块用于对大数据信息进行实时更新与错误校正。
[0006]根据上述技术方案,所述数据处理模块包括目的确定模块、去噪模块与溯源定位模块,所述目的确定模块用于确定大数据信息的应用目的场景,所述去噪模块用于对大数据信息进行去噪处理,所述去噪模块包括滤波去噪子模块与数据去噪声子模块,所述滤波去噪子模块与数据去噪声子模块电连接,所述滤波去噪子模块用于对信大数据信息传输过程中所产生的噪声进行去噪处理,所述数据去噪声子模块用于对大数据信息进行数据去噪声处理,所述溯源定位模块用于对大数据信息进行溯源定位。
[0007]根据上述技术方案,所述分析调控模块包括数据标注模块、准确性计算模块与判定分析模块,所述数据标注模块与准确性计算模块电连接,所述准确性计算模块与判定分析模块电连接,所述数据标注模块用于对大数据信息进行标注处理,所述准确性计算模块用于对大数据信息进行准确性计算分析,所述判定分析模块用于对大数据信息进行相关判定分析。
[0008]根据上述技术方案,所述校正更新模块包括数据更新模块、数据获取模块、风险预测模块与传输发送模块,所述数据更新模块与数据获取模块网络连接,数据获取模块与风
险预测模块网络连接,所述传输发送模块与数据更新模块电连接,所述数据更新模块用于对大数据信息进行更新处理,所述数据获取模块用于对数据信息进行获取,所述风险预测模块用于对数据信息进行评估预测,所述传输发送模块用于对数据信息进行发送传输。
[0009]根据上述技术方案,所述一种高效的大数据智能调控系统的运行方法主要包括以下步骤:
[0010]步骤S1:建立数据库,将通过前端埋点、接口日志调用、数据库抓取的大数据信息进行存储;
[0011]步骤S2:调用数据库存储的大数据信息并进行初步处理分析,确定大数据信息来源途径及用途;
[0012]步骤S3:进一步对上述大数据信息的数据质量进行检验、计算分析;
[0013]步骤S4:根据对大数据信息的质量检验结果对大数据信息进行校正更新。
[0014]根据上述技术方案,所述步骤S2进一步包括以下步骤:
[0015]步骤S21:滤波去噪子模块通过电信号调取数据库存储的大数据信息后,根据时间序号和数据样本集将数据信号在传输过程中产生的噪声信号进行滤除处理,并进一步通过电信号启用目的确定模块;
[0016]步骤S22:目的确定模块获取到上述滤波去噪的结果大数据信息后,对大数据信息中所包含的关键词与数据信息进行识别分析,通过算法匹配指令确定大数据信息所要应用的环境市场并进行记录;
[0017]步骤S23:将上述大数据信息及大数据信息来源途径通过溯源定位模块进行溯源匹配,使每份大数据信息与其对应来源途径进行匹配存储,并通过电信号启用数据去噪声子模块。
[0018]根据上述技术方案,所述步骤S3进一步包括以下步骤:
[0019]步骤S31:数据去噪声子模块通过大数据分析算法将大数据信息分类为N个簇,并对每个簇外的数据值进行识别记录;
[0020]步骤S32:准确性计算模块提取上述其中一个簇外的数据值,并识别得到该簇外数据值大小为D后,进一步计算得到该簇外数据值的准确性为P;
[0021]步骤S33:数据获取模块通过溯源定位模块确定该数据的来源类型后,进一步通过网络信号获取到大数据信息所要应用的环境市场中该类型数据的实际平均应用值为Z;
[0022]步骤S34:判断分析模块获取计算结果后,将计算结果与标准对比阈值Y进行对比分析。
[0023]根据上述技术方案,所述步骤S32中簇外数据值准确性P的计算公式如下:
[0024]P=K|Z

D|
[0025]其中,P为簇外数据值准确性数据值,K为簇外数据值准确性准换系数,Z为环境市场中数据的实际平均应用值,D为簇外数据值。
[0026]根据上述技术方案,所述步骤S34进一步包括以下步骤:
[0027]步骤S341:判断分析模块通过电信号获取到上述计算结果后,将计算结果与标准对比阈值Y进行对比分析,当P>Y时,则将此簇外数据值D进行删除;当P≤Y时,则通过数据标注模块对该簇外数据值进行标注记录;
[0028]步骤S342:重复步骤S32

步骤S34、步骤S341将步骤S31中全部簇外数据值依次进
行准确性计算并进行筛选标注。
[0029]根据上述技术方案,所述步骤S4进一步包括以下步骤:
[0030]步骤S41:数据更新模块将每簇大数据信息及簇外标注记录数据进行统合处理,并通过上述处理步骤对大数据信息进行实时接收与处理更新;
[0031]步骤S42:风险预测模块通过电信号上述大数据信息,并进一步通过数据获取模块获取到大数据信息所要应用的环境市场中相关产品的实时营销信息后,对环境市场的未来营销状态进行风险预估;
[0032]步骤S43:传输发送模块将整理统合后的大数据信息及风险预估结果发送至企业计算机平台供其使用参考。
[0033]与现有技术相比,本专利技术所达到的有益效果是:本专利技术,通过设置有数据处理模块、分析调控模块与校正更新模块,可确定大数据信息的应用的环境市场,可明确大数据信息用途、对大数据信息的处理具有参考依据,进一步使处理结果更加真实可靠,并可进行数据去噪声处理,使信息数据更加科学准确。
附图说明
[0034]附图用来提供对本专利技术的进一步理解,并且构成说明书的一部分,与本专利技术的实施例一起用于解释本发本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种高效的大数据智能调控系统,包括数据处理模块、分析调控模块与校正更新模块,其特征在于:所述数据处理模块与分析调控模块电连接,所述分析调控模块与校正更新模块电连接,所述数据处理模块用于对大数据信息进行处理,所述分析调控模块用于对大数据信息进行计算分析,所述校正更新模块用于对大数据信息进行实时更新与错误校正。2.根据权利要求1所述的一种高效的大数据智能调控系统,其特征在于:所述数据处理模块包括目的确定模块、去噪模块与溯源定位模块,所述目的确定模块用于确定大数据信息的应用目的场景,所述去噪模块用于对大数据信息进行去噪处理,所述去噪模块包括滤波去噪子模块与数据去噪声子模块,所述滤波去噪子模块与数据去噪声子模块电连接,所述滤波去噪子模块用于对信大数据信息传输过程中所产生的噪声进行去噪处理,所述数据去噪声子模块用于对大数据信息进行数据去噪声处理,所述溯源定位模块用于对大数据信息进行溯源定位。3.根据权利要求2所述的一种高效的大数据智能调控系统,其特征在于:所述分析调控模块包括数据标注模块、准确性计算模块与判定分析模块,所述数据标注模块与准确性计算模块电连接,所述准确性计算模块与判定分析模块电连接,所述数据标注模块用于对大数据信息进行标注处理,所述准确性计算模块用于对大数据信息进行准确性计算分析,所述判定分析模块用于对大数据信息进行相关判定分析。4.根据权利要求3所述的一种高效的大数据智能调控系统,其特征在于:所述校正更新模块包括数据更新模块、数据获取模块、风险预测模块与传输发送模块,所述数据更新模块与数据获取模块网络连接,数据获取模块与风险预测模块网络连接,所述传输发送模块与数据更新模块电连接,所述数据更新模块用于对大数据信息进行更新处理,所述数据获取模块用于对数据信息进行获取,所述风险预测模块用于对数据信息进行评估预测,所述传输发送模块用于对数据信息进行发送传输。5.根据权利要求4所述的一种高效的大数据智能调控系统,其特征在于:所述一种高效的大数据智能调控系统的运行方法主要包括以下步骤:步骤S1:建立数据库,将通过前端埋点、接口日志调用、数据库抓取的大数据信息进行存储;步骤S2:调用数据库存储的大数据信息并进行初步处理分析,确定大数据信息来源途径及用途;步骤S3:进一步对上述大数据信息的数据质量进行检验、计算分析;步骤S4:根据对大数据信息的质量检验结果对大数据信息进行校正更新。6.根据权利要求5所述的一种高效的大数据智能调控系统,其特征在于:所述步骤S2进一步包括以下步骤:步骤S21:滤波去噪子模块通过电信号调取数据库存储的大数据信息后,根据时间序号和数据样本集将数据信号在传输过...

【专利技术属性】
技术研发人员:徐伟
申请(专利权)人:徐伟
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1