一种实时数据抽取应用方法技术

本发明专利技术涉及一种实时数据抽取应用方法，属于数据处理技术领域。本发明专利技术的技术方案是：（1）从基础数据表中抽取符合用户应用要求的目标时间范围和指定字段的基础数据，存储到一个临时中间数据表中；剔除不合理范围数据；对合理范围数据根据客户要求作逻辑处理并存储到指定目标数据表中，为上层客户应用程序提供有效实绩数据。本发明专利技术的有益效果是：能够在从存储大量实时数据的数据表中读取有效数据的同时又不影响实时数据的读取进行的数据处理方法，来满足大数据分析所需实时数据有效性、安全性。

【技术实现步骤摘要】
一种实时数据抽取应用方法
本专利技术涉及一种实时数据抽取应用方法，属于数据处理

技术介绍
随着工业大数据的不断发展，工厂内实时生产数据逐步被收集、存储和应用。对于生产中的实时数据的存储须要耗费大量的存储资源、同时耗费大量系统资源，因此在实时数据进行存储时对其进行实时抽取和应用不仅会影响数据的抽取速度还也会影响到实时数据的读取过程，严重的将会导致实时数据读取失败、抽取和应用到无效的数据，从而导致上层应用无法得到数据保证。
技术实现思路
本专利技术目的是提供一种实时数据抽取应用方法，通过对实时数据定期抽取、清洗处理，能够得到用户需要的有效实时数据，为更上层应用系统提供基础数据，上层应用系统可以根据应用需要分类存储、整合这些基础数据，以满足需要，能够在从存储大量实时数据的数据表中读取有效数据的同时又不影响实时数据的读取进行的数据处理方法，来满足大数据分析所需实时数据有效性、安全性，有效地解决了
技术介绍
中存在的上述问题。本专利技术的技术方案是：一种实时数据抽取应用方法，包含以下步骤：（1）从实时变化的基础数据表中，本文档来自技高网...

【技术保护点】
1.一种实时数据抽取应用方法，其特征在于包含以下步骤：（1）从实时变化的基础数据表中，抽取符合用户应用要求的目标时间范围和指定字段的基础数据，存储到一个临时中间数据表中；（2）对存储到临时中间数据表中的基础数据进行合理性范围判断；（3）对合理范围数据根据客户要求作逻辑处理并存储到指定目标数据表中，为上层客户应用程序提供有效实绩数据。/n

【技术特征摘要】
1.一种实时数据抽取应用方法，其特征在于包含以下步骤：（1）从实时变化的基础数据表中，抽取符合用户应用要求的目标时间范围和指定字段的基础数据，存储到一个临时中间数据表中；（2）对存储到临时中间数据表中的基础数据进行合理性范围判断；（3）对合理范围数据根据客户要求作逻辑处理并存储到指定目标数据表中，为上层客户应用程序提供有效实绩数据。


2.根据权利要求1所述的一种实时数据抽取应用方法，其特征在于：所述步骤（1）中，首先创建临时中间数据表，临时中间数据表的表结构与用户指定要求的目标数据表的表结构保持一致；根据用户应用要求的目标时间范围和指定...

【专利技术属性】
技术研发人员：毕雅巍，潘鹏，王伟兵，王中毅，康朝旭，李仁华，王圣平，
申请(专利权)人：邯郸钢铁集团有限责任公司，邯郸市邯钢集团信达科技有限公司，
类型：发明
国别省市：河北;13