一种天然气管道清管作业的数据仓库及数据挖掘方法技术

技术编号:29673208 阅读:63 留言:0更新日期:2021-08-13 21:54
本发明专利技术专利公开了一种天然气管道清管作业的数据仓库及数据挖掘方法。本方法的步骤是:首先是确定天然气管道清管作业的数据源;其次是利用ETL工具完成数据集成;然后根据Epicentre数据模型建立天然气管道清管作业数据仓库;而后将数据从仓库中提取出来并加载到数据集市中;最后基于定义的算法开展天然气管道清管作业的数据挖掘。本发明专利技术充分考虑实际清管作业数据的价值性和离散性,实现了清管作业数据的一致性和完整性,为评估天然气管道清管作业安全提供了管治依据,为开展天然气管道清管作业数据挖掘和智慧清管提供了技术支持。

【技术实现步骤摘要】
一种天然气管道清管作业的数据仓库及数据挖掘方法
本专利技术属于天然气输送管道的安全保障领域,尤其涉及一种天然气管道清管作业的数据仓库及数据挖掘方法。
技术介绍
天然气是一种清洁的优质能源和化工原料,而管道输送是天然气的主要运输方式。根据国家发改委和国家能源局发布的《中长期管网发展规划》,预计到2025年,我国天然气管道的总里程将达到16.3万千米。天然气管道在投产和日产运行过程中,需要通过清管作业来清除在建设或运输过程中留下的污物、杂质和积液等,以达到提供管道输送效率、延长管道使用年限、保障管道安全运行的目的。当前,天然气管道清管作业主要以站场为单位、管段为区间展开,其产生的清管作业数据是清管方案的直观体现,也是反应天然气管道运行情况的一个重要依据。然而,天然气管道清管作业数据信息量大,有用信息少,且以较为分散的形式存储在各个不同站场的工作日志或不同系统的数据库中,容易出现数据的不一致性及不完整性。数据仓库是一种高效的数据存储系统,可将来自异地、异构数据源或其它数据库中的数据,经加工后在数据仓库中存储、提取和维护,形成一系列面向主题的、本文档来自技高网...

【技术保护点】
1.一种天然气管道清管作业的数据仓库及数据挖掘方法,主要用于从其他存储位置提取清管作业数据并加载到数据仓库中,从而实现清管作业数据的完整性和一致性,为开展数据挖掘提供技术支持,为评估天然气管道清管作业安全提供决策依据。该方法的过程主要包括以下几个步骤:/n步骤一,确定天然气管道清管作业的数据源。数据源是存放于各业务部门的最原始数据,是天然气管道清管作业产生的信息记录和计算结果,包括各业务部门的工作日志、其它软件或系统的数据库、清管作业记录、天然气管道的设计资料等;/n步骤二,天然气管道清管作业的数据集成。数据集成是利用ETL工具将清管作业数据从数据源中抽取出来,然后根据定义的映射关系,将数据加...

【技术特征摘要】
1.一种天然气管道清管作业的数据仓库及数据挖掘方法,主要用于从其他存储位置提取清管作业数据并加载到数据仓库中,从而实现清管作业数据的完整性和一致性,为开展数据挖掘提供技术支持,为评估天然气管道清管作业安全提供决策依据。该方法的过程主要包括以下几个步骤:
步骤一,确定天然气管道清管作业的数据源。数据源是存放于各业务部门的最原始数据,是天然气管道清管作业产生的信息记录和计算结果,包括各业务部门的工作日志、其它软件或系统的数据库、清管作业记录、天然气管道的设计资料等;
步骤二,天然气管道清管作业的数据集成。数据集成是利用ETL工具将清管作业数据从数据源中抽取出来,然后根据定义的映射关系,将数据加载到数据仓库中,并在加载过程中检查数据的合法性,并将加载结果记录到数据集成的工作日志中以备查询;
步骤三,建立天然气管道清管作业的数据仓库。基于公共的数据模型和软件开发标准建立天然气管道清管作业的数据仓库。采用国际POSC组织的石油勘探开发集成平台的Epicentre数据模型来构建天然气管道清管作业的数据仓库;
步骤四,天然气管道清管作业的数据提取。数据提取是根据定义的自动提取数据仓库模型来天然气管道清管作业的数据仓库中的数据信息,并根据定义的映射关系将数据信息加载到不同应用主题的数据集市中;
步骤五,天然气管...

【专利技术属性】
技术研发人员:贾文龙邓乾星吴瑕李俊逸雍雪梅江林峪孙璐璐
申请(专利权)人:西南石油大学
类型:发明
国别省市:四川;51

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1