一种基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法及系统技术方案

技术编号:43428277 阅读:24 留言:0更新日期:2024-11-27 12:39
一种基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法及系统,涉及数据处理领域。解决现有的油田接入物联网设备及服务过多,产生海量的实时报警数据。传统关系型数据库在高并发写入时,会造成系统的整体卡顿导致查询效率过低及统计效率低下的问题,所述方法包括:同步平台实时同步各个采油厂的报警数据,根据报警数据的主题判断进行新增还是修改操作;根据报警数据类型唯一标识,选择存入对应的列式数据库中,对报警日志进行聚合统计;并存入关系型数据库中,进行时间排序;将报警数据经过聚合后,并发送到客户端后进行应急指挥;将应急指挥所得到的资源及应急指挥的处理结果存入关系型数据库。还适用于数据同步和存储领域中。

【技术实现步骤摘要】

本专利技术涉及数据处理。


技术介绍

1、由于油田接入物联网设备及服务过多,而且会产生海量的实时报警数据。传统关系型数据库在高并发写入时,会造成系统的整体卡顿。并且,由于存储的数据量过于庞大,致使历史报警记录查询效率过低及统计效率低下。若整体采用列式数据库,又会受到其多种条件的限制,例如,分组查询及排序必须高度依赖row key,执行修改操作不能根据任意column修改等。


技术实现思路

1、本专利技术针对现有技术中由于油田接入物联网设备及服务过多,而且会产生海量的实时报警数据。传统关系型数据库在高并发写入时,会造成系统的整体卡顿。并且,由于存储的数据量过于庞大,致使历史报警记录查询效率过低及统计效率低下的问题。为解决上述技术问题本专利技术是通过以下技术方案实现的:

2、方案一、本专利技术提出了一种基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,所述方法包括:

3、s1、平台实时同步各个采油厂的报警数据,所述报警数据包括冷热数据;

4、s2、根据所述报警数据本文档来自技高网...

【技术保护点】

1.一种基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,所述方法包括:

2.根据权利要求1所述的基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,所述刷新时间段为1min、10min、30min、1h、8h或24h。

3.根据权利要求1所述的基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,所述聚合统计数据包括刷新时间段内的全部报警数量及未查看的报警数量。

4.根据权利要求1所述的基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,所述报警日...

【技术特征摘要】

1.一种基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,所述方法包括:

2.根据权利要求1所述的基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,所述刷新时间段为1min、10min、30min、1h、8h或24h。

3.根据权利要求1所述的基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,所述聚合统计数据包括刷新时间段内的全部报警数量及未查看的报警数量。

4.根据权利要求1所述的基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,所述报警日志通过报警类型、报警单位、报警设备以及报警设备的其他报警实体。

5.根据权利要求1所述的基于关系型及列式数据库同步并统计油田各厂物联网设备报警日志的方法,其特征在于,s3中还包括对报警数据进行存储和历史查...

【专利技术属性】
技术研发人员:张乃松折晨璐赵洪阳
申请(专利权)人:大庆安瑞达科技开发有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1