轨道交通数据分析方法技术

技术编号:39519609 阅读:9 留言:0更新日期:2023-11-25 18:58
本申请公开了一种轨道交通数据分析方法

【技术实现步骤摘要】
轨道交通数据分析方法、系统、存储介质和电子设备


[0001]本申请涉及轨道交通
,具体而言,涉及一种轨道交通数据分析方法

系统

存储介质和电子设备


技术介绍

[0002]随着企业业务规模的增长和数字化转型的快速发展,为了实现内部统一的数据存储及分析,普遍实施了数据仓库系统项目,通过汇总内部各系统的数据,并根据数据标准化要求,进行清洗

转换,最终统一存储用于行内数据统计与分析

近几年大数据的概念逐渐流行起来,同时针对大数据的存储

处理和分析技术也得到了迅速的发展

但大数据技术也存在一些局限性,如
Hadoop
技术虽然在超大文件

流数据处理等方面具有较大优势,但在低延迟数据访问

数据多次写入

大量小文件处理的支持上还存在较大缺陷

[0003]针对上述的问题,目前尚未提出有效的解决方案


技术实现思路

[0004]本申请实施例提供了一种轨道交通数据分析方法

系统

存储介质和电子设备,以至少解决相关技术在采用传统数据仓库难以支持大数据的处理,且采用大数据技术在传统数据应用支持上存在缺陷的技术问题

[0005]根据本申请实施例的一个方面,提供了一种轨道交通数据分析方法,包括:采集轨道交通管控系统在第一时间段内的历史数据以及在第二时间段内的实时数据,其中,第一时间段大于第二时间段;通过离线数据仓库存储历史数据以及通过基于分布式的事件流平台存储实时数据,并对历史数据进行抽取得到第一业务指标数据,对实时数据进行抽取得到第二业务指标数据;通过列式数据库管理系统周期性地对第一业务指标数据和第二业务指标数据进行同步,得到访问数据;通过预设的查询界面获取数据查询指令,并基于访问数据通过查询界面展示与数据查询指令对应的目标访问数据

[0006]可选地,通过离线数据仓库存储历史数据以及通过基于分布式的事件流平台存储实时数据,包括:分别对历史数据和实时数据进行预处理操作,得到处理后的历史数据和实时数据;通过离线数据仓库存储处理后的历史数据,并通过基于分布式的事件流平台存储处理后的实时数据

[0007]可选地,对历史数据进行抽取得到第一业务指标数据,包括:按照预设的业务分类标准对离线数据仓库存储的历史数据进行划分,得到多类轨道交通业务对应的历史业务数据,其中,多类轨道交通业务对应的实时历史业务数据中包括以下至少之一:客流数据

清算数据

服务数据

应急数据

票务数据

资产数据

安防数据

基础数据;对各类轨道交通业务对应的历史业务数据进行抽取,得到每类轨道交通业务对应的第一业务指标数据,其中,第一业务指标数据中包括以下至少之一:基础指标类数据

客流信息类数据

列车运营类数据

设备信息类数据

清算信息类数据

票务信息类数据

服务信息类数据

[0008]可选地,通过列式数据库管理系统周期性地对第一业务指标数据和第二业务指标
数据进行同步,得到访问数据,包括:按照预设的同步规则周期性地将第一业务指标数据和第二业务指标数据同步至列式数据库管理系统,得到访问数据,并生成用于存储访问数据的访问数据报表,其中,预设的同步规则中包括以下至少之一:基于业务指标的统计粒度的第一同步规则

基于数据统计的时间维度的第二同步规则

基于数据统计的空间维度的第三同步规则

基于数据访问的访问频率的第四同步规则

[0009]可选地,该方法还包括:通过基于内存的键值数据库存储在第三时间段内的已查询的历史访问数据,其中,第三时间段大于第二时间段

[0010]可选地,通过预设的查询界面获取数据查询指令,并基于访问数据通过查询界面展示与数据查询指令对应的目标访问数据,包括:通过预设的查询界面获取数据查询指令,其中,查询界面中包括以下至少之一:融合分析业务界面

客流预测业务界面

乘客画像业务界面;通过
Java
数据库连接访问访问数据,并通过查询界面展示与数据查询指令对应的目标访问数据

[0011]可选地,该方法还包括:轨道交通管控系统中包括以下至少之一:路网指挥调度系统

自动售检票清算系统

票务管理系统

信息技术服务管理系统

资产管理系统

安防系统

[0012]根据本申请实施例的另一方面,还提供了一种轨道交通数据分析系统,包括:数据采集模块,用于采集轨道交通管控系统在第一时间段内的历史数据以及在第二时间段内的实时数据,其中,第一时间段大于第二时间段;数据存储管理模块,用于通过离线数据仓库存储历史数据以及通过基于分布式的事件流平台存储实时数据,并对历史数据进行抽取得到第一业务指标数据,对实时数据进行抽取得到第二业务指标数据;数据访问模块,用于通过列式数据库管理系统周期性地对第一业务指标数据和第二业务指标数据进行同步,得到访问数据;业务应用模块,用于通过预设的查询界面获取数据查询指令,并基于访问数据通过查询界面展示与数据查询指令对应的目标访问数据

[0013]根据本申请实施例的另一方面,还提供了一种非易失性存储介质,该非易失性存储介质包括存储的程序,其中,非易失性存储介质所在设备通过运行该程序执行上述的轨道交通数据分析方法

[0014]根据本申请实施例的另一方面,还提供了一种电子设备,该电子设备包括:存储器和处理器,其中,存储器中存储有计算机程序,处理器被配置为通过计算机程序执行上述的轨道交通数据分析方法

[0015]在本申请实施例中,采集轨道交通管控系统在第一时间段内的历史数据以及在第二时间段内的实时数据,其中,第一时间段大于第二时间段;通过离线数据仓库存储历史数据以及通过基于分布式的事件流平台存储实时数据,并对历史数据进行抽取得到第一业务指标数据,对实时数据进行抽取得到第二业务指标数据;通过列式数据库管理系统周期性地对第一业务指标数据和第二业务指标数据进行同步,得到访问数据;通过预设的查询界面获取数据查询指令,并基于访问数据通过查询界面展示与数据查询指令对应的目标访问数据

通过将离线数据仓库和列式数据库管理系统进行结合对轨道交通业务数据进行分析挖掘,以利用离线数据仓库的离线计算和低成本的优势,以及列式数据库管理系统的高本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.
一种轨道交通数据分析方法,其特征在于,包括:采集轨道交通管控系统在第一时间段内的历史数据以及在第二时间段内的实时数据,其中,所述第一时间段大于所述第二时间段;通过离线数据仓库存储所述历史数据以及通过基于分布式的事件流平台存储所述实时数据,并对所述历史数据进行抽取得到第一业务指标数据,对所述实时数据进行抽取得到第二业务指标数据;通过列式数据库管理系统周期性地对所述第一业务指标数据和所述第二业务指标数据进行同步,得到访问数据;通过预设的查询界面获取数据查询指令,并基于所述访问数据通过所述查询界面展示与所述数据查询指令对应的目标访问数据
。2.
根据权利要求1所述的方法,其特征在于,通过离线数据仓库存储所述历史数据以及通过基于分布式的事件流平台存储所述实时数据,包括:分别对所述历史数据和所述实时数据进行预处理操作,得到处理后的所述历史数据和所述实时数据;通过所述离线数据仓库存储处理后的所述历史数据,并通过所述基于分布式的事件流平台存储处理后的所述实时数据
。3.
根据权利要求2所述的方法,其特征在于,对所述历史数据进行抽取得到第一业务指标数据,包括:按照预设的业务分类标准对所述离线数据仓库存储的所述历史数据进行划分,得到多类轨道交通业务对应的历史业务数据,其中,多类所述轨道交通业务对应的实时历史业务数据中包括以下至少之一:客流数据

清算数据

服务数据

应急数据

票务数据

资产数据

安防数据

基础数据;对各类所述轨道交通业务对应的历史业务数据进行抽取,得到每类所述轨道交通业务对应的第一业务指标数据,其中,所述第一业务指标数据中包括以下至少之一:基础指标类数据

客流信息类数据

列车运营类数据

设备信息类数据

清算信息类数据

票务信息类数据

服务信息类数据
。4.
根据权利要求1所述的方法,其特征在于,通过列式数据库管理系统周期性地对所述第一业务指标数据和所述第二业务指标数据进行同步,得到访问数据,包括:按照预设的同步规则周期性地将所述第一业务指标数据和所述第二业务指标数据同步至所述列式数据库管理系统,得到所述访问数据,并生成用于存储所述访问数据的访问数据报表,其中,所述预设的同步规则中包括以下至少之一:基于业务指标的统计粒度的第一同步规则

...

【专利技术属性】
技术研发人员:李松昂于增孙方
申请(专利权)人:北京轨道交通路网管理有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1