一种轨道交通数据分析方法、装置、设备及存储介质制造方法及图纸

技术编号:26342482 阅读:58 留言:0更新日期:2020-11-13 20:34
本申请实施例公开了一种轨道交通数据分析方法、装置、设备及存储介质。本申请实施例提供的技术方案通过对轨道交通数据中的数据源、元数据、数据集以及数据标准进行数据汇集,并根据数据汇集结果进行数据分析、统计分析、数据共享以及数据治理,对轨道交通数据进行汇聚分析以及共享治理,有效打破轨道交通上的数据孤岛,并实现对轨道交通的数据采集和整理提供统一的数据标准,实现跨专业数据的有效整合和深度应用,实现多专业异构数据融合后的应用创新。

A rail transit data analysis method, device, equipment and storage medium

【技术实现步骤摘要】
一种轨道交通数据分析方法、装置、设备及存储介质
本申请实施例涉及计算机
,尤其涉及一种轨道交通数据分析方法、装置、设备及存储介质。
技术介绍
随着云计算、大数据时代的到来,尤其是近几年全国范围内地铁基础数据信息资源的体量呈现快速增长态势,与此同时,各类信息应用需求更是日益复杂,对数据服务与应用支撑能力提出越来越高的要求。当前支撑城市轨道交通智慧管理、智慧运维、智慧运营、安全保障、应急处置、智慧服务的应用基础数据库仍然薄弱,面临的问题也日益突出。城市轨道交通的长期发展促生了多个业务系统的烟囱式建设,导致数据孤岛问题严重。
技术实现思路
本申请实施例提供一种轨道交通数据分析方法、装置、设备及存储介质,以解决轨道交通数据的数据孤岛问题,实现多专业异构数据的融合。在第一方面,本申请实施例提供了一种轨道交通数据分析方法,包括:对轨道交通数据进行数据汇集,所述轨道交通数据包括数据源、元数据、数据集以及数据标准;基于所述数据汇集结果进行数据分析以及统计分析,所述数据分析包括数据流程管理、项目目录管理以本文档来自技高网...

【技术保护点】
1.一种轨道交通数据分析方法,其特征在于,包括:/n对轨道交通数据进行数据汇集,所述轨道交通数据包括数据源、元数据、数据集以及数据标准;/n基于所述数据汇集结果进行数据分析以及统计分析,所述数据分析包括数据流程管理、项目目录管理以及函数配置,所述统计分析包括交互式查询、报表工具以及机器学习;/n基于所述数据汇集结果进行数据共享以及数据治理,所述数据共享包括数据共享管理以及数据共享收费,所述数据治理包括质量分析、血缘分析以及元数据分析。/n

【技术特征摘要】
1.一种轨道交通数据分析方法,其特征在于,包括:
对轨道交通数据进行数据汇集,所述轨道交通数据包括数据源、元数据、数据集以及数据标准;
基于所述数据汇集结果进行数据分析以及统计分析,所述数据分析包括数据流程管理、项目目录管理以及函数配置,所述统计分析包括交互式查询、报表工具以及机器学习;
基于所述数据汇集结果进行数据共享以及数据治理,所述数据共享包括数据共享管理以及数据共享收费,所述数据治理包括质量分析、血缘分析以及元数据分析。


2.根据权利要求1所述的轨道交通数据分析方法,其特征在于,所述对轨道交通数据进行数据汇集,包括:
对接轨道交通数据中的数据源并以资源目录的形式对数据源进行配置和管理,所述数据源的类型包括JDBC/ODBC数据库、FTP、HTTP、Socket、ElasticSearch中的一种或多种;
以资源目录的形式管理轨道交通数据中结构化和/或可解析的数据结构元数据,对关系型数据库以及CSV类需解析的文件生成元数据;
以数据集的形式管理结构化和/或可解析的轨道交通数据,并构建资源目录和/或数据仓库;
将不同语义的轨道交通数据按照设定标准转换为统一标准数据,所述设定数据标准采用资源目录的形式进行配置和管理。


3.根据权利要求1所述的轨道交通数据分析方法,其特征在于,基于所述数据汇集结果进行数据分析包括:
将轨道交通数据的数据处理单元拖拽并组合成有向无环图,形成数据流程,通过数据流程管理功能,进行数据批处理、流计算以及混合调用流程的编排、运行及监控;
通过Browser组件接入目录管理请求,通过Gateway进行验证并将目录管理请求分发至AppServer,由AppServer中数据源APP与元数据库交互,以集中数据集、元数据和数据流程;
通过Browser组件接入函数配置请求,通过Gateway进行验证并将函数配置请求分发至PlatformServer,由PlatformServer与元数据库交互,实现函数配置功能。


4.根据权利要求1所述的轨道交通数据分析方法,其特征在于,基于所述数据汇集结果进行统计分析包括:
通过Browser组件接入交互查询请求,通过Gateway进行验证,并根据查询类型对轨道交通数据进行交互查询;
通过Browser组件接入报表请求,通过Gateway进行验证并将报表请求分发至AppServer,由AppServer中报表工具APP与元数据库交互,对报表配置参数、指标元数据执行报表工具功能;
通过Browser组件接入学习请求,通过Gateway进行验证并将学习请求分发至PlatformServer,由PlatformServer与元数据库交互,并执行机器学习流程。


5.根据权利要求1所述的轨道交通数据分析方法,其特征在于,基于所述数据汇集结果进行数据共享包括:
由数据库交换接口将交换策略定制的数据集增量和/或全量推送到设定的数据交换前置服务器;
由文件交换接口将交换策略定制的数据集按设定格式要求生成交换文件,并推送到设定的数据交换前置服务器;
由RestAPI服务交换接口将交换策略定制的数据集按标准格式要求生成Restful接口服务,并在设定的服务器进行发布;
对发布的数据资源进行数据申请和/或数据订阅的共享,通过Browser组件接入共享请求,通过Gateway进行验证并将共享请求分发至AppServer,由AppServer中数据共享消费APP组件进行数据共享。


6.根据权利要求1所述的轨道交通数据分析方法,其特征在于,基于所述数据汇集结果进行数据治理包括:
通过Browser组件接入质量分析请求,通过Gateway进行验证并将质量分析请求分发至AppServer,由AppServer中数据质量APP与元数据库交互,并进行质量分析;
通过Brows...

【专利技术属性】
技术研发人员:郑炜龙贾沛吴志秋
申请(专利权)人:广州新科佳都科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1