一种基于图计算的实时联机数据分析处理方法技术

技术编号:26342532 阅读:24 留言:0更新日期:2020-11-13 20:35
本发明专利技术公开了一种基于图计算的实时联机数据分析处理方法,包括OLTP业务系统,所述OLTP业务系统中包含界面层、应用层及数据库层,所述数据库层由业务数据库组成,所述业务数据库中包含业务数据,所述业务数据包括维度数据及与维度数据对应的事实数据,其特征在于,所述处理方法包括如下步骤:S1、数据梳理;S2、建立图数据库;S3、部署业务数据变化感知组件;S4、建立GOLAP事务处理引擎及GOLAP分析引擎;S5、变化业务数据处理;S6、建立Key‑value数据库;S7、Key‑value数据库数据输入。本发明专利技术采用上述结构,能够应对提高OLAP在线分析系统的响应时间,节约存储空间,保证数据分析的实时性。

A real time online data analysis and processing method based on graph computing

【技术实现步骤摘要】
一种基于图计算的实时联机数据分析处理方法
本专利技术涉及数据处理
,具体是一种基于图计算的实时联机数据分析处理方法。
技术介绍
联机分析处理(OLAP)系统是数据仓库系统最主要的应用,专门设计用于支持复杂的分析操作,侧重对决策人员和高层管理人员的决策支持,可以根据分析人员的要求快速、灵活地进行大数据量的复杂查询处理,并且以一种直观而易懂的形式将查询结果提供给决策人员,以便他们准确掌握企业的经营状况,了解对象的需求,制定正确的方案。OLAP按照物理模型可以分为ROLAP、MOLAP和HOLAP三种类型。ROLAP(RelationalOLAP,即:关系型OLAP)将多维的逻辑模型存储在关系数据库中;MOLAP(Multi-dimensionalOLAP,即:多维OLAP)在组织数据时,将数据存储在多维数组中;HOLAP(HybridOLAP,即:混合型OLAP)混合了ROLAP和MOLAP的方法,它允许模型设计者决定哪些数据存储在MOLAP中,哪些数据存储在ROLAP中。现有的OLAP系统存在如下问题:1、实时性问题,为了不本文档来自技高网...

【技术保护点】
1.一种基于图计算的实时联机数据分析处理方法,其特征在于,包括如下步骤:/nS1、维度获取,梳理业务数据库中的业务数据得到维度分类;/nS2、建立图数据库,根据步骤S1中的维度分类建立图数据库并初始化图数据库中各维度的关系;/nS3、数据监控,对业务数据进行监控得到实时数据;/nS4、数据输入,将步骤S3中的实时数据输入到图数据库相应的节点上;/nS5、预计算,对节点上实时数据的相关值进行相应的预计算得到计算值;/nS6、数据存储,存储步骤S5得到的计算值及与计算值相对应的维度。/n

【技术特征摘要】
1.一种基于图计算的实时联机数据分析处理方法,其特征在于,包括如下步骤:
S1、维度获取,梳理业务数据库中的业务数据得到维度分类;
S2、建立图数据库,根据步骤S1中的维度分类建立图数据库并初始化图数据库中各维度的关系;
S3、数据监控,对业务数据进行监控得到实时数据;
S4、数据输入,将步骤S3中的实时数据输入到图数据库相应的节点上;
S5、预计算,对节点上实时数据的相关值进行相应的预计算得到计算值;
S6、数据存储,存储步骤S5得到的计算值及与计算值相对应的维度。


2.根据权利要求1所述的一种基于图计算的实时联机数据分析处理方法,其特征在于,所述步骤S3与步骤S4之间还包括步骤S31、数据中转,实时数据由数据池进行数据中转;步骤S3得到的实时数据进入数据池,步骤S4从数据池中获取实...

【专利技术属性】
技术研发人员:冷友方张喜来田波
申请(专利权)人:成都双链科技有限责任公司
类型:发明
国别省市:四川;51

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1