一种基于云平台的数据分析即服务系统技术方案

技术编号:17667536 阅读:39 留言:0更新日期:2018-04-11 05:49
本发明专利技术公开了一种基于云平台的数据分析即服务系统,访问Glance来获取KingbaseDP镜像文件,通过Neutron配置集群的网络,通过Nova来创建和管理虚拟机,使用Swift保存任务的数据源文件和执行结果,使用配置文件的形式来配置KingbaseDP集群。提供Horezon界面和REST API给用户使用,用户可通过Horizon界面来完成集群部署和任务执行的所有操作。本发明专利技术的有益效果:能实现自动化部署KingbaseDP集群,减少维护成本,节约安装集群的时间,简化KingbaseDP任务的操作,以降低操作人员所要学习的技能。

A cloud platform based data analysis service system

【技术实现步骤摘要】
一种基于云平台的数据分析即服务系统
本专利技术涉及大数据
,具体来说,涉及一种基于云平台的数据分析即服务系统。
技术介绍
KingbaseDP是北京人大金仓信息技术股份有限公司研发的大数据处理计算框架,KingbaseBigdataCloud项目旨在使用户能够在Openstack平台上便于创建和管理KingbaseDP计算框架集群,实现类似AWS的EMR(AmazonElasticMapReduceservice)服务。用户只需要提供简单的参数,如版本信息、集群拓扑、节点硬件信息等,利用KingbaseBigdataCloud服务能够在数分钟时间内快速地部署KingbaseDP集群。KingbaseBigdataCloud还支持节点的弹性扩展,能够方便地按需增加或者减少计算节点,实现弹性数据计算服务。它特别适合开发人员或者QA在Openstack平台上快速部署大数据处理计算集群。并提供与亚马逊EMR类似,为临时的或突发的数据分析任务,提供数据分析即服务(AnalyticsasaService)。以下为本文中可能涉及的专业术语:KingbaseBigdataCloud:本专利技术本文档来自技高网...
一种基于云平台的数据分析即服务系统

【技术保护点】
一种基于云平台的数据分析即服务系统,其特征在于,包括计算框架集群、数据访问层、数据存储访问层、远程接口、第三方插件和配置引擎,所述第三方插件、所述数据访问层和所述数据存储访问层分别与所述计算框架集群连接,所述第三方插件分别与所述远程接口和所述配置引擎连接,所述配置引擎与所述远程接口连接;所述远程接口连接有若干虚拟机,所述若干虚拟机构成Openstack计算模块;所述配置引擎通过Heat连接有Nove、Glance、Cinder和Neutron,Nove、Glance、Cinder和Neutron与Openstack计算模块连接,Glance用于获取所述计算框架集群的镜像文件,Neutron用于...

【技术特征摘要】
1.一种基于云平台的数据分析即服务系统,其特征在于,包括计算框架集群、数据访问层、数据存储访问层、远程接口、第三方插件和配置引擎,所述第三方插件、所述数据访问层和所述数据存储访问层分别与所述计算框架集群连接,所述第三方插件分别与所述远程接口和所述配置引擎连接,所述配置引擎与所述远程接口连接;所述远程接口连接有若干虚拟机,所述若干虚拟机构成Openstack计算模块;所述配置引擎通过Heat连接有Nove、Glance、Cinder和Neutron,Nove、Glance、Cinder和Neutron与Openstack计算模块连接,Glance用于获取所述计算框架集群的镜像文件,Neutron用于配置所述计算框架集群的网络,Nova用于创建和管理虚拟机;所述计算框架集群和所述Openst...

【专利技术属性】
技术研发人员:刘果
申请(专利权)人:北京人大金仓信息技术股份有限公司
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1