一种企业级PaaS平台自动化部署的数据处理方法技术

技术编号:20246507 阅读:54 留言:0更新日期:2019-01-30 00:37
本发明专利技术公开了一种企业级PaaS平台自动化部署的数据处理方法,包括以下步骤:S1:PaaS平台服务器将集群创建参数加载到处理系统;S2:处理系统集群创建参数处理为以或以链接方式与相对应的数据记录产生连接耦合;S3:进行分布统计,得出分布式处理集群;S4:得出分布统计结果;S5:得出负载均衡的分区结果;S6:将所述分区结果配制到拓扑结构中的每台计算服务器;S7:得出各个分区的局部处理结果,并将其暂存;S8:根据处理系统的修正映射表修正全部分区的局部处理结果,合并得出全局处理结果;S9:PaaS平台服务器将数据处理结果提供给所述企业用户。本发明专利技术提高了并行集群系统的设备利用率、降低了全局计算时间,提高数据处理效率。

【技术实现步骤摘要】
一种企业级PaaS平台自动化部署的数据处理方法
本专利技术涉及PaaS平台
,具体为一种企业级PaaS平台自动化部署的数据处理方法。
技术介绍
PaaS平台把应用服务的运行和开发环境作为一种服务提供的商业模式。通过网络进行程序提供的服务称之为SaaS(SoftwareasaService),而云计算时代相应的服务器平台或者开发环境作为服务进行提供就成为了PaaS(PlatformasaService)。所谓PaaS实际上是指将软件研发的平台(计世资讯定义为业务基础平台)作为一种服务,以SaaS的模式提交给用户。因此,PaaS也是SaaS模式的一种应用。但是,PaaS的出现可以加快SaaS的发展,尤其是加快SaaS应用的开发速度。随着企业PaaS平台的发展,越来越多、越来越大的应用部署在企业PaaS平台上,由于数据产生的自动化进步,越来越多的应用要求将这些数量持续增长的数据流持久化保存下来,并进行后续的查询分析和数据挖掘,这对PaaS平台的海量数据的管理提出了严峻的挑战。因此,我们提出一种企业级PaaS平台自动化部署的数据处理方法。
技术实现思路
本专利技术的目的在于提供一种企业级P本文档来自技高网...

【技术保护点】
1.一种企业级PaaS平台自动化部署的数据处理方法,其特征在于,包括以下步骤:S1:PaaS平台服务器接收企业用户输入的集群创建参数,并将集群创建参数加载到处理系统;S2:处理系统将文本格式的集群创建参数处理为以每一条数据记录的文本格式,将非文本格式的集群创建参数处理为以链接方式与相对应的数据记录产生连接耦合;S3:对经过S2处理后的集群创建参数进行分布统计,得出分布式处理集群;S4:根据分布处理集群的分布状况,得出分布统计结果;S5:根据所述分布统计结果,得出负载均衡的分区结果;S6:将所述分区结果配制到拓扑结构中的每台计算服务器;S7:PaaS平台服务器将用于分析数据的脚本传输给所述计算服...

【技术特征摘要】
1.一种企业级PaaS平台自动化部署的数据处理方法,其特征在于,包括以下步骤:S1:PaaS平台服务器接收企业用户输入的集群创建参数,并将集群创建参数加载到处理系统;S2:处理系统将文本格式的集群创建参数处理为以每一条数据记录的文本格式,将非文本格式的集群创建参数处理为以链接方式与相对应的数据记录产生连接耦合;S3:对经过S2处理后的集群创建参数进行分布统计,得出分布式处理集群;S4:根据分布处理集群的分布状况,得出分布统计结果;S5:根据所述分布统计结果,得出负载均衡的分区结果;S6:将所述分区结果配制到拓扑结构中的每台计算服务器;S7:PaaS平台服务器将用于分析数据的脚本传输给所述计算服务器,通过所述拓扑结构中的每台计算服务器分别进行数据处理,得出各个分区的局部处理结果,并将其暂存;S8:根据处理系统的修正映射表修正全部分区的局部处理结果,合并得出全局处理结果;S9:PaaS平台服务器将数据处理结果提供给所述企业用户。2.根据权利要求1所述的一种企业级PaaS平台自动化部署的数据处理方法,其特征在于:所述S4中的集群分布状况处理步骤如下:1):根据所述集群创建参数,通过虚拟化技术生成一台虚拟机,并配置所述虚拟机的运行环境;2):根据所述集群创建参数中的节点的数量,复制1)所生成的虚拟机,生成所需数量的虚拟机;3):设置...

【专利技术属性】
技术研发人员:高静马壮业罗家辉
申请(专利权)人:广东恒电信息科技股份有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1