一种生态环保大数据算力资源管理系统技术方案

本发明专利技术公开了一种生态环保大数据算力资源管理系统，包括加工容器调度子系统以及与工容器调度子系统配合的容器平台管理子系统，通过加工容器调度子系统以及容器平台管理子系统搭建了用户使用容器的桥梁，使容器为生态环境大数据的算法产品加工与挖掘分析计算服务；本发明专利技术，设计并实现了一套面向容器平台的生态环境大数据算力资源优化管理系统，该系统包括加工容器调度和容器平台管理两个子系统；系统以生态环境大数据云平台为数据中台，基于Kubernetes的容器编排引擎，通过两个子系统的合理调度和配置，搭建了用户使用容器的桥梁，使容器高效、便捷地为各类生态环境大数据的算法产品加工与挖掘分析计算服务。法产品加工与挖掘分析计算服务。法产品加工与挖掘分析计算服务。

【技术实现步骤摘要】
一种生态环保大数据算力资源管理系统


[0001]本专利技术属于大数据算力
，具体为一种生态环保大数据算力资源管理系统。

技术介绍

[0002]同于虚拟机技术，容器技术通过打包应用程序的所有依赖，实现应用程序的快速部署和运行，开发、测试和生产环境完全一致，用户再也不用去定位因环境差异导致的各种异常问题，大大提高了生产效率。此外，容器技术还有跨平台、可移植的特性，对于开发者和系统管理员来说简单易用，容器技术直接解决的问题，就是目前云计算架构遇到的问题。
[0003]容器具有更小颗粒度的算力分配、更轻量和快捷的部署方式、灵活的任务调度等特点，近年来，以Docker为代表的容器技术愈来愈广泛的应用在云计算中。Docker在应用程序的开发、发布和部署上具有十分明显的优势，由于其简单、便捷、实用的特点，国内外知名的公司已经开始大规模的使用这一技术。但是，由于Docker本身只具备基本的容器管理功能，如：镜像的制作、下载和上传、容器生命周期的管理等，在大规模的容器技术运用中，需要一种容器集群管理系统来统一管理分布在集群中的各个容器，从而实现容器本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种生态环保大数据算力资源管理系统，其特征在于，包括数据模块，数据模块与加工容器调度子系统信号连接，加工容器调度子系统与容器平台管理子系统信号连接，其中加工容器调度子系统用于目标算法的部署和计算结果的获得，容器平台管理子系统用于实现容器的快速调度和调度结果反馈。2.根据权利要求1所述的一种生态环保大数据算力资源管理系统，其特征在于：所述数据模块为“大数据平台”SOD。3.根据权利要求1所述的一种生态环保大数据算力资源管理系统，其特征在于：所述加工容器调度子系统包括账户创建模块、资源授权模块、镜像制作模块、算法注册模块、算法加载模块、任务定义模块、任务启动模块、任务日志收集模块。4.根据权利要求3所述的一种生态环保大数据算力资源管理系统，其特征在于：所述加工容器调度子系统包括调度模块，用于用户在调度平台通过任务参数的设定实现任务的触发，任务被触发后，在容器平台中创建容器、执行任务并实时监控任务执行期间容器的使用情况。5.根据权利要求4所述的一种生态环保大数据算力资源管理系统，其特征在于：所述加工容器调度子系统还包括备份模块，用于通过部署多节点负载均衡实现，当某一节点镜像仓库服务故障时，会自动切换至正常镜像仓库，不影响服务正常使用；镜像仓库使用全量周备份、增量日备份的备份机制，并定时清理镜像数据。6.根据权利要求5所述的一种生态环保大数据算力资源管理系统，其特征在于：所述容器平台管理子系统包括节点预先模块，节点打分模块，算法仓库创建模块以及计算节点群模块，计算节点群模块包括容器模块以及镜像模块。7.根据权利要求6所述的一种生态环保大...

【专利技术属性】
技术研发人员：胡少文，王康，王蕾，
申请(专利权)人：江西省科技基础条件平台中心江西省计算中心，
类型：发明
国别省市：