一种基于边缘计算的多数据虚拟化集群管理系统技术方案

技术编号:39415814 阅读:8 留言:0更新日期:2023-11-19 16:06
本发明专利技术涉及通信系统技术领域,提出了一种基于边缘计算的多数据虚拟化集群管理系统,包括多数据智能分析系统、算法模型训练系统以及边缘计算终端,多数据智能分析系统包括数据管理、数据分析、模型管理、边缘管理和接口处理五个模块,算法模型训练系统包括数据集管理模块、算法管理模块、模型训练模块、模型测试模块、模型管理模块、模型发布模块,边缘计算终端包括数据处理模块和应用管理模块;该系统可以将全部的、相互独立的硬件资源,包括CPU、内存、存储设备等整合在一个统一的资源池内,然后根据需要在资源池内建立虚拟服务器,在虚拟服务器上建立虚拟主机,从而实现所有硬件资源和应用软件、操作系统的统一管理。操作系统的统一管理。操作系统的统一管理。

【技术实现步骤摘要】
一种基于边缘计算的多数据虚拟化集群管理系统


[0001]本专利技术涉及一种基于边缘计算的多数据虚拟化集群管理系统
,具体的,涉及一种基于边缘计算的多数据虚拟化集群管理系统。

技术介绍

[0002]随着,移动互联网与物联网业务的快速增长,5G时代的到来,新型业务需要更低的网络时延为用户提供更好的体验,同时应用与业务对低时延提出了更高要求。边缘计算利用网络中用户和边缘网络设备的计算和存储功能,承载部分核心节点中的控制、管理、业务功能,即能够提升传统移动宽带业务能力又能应对新兴的机器类业务。
[0003]5G是将以人为中心的通信扩展到同时以人和物为中心的通信,人机无线通信在众多行业和经济领域的应用不断增多,对无线网络提出了广泛的需求,这些需求主要体现b在无线传输速率、移动性、终端功耗、时延和可靠性等方面。边缘计算作为一种新的部署方案,通过把小型数据中心或带有缓存、计算处理能力的节点部署在网络边缘,与移动设备、传感器和用户紧密相连,减少核心网络负载,降低数据传输时延。
[0004]经检索,现有专利(申请公布号:CN115225450A)公开了一种基于边缘计算的多数据机房虚拟化集群管理系统,该系统包括管理终端、虚拟局域网及边缘计算模块;管理终端,用于数据机房的统一计算与管理;虚拟局域网,用于建立各数据机房之间的通信;边缘计算模块,用于创建边缘节点,将所述边缘节点的创建信息存储,并实现各数据机房的调控。本专利技术通过虚拟化集群管理,每一个机房从机都可以独立存在,独立计算,独立工作,无需依赖上层平台,可以省去上层平台建设的步骤,有一个机房宕机也不会影响其他机房工作,通过虚拟化集群管理系统直接进行管理,集群不相互依赖,分工明确,大幅度提高开发效率。
[0005]然而在实施相关技术中发现上述存在以下问题:(1):上述基于边缘计算的多数据机房虚拟化集群管理系统,由单独的服务器、网络、存储设备等硬件和操作系统、应用软件组成,每增加一项新的应用,就要相应的增加与之配套的硬件设备;长此以往,一方面使企业背上了沉重的经济负担,同时也增加了系统管理员的管理维护的工作量和难度,不利于企业信息化的开展;(2)由于电力网络带宽资源有限,各路视频流不能实时上传汇聚到数据中心存储,而是存在现场本地的各个厂家NVR设备(网络录像机)中,如需要调阅视频,就要通过远程视频下载后进行视频监视回放,或通过视频统一平台分配的权限进行远程单路调阅视频录像,通过视频监视发现事故或安全监察完全依靠人工,耗时费力,无法达到生产安全的事前预防、事中监视、事后分析的效果。

技术实现思路

[0006]本专利技术提出一种基于边缘计算的多数据虚拟化集群管理系统,旨在有效解决电网现有视频平台传输数据量大而带宽资源有限、网络时延大、实时性要求高的问题。
[0007]本专利技术的技术方案如下:一种基于边缘计算的多数据虚拟化集群管理系统,包括:
多数据智能分析系统、算法模型训练系统以及边缘计算终端,所述多数据智能分析系统包括数据管理、数据分析、模型管理、边缘管理和接口处理五个模块;
[0008]所述数据管理模块用于从边缘计算终端获取数据信息,实现事件图片、短视频、事件告警信息的采集和存储管理;
[0009]所述数据分析模块通过对数据进行深度分析,提供应用展示;
[0010]所述模型管理模块用于对图像识别、人脸比对、设备识别、越界识别、违规识别、险情识别等算法模型进行分类管理;
[0011]所述边缘管理模块用于实现模型下发、权限管理、设备管理和应用管理;
[0012]所述接口管理模块用于实现安全控制、云边接口和第三方应用接口。
[0013]进一步的,所述模型下发根据实际业务单位智能分析的需要,将算法模型下发到相应的边缘计算终端中,所述权限管理用于对每个边缘计算终端进行身份认证,为不同用户创建专属服务账号,设置使用权限,所述设备管理用于对边缘计算终端进行配置管理,实时监测设备运行状态,所述应用管理用于实现对算法模型升级、卸载、参数配置,管理各个边缘计算终端上的算法模型种类和版本号。
[0014]进一步的,所述安全控制用于对接收到的数据进行解密,对发送的数据进行加密,所述云边接口用于处理与边缘计算终端的应用类数据和管理类数据,所述第三方应用接口用于为电力业务应用系统提供接口服务。
[0015]进一步的,所述算法模型训练系统包括:数据集管理模块、算法管理模块、模型训练模块、模型测试模块、模型管理模块、模型发布模块。
[0016]进一步的,所述数据集管理模块包括数据上传单元和分类管理单元,所述数据上传单元用于创建数据集,并将线下采集数据或第三方数据上传至数据集,所述分类管理单元用于对数据集进行管理。
[0017]进一步的,所述算法管理模块包括:深度学习单元、开源算法单元和自定义算法单元。
[0018]进一步的,所述模型测试模块用于对训练出的模型质量进行在线测试,所述模型管理模块用于实现模型库管理、模型操作功能,所述模型训练模块包括:参数配置单元、模型训练单元、设备管理单元和应用管理单元,用于根据训练任务选择相关参数,完成模型训练,所述模型发布模块用于将已训练好的模型,发布到具体业务场景中使用。
[0019]进一步的,所述边缘计算终端包括:数据处理模块和应用管理模块,所述数据处理模块又包含数据采集存储单元、智能分析单元、数据业务处理单元,所述应用管理模块又包应用管理单元、设备管理单元、联动控制单元以及接口管理单元。
[0020]进一步的,所述数据采集存储单元用于从Modbus工业设备、仪器仪表、高清网络摄像机、各种传感器等设备采集视频、表计、传感数据,对采集到的数据进行存储;
[0021]所述智能分析单元用于对采集到的视频数据实时进行分析处理,并对异常数据信息以图像和告警事件方式上报多数据智能分析系统;
[0022]所述数据业务处理单元用于实现与智能分析单元之间的数据交换,组织上传告警信息、事件图片以及小视频流到多数据智能分析系统;
[0023]所述应用管理单元用于对多数据智能分析系统下发的算法模型,进行参数配置、版本更新、卸载,同时还接收控制指令,组织上报本地的算法模型种类、版本号、设备状态和
设备日志;
[0024]所述设备管理单元用于监测边缘计算终端运行状态,管理视频终端设备、感知设备、传感设备、控制设备的接入,根据实际应用需求合理分配接口资源;
[0025]所述联动控制单元用于接收控制指令并控制所辖的智能终端设备。
[0026]进一步的,所述接口管理单元包含边云接口、边端接口的管理,所述边云接口负责边缘计算终端与多数据智能分析系统的数据交互,所述边端接口负责边缘计算终端与多数据智能分析系统的数据信息交互。
[0027]本专利技术的工作原理及有益效果为:
[0028]1、本专利技术中;该一种基于边缘计算的多数据虚拟化集群管理系统利用硬件抽象,可以将全部的、相互独立的硬件资源,包括CPU、内存、存储设备等整合在一个统一的资本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于边缘计算的多数据虚拟化集群管理系统,包括:多数据智能分析系统、算法模型训练系统以及边缘计算终端,其特征在于:所述多数据智能分析系统包括数据管理、数据分析、模型管理、边缘管理和接口处理五个模块;所述数据管理模块用于从边缘计算终端获取数据信息,实现事件图片、短视频、事件告警信息的采集和存储管理;所述数据分析模块通过对数据进行深度分析,提供应用展示;所述模型管理模块用于对图像识别、人脸比对、设备识别、越界识别、违规识别、险情识别等算法模型进行分类管理;所述边缘管理模块用于实现模型下发、权限管理、设备管理和应用管理;所述接口管理模块用于实现安全控制、云边接口和第三方应用接口。2.根据权利要求1所述的一种基于边缘计算的多数据虚拟化集群管理系统,其特征在于:所述模型下发根据实际业务单位智能分析的需要,将算法模型下发到相应的边缘计算终端中,所述权限管理用于对每个边缘计算终端进行身份认证,为不同用户创建专属服务账号,设置使用权限,所述设备管理用于对边缘计算终端进行配置管理,实时监测设备运行状态,所述应用管理用于实现对算法模型升级、卸载、参数配置,管理各个边缘计算终端上的算法模型种类和版本号。3.根据权利要求1所述的一种基于边缘计算的多数据虚拟化集群管理系统,其特征在于:所述安全控制用于对接收到的数据进行解密,对发送的数据进行加密,所述云边接口用于处理与边缘计算终端的应用类数据和管理类数据,所述第三方应用接口用于为电力业务应用系统提供接口服务。4.根据权利要求1所述的一种基于边缘计算的多数据虚拟化集群管理系统,其特征在于:所述算法模型训练系统包括:数据集管理模块、算法管理模块、模型训练模块、模型测试模块、模型管理模块、模型发布模块。5.根据权利要求4所述的一种基于边缘计算的多数据虚拟化集群管理系统,其特征在于:所述数据集管理模块包括数据上传单元和分类管理单元,所述数据上传单元用于创建数据集,并将线下采集数据或第三方数据上传至数据集,所述分类管理单元用于对数据集进行管理。6.根据权利要求4所述的一种基于边缘计算的多数据虚拟化集群管理系统,其特征在于:所述算法管理模...

【专利技术属性】
技术研发人员:何源汪彦刘恢周向前孙瑶程华明黄斌李忍陈羽
申请(专利权)人:江苏智融能源科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1