一种基于强化学习的集群系统智能运维系统技术方案

技术编号:43614921 阅读:24 留言:0更新日期:2024-12-11 14:58
本发明专利技术涉及人工智能技术领域,尤其涉及一种基于强化学习的集群系统智能运维系统。该系统包括集群建模模块、多维态势感知模块、智能决策规划模块和效能评价模块,并结合多种强化学习算法,实现集群系统在复杂环境下的自主运维与动态管理。该系统通过引入深度Q网络(DQN)、Actor‑Critic蒙特卡洛树搜索(AC‑MCTS)和分布式近端策略优化(DPPO)等强化学习算法,优化维修时序和策略,从而降低系统的故障率和运维成本;快速恢复系统功能,减少系统因突发故障带来的性能损失;并确保任务协同与系统稳定性。

【技术实现步骤摘要】

本专利技术涉及人工智能,尤其涉及一种基于强化学习的集群系统智能运维系统


技术介绍

1、随着人类生存空间的日益拓展和全面协调可持续发展的愿景日益加深,集群系统已逐渐成为非常重要的代表性产品形态,如各类基础设施网络、各类装备集群、各类智能制造系统等。在集群系统运行过程中,其中的大规模设备的故障通常会导致非常严重的后果,甚至造成人员伤亡,有效的运维(operationand maintenance,o&m)是确保集群系统的持续安全稳定运行的必要手段。对于独立运行的设备而言,通常需要观测设备及其现场可更换单元(linerep laceable unit,lru)的状态,进而执行相应的运维工作。然而,不同于单设备的运维,集群系统层面的运维需要考虑大规模异质设备的运行状态,与此同时所有设备共享有限的运维资源,因此集群系统层面的运维需要考虑大规模决策空间,具有很多优化方案。当前集群系统的运维中仍存在数据利用不理想、外部环境信息复杂、维修周期不科学等难题,“事后维修”和“定期维修”等传统的运维模式通常在维修费用、保障资源等多方面均不是最优的运维解决方案,因此,向本文档来自技高网...

【技术保护点】

1.一种基于强化学习的集群系统智能运维系统,所述的集群系统为电力系统集群、无人机集群系统或工业储能系统中的大规模电池组集群系统,其特征在于,该系统包括:

2.根据权利要求1所述的集群系统智能运维系统,其特征在于,所述集群建模模块包括:

3.根据权利要求1所述的集群系统智能运维系统,其特征在于,所述集群建模模块的建立方法如下:

4.根据权利要求3所述的集群系统智能运维系统,其特征在于,所述多维态势感知模块包括:

5.根据权利要求3所述的集群系统智能运维系统,其特征在于,所述多维态势感知模块的数据结构建立方法如下:

<p>6.根据权利要求...

【技术特征摘要】

1.一种基于强化学习的集群系统智能运维系统,所述的集群系统为电力系统集群、无人机集群系统或工业储能系统中的大规模电池组集群系统,其特征在于,该系统包括:

2.根据权利要求1所述的集群系统智能运维系统,其特征在于,所述集群建模模块包括:

3.根据权利要求1所述的集群系统智能运维系统,其特征在于,所述集群建模模块的建立方法如下:

4.根据权利要求3所述的集群系统智能运维系统,其特征在于,所述多维态势感知模块包括:

5.根据权利要求3所述的集群系统智能运维系统,其特征在于,所述多维态势感知模块的数据结构建...

【专利技术属性】
技术研发人员:吴其隆祖天培李颖异李炳华张清源杨超康锐
申请(专利权)人:杭州市北京航空航天大学国际创新研究院北京航空航天大学国际创新学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1