【技术实现步骤摘要】
一种分布式储能系统二次调频控制方法及系统
本专利技术涉及电力储能
，更具体地，涉及一种分布式储能系统二次调频控制方法及系统。
技术介绍
储能技术主要是指电能的储存。储存的能量可以用做应急能源，也可以用于在电网负荷低的时候储能，在电网高负荷的时候输出能量，用于削峰填谷，减轻电网波动。能量有多种形式，包括辐射，化学的，重力势能，电势能，电力，高温，潜热和动力。能量储存涉及将难以储存的形式的能量转换成更便利或经济可存储的形式。大量储能目前主要由发电水坝组成，无论是传统的还是水泵抽水的。近年来，储能技术快速发展，在国家政策支持以及市场的引导下，储能成本明显降低。储能系统的快速发展给电力系统的安全稳定运行带来了新的生机，电池储能技术具有快速精确的响应能力，比传统调频手段更为高效。强化学习(reinforcementlearning)是一种重要的机器学习方法，在智能控制及分析预测等领域有许多应用，将人工智能技术应用到电力系统中是未来电力系统的一种发展趋势。因此，需要一种技术，以实现对分布式储能系统二次调频进行控制。...
【技术保护点】
1.一种分布式储能系统二次调频控制方法，所述方法包括：/n根据电力系统允许频率偏差范围，确定所述电力系统的系统频率状态区间；/n确定储能系统的状态区间；/n根据所述系统频率状态区间和所述状态区间，建立强化学习矩阵，确定强化学习学习率；/n对所述状态区间进行初始化；/n根据所述强化学习矩阵的更新策略，计算下一时刻所有动作的奖励值，采取奖励值最大的策略对应的选择动作；/n利用所述选择动作获取所述强化学习矩阵的某一元素的值，更新所述强化学习矩阵；/n当所述强化学习矩阵满足收敛条件时，将所述强化学习矩阵进行保存；利用所述经过保存的强化学习矩阵，对分布式储能系统二次调频进行控制。/n
【技术特征摘要】
1.一种分布式储能系统二次调频控制方法，所述方法包括：
根据电力系统允许频率偏差范围，确定所述电力系统的系统频率状态区间；
确定储能系统的状态区间；
根据所述系统频率状态区间和所述状态区间，建立强化学习矩阵，确定强化学习学习率；
对所述状态区间进行初始化；
根据所述强化学习矩阵的更新策略，计算下一时刻所有动作的奖励值，采取奖励值最大的策略对应的选择动作；
利用所述选择动作获取所述强化学习矩阵的某一元素的值，更新所述强化学习矩阵；
当所述强化学习矩阵满足收敛条件时，将所述强化学习矩阵进行保存；利用所述经过保存的强化学习矩阵，对分布式储能系统二次调频进行控制。
2.根据权利要求1所述的方法，所述强化学习矩阵的收敛条件为：
当所述强化学习矩阵在k次循环中没有变化，即Qi＝Qi+1＝Qi+2＝…＝Qi+k-1＝Qi+k，其中Qi、Qi+1、Qi+2、Qi+k-1、Qi+k分别为第i、i+1、i+2、i+k-1、i+k次循环得到的强化学习矩阵，其中Qi、Qi+1、Qi+2、Qi+k-1、Qi+k分别为第i、i+1、i+2、i+k-1、i+k次循环得到的强化学习矩阵，k值根据需要进行设定。
3.根据权利要求1所述的方法，当所述强化学习矩阵在达到预设的时间后仍不满足收敛条件，则停止计算下一时刻所有动作的奖励值。
4.根据权利要求1所述的方法，还包括，对所述强化学习矩阵Q进行归一化处理，归一化规则为：
其中Quni为归一化的强化学习矩阵Q，Qmax为强化学习矩阵Q中的最大元素。
5.根据权利要求1所述的方法，当奖励值最大的策略为多个时，任意采取其中一种选择动作。
6.一种分布式储能系统二次调频控制系统，所述系统包括：
第一初始单...
【专利技术属性】
技术研发人员：李相俊，马锐，刘汉民，贾学翠，田云峰，王上行，杨水丽，马会萌，董文琦，毛海波，史学伟，
申请(专利权)人：中国电力科学研究院有限公司，国网新源张家口风光储示范电站有限公司，国家电网有限公司，
类型：发明
国别省市：北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。