一种基于强化学习的无极变频泵房节能降耗方法技术

本发明专利技术公开了一种基于强化学习的无极变频泵房节能降耗方法，属于自来水送水领域，包括以下步骤：步骤一：建立供水管网拓扑结构；步骤二：收集供水管网上数据、并进行清洗与预处理；步骤三：建立学习模型，并将步骤二中获得的供水管网数据输入值模型中，进行学习模型预训练；步骤四：对模型建立奖惩制度，强化学习模型在线训练和运行；步骤五：通过工控机生成现状调度方案，获得反馈数据后，PLC基于反馈数据使用PID差分计算方法进行逻辑运算，再负反馈进行频率控制，实现PID无极变频控制恒压供水。1、降低自来水厂运行电耗，降低自来水生产成本；2、有效稳定用水终端压力，提升供水质量；3、降低管网综合运行压力，降低漏损率，节约水资源。节约水资源。节约水资源。

【技术实现步骤摘要】
一种基于强化学习的无极变频泵房节能降耗方法


[0001]本专利技术涉及自来水送水
，尤其涉及基于强化学习的无极变频泵房节能降耗方法。

技术介绍

[0002]城镇自来水厂的能源消耗主要以电能形式呈现，其中电能消耗的约30％～50％为送水泵房的水泵电耗。送水泵用于将贮水池中的清水加压到城镇供水管网中，使其能以一定压力达到千家万户，满足居民的用水需求。在我国碳达峰碳中和、节能减排的大战略下，降低自来水厂送水泵的运行电耗具有重要意义。
[0003]目前自来水厂降低送水泵房能耗的主要通过以下两种方式：
[0004]1.在电力配置端使用节能器件，降低输配环节的电能损耗。
[0005]2.采用效率更高的水泵及电机，降低恒压送水环节的电能损耗。
[0006]以上两种节能方式均能有效降低能耗，但囿于理论上界的约束，效率提升幅度较小，一般在20％以内。目前通过优化泵房控制系统降低能耗的方法较少，且均是进行简单的水泵运转调度、变频恒压送水的
[0007]尚未出现使用强化学习结合无极变频技术进行自来水厂送水泵房节能降耗的方法。

技术实现思路

[0008]本专利技术的目的是为了解决现有技术中存在的缺陷，而提出的基于强化学习的无极变频泵房节能降耗方法。
[0009]为了实现上述目的，本专利技术采用了如下技术方案：
[0010]一种基于强化学习的无极变频泵房节能降耗方法，包括以下步骤：
[0011]步骤一：建立供水管网拓扑结构；
[0012]步骤二：收集供水管网上数据、并进行清洗与预处理；
[0013]步骤三：建立学习模型，并将步骤二中获得的供水管网数据输入值模型中，进行学习模型预训练；
[0014]步骤四：对模型建立奖惩制度，强化学习模型在线训练和运行；
[0015]步骤五：通过工控机生成现状调度方案，获得反馈数据后，PLC基于反馈数据使用PID差分计算方法进行逻辑运算，再负反馈进行频率控制，实现PID无极变频控制恒压供水。
[0016]进一步地，用于步骤一中，对供水管网进行测绘和统计后，结合地理信息建立管网拓扑结构，其中，拓扑结构将供水零部件中的管段和管节抽象作为水力组件。
[0017]进一步地，用于步骤二中，数据收集依托安装在供水管网上的传感终端及超声波流量终端，其中，传感终端及超声波流量终端将压力与流量数据回传到中控服务器。
[0018]进一步地，用于步骤二中，所述压力终端安装密度为每2
‑
4km主管(DN110及以上)安装一个终端，流量终端由供水分区情况确定。
[0019]进一步地，用于步骤二中，所述中控服务器通过滤波、去噪与模式识别，对压力与流量数据进行初步提取特征向量，随后，将特征向量存储在服务器的消息队列中，供后续模型的使用与工作。
[0020]进一步地，用于步骤三中，获得的供水管网数据包括但不限于输出压力、终端压力、节点流量、日期和时间。
[0021]进一步地，用于步骤四中，运行后，先输入前一时间片段的所有压力数据，并确定随后一时间片段的恒压值，其中，在后一时间片段，收集供应区反馈的数据，对强化学习模型进行惩罚或奖励，惩罚或奖励的规则为：
[0022]若终端水压与最佳水压区间有所偏离，则对模型进行惩罚，在运行期间持续上述在线训练过程；
[0023]反之，则进行奖励。
[0024]进一步地，用于步骤五中，PID无极变频控制的硬件部分包括但不限于变频器、可编程控制器(PLC)、接触器控制柜与工控机，其中，所述工控机用于生成现状调度方案和控制PLC获得最佳变频频率，再由变频器拖动电动机的方式发挥作用。
[0025]进一步地，用于步骤五中，在无极变频的每个时间片段，供应区的传感终端会反馈压力及流量，变频器会反馈现状电机频率，PLC按照上述两个信号使用PID差分计算方法进行逻辑运算，再负反馈进行频率控制，在一个时间片段内实现恒压供水。
[0026]相比于现有技术，本专利技术的有益效果在于：
[0027]1、降低自来水厂运行电耗，降低自来水生产成本；
[0028]2、有效稳定用水终端压力，提升供水质量；
[0029]3、降低管网综合运行压力，降低漏损率，节约水资源；
[0030]4、利用终端传感器的压力和流量数据，利用强化学习模型学习供水区的用水特性(时间、用量分布)，通过优化控制模式降低送水泵房的能耗，将原有“出厂恒压送水”变为“终端恒压供水”，结合无极变频技术，优化调度模式，使水泵始终运转于最优效率区间。
附图说明
[0031]附图用来提供对本专利技术的进一步理解，并且构成说明书的一部分，与本专利技术的实施例一起用于解释本专利技术，并不构成对本专利技术的限制。
[0032]图1为本专利技术提出的基于强化学习的无极变频泵房节能降耗方法的逻辑图。
具体实施方式
[0033]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。
[0034]在本实施例中：吨水电耗为供应一吨水所消耗的电能。
[0035]公式为
[0036][0037]其中，γ＝0.00272为水能转换常数，η1η2分别为水泵和电机的运转效率。
[0038]因此，在不改变硬件设施的情况下，只有降低瞬时出水压力p0(t)，才能降低吨水
电耗。
[0039]综上，本调度算法的直接优化目标为：在保证供水网络所有节点均满足市政压力要求的前提下，尽可能调低出厂水恒压值。
[0040]参照图1，基于强化学习的无极变频泵房节能降耗方法，包括以下步骤：
[0041]步骤一：建立供水管网拓扑结构；
[0042]具体的，对供水管网进行测绘和统计后，结合地理信息建立管网拓扑结构，其中，拓扑结构将供水零部件中的管段和管节抽象作为水力组件。
[0043]步骤二：收集供水管网上数据、并进行清洗与预处理；
[0044]具体的，数据收集依托安装在供水管网上的传感终端及超声波流量终端，其中，传感终端及超声波流量终端将压力与流量数据回传到中控服务器。
[0045]步骤三：建立学习模型，并将步骤二中获得的供水管网数据输入值模型中，进行学习模型预训练；
[0046]具体的，获得的供水管网数据包括但不限于输出压力、终端压力、节点流量、日期和时间。
[0047]步骤四：对模型建立奖惩制度，强化学习模型在线训练和运行；
[0048]步骤五：通过工控机生成现状调度方案，获得反馈数据后，PLC基于反馈数据使用PID差分计算方法进行逻辑运算，再负反馈进行频率控制，实现PID无极变频控制恒压供水。
[0049]具体的，PID无极变频控制的硬件部分包括但不限于变频器、可编程控制器(PLC)、接触器控制柜与工控机，其中，所述工控机用于生成现状调度方案和控制PLC获得最佳变频频率，再由变频器拖动电本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于强化学习的无极变频泵房节能降耗方法，其特征在于，包括以下步骤：步骤一：建立供水管网拓扑结构；步骤二：收集供水管网上数据、并进行清洗与预处理；步骤三：建立学习模型，并将步骤二中获得的供水管网数据输入值模型中，进行学习模型预训练；步骤四：对模型建立奖惩制度，强化学习模型在线训练和运行；步骤五：通过工控机生成现状调度方案，获得反馈数据后，PLC基于反馈数据使用PID差分计算方法进行逻辑运算，再负反馈进行频率控制，实现PID无极变频控制恒压供水。2.根据权利要求1所述的基于强化学习的无极变频泵房节能降耗方法，其特征在于，用于步骤一中，对供水管网进行测绘和统计后，结合地理信息建立管网拓扑结构，其中，拓扑结构将供水零部件中的管段和管节抽象作为水力组件。3.根据权利要求1所述的基于强化学习的无极变频泵房节能降耗方法，其特征在于，用于步骤二中，数据收集依托安装在供水管网上的传感终端及超声波流量终端，其中，传感终端及超声波流量终端将压力与流量数据回传到中控服务器。4.根据权利要求3所述的基于强化学习的无极变频泵房节能降耗方法，其特征在于，用于步骤二中，所述压力终端安装密度为每2
‑
4km主管(DN110及以上)安装一个终端，流量终端由供水分区情况确定。5.根据权利要求4所述的基于强化学习的无极变频泵房节能降耗方法，其特征在于，用于步骤二中，所述中控服务器通过滤波、去噪与模式...

【专利技术属性】
技术研发人员：夏泽鑫，
申请(专利权)人：夏泽鑫，
类型：发明
国别省市：