[发明专利]一种基于强化学习的空调系统的水泵设备运行控制系统

说明书

一种基于强化学习的空调系统的水泵设备运行控制系统，水泵能耗测量模块用于测量空调系统的水泵设备实际能耗；室外环境感应测量模块用于测量室外环境；室内环境感应测量模块用于得到综合反馈当量值；水泵控制系统用于控制水泵设备；水泵运行工况反馈模块用于反馈水泵运行工况参数；智能控制模块获取参数数据，通过优化计算后得到水泵设备的最优运行设定参数点，并根据水泵设备的最优运行设定参数点控制水泵设备。本发明提出一种于强化学习的空调系统的水泵设备运行控制系统，适应环境变化能力更强，计算流程更为简单，具有更加广阔的发展前景。

技术领域

本发明涉及空调水泵控制领域，尤其涉及一种基于强化学习的空调系统的水泵设备运行控制系统。

背景技术

对于很多建筑来说，建设空调系统是必不可少的，其中控制空调系统中的水泵设备就是非常重要的一个环节，传统的水泵设备的控制无法实现在室内室外的综合环境条件下，兼顾人员热舒适和能耗的空调系统水泵优化控制。

发明内容

本发明的目的在于针对背景技术中的缺陷，提出一种于强化学习的空调系统的水泵设备运行控制系统，通过优化计算后得到水泵设备的最优运行设定参数点，并根据水泵设备的最优运行设定参数点控制水泵设备，适应环境变化能力更强，计算流程更为简单，在此基础上的进一步优化空间更大，具有更加广阔的发展前景。

为达此目的，本发明采用以下技术方案：

一种基于强化学习的空调系统的水泵设备运行控制系统，包括水泵能耗测量模块、室外环境感应测量模块、室内环境感应测量模块、水泵控制系统、水泵运行工况反馈模块和智能控制模块；

所述水泵能耗测量模块用于测量空调系统的水泵设备实际能耗；

所述室外环境感应测量模块用于测量室外环境，得到室外环境的参数；

所述室内环境感应测量模块用于测量客流量和室内环境，得到客流量参数，通过计算室外环境参数和客流量参数得到综合反馈当量值；

所述水泵控制系统用于控制水泵设备；

所述水泵运行工况反馈模块用于反馈水泵运行工况参数；

所述智能控制模块连接并获取所述水泵能耗测量模块、室外环境感应测量模块、室内环境感应测量模块、水泵控制系统、水泵运行工况反馈模块上传的参数数据，通过优化计算后得到水泵设备的最优运行设定参数点，并根据水泵设备的最优运行设定参数点控制水泵设备。

优选的，智能控制模块控制水泵设备包括读取环境信息、计算动作奖励值、智能学习过程、动作选择过程和环境交互过程；

其中，读取环境信息包括获取室外环境信息、室内环境信息、能耗信息和底层控制器运行状态信息，并从上述环境信息中提取对应参数，求取最佳室内设定点；

包括使用下列公式获得最佳室内设定点；

K＝f(K₁，K₂，K₃，K₄)--公式二；

其中：K₁，K₂，K₃，K₄，K分别表示中间系数，用于公式转换计算用；

T_out表示实时室外温度；

N表示实时室外风速；

V_out表示实时客流量；

V_in表示实时室内风速；

f()表示热舒适理论的PMV计算函数；