[发明专利]一种电热综合能源系统能量优化调度控制方法及装置

说明书

本发明提供了一种能量优化调度控制方法及装置。解决了综合能源系统由于受到天气变化的影响，使得再生能源发电是高度间歇性和随机性的，这些不确定性的资源与亦具有不确定性的用户电负荷和热负荷相结合，导致系统中供需双侧的随机变化，因此不利于综合能源系统的能量优化调度控制问题。所述一种能量优化调度控制方法包括：采集系统运行数据；基于所述系统运行数据和设备运行时段得到马尔可夫决策过程；基于所述马尔可夫决策过程和能源价格，通过深度强化学习模型制定能量优化调度控制策略；基于所述能量优化调度控制策略得到设备输出参数；基于所述设备输出参数控制设备运行。

技术领域

本发明涉及能量调度技术领域，具体涉及一种电热综合能源系统能量优化调度控制方法及装置。

背景技术

综合能源系统可实现能源的梯级利用以及多种能源的协调互补，是缓解环境压力的重要选择。在能源需求中，电能与热能是人类生活的基本需求，也是综合能源系统的两大主要能源形式。电热综合能源系统并非两个独立供能系统的直接叠加，而是通过对多种能量单元的协同调度控制，在更大范围内实现系统资源的优化配置。多种能量单元的共存和使用使得如何对电热综合能源系统进行调度控制以实现系统的运行优化得到广泛关注。然而，受天气变化的影响，系统中可再生能源发电是高度间歇性和随机性的。这些不确定性的资源与亦具有不确定性的用户电负荷和热负荷相结合，导致系统中供需双侧的随机变化，为电热综合能源系统的能量优化调度控制带来巨大挑战。

发明内容

有鉴于此，本发明实施例提供了一种电热综合能源系统能量优化调度控制方法及装置。解决了综合能源系统由于受到天气变化的影响，使得再生能源发电是高度间歇性和随机性的，这些不确定性的资源与亦具有不确定性的用户电负荷和热负荷相结合，导致系统中供需双侧的随机变化，因此不利于综合能源系统的能量优化调度控制问题。

本发明一实施例提供的一种电热综合能源系统能量优化调度控制方法及装置。包括：

采集系统运行数据；

基于所述系统运行数据和设备运行时段得到马尔可夫决策过程；

基于所述马尔可夫决策过程和能源价格，通过深度强化学习模型制定能量优化调度控制策略；

基于所述能量优化调度控制策略得到设备输出参数；

基于所述设备输出参数控制设备运行。

本发明一实施例中，所述得到马尔可夫决策过程包括得到马尔可夫决策过程的状态、动作和奖励函数。

本发明一实施例中，所述状态定义为：

s_t＝[p_load(t),h_load(t),p_RG(t),SOC(t),t]，

其中，t为设备运行时段，s_t为电热综合能源系统在设备运行时段t时的状态，P_load(t)为设备运行时段t时的用户电负荷，h_load(t)为设备运行时段t时的用户热负荷，P_RG(t)为可再生能源发电单元的输出功率，SOC(t)为电储能在设备运行时段t的荷电状态。

本发明一实施例中，所述动作定义为：