[发明专利]一种风洞试验调度方法及系统

权利要求书

1.一种风洞试验调度方法，其特征在于，包括如下步骤：

步骤S10:构建管线连通网络模型；

步骤S20:根据所述管线连通网络模型，构建主管线与分支管线的连通矩阵C；

步骤S30:根据当前时间步内的风洞试验调度管线分配情况，构建状态空间S，状态空间S用于表示主管线与分支管线的连通关系与开闭状态；

步骤S40：构建动作空间A，用于表示是否开启分支管线的阀门；

步骤S50:以最大化管线的平均利用率为目标，计算时间周期T内的累计回报G_T；

步骤S60:引入策略函数π，将累计回报G_T转换为基于策略函数π的状态值函数和基于策略函数π的动作值函数；

步骤S70:求解最优的动作值函数，得出最优的策略。

2.如权利要求1所述的一种风洞试验调度方法，其特征在于，所述管线连通网络包括风洞试验动力资源、汇聚节点、风洞试验主体，其中，风洞试验动力资源、汇聚节点之间通过主管线连接，汇聚节点与风洞试验主体之间通过分支管线连接。

3.如权利要求2所述的一种风洞试验调度方法，其特征在于，所述连通矩阵C的元素c_ij∈[1，0]，其中，c_ij表示第i条主管线下是否存在第j条分支管线，c_ij＝1时，表示存在第i条主管线下的第j条分支管线；c_ij＝0时，表示不存在第i条主管线下的第j条分支管线。

4.如权利要求3所述的一种风洞试验调度方法，其特征在于，所述状态空间S的元素s_ij∈[1，0，-1]，其中，当s_ij＝1时，表示第i条主管线下存在第j条分支管线，且第i条主管线下的第j条分支管线处于开启状态；当时s_ij＝-1时，第i条主管线下存在第j条分支管线，且第i条主管线下的第j条分支管线处于关闭状态；s_ij＝0时，表示第i条主管线下不存在第j条分支管线。

5.如权利要求4所述的一种风洞试验调度方法，其特征在于，所述动作空间A的元素a_ij∈[1，-1]，其中，当a_ij＝1时，将第i条主管线下存在的第j条分支管线的阀门开启；当a_ij＝-1时，将第i条主管线下存在的第j条分支管线的阀门关闭。

6.如权利要求5所述的一种风洞试验调度方法，其特征在于，所述步骤S50中，

其中，时刻t+k属于时间周期T内的时刻点，R_t+k表示t+k时刻点的管线的平均利用率，将R_t+k作为t+k时刻的回报，k表示设定的时刻点的个数，γ是远期回报的折扣率。

7.如权利要求6所述的一种风洞试验调度方法，其特征在于，所述R_t+k通过以下公式计算：

其中，u_ij表示t+k时刻点第i条主管线下存在的第j条分支管线的利用率，s_ij即为上述的状态空间S的元素，d_ij表示t+k时刻点第i条主管线下存在的第j条分支管线的试验任务动力资源需求量，up_ij表示t+k时刻点第i条主管线下存在的第j条分支管线的容量上限，n表示主管线的总条数，m表示第i条主管线下存在的分支管线的数量，num表示分支管线的总条数。

8.如权利要求7所述的一种风洞试验调度方法，其特征在于，步骤S60中，基于策略函数π的状态值函数为V_π(s_ij)：

V_π(s_ij)＝E_π[R_t+1+γV_π(S_t+1)|S_t＝s_ij]

基于策略函数π的动作值函数为q_π：