[发明专利]虚拟环境中的虚拟对象的调度方法、装置及设备

权利要求书

1.一种虚拟环境中的虚拟对象的调度方法，其特征在于，所述虚拟环境中包括至少两个虚拟对象以及供所述虚拟对象使用的虚拟资源，所述方法包括：

获取所述虚拟环境的应用程序在运行时产生的帧数据；

对所述帧数据进行特征提取得到目标虚拟对象在当前局面状态的状态特征，所述状态特征包括关联虚拟对象和所述虚拟资源的状态，所述关联虚拟对象包括所述目标虚拟对象以及与所述目标虚拟对象具有利益关系的虚拟对象；

根据对所述状态特征进行推演，得到N种后续状态特征，N为正整数，N≥2，所述N种后续状态特征是所述目标虚拟对象在执行N种调度策略后转化得到的特征，所述调度策略包括移动所述目标虚拟对象和所述目标虚拟对象执行行为；

调用价值网络预测模型对所述N种后续状态特征进行处理，得到所述目标虚拟对象执行N种调度策略的预期回报收益；

控制所述目标虚拟对象执行所述N种调度策略中预期回报收益最高的调度策略。

2.根据权利要求1所述的方法，其特征在于，所述虚拟环境的地图被划分为n个移动区域，所述n小于所述地图的像素值，n为正整数，n≥2；

所述对所述状态特征进行推演，得到N种后续状态特征，包括：

获取得到所述目标虚拟对象对应的m种行为，m为正整数，m≥1；

根据所述目标虚拟对象对应的m种行为以及所述n个移动区域，得到所述N种调度策略，所述调度策略包括移动至所述n个移动区域中的第i个移动区域执行所述m种行为中的第j种行为，i、j为正整数，1≤i≤n，1≤j≤m；

将所述N种调度策略作用于所述状态特征，根据预设的状态转移关系得到所述N种后续状态特征，所述状态转移关系用于表征状态特征被所述调度策略作用后的状态变化。

3.根据权利要求2所述的方法，其特征在于，所述地图被均匀划分为所述n个移动区域的阵列；或，所述地图按照所述虚拟资源的所在位置被划分为所述n个移动区域。

4.根据权利要求3所述的方法，其特征在于，所述对所述帧数据进行特征提取得到所述目标虚拟对象在当前局面状态中的状态特征，包括：

读取所述帧数据中所述关联虚拟对象的状态以及所述虚拟资源的状态，提取得到所述状态特征；

所述关联虚拟对象的状态包括所述关联虚拟对象的位置、体力值、攻击力值、防御力值、经验值、击杀数量、死亡数量以及经济值中的至少一种；

所述虚拟资源的状态包括所述虚拟资源的位置、体力值、攻击力值、防御力值、耐久值以及占据状态中的至少一种。

5.根据权利要求4所述的方法，其特征在于，所述至少两个虚拟对象分别属于至少两个相互敌对的阵营；

所述虚拟资源包括建筑、中立生物、军队、交通工具、武器以及弹药中的至少一种；

所述占据状态包括中立状态、控制状态、占有状态或争夺状态；

所述中立状态用于表征所述虚拟资源不能被归属于任一阵营；

所述控制状态用于表征所述虚拟资源所在的移动区域内具有同一阵营的至少一个所述虚拟对象；

所述占有状态用于表征所述虚拟资源归属的阵营；

所述争夺状态用于表征所述虚拟资源所在的移动区域内具有至少两个属于不同阵营的虚拟对象。