[发明专利]油田的注水数据的处理方法、装置、存储介质和处理器

权利要求书

1.一种油田的注水数据的处理方法，其特征在于，包括：

获取油水井的当前生产数据；

通过第一目标模型对所述当前生产数据进行处理，得到第一目标注水数据，其中，所述第一目标模型通过基于所述油水井的第一历史生产数据进行强化学习训练得到，所述第一目标注水数据用于指示对所述油水井进行的第一目标注水策略；

按照所述第一目标注水策略对所述油水井进行注水，得到所述油水井的第一生产数据；

其中，在按照所述第一目标注水策略对所述油水井进行注水，得到所述油水井的第一生产数据之后，所述方法还包括：根据所述第一生产数据更新所述第一目标模型；按照更新后的所述第一目标模型对所述第一生产数据进行处理，得到第二目标注水数据，其中，所述第二目标注水数据用于指示对所述油水井进行的第二目标注水策略；按照所述第二目标注水策略对所述油水井进行注水，得到所述油水井的第二生产数据；在按照所述第二目标注水策略对所述油水井进行注水，得到所述油水井的第二生产数据之后，所述方法还包括：根据所述第二生产数据再次更新所述第一目标模型；按照再次更新后的所述第一目标模型对所述第二生产数据进行处理，得到第三目标注水数据，其中，所述第三目标注水数据用于指示对所述油水井进行的第三目标注水策略；按照所述第三目标注水策略对所述油水井进行注水，得到所述油水井的第三生产数据；

其中，根据所述第一生产数据更新所述第一目标模型包括：通过第二目标模型对所述第一生产数据进行评估，得到第一评估结果，其中，所述第二目标模型通过基于所述油水井的第二历史生产数据进行强化学习训练得到；按照所述第一评估结果更新所述第一目标模型，其中，所述第二目标模型用于向所述第一目标模型提供内部强化信号，所述内部强化信号用于使所述第一目标模型和所述第二目标模型在每一步进行学习。

2.根据权利要求1所述的方法，其特征在于，

在通过第二目标模型对所述第一生产数据进行评估，得到第一评估结果之后，所述方法还包括：通过所述第一评估结果和奖励值确定时序差分误差，其中，所述奖励值用于指示所述第一目标注水策略的质量，且基于所述第一生产数据中的产油量得到；通过所述时序差分误差对所述第二目标模型进行更新；

在按照所述第二目标注水策略对所述油水井进行注水，得到所述油水井的第二生产数据之后，所述方法还包括：通过更新后的所述第二目标模型对所述第二生产数据进行评估，得到第二评估结果。

3.根据权利要求1所述的方法，其特征在于，通过第一目标模型对所述当前生产数据进行处理，得到第一目标注水数据包括：

对由所述当前生产数据构成的状态空间进行处理，得到由所述第一目标注水数据构成的动作空间。

4.根据权利要求1至3中任意一项所述的方法，在通过第一目标模型对所述当前生产数据进行处理，得到第一目标注水数据之前，所述方法还包括：

获取目标地质参数，其中，所述目标地质参数为影响所述油水井产油的地质参数；

对所述目标地质参数和所述第一历史生产数据进行强化学习训练，得到所述第一目标模型。

5.根据权利要求1至3中任意一项所述的方法，在通过第一目标模型对所述当前生产数据进行处理，得到第一目标注水数据之后，所述方法还包括：

获取预先设定的目标调整数据；

通过所述目标调整数据对所述第一目标注水数据进行调整。