[发明专利]基于状态转移核优化的数据处理方法、装置、设备及介质

权利要求书

1.一种基于状态转移核优化的数据处理方法，其特征在于，应用于第一参与方，所述第一参与方与第二参与方进行联邦通信连接，所述基于状态转移核优化的数据处理方法包括：

在第一参与方每次训练本地模型参数的过程中，根据所述第一参与方的资源属性信息动态确定预设本地样本数据的状态采样算法，以得到预设本地样本数据的识别状态信息，以确定第一参与方所有预设本地模型参数的组合状态信息；

根据所述组合状态信息，确定待联邦的目标模型参数；

基于所述待联邦的目标模型参数，与各个第二参与方进行联邦训练，得到所述第一参与方的预设预测模型。

2.如权利要求1所述的基于状态转移核优化的数据处理方法，其特征在于，所述在第一参与方每次训练本地模型参数的过程中，根据所述第一参与方的资源属性信息动态确定预设本地样本数据的状态采样算法，以得到预设本地样本数据的识别状态信息，以确定第一参与方所有预设本地模型参数的组合状态信息的步骤，包括：

在第一参与方每次训练本地模型参数的过程中，根据所述第一参与方的资源属性信息确定内存消耗上限；

根据所述内存消耗上限以及预设采样消耗计算规则，动态确定预设本地样本数据的状态采样算法，以得到预设本地样本数据的识别状态信息，以确定第一参与方每个预设本地模型参数的状态信息，以确定第一参与方所有预设本地模型参数的组合状态信息。

3.如权利要求2所述的基于状态转移核优化的数据处理方法，其特征在于，所述根据所述内存消耗上限以及预设采样消耗计算规则，动态确定预设本地样本数据的状态采样算法，以得到预设本地样本数据的识别状态信息，以确定第一参与方每个预设本地模型参数的状态信息，以确定第一参与方所有预设本地模型参数的组合状态信息的步骤，包括：

分别确定各个预设本地模型参数的子内存消耗上限；

确定每个预设本地模型参数的类型与数量，根据所述子内存消耗上限，所述预设采样消耗计算规则以及所述状态类型与数量，通过遍历方式确定预设本地样本数据的状态采样算法；

确定每个预设本地模型参数在对应所述状态采样算法下的最小状态转移路线；

根据所述状态采样算法以及所述最小状态转移路线，得到预设本地样本数据的识别状态，以确定第一参与方所有预设本地模型参数的组合状态信息。

4.如权利要求3所述的基于状态转移核优化的数据处理方法，其特征在于，所述分别确定各个预设本地模型参数的子内存消耗上限的步骤，包括：

确定各个预设本地模型参数对模型训练结果的影响程度；

根据所述影响程度，确定各个预设本地模型参数的子内存消耗上限。

5.如权利要求2所述的基于状态转移核优化的数据处理方法，其特征在于，在动态确定预设本地样本数据的状态采样算法的过程中，还根据所述内存消耗上限以及预设采样消耗计算规则确定需要保存的采样中间参数。

6.如权利要求1所述的基于状态转移核优化的数据处理方法，其特征在于，所述基于所述待联邦的第一模型参数，与各个第二参与方进行联邦训练，得到所述第一参与方的预设预测模型的步骤，包括：

基于所述待联邦的第一模型参数，通过执行预设联邦流程，与各个第二参与方的待联邦的第二模型参数进行聚合，以得到聚合参数，以基于所述聚合参数对待联邦的第一模型参数进行替换更新，得到所述第一参与方的替换更新的模型参数；

继续动态确定所述替换更新后的所述模型参数的状态采样算法，以继续确定待联邦的第一参与方的其他模型参数，并不断进行迭代训练，直至达到预设训练完成条件，得到预设预测模型。