[发明专利]一种高比例缺失数据填补方法及相关装置

权利要求书

1.一种高比例缺失数据填补方法，其特征在于，包括：

计算预处理操作后的目标缺失数据的缺失率，所述预处理操作包括归一化处理和缺失位标记操作；

根据所述缺失率在预置误差列表中查找目标评价指标对应的最优缺失数据填补方法，所述预置误差列表中不同梯级的历史缺失率、所述目标评价指标和所述最优缺失数据填补方法之间存在一一对应关系；

根据所述最优缺失数据填补方法生成目标填补数据，并采用所述目标填补数据填补所述目标缺失数据。

2.根据权利要求1所述的高比例缺失数据填补方法，其特征在于，所述预置误差列表的构建过程为：

通过在无缺失历史数据中添加预置扰动得到历史缺失数据集，所述历史缺失数据集包括多个历史缺失数据片段；

在对所述历史缺失数据片段作所述预处理操作后，通过预置窗口在所述历史缺失数据片段中提取目标历史缺失数据；

计算所述目标历史缺失数据的历史缺失率，并将所述历史缺失率进行升序式梯级划分；

计算不同的缺失数据填补方法在不同梯级的历史缺失率和不同评价指标下对应的误差值，得到预置误差列表，所述预置误差列表中每个梯级的历史缺失率对应的每个评价指标均存在一个误差值最小的最优缺失数据填补方法。

3.根据权利要求2所述的高比例缺失数据填补方法，其特征在于，所述根据所述最优缺失数据填补方法生成目标填补数据，并采用所述目标填补数据填补所述目标缺失数据，还包括：

计算所述目标填补数据在所述目标评价指标下的当前误差值；

若所述当前误差值超过所述最优缺失数据填补方法对应的误差值，则更新所述预置误差列表。

4.根据权利要求3所述的高比例缺失数据填补方法，其特征在于，所述若所述当前误差值超过所述最优缺失数据填补方法对应的误差值，则更新所述预置误差列表，还包括：

若所述预置误差列表的时限超过预设时间，则更新所述预置误差列表。

5.一种高比例缺失数据填补装置，其特征在于，包括：

缺失计算模块，用于计算预处理操作后的目标缺失数据的缺失率，所述预处理操作包括归一化处理和缺失位标记操作；

列表查询模块，用于根据所述缺失率在预置误差列表中查找目标评价指标对应的最优缺失数据填补方法，所述预置误差列表中不同梯级的历史缺失率、所述目标评价指标和所述最优缺失数据填补方法之间存在一一对应关系；

缺失填补模块，用于根据所述最优缺失数据填补方法生成目标填补数据，并采用所述目标填补数据填补所述目标缺失数据。

6.根据权利要求5所述的高比例缺失数据填补装置，其特征在于，所述预置误差列表的构建过程为：

通过在无缺失历史数据中添加预置扰动得到历史缺失数据集，所述历史缺失数据集包括多个历史缺失数据片段；

在对所述历史缺失数据片段作所述预处理操作后，通过预置窗口在所述历史缺失数据片段中提取目标历史缺失数据；

计算所述目标历史缺失数据的历史缺失率，并将所述历史缺失率进行升序式梯级划分；

计算不同的缺失数据填补方法在不同梯级的历史缺失率和不同评价指标下对应的误差值，得到预置误差列表，所述预置误差列表中每个梯级的历史缺失率对应的每个评价指标均存在一个误差值最小的最优缺失数据填补方法。

7.根据权利要求6所述的高比例缺失数据填补装置，其特征在于，还包括：

计算模块，用于计算所述目标填补数据在所述目标评价指标下的当前误差值；

第一更新模块，用于若所述当前误差值超过所述最优缺失数据填补方法对应的误差值，则更新所述预置误差列表。

8.根据权利要求7所述的高比例缺失数据填补装置，其特征在于，还包括：

第二更新模块，用于若所述预置误差列表的时限超过预设时间，则更新所述预置误差列表。