[发明专利]一种数据纠偏方法、装置和设备

权利要求书

1.一种数据纠偏方法，其特征在于，所述方法包括：

基于用户输入的判断结果，对白名单、和/或规则库进行更新，获得更新的白名单、和/或更新的规则库，所述用户输入为基于结构化数据的输入，所述白名单至少包括：key、value及用户信息；

当所述更新的白名单中包括的所述用户修改操作数大于等于第一预设阈值时，则基于所述更新的白名单、和/或所述更新的规则库进行样本库的更新，获得更新的样本库；

基于所述更新的样本库，对修正模型进行重训，获得新修正模型；

基于所述新修正模型的准确率及所述修正模型的准确率，确定上线模型；

若所述上线模型为所述新修正模型，则基于所述上线模型，对基于所述修正模型和原模型获得的识别结果进行修正。

2.如权利要求1所述的数据纠偏方法，其特征在于，所述基于用户输入的判断结果，对白名单、和/或规则库进行更新，获得更新的白名单、和/或更新的规则库，具体包括：

若所述用户输入为确认后的key-value记录集合，则将所述确认后的key-value记录集合加入所述白名单中，对所述白名单进行更新，获得所述更新的白名单；

和/或

若所述用户输入为针对符合特征的key直接指定value值，则将针对符合特征的key直接指定value值的规则加入所述规则库，获得所述更新的规则库；

和/或

若所述用户输入为给定key，查询并输出对应的value值，则基于预设的优先级，确定所述给定key的value值；

若所述用户输入为针对输出结果的修改或确认操作，则基于所述修改操作，更新所述白名单或者更新所述规则库，或者基于所述确认操作，更新所述白名单，获得所述更新的白名单。

3.如权利要求2所述的数据纠偏方法，其特征在于，所述若所述用户输入为给定key，查询并输出对应的value值，则基于预设的优先级，确定所述给定key的value值，具体包括：

基于用户输入的给定key，查询所述白名单，若所述给定key命中所述白名单，则将所述白名单中key对应的value值作为所述给定key的value值；

若未命中所述白名单，则查询所述规则库，若所述给定key命中所述规则库，则基于所述规则库计算所述给定key的value，作为所述给定key的value值；

若所述给定key未命中所述规则库，则调用原模型计算获得value1，调用修正模型计算获得value2，若value1==value2，输出value=value1；

否则，

基于所述给定key，从所述白名单中标记为修改的子集中检索相似度最高的记录result，基于所述给定key与所述result.key的向量余弦距离，确定所述给定key的输出value。

4.如权利要求2所述的数据纠偏方法，其特征在于，所述若所述用户输入为针对输出结果的修改或确认操作，则基于所述修改操作，更新所述白名单或者更新所述规则库，或者基于所述确认操作，更新所述白名单，具体包括：

若所述用户输入为针对输出结果的修改，则确认所述用户输入是否在所述白名单中，若所述用户输入在所述白名单中，则更新所述白名单中修改后的value，若所述用户输入不在所述白名单中，并将所述用户输入的key-value添加到所述白名单中，并标注所述白名单中用户输入的key-value的添加途径；若所述用户输入的key-value命中所述规则库的，则将所述规则库中的命中规则错误记录+1，若所述规则库中的命中规则错误记录大于等于第二预设阈值，则将所述规则库中的命中规则移除所述规则库；

若所述用户输入为针对输出结果的确认，且所述用户输入的key-value不在所述白名单中，则将所述用户输入的key-value添加到所述白名单中，并标注所述白名单中用户输入的key-value的添加途径。