[发明专利]数据清洗方法及装置

权利要求书

1.一种数据清洗方法，其特征在于，所述方法包括：

接收来自多个对象的业务数据，所述业务数据包括多个信息项；

依次对各信息项进行数据清洗，所述数据清洗包括：

判断所述信息项是否属于预设的基于认定结果进行清洗的类型；

若所述信息项属于预设的基于认定结果进行清洗的对象，则调用所述信息项对应的认定结果，并以所述认定结果作为所述信息项清洗后的数据；

若所述信息项不属于预设的基于认定结果进行清洗的类型，则根据预设的多个数据清洗规则，依次对所述信息项进行清洗，得到所述信息项清洗后的数据；所述预设的多个数据清洗规则包括：根据所述信息项的数据产生时间进行清洗的第一规则、根据所述信息项的数据中的最大值或最小值进行清洗的第二规则、根据所述信息项的数据中少数服从多数原则进行清洗的第三规则、以及根据所述信息项的数据所属对象的优先级清洗的第四规则。

2.根据权利要求1所述的数据清洗方法，其特征在于，根据预设的多个数据清洗规则，

依次对所述信息项进行清洗，得到所述信息项清洗后的数据的步骤，包括：

判断所述信息项是否属于预设的根据所述第一规则进行清洗的类型；

若所述信息项属于预设的根据所述第一规则进行清洗的类型，则继续判断所述信息项是否属于根据所述信息项的数据产生时间由前往后的次序进行清洗的第一类型，或者是否属于根据所述信息项的数据产生时间由后往前的次序进行清洗的第二类型；

若所述信息项属于所述第一类型，则将所述信息项的数据产生时间中最早的时间作为所述信息项清洗后的数据；

若所述信息项属于所述第二类型，则将所述信息项的数据产生时间中最新的时间作为所述信息项清洗后的数据。

3.根据权利要求2所述的数据清洗方法，其特征在于，根据预设的多个数据清洗规则，

依次对所述信息项进行清洗，得到所述信息项清洗后的数据的步骤，包括：

若判断所述信息项不属于根据所述第一规则进行清洗的类型，则继续判断所述信息项是否属于根据所述第二规则进行清洗的类型；

若所述信息项属于预设的根据所述第二规则进行清洗的类型，则继续判断所述信息项是否属于根据所述信息项的数据中的最大值进行清洗的第三类型，或者是否属于根据所述信息项的数据中的最小值进行清洗的的第四类型；

若所述信息项属于所述三类型，则将所述信息项的数据中的最大值作为所述信息项清洗后的数据；

若所述信息项属于所述第二类型，则将所述信息项的数据中的最小值作为所述信息项清洗后的数据。

4.根据权利要求3所述的数据清洗方法，其特征在于，根据预设的多个数据清洗规则，依次对所述信息项进行清洗，得到所述信息项清洗后的数据的步骤，包括：若判断所述信息项不属于根据所述第二规则进行清洗的类型，则继续判断所述信息项是否属于根据所述第三规则进行清洗的类型；

若所述信息项属于预设的根据所述第三规则进行清洗的类型，则将所述信息项的数据中所占数量比例的最大的数据作为所述信息项清洗后的数据。

5.根据权利要求4所述的数据清洗方法，其特征在于，根据预设的多个数据清洗规则，依次对所述信息项进行清洗，得到所述信息项清洗后的数据的步骤，包括：

若判断所述信息项不属于根据所述第三规则进行清洗的类型，则继续判断所述信息项是否属于根据所述第四规则进行清洗的类型；

若所述信息项属于预设的根据所述第四规则进行清洗的类型，则将所述信息项的数据中所属对象的优先级最高的数据作为所述信息项清洗后的数据。