[发明专利]一种调研数据清洗方法及系统

权利要求书

1.一种调研数据清洗系统，其特征在于：包括识别单元、单指标审核单元、多指标审核单元及单人数据审核单元；

识别单元用于识别调研数据的填写人身份、数据属性、数据间的逻辑关系及数据间的权重关联性；

单指标审核单元用于对数据属性相同的调研数据进行统一审核，判断调研数据是否符合数据属性要求，数据属性要求包括数据格式、数据完整性及数据编码范围；

多指标审核单元用于根据数据间的逻辑关系，对存在逻辑关系的调研数据进行审核，判断是否有存在逻辑矛盾的调研数据；

单人数据审核单元用于根据数据间的权重关联性，对相同的填写人身份的所有数据进行审核，分析是否存在内容不合理的调研数据。

2.根据权利要求1所述的调研数据清洗系统，其特征在于：单指标审核单元还用于发现审核数据缺失时，结合数据的属性要求分析缺失调研数据是否为必填数据，若是，则将该调研数据标记为异常数据；若否，则单指标审核单元判断其是否为计数类数据，若否，则按照预设规则进行数值填充。

3.根据权利要求2所述的调研数据清洗系统，其特征在于：单指标审核单元还用于将审核未通过的调研数据标记为异常数据，还用于将审核通过的调研数据发送给多指标审核单元；多指标审核单元还用于将审核未通过的调研数据标记为异常数据，还用于将审核通过的调研数据发送给单人数据审核单元；单人数据审核单元还用于将审核未通过的调研数据标记为异常数据。

4.根据权利要求3所述的调研数据清洗系统，其特征在于：还包括存储单元，单人数据审核单元还用于将审核通过的调研数据存储到存储单元中。

5.根据权利要求4所述的调研数据清洗系统，其特征在于：识别单元还用于识别调研数据的填写时间；单人数据审核单元还用于当存在同一填写人存在两组通过审核的调研数据，且两组调研数据存在不同时，调取两组调研数据的填写时间，若两组调研数据填写时间的间隔小于预设值，则单人数据审核单元将填写时间更早的一组作为有效数据进行存储；若两组调研数据填写时间的间隔大于等于预设值，则单人数据审核单元将填写时间更晚的一组作为有效数据进行存储。

6.根据权利要求3所述的调研数据清洗系统，其特征在于：单指标审核单元、多指标审核单元及单人数据审核单元在标记异常数据时，还将异常数据对应填写人的所有调研数据提取出来并打包存储。

7.根据权利要求6所述的调研数据清洗系统，其特征在于：还包括退回单元，退回单元分别与单指标审核单元、多指标审核单元及单人数据审核单元连接，用于将打包的数据退回处理；单指标审核单元、多指标审核单元及单人数据审核单元在标记异常数据时，同步标记异常类型；退回单元还用于退回处理时提示异常类型。

8.根据权利要求7所述的调研数据清洗系统，其特征在于：还包括分析单元，用于对异常数据的特征属性进行分析并生成异常分析报告，还用于根据存储的调研数据进行打分评级。

9.根据权利要求8所述的调研数据清洗系统，其特征在于：特征属性包括调研采集者信息、采集地区及采集时间。

10.一种调研数据清洗方法，其特征在于：使用权利要求1-9任一项所述的调研数据清洗系统。