[发明专利]一种异常数据的定位方法、装置及系统在审
申请号: | 201911143879.4 | 申请日: | 2019-11-20 |
公开(公告)号: | CN111061687A | 公开(公告)日: | 2020-04-24 |
发明(设计)人: | 肖华飚;刘长禹;朱翔淼 | 申请(专利权)人: | 有时数联科技(北京)有限公司 |
主分类号: | G06F16/16 | 分类号: | G06F16/16;G06F16/18 |
代理公司: | 北京三聚阳光知识产权代理有限公司 11250 | 代理人: | 马永芬 |
地址: | 100089 北京市海淀区双清*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 异常 数据 定位 方法 装置 系统 | ||
1.一种异常数据的定位方法,其特征在于,包括如下步骤:
接收到由用户操作产生的数据流水日志,所述数据流水日志中包括约束标识;
根据所述约束标识在预设的约束规则库中匹配相应的约束规则;
根据所述约束规则和预设平衡指数定义规则计算所述数据流水日志的平衡指数;
根据所述平衡指数确定产生异常的数据流水日志。
2.根据权利要求1所述的异常数据的定位方法,其特征在于,所述的预设平衡指数定义规则包括:
定义所述平衡指数为与约束配数的差值;
根据所述约束规则和所述约束标识得到所述约束配数;
根据所述约束配数计算平衡指数。
3.根据权利要求2所述的异常数据的定位方法,其特征在于,所述根据所述约束配数计算平衡指数包括:
判断所述平衡指数与预设阈值的关系,所述预设阈值为零;
当所述平衡指数大于所述预设阈值时,说明所述由用户操作产生的数据流水日志产生重复,根据所述约束标识定位产生重复数据流水日志的位置。
4.根据权利要求3所述的异常数据的定位方法,其特征在于,还包括:
当所述平衡指数等于预设阈值时,说明所述由用户操作产生的数据流水日志正确。
5.根据权利要求3所述的异常数据的定位方法,其特征在于,还包括:
当所述平衡指数小于预设阈值时,说明所述由用户操作产生的数据流水日志产生缺失;
根据所述约束标识定位产生缺失数据流水日志的位置;
重新执行用户操作,重复生成当前操作的数据流水日志,并标记此数据流水日志记录为后期再生,便于再次检索和统计。
6.根据权利要求3所述的异常数据的定位方法,其特征在于,所述根据所述约束标识定位产生重复数据流水日志的位置,还包括:
判断所述重复数据流水日志的全字段是否完全相同;
当所述重复数据流水日志的全字段完全相同时,删除所述重复数据流水日志。
7.根据权利要求6所述的异常数据的定位方法,其特征在于,还包括:
当所述重复数据流水日志的全字段不完全相同时,标记数据流水日志有重复嫌疑,将所述数据流水日志复制到指定的“数据盘点”记录表或将其移动到指定的“数据盘点”记录表。
8.根据权利要求1所述的异常数据的定位方法,其特征在于,包括:
将根据用户每一次操作产生的数据流水日志计算出的平衡指数存入平衡指数表;
所述平衡指数表包括每一个约束的流水号、约束标识以及产生流水时间;
根据日期计算不同时段的统计平衡指数值,所述日期包括:每日指数、月度指数、季度指数、年度指数或上午指数、下午指数、夜间指数;
计算正数个数与所有正数方差的乘积,作为所述统计平衡指数值的第一分量;
计算负数个数与所有负数方差的乘积,作为所述统计平衡指数值的第二分量;
计算第一分量与第二分量的和与数据总值的比值,作为所述统计平衡指数值的第三分量;
根据所述的统计平衡指数值衡量不同时期、不同时段的数据质量问题的严重程度和具体特征。
9.一种异常数据的定位装置,其特征在于,包括:
接收模块,用于接收根据用户操作产生的数据流水日志;
匹配模块,用于根据约束标识在预设的约束规则库中匹配相应的约束规则;
计算模块,用于计算所述数据流水日志的平衡指数;
判断模块,用于判断所述平衡指数和预设阈值的关系;
定位模块,用于根据判断结果对产生异常的数据流水日志进行定位。
10.一种异常数据的定位系统,其特征在于,包括:
至少一个控制设备及计算机终端,所述控制设备用于执行如权利要求1-8中任一项所述的异常数据的定位方法,对执行某种操作所产生的具体异常数据流水日志进行定位。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-8中任一项所述的异常数据的定位方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于有时数联科技(北京)有限公司,未经有时数联科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911143879.4/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置