[发明专利]异常数据检测方法及装置、电子设备和存储介质在审
申请号: | 202111233498.2 | 申请日: | 2021-10-22 |
公开(公告)号: | CN113990512A | 公开(公告)日: | 2022-01-28 |
发明(设计)人: | 马伯毅;张誉丹 | 申请(专利权)人: | 泰康保险集团股份有限公司 |
主分类号: | G16H50/70 | 分类号: | G16H50/70;G16H10/60;G06K9/62;G06F16/28 |
代理公司: | 隆天知识产权代理有限公司 72003 | 代理人: | 石海霞;郑特强 |
地址: | 100031 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 异常 数据 检测 方法 装置 电子设备 存储 介质 | ||
1.一种异常数据检测方法,其特征在于,包括:
获取待检测数据;所述待检测数据包括多个数据维度;
获取预先构建的异常检测模型;所述异常检测模型通过对多个不同数据维度的训练数据之间的趋势变化训练得到;所述训练数据经数据清洗处理得到;
将所述待检测数据输入至异常检测模型,确定所述待检测数据是否包含异常数据,以展示所述异常数据。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于针对数据选择页面的数据选择操作,获取所述数据选择操作对应的检测参数;
根据所述检测参数从初始用户数据中获取对应的检测参数值;
基于多个所述检测参数与各自对应的所述检测参数值生成多个数据维度,以得到所述待检测数据。
3.根据权利要求1所述的方法,其特征在于,所述异常检测模型通过下述步骤训练得到:
获取初始训练数据;所述初始训练数据包括多个数据维度;
对所述初始训练数据中各所述数据维度的数据值进行缺失数据填充,以得到填充训练数据;
确定所述填充训练数据中多个所述数据维度对应的数据差值集合;
根据所述数据差值集合对所述初始模型进行训练,以得到所述异常检测模型。
4.根据权利要求3所述的方法,其特征在于,所述对所述初始训练数据中各所述数据维度的数据值进行缺失数据填充,以得到填充训练数据,包括:
基于所述初始训练数据确定缺失训练数据,确定与所述缺失训练数据对应的参考填充训练数据;
根据所述参考填充训练数据对所述缺失训练数据进行缺失数据填充处理,以得到所述填充训练数据。
5.根据权利要求3所述的方法,其特征在于,所述确定所述填充训练数据中多个所述数据维度对应的数据差值集合,包括:
基于所述数据维度对所述填充训练数据进行维度组合处理,得到组合维度数据;
对所述组合维度数据进行矩阵转换处理,得到矩阵转换数据;
确定所述矩阵转换数据中每个列数据对应的列数据方差;
根据多个所述列数据方差确定所述数据差值集合。
6.根据权利要求3所述的方法,其特征在于,所述根据所述数据差值集合对所述初始模型进行训练,以得到所述异常检测模型,包括:
将所述数据差值集合输入至所述初始模型,由所述初始模型根据所述数据差值集合确定所述填充训练数据对应的训练异常值;
确定所述初始模型的模型参数与趋势变化度量值;
基于所述趋势变化度量值确定所述训练异常值对应的异常分类准确率;
通过调整所述模型参数与所述趋势变量度量值以训练所述初始模型,以得到所述异常检测模型;所述异常检测模型的异常分类准确率大于分类准确率阈值。
7.根据权利要求6所述的方法,其特征在于,在所述确定所述待检测数据是否包含异常数据之后,所述方法还包括:
根据所述待检测数据生成初始对比图表;
确定所述异常数据对应的异常数据信息;所述异常数据信息包括行列信息;
根据所述行列信息在所述初始对比图表中添加所述异常数据的异常显示标注,以生成目标对比图表,并通过所述目标对比图表展示所述异常数据。
8.一种异常数据检测装置,其特征在于,包括:
数据获取模块,用于获取待检测数据;
模型获取模块,用于获取预先构建的异常检测模型;所述异常检测模型通过对多个不同数据维度的训练数据之间的趋势变化训练得到;所述训练数据经数据清洗处理得到;
异常检测模块,用于将所述待检测数据输入至异常检测模型,以确定所述待检测数据是否包含异常数据。
9.一种电子设备,其特征在于,包括:
处理器;以及
存储器,所述存储器上存储有计算机可读指令,所述计算机可读指令被所述处理器执行时实现根据权利要求1至7中任一项所述的异常数据检测方法。
10.一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现根据权利要求1至7中任一项所述的异常数据检测方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于泰康保险集团股份有限公司,未经泰康保险集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111233498.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种合成药物中残留溶剂的检测方法
- 下一篇:一种数据的传输方法及系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置