[发明专利]数据采集任务异常预警方法、装置、计算机设备和介质有效

专利信息
申请号: 202110985000.1 申请日: 2021-08-26
公开(公告)号: CN113434823B 公开(公告)日: 2021-11-16
发明(设计)人: 柴玉倩;孙勤;陶予祺 申请(专利权)人: 企查查科技有限公司
主分类号: G06F17/18 分类号: G06F17/18
代理公司: 广州华进联合专利商标代理有限公司 44224 代理人: 仝丽
地址: 215000 江苏省苏州市苏*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 采集 任务 异常 预警 方法 装置 计算机 设备 介质
【权利要求书】:

1.一种数据采集任务异常预警方法,其特征在于,所述方法包括以下步骤:

获取若干数据采集任务的数据采集量,对所述数据采集量进行平滑处理,得到平滑数据采集量,其中,所述平滑处理包括对所述数据采集量采用预设数值为底的对数进行处理;

将所述平滑数据采集量、预设的显著性水平作为广义ESD检验的输入参数,计算得到第一极大值和第一极小值,所述预设的显著性水平包括预先设置的所述广义ESD检验的参数;

通过所述平滑数据采集量的第一四分位数值、第三四分位数值以及预先测试的阈值进行计算,得到第二极大值和第二极小值,其中所述第一四分位数值和第三四分位数值是将所述平滑数据采集量通过四分位方法进行处理,得到的;

将所述第一极大值和第二极大值进行第一比较,当第一极大值大于第二极大值时,极大预警阈值为第一极大值,当第一极大值等于第二极大值时,极大预警阈值为第一极大值/第二极大值,当第一极大值小于第二极大值时,极大预警阈值为第二极大值,将所述第一极小值和第二极小值进行第二比较,当第一极小值小于第二极小值时,极小预警阈值为第一极小值,当第一极小值等于第二极小值时,极小预警阈值为第一极小值/第二极小值,当第一极小值大于第二极小值时,极小预警阈值为第二极小值;

当所述平滑数据采集量小于所述极小预警阈值,或,所述平滑数据采集量大于所述极大预警阈值时,对与所述平滑数据采集量对应的所述数据采集任务进行异常预警。

2.根据权利要求1所述的数据采集任务异常预警方法,其特征在于,所述将所述平滑数据采集量、预设的显著性水平作为广义ESD检验的输入参数,计算得到第一极大值和第一极小值,包括:

通过所述广义ESD检验和所述显著性水平检测所述平滑数据采集量中是否存在异常值,若存在所述异常值,则从所述平滑数据采集量中删除所述异常值,得到第一平滑数据采集量;

获取所述第一平滑数据采集量中最大值、最小值、数据的数量;

计算所述第一平滑数据采集量的均值和所述第一平滑数据采集量的标准差;

通过所述均值、所述标准差、所述最大值、所述显著性水平、所述数据的数量进行计算,得到所述第一极大值;

通过所述均值、所述标准差、所述最小值、所述显著性水平、所述数据的数量进行计算,得到所述第一极小值。

3.根据权利要求1所述的数据采集任务异常预警方法,其特征在于,所述将所述平滑数据采集量、预设的显著性水平作为广义ESD检验的输入参数,计算得到第一极大值和第一极小值,还包括:

通过所述广义ESD检验和所述显著性水平检测所述平滑数据采集量中是否存在异常值,若不存在所述异常值,则获取所述平滑数据采集量中最大值、最小值、数据的数量;

计算所述平滑数据采集量的均值和所述平滑数据采集量的标准差;

通过所述均值、所述标准差、所述最大值、所述显著性水平、所述数据的数量进行计算,得到所述第一极大值;

通过所述均值、所述标准差、所述最小值、所述显著性水平、所述数据的数量进行计算,得到所述第一极小值。

4.根据权利要求1所述的数据采集任务异常预警方法,其特征在于,所述方法还包括:

统计所述数据采集任务的累积运行次数;

当所述累积运行次数大于预设的第一次数阈值时,通过所述广义ESD检验和所述显著性水平检测所述平滑数据采集量中是否存在异常值;

若存在所述异常值,则统计所述异常值出现的次数;

当所述异常值出现的次数大于预设的第二次数阈值时,通过百分位数设置第三极大值和第三极小值。

5.根据权利要求4所述的数据采集任务异常预警方法,其特征在于,所述方法还包括:

将所述第一极大值、第二极大值、第三极大值进行第三比较,根据第三比较结果得到极大预警阈值;

将所述第一极小值、第二极小值、第三极小值进行第四比较,根据第四比较结果得到极小预警阈值;

利用所述极小预警阈值、所述极大预警阈值和所述平滑数据采集量对与所述平滑数据采集量对应的所述数据采集任务进行异常预警。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于企查查科技有限公司,未经企查查科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110985000.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top