[发明专利]一种基于云网端资源中不完整时间序列的异常检测方法有效
申请号: | 202210397325.2 | 申请日: | 2022-04-15 |
公开(公告)号: | CN114925808B | 公开(公告)日: | 2023-10-10 |
发明(设计)人: | 袁汉宁;彭青峰;王树良;耿晶;黄罡;党迎旭 | 申请(专利权)人: | 北京理工大学;北京大学深圳研究生院 |
主分类号: | G06F18/2433 | 分类号: | G06F18/2433;G06F18/15;G06N3/044;G06N3/08 |
代理公司: | 北京盛询知识产权代理有限公司 11901 | 代理人: | 蔺巍 |
地址: | 100081 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 云网端 资源 完整 时间 序列 异常 检测 方法 | ||
1.一种基于云网端资源中不完整时间序列的异常检测方法,其特征在于,包括:
使用滑窗采样方法将带有缺失的云网端时间序列原始数据进行切片,得到时间序列样本,对所述时间序列样本进行预处理操作;
构建深度学习网络模型,将经过预处理操作的时间序列样本分为训练样本集和测试样本集,所述训练样本集输入所述深度学习网络模型中完成模型训练,所述测试样本集进行模型异常检测测试,得到异常检测结果。
2.根据权利要求1所述的基于云网端资源中不完整时间序列的异常检测方法,其特征在于,对所述时间序列样本进行预处理的过程包括数据归一化和数据分片,所述数据归一化用于将数据的值域范围限定在一个公共区域内,不改变时间序列数据的特征;所述数据分片用于通过使用滑动窗口的方法,将所述时间序列数据分为若干相同长度的样本。
3.根据权利要求1所述的基于云网端资源中不完整时间序列的异常检测方法,其特征在于,所述深度学习网络模型中包括基于循环神经网络RNN的序列自编码器Grnn和缺失值鉴别器Dcheck,所述序列自编码器Grnn用于对原始数据进行自编码,插补数据缺失值并得到自编码映射后的数据;所述缺失值鉴别器Dcheck用于预测插补数据中的原有缺失项,将预测缺失分布与原缺失分布对比。
4.根据权利要求3所述的基于云网端资源中不完整时间序列的异常检测方法,其特征在于,将所述训练样本集输入所述基于循环神经网络RNN的序列自编码器Grnn和缺失值鉴别器Dcheck中进行训练,训练过程交替进行,所述训练过程包括:
先将所述序列自编码器Grnn固定,根据序列自编码器Grnn对训练集的重构结果通过最小化缺失值预测损失函数,基于所述损失函数训练所述缺失值鉴别器Dcheck,再将缺失值鉴别器Dcheck固定,根据缺失值鉴别器Dcheck对Grnn对训练集的重构结果的预测值通过最大化缺失值预测损失函数训练序列自编码器Grnn,经过反复的迭代对抗最终达到均衡状态。
5.根据权利要求4所述的基于云网端资源中不完整时间序列的异常检测方法,其特征在于,所述缺失值鉴别器Dcheck由三层全连接层与三层激活层组成;所述序列自编码器Grnn的编码器部分和解码器部分分别由一层长短期记忆人工神经网络LSTM、一层全连接层、一层激活层构成,所述序列自编码器网络Grnn与所述缺失值鉴别器Dcheck形成对抗。
6.根据权利要求5所述的基于云网端资源中不完整时间序列的异常检测方法,其特征在于,训练所述缺失值鉴别器Dcheck的过程包括:
输入时间序列样本数据,包括提示序列R和输入所述序列自编码器Grnn得到的编码结果;
通过所述序列自编码器Grnn输出重构序列Grnn(X,M),记为将所述编码结果与原始时间序列样本数据根据缺失点相加,得到其中X指原始时间序列样本,指将插补到X补全后的结果,M指缺失标签;
将与R输入所述缺失值鉴别器,得到结果指将原始样本补全后的结果,指缺失值鉴别器Dcheck预测得到的缺失标签,R指通过缺失标签得到的提示矩阵;使用结果对Dcheck的损失函数进行定义,并通过最小化所述损失函数对所述缺失值鉴别器网络进行训练。
7.根据权利要求5所述的基于云网端资源中不完整时间序列的异常检测方法,其特征在于,所述序列自编码器Grnn的训练过程是对目标进行优化的过程,其中,优化目标包括:最小化自编码器的重构误差和最大化缺失值鉴别器Dcheck的预测误差。
8.根据权利要求1所述的基于云网端资源中不完整时间序列的异常检测方法,其特征在于,所述进行模型异常检测测试的过程包括:
对数据中的测试集进行编码并确定数据异常的上下界作为异常阈值,基于所述阈值将测试样本集中的数据分为正常数据点和异常数据点;
将所述测试集样本输入序列自编码器中Grnn,得到重构序列;通过所述重构序列和原序列非缺失部分的距离判断所述测试样本集中的数据是否异常。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京理工大学;北京大学深圳研究生院,未经北京理工大学;北京大学深圳研究生院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210397325.2/1.html,转载请声明来源钻瓜专利网。