[发明专利]一种基于大数据的极值模型建立方法在审
申请号: | 201610113817.9 | 申请日: | 2016-03-01 |
公开(公告)号: | CN105786773A | 公开(公告)日: | 2016-07-20 |
发明(设计)人: | 李丽;陈鹏;唐彬 | 申请(专利权)人: | 广州铭诚计算机科技有限公司 |
主分类号: | G06F17/18 | 分类号: | G06F17/18;G06F17/15;G06F17/17 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 510630 广东省广州市天*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 数据 极值 模型 建立 方法 | ||
技术领域
本发明涉及一种近似参数估计方法,具体来说,是涉及一种参数估计方法进行参数估计,从而建立极值模型。
背景技术
极值理论一方面从数学的角度对异常理论加以印证,而另一方面,它提供了一个定量化和数字化的研究方法及预测方法,为进行资源预测和评价提供了科学依据;同时,它对超过阈值的数据和信息建立了一个定量描述的数学统计模型。因此,研究极值分析的理论及方法,并与异常理论相结合,对实测
的数据异常值进行统计分析是非常必要的。
目前,常用的数学方法有数理统计分析、模糊数学分析、灰色系统分析、非线性分析、人工神经网络分析等。不同的数学方法所获取的不同信息,可以从不同侧面反映数据本质特征、内在联系和组合规律。
极值理论是数理统计这一学科的一个重要分支,异常值和极值位于分布的尾部,而极值分析正是研究在超常大(或小)水平上量化过程的随机性状,并估计比任何已观测水平更为极端事件的概率。因此,将极值理论应用到大数据分析中对于实践和发展预测方法具有重要理论和实践意义。
基于大数据的极值模型建立方法介绍了参数估计的几种方法:概率权重矩法、矩估计法和极大似然估计法。针对Newton-Raphson法在迭代过程中可能会出现发散的现象,在实际应用中并不是很方便,通过对极大似然估计的近似估计法进行改进,得到近似参数估计方法,建立POT模型,通过阈值选取方法提取异常值,并将建立的POT模型与异常值进行拟合。
发明内容
本发明的目的在于针对参数估计方法中,极大似然估计法得到的似然方程是非线性超越方程从而没有解析解的特点,提出了一个具有解析解的改进的近似估计方法,得到参数并建立POT模型。
为了实现上述目的,本发明采用的技术方案如下:
基于大数据的极值模型建立方法,包括以下步骤:
(1)用直方图和QQ图检验正态性;
(2)用ADF方法和序列相关图检验平稳性,若数据是厚尾、非正态的平稳序列,则进行下一步,否则返回步骤(1);
(3)用Hill图或平均超出量函数法来选取初始阈值范围u;
(4)运用Gramervo统计量和Anderson-Darling统计量来选取u;
(5)用近似参数估计方法得到参数的极大似然估计,其中参数的估计方程如下:
σ4+aσ3+bσ2+cσ+d=0
其中a=[4k2(Σyi2)2-24k2Σyi(Σyi3)]/8k3(Σyi3)
b=[24k(Σyi)2Σyi3-6kΣyi(Σyi2)2-4k2Σyi2Σyi3]/8k3(Σyi3)
c=[2(Σyi)2(Σyi2)2+8kΣyiΣyi2Σyi3-k(Σyi2)3-8(Σyi)3Σyi3]/8k3(Σyi3)
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州铭诚计算机科技有限公司,未经广州铭诚计算机科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610113817.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置