[发明专利]一种面向开源信息采集的资源更新时间预测方法及系统有效
申请号: | 201910371392.5 | 申请日: | 2019-05-06 |
公开(公告)号: | CN110069692B | 公开(公告)日: | 2021-04-20 |
发明(设计)人: | 姚晗;晏裕生;孙孟阳;董文轩;江洋 | 申请(专利权)人: | 中国船舶工业综合技术经济研究院 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06K9/62;G06Q10/04 |
代理公司: | 北京高沃律师事务所 11569 | 代理人: | 程华 |
地址: | 100081 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 面向 信息 采集 资源 更新 时间 预测 方法 系统 | ||
1.一种面向开源信息采集的资源更新时间预测方法,其特征在于,所述方法包括:
获取目标网站的历史数据;所述历史数据包括多个历史更新时间以及多个所述历史更新时间对应的历史资源更新数量;
采用十折交叉法将所述历史数据划分为训练集和测试集;
根据所述训练集建立分类与回归树CART决策树模型;
所述根据所述训练集建立分类与回归树CART决策树模型,具体包括:
统计所述训练集中所有历史更新时间作为定义域;所述训练集中包括多个历史更新时间以及多个所述历史更新时间对应的历史资源更新数量;
对所述定义域进行递归划分,将所述定义域划分为M个集合R1,R2,...,RM;
确定所述定义域的最优切分变量与最优切分点;
采用所述最优切分点将所述定义域划分为两个子区域;
将两个所述子区域分别作为所述定义域,返回所述对所述定义域进行递归划分,将所述定义域划分为M个集合R1,R2,...,RM的步骤,对所述定义域进行递归划分,直到满足终止条件,将所述定义域划分为M个集合R1,R2,...,RM;
根据所述M个集合R1,R2,...,RM建立CART决策树模型其中xi为历史更新时间;Rm表示所述M个集合中的第m个集合;Cm为第m个集合Rm的回归值;Nm表示第m个集合Rm中的元素个数;yi为历史更新时间xi对应的历史资源更新数量;f(xi)为与历史更新时间xi对应的更新时间所对应的预测资源更新数量;
根据所述测试集确定所述CART决策树模型的准确性;
根据所述测试集中的数据,采用公式计算所述CART决策树模型的准确性;
其中ts为平均误差,N为定义域的元素个数,f(xi)为通过所述CART决策树模型计算出来的预测资源更新数量,yi为所述测试集中的历史更新时间xi对应的历史资源更新数量;
判断所述准确性是否满足要求,获得第一判断结果;
若所述第一判断结果为所述准确性满足要求,采用所述CART决策树模型预测所述目标网站的更新时间以及所述更新时间对应的资源更新数量;
若所述第一判断结果为所述准确性不满足要求,返回所述采用十折交叉法将所述历史数据划分为训练集和测试集的步骤。
2.根据权利要求1所述的资源更新时间预测方法,其特征在于,所述判断所述准确性是否满足要求,获得第一判断结果,具体包括:
判断所述平均误差ts是否小于误差阈值,获得第二判断结果;
若所述第二判断结果为所述平均误差ts小于误差阈值,确定所述第一判断结果为所述准确性满足要求;
若所述第二判断结果为所述平均误差ts不小于误差阈值,确定所述第一判断结果为所述准确性不满足要求。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国船舶工业综合技术经济研究院,未经中国船舶工业综合技术经济研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910371392.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于处理点击行为数据的方法和装置
- 下一篇:用于确定目标页面的方法和装置
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置