[发明专利]一种面向开源信息采集的资源更新时间预测方法及系统有效

专利信息
申请号: 201910371392.5 申请日: 2019-05-06
公开(公告)号: CN110069692B 公开(公告)日: 2021-04-20
发明(设计)人: 姚晗;晏裕生;孙孟阳;董文轩;江洋 申请(专利权)人: 中国船舶工业综合技术经济研究院
主分类号: G06F16/951 分类号: G06F16/951;G06K9/62;G06Q10/04
代理公司: 北京高沃律师事务所 11569 代理人: 程华
地址: 100081 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 面向 信息 采集 资源 更新 时间 预测 方法 系统
【权利要求书】:

1.一种面向开源信息采集的资源更新时间预测方法,其特征在于,所述方法包括:

获取目标网站的历史数据;所述历史数据包括多个历史更新时间以及多个所述历史更新时间对应的历史资源更新数量;

采用十折交叉法将所述历史数据划分为训练集和测试集;

根据所述训练集建立分类与回归树CART决策树模型;

所述根据所述训练集建立分类与回归树CART决策树模型,具体包括:

统计所述训练集中所有历史更新时间作为定义域;所述训练集中包括多个历史更新时间以及多个所述历史更新时间对应的历史资源更新数量;

对所述定义域进行递归划分,将所述定义域划分为M个集合R1,R2,...,RM

确定所述定义域的最优切分变量与最优切分点;

采用所述最优切分点将所述定义域划分为两个子区域;

将两个所述子区域分别作为所述定义域,返回所述对所述定义域进行递归划分,将所述定义域划分为M个集合R1,R2,...,RM的步骤,对所述定义域进行递归划分,直到满足终止条件,将所述定义域划分为M个集合R1,R2,...,RM

根据所述M个集合R1,R2,...,RM建立CART决策树模型其中xi为历史更新时间;Rm表示所述M个集合中的第m个集合;Cm为第m个集合Rm的回归值;Nm表示第m个集合Rm中的元素个数;yi为历史更新时间xi对应的历史资源更新数量;f(xi)为与历史更新时间xi对应的更新时间所对应的预测资源更新数量;

根据所述测试集确定所述CART决策树模型的准确性;

根据所述测试集中的数据,采用公式计算所述CART决策树模型的准确性;

其中ts为平均误差,N为定义域的元素个数,f(xi)为通过所述CART决策树模型计算出来的预测资源更新数量,yi为所述测试集中的历史更新时间xi对应的历史资源更新数量;

判断所述准确性是否满足要求,获得第一判断结果;

若所述第一判断结果为所述准确性满足要求,采用所述CART决策树模型预测所述目标网站的更新时间以及所述更新时间对应的资源更新数量;

若所述第一判断结果为所述准确性不满足要求,返回所述采用十折交叉法将所述历史数据划分为训练集和测试集的步骤。

2.根据权利要求1所述的资源更新时间预测方法,其特征在于,所述判断所述准确性是否满足要求,获得第一判断结果,具体包括:

判断所述平均误差ts是否小于误差阈值,获得第二判断结果;

若所述第二判断结果为所述平均误差ts小于误差阈值,确定所述第一判断结果为所述准确性满足要求;

若所述第二判断结果为所述平均误差ts不小于误差阈值,确定所述第一判断结果为所述准确性不满足要求。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国船舶工业综合技术经济研究院,未经中国船舶工业综合技术经济研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910371392.5/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top