[发明专利]一种URL资源的缓存方法、装置及电子设备有效
申请号: | 201711459685.6 | 申请日: | 2017-12-28 |
公开(公告)号: | CN110020249B | 公开(公告)日: | 2021-11-30 |
发明(设计)人: | 王钰龙;单俊明;彭伟;张新超;李宗璋;赵东升;李合顺;张吉成;宋磊;向志辉 | 申请(专利权)人: | 中国移动通信集团山东有限公司 |
主分类号: | G06F16/955 | 分类号: | G06F16/955;G06N3/04;G06N3/08 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王莹;李相雨 |
地址: | 250001 山*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 url 资源 缓存 方法 装置 电子设备 | ||
本发明提供一种URL资源的缓存方法、装置及电子设备。所述方法包括:基于用户发出的HTTP请求日志,根据待处理数据类的过滤规则过滤出待处理的URL地址;利用卷积神经网络对所述待处理的URL地址进行正则化,获得URL正则;所述卷积神经网络包括输入层、卷积层、池化层和分类层,且利用L1正则化规则训练得到;根据所述URL正则,生成缓存规则,并按照所述缓存规则对所述待处理的URL地址对应的资源数据进行缓存。本方法可以快速、简单、准确的获取URL正则,利用输出的URL正则来制定缓存的策略,使得缓存策略的制定的过程更加的智能化。
技术领域
本发明涉及通信技术领域,更具体地,涉及一种URL资源的缓存方法、装置及电子设备。
背景技术
URL(Uniform Resource Locator,统一资源定位器)是Internet上信息资源的定位方法。互联网中每个内容资源都具有唯一的URL,而不同资源类型的URL都具有一定的规则,发现这些规则对于运营商的缓存运营服务而言有着重大的意义,尤其是对于视频这类的大流量业务显得尤为重要。目前现有技术实现了通过URL地址命名规则得到不同的URL地址,该技术已经相对成熟,但将多个URL地址提取正则化表达式目前还处于起步阶段。
现有技术是通过先获取待分析域名,针对任意一个待分析域名,获取指定时间段内该待分析域名对应的缓存日志,从该待分析域名对应的任意一个缓存日志中获取第一类关键信息,至少根据第一类关键信息确定该缓存日志是否为可优化缓存日志。若该缓存日志确定为可优化缓存日志,则将该缓存日志中的URL域名字段信息输入到该URL的资源深度等级对应的正则表达式中,生成缓存日志的缓存规则。现有技术针对缓存日志提取URL地址正则表达式,根据URL正则表达式来优化缓存系统的资源深度并生成自动的缓存规则。
现有技术方案主要是根据域名确定需要获取的缓存日志,根据缓存日志分析来获取相应的URL正则表达式。这种方法获取的URL正则表达式适用范围小,并且不同的域名、不同的缓存日志都需要重新提取相应的URL正则表达式,效率低,不利于实际应用时执行。同时,获取URL地址正则表达式的目的是为了优化缓存系统的资源配置,现有技术方案仅从缓存日志中分析,不能够融合缓存系统中没有但是大量用户需求的资源,限制了缓存系统资源优化的范围。
发明内容
本发明提供一种克服上述问题或者至少部分地解决上述问题的URL资源的缓存方法、装置及电子设备。
根据本发明的一个方面,提供一种URL资源的缓存方法,包括:
基于用户发出的HTTP请求日志,根据待处理数据类的过滤规则过滤出待处理的URL地址;
利用卷积神经网络对所述待处理的URL地址进行正则化,获得URL正则;所述卷积神经网络包括输入层、卷积层、池化层和分类层,且利用L1正则化规则训练得到;
根据所述URL正则,生成缓存规则,并按照所述缓存规则对所述待处理的URL地址对应的资源数据进行缓存。
根据本发明的另一个方面,还提供一种URL资源的缓存装置,包括URL地址模块、正则运算模块和URL资源缓存模块;
所述URL地址模块,用于基于用户发出的HTTP请求日志,根据待处理数据类的过滤规则过滤出待处理的URL地址;
所述正则运算模块,用于利用卷积神经网络对所述待处理的URL地址进行正则化,获得URL正则;所述卷积神经网络包括输入层、卷积层、池化层和分类层,且利用L1正则化规则训练得到;
所述URL资源缓存模块,用于根据所述URL正则,生成缓存规则,并按照所述缓存规则对所述待处理的URL地址对应的资源数据进行缓存。
根据本发明的另一个方面,还提供电子设备,包括:
至少一个处理器;以及
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团山东有限公司,未经中国移动通信集团山东有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711459685.6/2.html,转载请声明来源钻瓜专利网。