[发明专利]一种冷访问回源调度系统及其处理方法在审
申请号: | 202011125950.9 | 申请日: | 2020-10-20 |
公开(公告)号: | CN112287259A | 公开(公告)日: | 2021-01-29 |
发明(设计)人: | 黄东 | 申请(专利权)人: | 上海七牛信息技术有限公司 |
主分类号: | G06F16/957 | 分类号: | G06F16/957;G06F16/955;G06F9/54;G06F9/50 |
代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 郭桂峰 |
地址: | 201203 上海市浦东新区中*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 访问 调度 系统 及其 处理 方法 | ||
本发明提供一种冷访问回源调度系统及其处理方法,该冷访问回源调度系统,包括:Cache模块、边缘业务判断模块、冷热文件统计模块、重定向模块以及回源路径决策模块,其中:Cache模块用以对标签相同的存储块进行访问;边缘业务判断模块用以判断业务是否需要进行回源收敛处理;冷热文件统计模块用以对Cache模块的访问内容请求日志,统计内容的冷热度,决策出某个内容是属于冷访问还是热访问内容。该冷访问回源调度系统及其处理方法,对低缓存命中率的业务,进行回源带宽的收敛,减少访问内容需要的回源次数,减少CDN网内的内容传输流量,对冷访问内容进行区域的集中服务,提升内容的缓存共享,利用内容hash计算快速定位资源服务池。
技术领域
本发明涉及互联网技术领域,特别的为一种冷访问回源调度系统及其处理方法。
背景技术
随着互联网视频应用的蓬勃发展,视频内容来源种类越来越多,视频内容的受众更加的细分,除了热点内容之外,小受众的视频内容也是越来越多,这类视频单个内容产生的互联网流量微小,但视频的数量基数较大,特别是网民生产的内容,最终带来的流量也是很巨大的CDN对内容的分发主要是依靠内容就近缓存在网民的周边节点,利用CDN节点内缓存的能力,加速网民获取内容的速度,提升访问质量,同时也减轻内容源站的服务压力。
基于CDN的缓存原理,内容被访问频率越高,缓存命中率越高,CDN加速产生的业务和商业价值越大,随着互联网内容的多样化和受众的细分,很多的访问内容并不是热点访问内容,即反映在CDN中就是内容的命中率很低,会有大量的访问内容CDN需要回父层节点或内容源获取内容再发送给访问用户,这样的场景对CDN的缓存价值打了折扣,除了用户的访问质量会受到影响,还会产生大量的CDN网内的传输流量,也就是会增加CDN的父层节点带宽压力和成本,这类命中率低的业务,和传统一般的动态回源加速业务还不太一样,因为是视频类的内容,带来传输数据量级大很多一般针对命中率低的业务,CDN有一些辅助手段可以提升边缘节点对内容的命中率,比如预取内容,把访问的内容提前加载到CDN边缘节点,但网民的访问行为是不确定,只能对统计的一些历史的热点访问内容进行预取,而对所有新增内容的提前预取,短时间内容也需要消耗传输时间,从业务的角度看也不能在短期内把所有内容同时分发到CDN边缘节点。
随着低命中率的互联网业务,即需要较高回源比例的互联网业务越来越多,特别是视频和下载等传输数据量大的业务,这对CDN和业务运营方都带来了不小的技术和成本挑战,从业务方的角度看业务有价值需要得到CDN的加速保障业务的服务质量,从CDN服务商的角度看,这类业务相对高命中率的业务会带来更高的带宽成本和平台的性能压力。
发明内容
本发明提供的发明目的在于提供一种冷访问回源调度系统及其处理方法,该解决上述背景技术中的问题。
为实现以上目的,本发明通过以下技术方案予以实现:一种冷访问回源调度系统,包括:Cache模块、边缘业务判断模块、冷热文件统计模块、重定向模块以及回源路径决策模块,其中:
Cache模块用以对标签相同的存储块进行访问;
边缘业务判断模块用以判断业务是否需要进行回源收敛处理;
冷热文件统计模块用以对Cache模块的访问内容请求日志,统计内容的冷热度,决策出某个内容是属于冷访问还是热访问内容,并提供给其他模块作为信息的输入;
重定向模块用以对访问内容的传输路径进行调整;
回源路径决策模块用以确定URL访问内容的最佳节点。
进一步地,边缘业务判断模块用以判断业务是否需要进行回源收敛处理具体包括:
预设的配置:域名是否开启冷访问回源收敛功能,不同时段对功能的开启关闭;
冷热文件统计模块的来源数据:访问的内容是热文件,直接按照正常逻辑进行服务;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海七牛信息技术有限公司,未经上海七牛信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011125950.9/2.html,转载请声明来源钻瓜专利网。