一种CDN节点内容校验方法和系统与流程

文档序号:14942926发布日期:2018-07-13 21:31阅读:270来源:国知局

本发明属于信息技术领域,特别是涉及一种cdn节点内容校验方法和系统。



背景技术:

在cdn分布式系统中,存在大量的节点,每个节点又缓存了大量的文件。缓存的文件内容要求与源站文件内容一致。当源站某个文件内容发生变化的时候,边缘节点的已缓存的对应文件要先做清除动作,等有访问的时候,边缘节点重新缓存源站的最新文件内容。由于cdn分布式系统的构架的复杂性,随着时间的推移以及不断的文件内容变化,在特定的情形下,比如清理边缘节点文件缓存时出现异常,未正确100%清除,则有可能出现边缘节点缓存的文件内容与源站文件不一致的情况。由于节点及内容数量巨大,这种文件内容不一致比较难于发现。

于是,就产生了需要对指定的边缘缓存文件与源站文件对比校验的问题。

传统方案中,一般是编写一个校验工具,模拟用户访问并校验。校验工具先到源站把文件下载回来,计算出文件的md5值,然后根据需要校验的文件链接(url),校验工具到每个边缘节点上下载对应的缓存的文件后,分别计算md5值,与源站文件的md5值进行比较,最后得出每个边缘节点一致或不一致的结论。

传统方案的劣势:1、对比效率低。校验工具必须到每个边缘节点上把需要校验的文件下载下来,再执行md5摘要计算,下载的时间可能很长,每完成一次下载,都要进行md5计算,效率很低,特别在需要校验的文件较多及较大的时候,校验工具对网络带宽及存储都有较高要求。2、校验准确度很难做到100%。由于校验工具到每个边缘节点的链路情况不一样,有可能下载不成功或下载不完整,导致得到不准确的校验结果。



技术实现要素:

本发明提供了一多cdn节点内容校验方法和系统,目的在于提高校验效率和校验准确度。

这种cdn节点内容校验系统,包括源站、校验工具、cdn节点,源站的存储文件生成其文件检验码;cdn节点在缓存文件同时生成并存储文件的文件校验码;校验工具通过与源站和cdn节点通信获得文件校验码进行对比。

校验工具与源站和cdn节点通信方式为http协议响应头字段扩展方式。

校验工具与源站和cdn节点通信方式为http协议响应头字段扩展方式是以x-verify-tag为校验码的字段名,校验码的值为etag的值。

这种cdn节点内容校验系统,对应的一种cdn节点内容校验方法,包含以下步骤:

步骤1、源站生成文件校验码;

步骤2、cdn节点生产缓存文件校验码;

步骤3、校验工具获得源站与cdn节点校验码,并不对确定文件是否一致。

步骤3校验工具与源站和cdn节点通信方式为http协议响应头字段扩展方式。

步骤3校验工具与源站和cdn节点通信方式为http协议响应头字段扩展方式是以x-verify-tag为校验码的字段名,校验码的值为etag的值。

本发明的优点:

校验效率比较高;校验准确率比较高;系统维护运行成本低。

附图说明

图1是传统的校验方法处理方式;

图2是本发明的校验方法处理方式。

具体实施方式

下面对本发明优选实施例作详细说明。

这种cdn节点内容校验系统,包括源站、校验工具、cdn节点,图1所示为传统解决方案的方式;本方案中源站的存储文件生成其文件检验码;cdn节点在缓存文件同时生成并存储文件的文件校验码;校验工具通过与源站和cdn节点通信获得文件校验码进行对比,如图2所示。

校验工具与源站和cdn节点通信方式为http协议响应头字段扩展方式。

校验工具与源站和cdn节点通信方式为http协议响应头字段扩展方式是以x-verify-tag为校验码的字段名,校验码的值为etag的值。

这种cdn节点内容校验系统,对应的一种cdn节点内容校验方法,包含以下步骤:

步骤1、源站生成文件校验码;

步骤2、cdn节点生产缓存文件校验码;

步骤3、校验工具获得源站与cdn节点校验码,并不对确定文件是否一致。

步骤3校验工具与源站和cdn节点通信方式为http协议响应头字段扩展方式。

步骤3校验工具与源站和cdn节点通信方式为http协议响应头字段扩展方式是以x-verify-tag为校验码的字段名,校验码的值为etag的值。

当然,本技术领域的普通技术人员应当认识到,以上实施例仅是用来说明本发明的,而并非对本发明的限定,只要在本发明的范围内对以上实施例的变化、变型都在本发明的保护范围之内。



技术特征:

技术总结
本发明涉及一种CDN节点内容校验方法和系统,包括源站、校验工具、CDN节点,源站的存储文件生成其文件检验码;CDN节点在缓存文件同时生成并存储文件的文件校验码;校验工具通过与源站和CDN节点通信获得文件校验码进行对比。校验工具与源站和CDN节点通信方式为HTTP协议响应头字段扩展方式。校验工具与源站和CDN节点通信方式为HTTP协议响应头字段扩展方式是以X‑Verify‑Tag为校验码的字段名,校验码的值为ETag的值。本发明校验效率比较高;校验准确率比较高;系统维护运行成本低。

技术研发人员:刘晓光;汪志武;赵子毅;张晴晴
受保护的技术使用者:北京云端智度科技有限公司
技术研发日:2018.03.05
技术公布日:2018.07.13
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1