一种基于标识的url链接失效的恢复处理方法及装置的制造方法
【技术领域】
:
[0001]本发明涉及计算机网络技术领域，提出了一种基于标识的URL链接失效的恢复处理方法。本发明结合URL链接失效的不同原因采用不同的技术手段进行了恢复处理，避免标识系统因为URL无效而影响到获取最优资源。
【背景技术】
:
[0002]随着Internet应用的深入，各种信息、资源在网络上可以很轻易地发布，伴随而来的是很多网络资源被盗链，这已危及到许多网站的正常运行，严重损害了被盗链网站的利益。本着为广大访问教育网用户服务的原则，可以将请求频率较高的优良资源整合到本地服务器上，提供有效资源的热点应用下载。有时候输入了一个正确的资源地址，显示出来的网页却是页面无法显示，或者此网站错误等信息，用软件工具找到了资源的真实地址，仍然不能下载，总是出错。如果确认地址没错的话，大多数情况是遇上防盗链系统了。因为盗链现象的存在，内容提供商或者服务提供商也不断采取防盗链技术措施，防止别人通过一些技术手段绕过本站的资源展示页面，盗用本站的资源，让绕开本站资源展示页面的资源链接失效。实施防盗链系统，屏蔽盗链的间接资源请求，大大减轻服务器及宽带的压力。但同时也为正常渠道获取资源带来了很多不便，无法将更优的资源整合后展示给真正需要的用户。
【发明内容】
:
[0003]有鉴于此，本发明提出了一种基于标识的URL链接失效的恢复处理方法。该方法针对不同原因的URL链接失效，采取不同的恢复处理方法。
[0004]根据本发明一方面，其提供了一种基于标识的URL链接失效的恢复处理方法，其包括:
[0005]获取按请求频率排名的教育网外排名靠前的预定数量的URL链接；
[0006]下载所获取的预定数量的URL链接对应的资源；
[0007]标识所下载的资源中的热门资源后后存贮在本地服务器，并在教育网的预定页面上展示给用户供用户下载使用；
[0008]所述方法还包括:
[0009]在下载所获取的预定数量的URL链接对应的资源时，如果所述URL链接失效，则分析所述URL链接失效的原因，并根据所述URL链接失效的原因采用不同的方式进行恢复处理，其中，所述恢复处理包括以下几种中的一种或多种:
[0010]1)采用破解防盗链技术进行恢复处理；
[0011 ] 2)对URL链接的域名进行检测，获取真正的IP地址；
[0012]3)分析得到所述URL链接中的资源内容，并获取有效资源后存储在本地；
[0013]4)将所述URL链接替换成有效的资源链接。
[0014]根据本发明另一方面，其提供了一种基于标识的URL链接失效的恢复处理装置，其包括:
[0015]获取模块，用于获取按请求频率排名的教育网外排名靠前的预定数量的URL链接；
[0016]下载模块，用于下载所获取的预定数量的URL链接对应的资源；
[0017]标识模块，用于标识所下载的资源中的热门资源后后存贮在本地服务器，并在教育网的预定页面上展示给用户供用户下载使用；
[0018]所述恢复处理装置还包括:
[0019]恢复处理模块，其在下载所获取的预定数量的URL链接对应的资源时，如果所述URL链接失效，则分析所述URL链接失效的原因，并根据所述URL链接失效的原因采用不同的方式进行恢复处理，其中，所述恢复处理包括以下几种中的一种或多种:
[0020]1)采用破解防盗链技术进行恢复处理；
[0021 ] 2)对URL链接的域名进行检测，获取真正的IP地址；
[0022]3)分析得到所述URL链接中的资源内容，并获取有效资源后存储在本地；
[0023]4)将所述URL链接替换成有效的资源链接。
[0024]本发明结合URL链接失效的不同原因采用不同的技术手段进行了恢复处理，避免标识系统因为URL无效而影响到获取最优资源。
【附图说明】
:
[0025]图1是本发明中基于标识的URL链接失效的恢复处理方法处理流程图。
【具体实施方式】
:
[0026]为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明作进一步的详细说明。
[0027]如图1所示，本发明提出了一种基于标识的URL链接失效的恢复处理方法。所述方法包括:
[0028]步骤101:获取按请求频率排名的教育网外排名靠前的预定数量的URL链接；
[0029]可选地，本发明中的标识管理系统可定时获取按请求频率排名的教育网外预定数量的URL链接，如每天获取top 100的URL链接；
[0030]步骤102:下载所获取的预定数量的URL链接对应的资源；
[0031]步骤103:标识所下载的最优资源后存贮在本地服务器，并在教育网的预定页面上展示给用户供用户下载使用;其中，可以将所标识的最优资源在教育网的热点风云页面(如http://top.edu.cn/hot/)上展示，用户通过所述热点风云页面可以搜索所需的网络资源进行下载。
[0032]可选地，所述最优资源是指时下比较热门的或访问请求频率比较高的软件应用或音乐视频等应用。可选地，本发明实施例中将标识系统排名top20的资源都下载下来并标识出，值得推荐的资源都推送到热点风云展示页面。
[0033]通过上述方法在访问一个URL链接时，经常会遇到网页提示无法打开或报http404错误等信息，这意味着链接指向的网页不存在，也就是原始网页的URL失效，这种情况经常会发生，很难避免，原因可能有以下几种情况:网页已不存在、网站被屏蔽;或者网页URL生成规则改变、网页文件更名或移动位置、导入链接拼写错误等;还有的原因是服务提供商做了防盗链措施，防盗链在图片、音视频、软件等相关的资源上使用比较广泛；另外有的服务提供商会为防黑客攻击，定期更换资源网站的IP地址，导致url失效无法访问。
[0034]因此，所述方法还包括:
[0035]在下载所获取的预定数量的URL链接对应的资源时，如果所述URL链接失效，则分析所述URL链接失效的原因，并根据所述URL链接失效的原因采用不同的方式处理。
[0036]可选地，造成所述URL链接失效的原因可能包括如下几种:
[0037]1)所述URL链接对应的网页采取了防盗链措施；
[0038]2)所述URL链接对应的网页为防黑客入侵，采用了定期更换URL地址的措施；
[0039]3)所述URL链接为无效的资源链接；
[0040]4)所述URL链接失效的原因无法得知。
[0041]本发明中针对以上几种URL失效的原因，分别采取了如下的几种措施:
[0042]1)针对采取了防盗链措施的URL链接，作为合理访问用户则采用破解防盗链技术，而对于文件资源所设置的防止下载的防盗链，