技术编号:9846640
提示:您尚未登录,请点 登 陆 后下载,如果您还没有账户请点 注 册 ,登陆完成后,请刷新本页查看技术详细信息。网络爬虫系统在抓取数据时,会因为偶尔的突发情况导致抓取的消息数猛增,并且主要由历史数据组成,使得系统处于峰值状态,甚至超过系统的处理能力,使得系统无法有效的处理有价值的实时数据,从甚至导致的整个系统的崩溃,无法提供服务。中国发明专利申请CN103107948 A公开了一种流量控制方法,包括在应用服务器拦截用户端的请求根据所述请求获得用户信息组合;将所述用户信息组合,与黑名单中的用户信息组合进行匹配,如果匹配,则进行过滤;起哄,所述黑名单通过如下步骤生成根据...
注意:该技术已申请专利,请尊重研发人员的辛勤研发付出,在未取得专利权人授权前,仅供技术研究参考不得用于商业用途。
该专利适合技术人员进行技术研发参考以及查看自身技术是否侵权,增加技术思路,做技术知识储备,不适合论文引用。