技术特征:
技术总结
本公开是关于一种IP调用方法及装置,该IP调用方法包括:配置IP切换策略以及IP接口;响应爬虫应用通过所述IP接口发送的包括待爬取网站URL的IP调用请求;根据所述待爬取网站URL以及所述IP切换策略为所述爬虫应用分配可调用IP以使所述爬虫应用根据所述可调用IP爬取待爬取网站。该方法可以提高爬虫应用的爬取效率,同时还可以提高IP的利用率。
技术研发人员:苑海江;张硕硕;刘元俊
受保护的技术使用者:北京京东金融科技控股有限公司
技术研发日:2017.05.05
技术公布日:2017.08.29