技术总结
本发明公开了一种代理服务器及互联网数据的采集方法，包括一种互联网数据的采集方法，包括接收客户端发送的向目标服务器的待采集站点采集数据的采集请求；解析所述采集请求并得到待采集站点的URL地址；模拟浏览器登录所述URL地址并执行Javascript脚本渲染以得到所述待采集站点的数据流；将所述数据流作为回复数据包发送给所述客户端。本发明能够模拟浏览器登录采用Javascript脚本渲染的网站并进行数据采集，然后由代理服务器将采集到的数据发送给采集软件，无需改变传统采集软件的源程序，即可对传统采集软件无法采集的网站内容进行采集，提高了数据采集效率，降低了人力物力。
技术研发人员：龚权
受保护的技术使用者：北京慧数科技有限公司
技术研发日：2017.12.21
技术公布日：2018.06.01