爬虫代理IP的使用方法

jnPvp958

大家都比较清楚，写网络爬虫时，如果爬虫抓取速度过快或者抓的网站和数据多了，经常会遇到ip频繁访问被封的问题。那么如何解决这种问题呢？方案有两个：

1.IP相同，那么我们就要放慢抓取速度

2.使用代理IP访问

第一种方案如果你不着急的话，就可以看着办，毕竟在量不大，而且有足够的时间的情况下，放慢点速度也没有什么不可以，如果你是要大量的进行爬取，但是时间特别紧，这个方法还是不建议你使用的。

第二种方案是看经济状况，其实代理IP大多数的价格还是蛮OK的，你可以找一些性价比比较高的。例如说是河马代理IP。

使用方法

1、打开IE浏览器，选择“工具”——>“Internet选项”：

2、选择“连接”选项，：

3、选择局域网设置，打开页面中选择使用代理，填入正确的代理服务器参数即可完成设置代理上网， 填入正确的代理服务器参数

注意事项

其他浏览器的处理方法差不多，选择代理IP一定要选择高质量的代理IP，否则就是在浪费时间。如河马代理网站所提供的代理IP的质量都还不错。