当今互联网,你所看见的数据,均来自爬虫和反爬虫互相博弈拼杀的结果,这是一场没有硝烟的战争,异常激烈。封禁IP地址是最常见最简单的反爬虫手段,今天我们主要研究下如果遇到IP被封,你该怎么办?
1、通过ADSL拨号换IP。每拨一次就会有一个新的IP地址,无成本,但是这样切换IP效率低。
2、如果是带路由器的局域网,可以模拟登陆路由器,控制路由器重新拨号换IP,与第一条同理,无成本但效率低。
3、使用代理IP。可以在网上抓取免费代理IP,也可以进行购买。免费代理IP稳定性普遍不佳,不适合大规模python爬虫使用;购买代理IP可以选择风讯代理,IP数量多,支持API提取,好用又方便。
15
2019-04
23
2019-05
02
2019-06
27
2019-06
05
2019-06
09
2019-05