代理IP被屏蔽時爬蟲應該如何解決問題？
jj
2022-01-25
作為一個爬蟲愛好者，你有沒有遇到過一個已經設置好的分布式爬蟲，即將讓程序使用代理IP抓取數據，而服務器已經設置好了，突然發現辦公室的IP被屏蔽了。那你應該怎么做，應該怎么解決？
隨著大數據時代的到來，爬蟲的這種工作場景經常會遇到:
1.如果你是個人，作為愛好，就交不了代理費。當然，在線抓取自由代理，檢查IP有效性10分鐘。當然這種搶到的IP是極其不穩定的，但是免費的東西就是免費的東西，用起來就好。作為一個個體。
2.申請多個adsl，不斷撥號獲取IP，這個項目難度要大一點:一是一個城市可用的IP池有限，二是可能會面臨各種撥號問題，維護起來比較困難。
3.網上購買收費代理。目前市場上充電代理供應商很多，精靈ip代理就是其中之一。
上一篇：如何選到高匿代理ip服務提供商？
下一篇：精靈ip代理有什么作用？好用嗎？
