作為爬蟲，是肯定需要IP池，通過切換IP訪問對方服務器，預防IP被封。那么這IP池怎么來的呢？可以自己建免費爬蟲代理ip池，也可以使用代理IP池，使用哪個好呢？下面請跟精靈代理一起去了解一下爬蟲代理ip池選擇問題。

　　怎么建免費爬蟲代理ip池

　　1.設計思路

　　爬取免費提供代理IP的網站，提取一定數量的IP，接著驗證這些IP的可用性，然后保存這些IP供爬蟲時使用。由于免費IP代理網站提供的IP可用性和穩定性都比較低，所以需要程序大量爬取才可以獲得一些可用IP。

　　2.開發環境

　　Python3.6.1，IDE是pycharm，系統是win10。主要使用到的庫：requests、re。由于驗證IP可用性時單進程效率較低，小編最后也使用了multiprocessing進程池Pool來提供程序的效率，開進程池不屬于本文重點，所以不做過多介紹。

　　3.設計過程

　　爬取免費代理：這些免費IP有很多時效性很短，你必須快速抓取并且快速使用，不然很容易就失效了。

　　測試IP的可用性：用IP去訪問一個驗證網址，然后看返回的網絡狀態碼，如果是200，說明訪問成功，IP有效。如果訪問出錯或是返回的狀態碼不是200，說明IP不可用。這里要設定一個訪問超時限制，根據自己需求而定，不然有些代理ip穩定性很差，訪問一個網頁需要5-10s，這樣ip我們留著也沒有意義。

　　需要注意，免費的始終是免費的，100個里也就幾個ip能用，所以需要多爬一些，然后多驗證一些。

　　4.整合代碼：整合代碼放在記事本保存。

　　建免費爬蟲代理ip池這個方法，基本可以實現免費的個人代理ip池。由于這些免費的ip穩定性很差，所以建議在爬蟲使用前再驗證一遍，很容易實現，可以直接調用自己寫過的測試函數。

　　使用代理IP池效果怎樣

　　精靈代理擁有千萬級獨立ip地址，IP可用率95%以上，全國200+城市線路滿足您任何大數據服務需求，協議支持http/https/socks4/socks5。所有ip均為高質量的動態資源，保證資源的可利用率，并且可以對使用過的ip進行過濾，滿足用戶的個性化需求。

　　可以說，精靈代理是一款性價比高的代理IP，可以自動切換IP，為您節省更多的時間，時間也是金錢！