最常見的反爬蟲技術(shù)之一就是通過客戶端的IP鑒別是否為爬蟲，若要爬取大量資源僅用少數(shù)IP是不行的（會被封），所以就需要不斷地更換IP，最簡單的方式是使用代理服務(wù)器，我們可以通過不斷地更換代理服務(wù)器來使用大量IP訪問服務(wù)器，進(jìn)而欺騙服務(wù)器。

使用ProxyHandler類可以設(shè)置HHTP和HTTPS代理，但是在設(shè)置代理之前，首先要有代理服務(wù)器，代理服務(wù)器可以自己搭建，也可以使用第三方的服務(wù)器，本文將介紹如何自己搭建服務(wù)器。

工具：

??nginx，官網(wǎng)下載Android · Sunny-Ngrok說明文檔，選擇穩(wěn)定版（注意路徑不能有中文）

電腦

?打開<nginx根目錄>/conf/nginx.conf文件（記事本打開即可）在http{....}中加入如下代碼：

server{resolver 192.169.31.1;listen 8888;location / {proxy_pass http://$http_host$request_uri;}}

其中resolver是DNS服務(wù)器，如果是將本機(jī)作為代理服務(wù)器，那么DNS服務(wù)器的IP是訪問路由器后臺管理頁面的地址，如192.169.31.1每臺電腦連接不同的局域網(wǎng)的地址不同listen 8888表示代理服務(wù)器的端口號是8888，location?/”表示訪問任何的?URL?都通過這個(gè)代理（因?yàn)橹付ǖ穆窂綖?根路徑“/”)。proxy_pass?后面的地址表示代理服務(wù)器根據(jù)客戶端的請求向資源服務(wù)器發(fā)送的?URL，?http:/$http_host$request_uri?相當(dāng)于將客戶端發(fā)過來的?URL?原封不動發(fā)送給資源服務(wù)器。$http_host?和 $request_uri?是?nginx?的內(nèi)部變量，分別表示客戶端發(fā)過來的?IP（域名）以及請求路徑。?在?nginx.conf?文件中輸人上面的代碼后，保存?nginx.conf?文件，啟動?nginx?服務(wù)器，(啟動時(shí)就彈窗一下)然后使用?Firefox?瀏覽器測試一下代理服務(wù)器。?打開?Firefox?瀏覽器，單擊右上角的菜單按鈕，在彈出菜單中單擊“首選項(xiàng)”菜單項(xiàng)，在顯示的頁?面中找到“網(wǎng)絡(luò)設(shè)置”部分（一般在頁面的最后)，然后單擊“設(shè)置”按鈕，會彈出如下圖 所示的?對話框。單擊“手動代理設(shè)置”選項(xiàng)按鈕，并在“HTTP?代理”文本框中輸入代理服務(wù)器的?IP，如果?用本機(jī)作代理服務(wù)器，可以輸入?127.0.0.1，也可以輸入本機(jī)的真實(shí)?IP?（本例是?192.168.31.124?)，然?后在“端口”文本框輸入?8888。最后單擊“確定”按鈕保存設(shè)置。

?在?Firefox?瀏覽器的地址欄中輸人一個(gè)?http?網(wǎng)站，如?http://blogjava.net，如果正常顯示頁面，說?明設(shè)置成功了。這時(shí)?http://blogjava.net實(shí)際上會先通過代理服務(wù)器，然后代理服務(wù)器去訪問?http:/?blogjava.net，并將返回結(jié)果傳給?Firefox?瀏覽器。要注意的是，nginx?目前并不支持?https?代理，如果?讀者要測試?https?代理，可以尋找免費(fèi)或收費(fèi)的代理服務(wù)器。?如果想找免費(fèi)的代理服務(wù)器，可以在百度或谷歌搜索“免費(fèi)代理服務(wù)器”，會出現(xiàn)一堆，不過免?費(fèi)的代理服務(wù)器有些不太穩(wěn)定，而且大多只支持?HTTP。所以讀者可以考慮使用收費(fèi)的代理服務(wù)器。?例如，蜻蜓代理（https://proxy.horocn.com)，盡管蜻蜓代理是收費(fèi)的，但如果只是測試，蜻蜓代理?提供了一些用于免費(fèi)測試的代理?IP，只需要注冊蜻蜓代理，在后臺就可以申請。要注意的是，通常?這些代理會在?1?到?3?分鐘之內(nèi)失效（收費(fèi)和免費(fèi)的代理都是這樣)，所以在使用代理時(shí)應(yīng)不斷更換代?理服務(wù)器。

未設(shè)置好的界面是這樣的

?設(shè)置好的界面是這樣的

?一定要點(diǎn)下這個(gè)！！！

?以上就是獲取大量IP的白嫖方法了，喜歡就收藏加關(guān)注哈

總結(jié)

以上是生活随笔為你收集整理的搭建代理服务器获取大量IP的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。