我們選擇一種問題的解決辦法，通常需要考慮到想要達到的效果，還有最重要的是這個辦法本身的優(yōu)缺點有哪些，與其他的方法對比哪一個更好。之前小編之前也教過大家在python應(yīng)對反爬蟲的方法，那么小伙伴們知道具體情況下選擇哪一種辦法更適合嗎？今天就其中的user-agent和ip代碼兩個辦法進行優(yōu)缺點分析比較，讓大家可以明確不同辦法的區(qū)別從而進行選擇。

方法一：

可以自己設(shè)置一下user-agent，或者更好的是，可以從一系列的user-agent里隨機挑出一個符合標準的使用。

缺點：

容易偽造頭部，github上有人分享開源庫fake-useragent

IP限制

如果一個固定的ip在短暫的時間內(nèi)，快速大量的訪問一個網(wǎng)站，后臺管理員可以編寫IP限制，不讓該IP繼續(xù)訪問。

方法二：

比較成熟的方式是：IP代理池

簡單的說，就是通過ip代理，從不同的ip進行訪問，這樣就不會被封掉ip了。

可是ip代理的獲取本身就是一個很麻煩的事情，網(wǎng)上有免費和付費的，但是質(zhì)量都層次不齊。如果是企業(yè)里需要的話，可以通過自己購買集群云服務(wù)來自建代理池。

缺點：

可以使用免費/付費代理，繞過檢測。

讀完本篇我們會發(fā)現(xiàn)，每種方法都有它的缺陷，我們要做的就是發(fā)揮使用它的優(yōu)勢出。根據(jù)不同的環(huán)境情況，可以選擇適合自己操作順手的方法。對于兩種方法知識點遺忘的，可以直接點擊進去進行回顧。

到此這篇關(guān)于python反爬蟲方法的優(yōu)缺點分析的文章就介紹到這了,更多相關(guān)python解決反爬蟲方法的優(yōu)缺點對比內(nèi)容請搜索好吧啦網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持好吧啦網(wǎng)！