文章詳情頁
java - QQ空間爬蟲總是被封號
瀏覽：126日期：2022-09-24 17:58:56
問題描述
抓取QQ空間說說但是 總是被封號 可以給提出一些解決方案嗎？如何既可以快速 又可以不封號！謝謝啦！
代碼在github上地址https://github.com/20100507/Q...
問題解答
回答1：反爬蟲策略：
1、識別請求頭，判斷是否是爬蟲2、記錄請求頻率、路徑和訪問ip，判斷是否是爬蟲3、請求參數中進行加密或復雜加密，增加爬蟲開發的難度（如淘寶的ua算法）4、復雜驗證碼
應對反爬蟲策略：
1、在爬取過程中，適當切換代理ip2、適當降低請求頻率3、請求頭模擬成瀏覽器的請求，也就是用戶正常訪問的請求
你的問題，主要可以通過定時切換ip，或一旦被封再切換ip，來解決，可以考慮去“站大爺”等代理ip網站付費獲取，或者去多用幾個電信賬號，用ASDL撥號來切換ip。
標簽：
qq
相關文章：
1. java中返回一個對象，和輸出對像的值，意義在哪兒2. javascript - Img.complete和img.onload判斷圖片加載完成有什么區別？3. css - chrome下a標簽嵌套img 顯示會多個小箭頭?4. vim - docker中新的ubuntu12.04鏡像,運行vi提示,找不到命名.5. docker網絡端口映射，沒有方便點的操作方法么？6. mysql - 在不允許改動數據表的情況下，如何優化以varchar格式存儲的時間的比較？7. mysql 為什么主鍵 id 和 pid 都市索引, id > 10 走索引 time > 10 不走索引?8. css3 - 純css實現點擊特效9. css - 網頁div區塊 像蘋果一樣可左右滑動 手機與電腦10. javascript - 有適合開發手機端Html5網頁小游戲的前端框架嗎？
排行榜
網公網安備