首頁>Club>
並在統計工具中體現出來?
3
回覆列表
  • 1 # 菸草的香味

    使用python模仿人為訪問網站個人認為主要有以下幾個方面:

    請求頭,傳送訪問後,伺服器接收到的最直接的感覺就是請求頭了,所以,首先請求頭要和瀏覽器的請求一樣,目前主要是User-Agent、Host、Referer等請求頻率,機器的訪問速度一定是比人的請求速度快的多,如果你一秒有幾十條請求的話,當然不難分辨你是一個爬蟲,可以使程式休息一會等方式cookie,使用者訪問網站時是伴隨著cookie的,cookie中儲存著登陸資訊等,這種可以使用session來實現資源請求,當訪問一個頁面時,一般不會是一個只有一個html檔案,同時伴隨著一些資源的請求,比如css,jpg,json等,而爬蟲一般不會把這些資源全部請求,當然可以使用瀏覽器自動化控制模組(selenium等)來實現操控瀏覽器來請求驗證碼等,有些頁面會伴隨著驗證碼,使用驗證碼來判定訪問者是一個人還是機器,不過一般的驗證碼當然是難不倒我們了以上就是我個人認為的Python爬蟲和瀏覽器的區別,總結不全出,望各位不吝賜教

  • 中秋節和大豐收的關聯?
  • 國際社會為何推遲對塔利班政府的承認?塔利班為何在意國際承認?