網站日誌又稱蜘蛛日誌，它是成千上萬個“蜘蛛”小爬蟲程式每天爬行數千萬個網站，這個小爬蟲程式就是“蜘蛛”，它在網站爬行後留下的軌跡或痕跡就是“日誌”。
一、國內常見的蜘蛛名稱：Baiduspider；360Spider；sogou spider。
二、在分析日誌時需要熟知蜘蛛HTTP狀態碼：
2XX：抓取成功，200抓取全部成功。
3XX：重定向，301永久重定向。
4XX：客戶機出現錯誤，404找不到指定文件。
5XX：伺服器出現錯誤。
三、完整的一串蜘蛛日誌都包括那些：蜘蛛訪問IP；訪問時間；獲取方法；訪問的頁面；返回狀態碼；頁面抓取位元組；蜘蛛名稱及蜘蛛地址。
對於一個剛上線的網站，我們能分析出來搜尋引擎蜘蛛抓取的情況；如果網站長時間收錄有問題，那麼我們也可以對比網站日誌中的搜尋引擎蜘蛛行為，來了解網站是哪方面出了問題；如果網站被封，或者被K，我們都可以透過觀察網站日誌的情況來了解原因出在什麼地方。我們要看的網站日誌的分析和診斷就像給網站看病一樣，我們透過網站日誌的分析，可以簡單明瞭的就知道網站的健康狀況，可以利於我們更好的做網站最佳化，所以對於真正的SEO高手而言，分析蜘蛛日誌是最直觀，最有效的額。
網站日誌又稱蜘蛛日誌，它是成千上萬個“蜘蛛”小爬蟲程式每天爬行數千萬個網站，這個小爬蟲程式就是“蜘蛛”，它在網站爬行後留下的軌跡或痕跡就是“日誌”。
一、國內常見的蜘蛛名稱：Baiduspider；360Spider；sogou spider。
二、在分析日誌時需要熟知蜘蛛HTTP狀態碼：
2XX：抓取成功，200抓取全部成功。
3XX：重定向，301永久重定向。
4XX：客戶機出現錯誤，404找不到指定文件。
5XX：伺服器出現錯誤。
三、完整的一串蜘蛛日誌都包括那些：蜘蛛訪問IP；訪問時間；獲取方法；訪問的頁面；返回狀態碼；頁面抓取位元組；蜘蛛名稱及蜘蛛地址。
對於一個剛上線的網站，我們能分析出來搜尋引擎蜘蛛抓取的情況；如果網站長時間收錄有問題，那麼我們也可以對比網站日誌中的搜尋引擎蜘蛛行為，來了解網站是哪方面出了問題；如果網站被封，或者被K，我們都可以透過觀察網站日誌的情況來了解原因出在什麼地方。我們要看的網站日誌的分析和診斷就像給網站看病一樣，我們透過網站日誌的分析，可以簡單明瞭的就知道網站的健康狀況，可以利於我們更好的做網站最佳化，所以對於真正的SEO高手而言，分析蜘蛛日誌是最直觀，最有效的額。