網站200.0.64日誌問題

仲介交易 HTTP://www.aliyun.com/zixun/aggregation/6858.html">SEO診斷 淘寶客 雲主機 技術大廳

這幾天我觀察到自己的網站的蜘蛛留下的日誌都是200.0.64，想想以前的網站200.0.0.感覺總有點很不對勁的味道。 於是自己在網路上人肉搜索了下。 看到的一種結果差點把我嚇死，都說64狀態是k站或者放到沙河的預兆。 於是也對自己的站進行了逐一檢查，到目前為止，好像也有一個站被k了。 當然這個還存在第二種解釋，那就是網路不可達。 雖然心裡比較認同第一種的解釋。 但是心裡總是慌慌的。 總這麼下去也不是個辦法。 即使是網路不可達，長久下去也不是個很好的辦法。 於是就潛心對這個狀態盡心了深入的分析。 也和很多的人討論了下。 最初的也得到了我自己的一個解釋。 200這個大家都知道。 對於0，我認為是蜘蛛成功抓取頁面並帶回資料庫，並更新該頁面在百度的資料的相同頁面。 而64是不更新。 這個結論的得出是我發現0的問題大多是出現在新頁面和更新了後的首頁。 而64是大多出現在沒有變動的內頁。 對於這個結論，我起初感覺是很合情合理的。

但是慢慢的，我發現這個結論是個錯誤的。 錯誤的根本就出現在我沒有對蜘蛛抓取的大小進行記錄，當我把記錄日誌擴展後發現。 所有的64狀態，文章的抓取是頁面大小是0.也就是說蜘蛛根本就沒有帶走這個頁面。 從而我對於前面的200有了個新的認識。 那就是200泛泛的說可以是是成功抓取。 但是要精確點的話，我認為是「成功打開頁面比較合適」。 加上後面的0才是成功抓取。 加上64是成功打開頁面而不抓取。

那是不是網路不可達而造成了這個現象。 我也感覺到這個很牽強。 這個可以從蜘蛛的請求數看到。 蜘蛛既然可以向我請求到頁面。 頁面也打開了，那怎麼會不可達。

文章首發：枯狼窩

具體頁面：www.9991web.cn/post/64.html