如何近距離的瞭解蜘蛛爬行痕跡

來源:互聯網
上載者:User

仲介交易 HTTP://www.aliyun.com/zixun/aggregation/6858.html">SEO診斷 淘寶客 雲主機 技術大廳

大家好,由於時間關係好久沒有寫軟文了,今天小傑為大家帶來的是iis日誌分析,和HTTP狀態的基本講解,做為一個seo操作者,他必須是一個資料的分析師,為什麼這樣說了,因為通過這些資料的分析, 我們可以很清楚的知道自己的網站到底那裡出了問題,然後通過這些資料的分析,總結出方案來解決問題,那麼今天小傑我就教大家如何去分析iis日誌。

一、IIS日誌的用途

IIS日誌的用途,其實就是能夠觀察搜尋引擎的蜘蛛來我們網站的爬取情況,可以更近距離的分析和接觸蜘蛛。 爬取次數,爬取時間點,爬取高峰期,爬取反應出來的HTTP狀態碼,為我們帶來清晰的分析便利。

二、IIS日誌的分析

  

大家通過上圖我們可以讀取到蜘蛛爬行。

1、123.125.71.113( 一個訪問者的IP)

2、[28/Sep/2010:07:15:11 -0700](時間和埠)

3、GET /wangzhan-youhua/maowenben.html(訪問了那個頁面)

4、200 12864(HTTP狀態碼200,頁面下載了12864位元組)

5、「Baiduspider+(+HTTP://www.baidu.com/search/spider.htm)」(百度蜘蛛)

HTTP基本狀態碼

200:請求已經完成,蜘蛛訪問頁面正常

301:已經移動,永久重定向

302:臨時重定向

304:蜘蛛爬取後發現,頁面沒有修改

305:使用代理

400:請求錯誤

404:找不到頁面

從而我們可以通過上面的分析得出一句完整的話,有一個IP來自123.125.71.113的訪問者,是 baiduspider,在2010年9月28日7點15分11秒,通過0700埠,成功訪問了wangzhan- youhua /maowenben.html這個頁面,訪問下載了12864個位元組。

這是我在seo操作中的一些心得,與大家分享一下,杭州seo (www.gdwzjs.com)更多seo操作手法分享,轉載請保留此連結!連絡方式QQ:595976867

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.