淺談站內分析中不可或缺的一環:IIS日誌分析

來源:互聯網
上載者:User

仲介交易 HTTP://www.aliyun.com/zixun/aggregation/6858.html">SEO診斷 淘寶客 雲主機 技術大廳

對於每一個優化人員來說都需要具備一定的分析能力,分析使用者的搜索行為、分析網站的資料流量等等。 只有合理的分析好這一些資料才可以更好的制定我們的優化策略。 其中在我們的站內分析中不可缺少的一項就是分析搜尋引擎蜘蛛的抓取爬行行為。 搜尋引擎蜘蛛是我們肉眼所不能看到的,我們要如何分析它的爬行行為呢?我們可以通過分析我們網站的IIS日誌。

一:那麼從分析IIS日誌我們可以從我們的網站上得到什麼資訊

1:在外鏈的建設中我們知道網站上的每一個外鏈都是搜尋引擎蜘蛛進入我們網站的入口,對此我們可以觀察日誌上的蜘蛛的造訪情況,就可以從另一角度查看我們的外鏈是否能夠更好的吸引到蜘蛛,以此制定一個更加合理的外鏈建設策略。

2:網站的空間問題是很多站長棘手的問題之一,網站打不開很可能使我們的網站一夜回到解放前。 那麼對於我們的網站來說如何最快最早的瞭解發現問題呢。 對此同樣可以通過分析該日誌上的搜索蜘蛛爬行情況,因為網站空間除了什麼問題的第一反應就是搜尋引擎蜘蛛。

3:通過該日誌我們也可以分析蜘蛛對於頁面內容的爬行情況。 瞭解搜尋引擎更加喜歡我們網站上的什麼內容。 我們可以根據這些資料在內容上的佈局或者微調,是搜尋引擎更加的愛上我們的內容。

二:如何獲得我們網站的IIS日誌及IIS日誌的設置

首先,我們的網站空間需要支援網站的日誌下載。 對於這點我們在購買網站空間的時候可以先與空間商進行諮詢,是否支援該功能,如果支援的話,一般日誌檔置於weblog檔中,我們可以直接FTP到本地。 對於IIS日誌的記錄設置,筆者認為一般如果網站的內容較多,結構較複雜的可以設置成一小時生成一次,而內容較少的話可以設置成一天更新一次,這樣可以避免我們的IIS日誌出現信檔過大的問題。

三:如何分析我們網站的IIS日誌

1:對IIS日誌檔的拆分分析

我們使用FTP把日誌下載本地後,可以通過記事本打開檔,同時搜索主要的搜尋引擎蜘蛛名稱,其中的百度的蜘蛛名為BaiduSpider、谷歌的蜘蛛名為Googlebot 。 如下圖所示

  

百度蜘蛛

  

谷歌蜘蛛

我們可以分段進行分析

2012-04-13 06:47:10 是指蜘蛛爬行該頁面的具體日期和時間

116.205.156.37 這個位址是指我們網站所在的IP位址

GET 代表事件,跟在這個參數後面的是指蜘蛛所爬行的頁面,而「/」代表的是網站的主頁。

220.125.51.130 這一IP是指搜尋引擎蜘蛛的伺服器的IP位址。 當然這個IP位址並不一定就是真正的搜尋引擎蜘蛛伺服器的位址,因為有可能是有的人為了採集你的網站上的內容,而冒充搜尋引擎蜘蛛來爬行你的網站,抓取你的內容。 這種情況雖然沒有什麼大的影響,但是如果頻率高的話將會消耗網站的資源。 那麼我們如何辨別呢?筆者分先給自己的一小方法。 我們可以打開我們電腦的控制命令視窗。 然後打入nslookup+IP位址的命令。 如果是真的蜘蛛會有自己的蜘蛛伺服器。 我們就可以對假蜘蛛的IP進行遮罩處理。 如下圖所示

  

真蜘蛛

  

假蜘蛛

2:上文我們提到GET參數後跟的是搜尋引擎蜘蛛爬行的頁面,我們可以根據這一資訊分析搜索引蜘蛛對我們網站上什麼內容更青睞,然後對我們的網站內容做相應的微調。​

3:我們通過日誌可以發現蜘蛛對於我們網站頁面的爬行抓取是根據頁面的權重的遞減分等級的,一般順序為主頁、目錄頁和內容頁。​

  分析是我們優化工作中一項必不可少的工作,而我們身邊可利用的資料也很多。 合理的利用好這一些資料相信會為我們的優化助力不少的。 本文由淘寶皇冠店HTTP://www.jgdq.org 獨家供稿,轉載請留連結,謝謝!

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.