類比蜘蛛爬行檢查死鏈

仲介交易 HTTP://www.aliyun.com/zixun/aggregation/6858.html">SEO診斷 淘寶客 雲主機 技術大廳

隨著網站內容的不斷增加，免不了會有一些連結失效，此稱為死連結。 死連結的危害是很大的，會讓人對你網站的管理失去信心，從而失去一部分訪客。 但要手工一條一條檢查，簡直是天方夜譚!www.DeadLinks.com 十個不錯的死鏈檢查工具，1分鐘之內就能檢查你整個網站所有的連結情況。

在網址輸入框中輸入您的網站或部落客頁位址，則小蜘蛛會讀你的HTML代碼，並檢查損壞的連結。 同時蜘蛛則會分裂成兩類連結，內部(同一個主機上)和外部(將外部的連結到不同的網域)。 一旦放入你的入口網址，蜘蛛將訪問您的網站和並且檢查所有連結的狀態。 當完成，您會看到一個報告顯示，不僅僅包括404的狀態，還包括發現的所有死連結。

注：蜘蛛不能抓取框架內的連結或JavaScript或Flash內的連結 。

常見問題解答:

什麼是蜘蛛的使用者代理?

蜘蛛的使用者代理是： 「網上連結校驗( HTTP://www.dead-links.com/ )

蜘蛛的IP位址是什麼?

蜘蛛的IP位址是216.93.174.12 。

我怎樣才能確認蜘蛛留在我伺服器上的日誌檔?

根據任何2條日誌資訊，您可以確認蜘蛛已訪問過您的伺服器。

在抓取大量的網頁時，是否有什麼限制?

蜘蛛有這樣一個限制，每個域25頁和150外部檔，最高執行時間為15分鐘。

如果蜘蛛在訪問期間發現一個連結指向HTTP://www.dead-links.com，同一個域頁數限制增加至150個，和外部的網址增加到500 ，同時也增加了執行時間。

蜘蛛是否也遵守robots.txt協定?

我們正在研發中，該議定書是尚未確定。

我可以攔截蜘蛛訪問我的網站嗎?

是的，無論是阻止使用者代理或蜘蛛的IP位址，您都可以這樣做。

什麼是mime類型?

訪問資訊： MIME類型。

.

什麼是網址是什麼?和查詢字串?

訪問：資訊的網址和查詢字串。

蜘蛛是否認識frame， JAVAscrip， JAVA語言，影像地圖中的連結嗎?

現在，機器人並不承認這種連結或重定向：

•frames內的連結

• JavaScript中的連結

• JAVA applets的內部連結

•Flash物件的內部連結

• iframes中的內部連結

•影像地圖的內部連結

•使用重定向元刷新標記

在您的搜尋引擎排名，這些情況產生的負面影響，這是很重要的。

所以，如果蜘蛛在抓取您的網站是沒有任何問題，說明您的網站，搜尋引擎優化的非常好。

蜘蛛報告說，我的網站中有0個連結，是怎麼回事呢?

原因可能是您所使用了上述的哪種技術或連結。

是否有任何教程，以優化我的網站搜尋引擎?

是的，請訪問：搜尋引擎的指引。

在第一個欄位中放入你的連結(指向您網站的連結) 。

第二，在文字方塊中輸入您需要做連結分析的網站連結清單。 蜘蛛不需要您的連結夥伴的HTML代碼就可以一個又一個抓取指向你網站的連結。

那您就必須置入確切可以找到的連結位址。

蜘蛛不能訪問置於frames，JavaScript ， Flash或伺服器腳本中的連結。

來源:廈門搜尋引擎優化(SEO)觀察室