讓搜尋引擎的蜘蛛更好的抓取我們的網站

來源:互聯網
上載者:User

  搜尋引擎的蜘蛛是靠爬行來抓取互連網上的資訊,也就是說要想被百度或是Google等搜尋引擎收錄,一般情況下是要有連結存在,讓搜尋引擎的蜘蛛程式順著連結爬到網站裡,蜘蛛來過了,才能有效抓取。給了讓搜尋引擎更好的抓取網站內容,我們通常要做的事情是:

  第一,先準備好要被抓取的網頁(“食物”)

  站長通常都會說“餵飽蜘蛛”,指的就是更新網站的內容,讓小蜘蛛來了之後有“東西吃”,可以抓取到網頁資訊,而不是讓它空手而歸。搜尋引擎的蜘蛛喜歡原創內容,所以我們為了提高網站權重,通常會準備一些“親手做的食物”(原創內容)來讓小蜘蛛更喜歡我們的網站。蜘蛛是個比較有感情的程式,從它第一次來到我們的網站抓取到了它想要抓取的內容之後,以後的一段時間之內都會來光顧我們的網站,看有沒有新的網頁資訊可以抓取。所以,我們要有規律的更新網站的內容,這個規律不僅是我們平時工作的規律,同時也是告訴蜘蛛這個網站的內容更新是有規律的。更新的周期不能設定太長,小網站兩三天更新一次原創就可以了,有時間和精力的一天更新一次更好些,每次更新的原創內容也不必過多,一兩篇足矣。當然是上不封頂的,看精力了。

  第二,做連結誘餌讓蜘蛛爬進我們的網站

  第一步我們已經準備好了原創的內容等待蜘蛛的抓取,如果蜘蛛不知道我們網站的連結,一般情況下它是不會來的,因為它的資料庫中沒有我們網站的存在,所以我們要主動的通知蜘蛛來我的網站看看,通常的做法就是發外鏈做連結誘餌。蜘蛛程式是一套爬行程式,它會順著互連網上存在的連結不斷的爬行。同時連結誘餌存在的網頁權重也會影響到這條連結所指向的網站的權重,所以我們通常去高權重的網站發外鏈引蜘蛛,有很多網站收錄速度是非常快的,1分鐘或是幾分鐘之內新發布的資訊快照就會被放出來,這樣的網站是我們引蜘蛛的好地方。站長常去的地方比如說天涯問答,雅虎問答,A5論壇,落伍論壇等等,收錄都是非常快的。

  第三,引來了蜘蛛之後就要有規律的建設外鏈

  外鏈的重要性不言而喻,我們對外鏈的建設要有一定的規律性,搜尋引擎是會考察我們的外鏈情況的,大起大落的外鏈建設容易被認為是作弊或是多度的最佳化,會影響的網站的權重,有規律的更新外鏈會獲得更好的權重,站長們不能急躁,群發外鏈。外鏈可以一天做一些,每天都去做。這樣對於網站權重的積累是很好的。

  第四,做好內鏈,讓蜘蛛爬的通暢

  蜘蛛爬進我們的網站之後,仍然是按照網站裡的連結來繼續的爬行。不能讓蜘蛛爬進死胡同,爬進去就出不來了。我們要在每一個頁面上都加上連結,讓每次的爬行都很通暢。通常做法是在網頁加入站內導航,麵包屑導航,關鍵詞內鏈,標籤,相關閱讀(延伸閱讀)等等,除此之外,還要有一個網站地圖,蜘蛛最喜歡網站地圖,因為抓取很方便。最好是在每一個頁面上都加上網站地圖的連結,這樣方便蜘蛛找到地圖。這個連結通常是放在頁頭或是頁尾的地方。百度蜘蛛喜歡錨文本的網站地圖,Google蜘蛛喜歡xml格式的地圖。我們可以根據需要做地圖,可以做兩份格式不同的地圖。

  蜘蛛雖然是一套程式,但是卻比較智能,如果我們按照正確的方法真心的面對蜘蛛,我想它是會給我們一個不錯的權重的。本文由註冊香港公司http://www.37int-h.com/提供,如需轉載本文,請保留本文的著作權連結。



相關文章

E-Commerce Solutions

Leverage the same tools powering the Alibaba Ecosystem

Learn more >

Apsara Conference 2019

The Rise of Data Intelligence, September 25th - 27th, Hangzhou, China

Learn more >

Alibaba Cloud Free Trial

Learn and experience the power of Alibaba Cloud with a free trial worth $300-1200 USD

Learn more >

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。