解析:為什麼蜘蛛不爬我的網站

來源:互聯網
上載者:User

仲介交易 HTTP://www.aliyun.com/zixun/aggregation/6858.html">SEO診斷 淘寶客 雲主機 技術大廳

剛剛上seowhy看到一個非常有意思的提問,提問如下:(求解)為什麼我的站,重來沒有 百度蜘蛛來過 。 從以上的問題可以看出,這位站長遇到這樣的問題一定非常的蛋疼。 自己精心做的網站,沒想到蜘蛛壓根就沒來爬過。 那麼是什麼原因導致蜘蛛不來爬呢。 我來分析下。

遇到這樣的問題,情況只有倆種:一、你遮罩蜘蛛的爬行了。 二、你被蜘蛛遮罩了

一、你遮罩蜘蛛了

我們遮罩了蜘蛛,蜘蛛當然不可能來抓取我們的網站拉。

1.首先我們要檢測自己的網站robots.txt檔,看看檔的書寫是否正確,是否有大小寫混亂的情況出現,是否建站初期的時候有遮罩所有蜘蛛的爬行的指令忘記修改了。 正常情況下robots.txt檢測的事情就直接交給站長工具檢查就可以了

2.伺服器商是否遮罩了蜘蛛的爬行。 別認為這事不可能,當初主機屋,就誤把百度蜘蛛當成駭客攻擊給遮罩了,不懂導致多少人被K站。 如果是主機商遮罩了蜘蛛的爬行儘早換主機吧,時間等不起。

二、你被蜘蛛遮罩了

1.查看自己的功能變數名稱以前的主人,看看功能變數名稱以前是否做了違法的網站。 如果是的話那麼蜘蛛不爬是完全有道理的,就好比Maas以前論壇那個功能變數名稱以前是做liuhecai站的。 至今搜狗和谷歌蜘蛛壓根沒來過。

2.查看下自己同伺服器的網站,是否有非常嚴重違規的作弊行為,若有的話,搜尋引擎很有可能遮罩整條IP的網站,為了自己的網站發展健康還是選擇獨立IP的伺服器吧。

如果發現自己網站的爬行日誌壓根沒出現蜘蛛來訪,那麼我們就應該考慮自己的網站是否出現以上的情況,應該及時的清理。 然後向相關的搜尋引擎提交,或者利用高品質的外鏈引導蜘蛛爬行。 (源:馬斯 - 微觀互聯網HTTP://www.ma4.net 轉載注明出處)

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.