奇虎360違反robots協定是意外還是無視

仲介交易 HTTP://www.aliyun.com/zixun/aggregation/6858.html">SEO診斷 淘寶客 雲主機 技術大廳

有關奇虎360違反「Robots協定」早已在網路上流傳，開始龍形一直不相信這是真的，畢竟作為搜尋引擎冉冉上升的新星，很多站長都給予其太多的期待。 還記得去年360搜索的橫空出世並迅速佔領國內搜尋引擎10%的市場份額，並一舉打破谷歌中國、搜狗等成為老二，甚至很多人都在語言在不僅的將來其會成為百度有力的競價者。 我們樂見他的成長，並期望其為我們的搜索提供更好的服務，進而引領這個行業不斷向著更好的方向發展。

robots協定自其誕生以來就被各大搜尋引擎所認可，大部分搜尋引擎在檢索網站時都會事先查看有無robots協定，一旦有不允許抓取內容時都會自動的回避。 這不僅僅是搜尋引擎對網站主人的尊重，也是行業發展的規則，雖然沒有明文規定但如果某個搜尋引擎忽視這些的話，很容易被認為是強盜行為。 這也就是很多站長在新網站剛上線期，如果程式或者內容或者結果等還沒有最終確定時，都會通過robots協定遮罩各個搜尋引擎，直到其認為滿意後才會刪除，這不僅僅是為了後期的優化，更能有效的杜絕企業一些不成熟的內容在互聯網上傳播。

龍形近來為公司建設一個有關土壤養分速測儀和農藥殘留檢測儀的網站，功能變數名稱為www.nongdaxunjie.com，由於前期處於程式的調整和文章內容的添加，就通過robots協定對所有的搜尋引擎進行了遮罩。 由於日常所處工作較多，也就是在空閒的時間對網站進行修改，進過一個月的反復調整後才在12月9號去除網站的robots協定。 今天通過站長工具查詢時意外的發現360收錄了首頁，開始還以為360收錄如此快速，昨晚才允許抓取網站今天就有快照了，然而細看網站收錄的快照才發現竟然是2013.12.8。 按時我是9號才去除robots協定，360即使抓取如此快速也不該是8號的快照呀，後經過網上查詢才意識到網站的robots協定很可能被奇虎360給忽視了，如圖：

龍形通過搜索奇虎360違反robots協定後發現很多條有關360違反robots協定的內容，其中最多的就是有關百度告360違反robots協定的新聞，當然也有一些帖子關於360不遵守robots帶給網站的維護。 儘管奇虎老總周鴻禕明確的指出360搜索沒有違反robots協定，但通過龍形今天的遭遇和互聯網上眾多帖子的介紹，不管是有意或者無意，360的確違反了robots協定。 儘管360也介紹說robots協定不應該成為一個壁壘，這樣對行業不利，而且已經有現成的法律和技術手段去解決這個問題，但大多數站長從內心來說還是希望奇虎360能夠遵循robots協定。

那龍形不禁要問了，既然360老總明確的指出綜合搜索不違反robots協定，那麼龍形的這個網站是意外還是無視?作為行業的新星，360一直把自己塑造成行業的規範者，如果要是意外到還有情可原，畢竟360綜合搜索推出沒有多久， 在技術上還有很大的提升空間。 如果是刻意的無視，那麼必然會導致眾多的站長心寒了，畢竟我們寄託了那麼多的希望，並期待360真的像老總所宣傳的那樣，淨化搜尋引擎環境，更好的為網名提供優質的搜索服務。 還記得古代劍客們的那句名言：要想贏得對手的尊重，首先我們要尊重自己的對手。

因此，從內心中來說，我更願意認為此次只不過是個意外，更期待奇虎360能夠不斷改進自己的索引技術，更好的服務廣大線民使用者，才能真正意義上獲得市場認可。