仲介交易 SEO診斷 淘寶客 雲主機 技術大廳
A5站長網8月28日消息,昨日360綜合搜索宣佈正式推出搜索蜘蛛(也叫爬蟲)——360Spider。 360綜合搜索新浪官方微博稱如果站長希望自己的網站被360綜合搜索收錄,請檢查一下網站robots.txt 檔是否允許360搜索蜘蛛抓取您的網站內容。 如果網站還沒有允許360搜索蜘蛛抓取,只要在robots.txt 檔中添加360Spider相關代碼即可。
robots.txt 檔中添加360Spider相關代碼
根據最新資料顯示,360綜合搜索在上線僅僅一周多時間內,依靠安全衛士、瀏覽器、網址導航等360旗下產品入口已經獲得了巨大的流量,流量超過此前排名第二的搜狗。 在搜索業務上直接與百度展開正面競爭。 360綜合搜索在產品並未成熟時並沒有急於開發自己的獨立搜尋引擎,而是將使用者的搜索需求同時提交給百度、谷歌等,對多個搜尋引擎的結果進行優化後再將結果展示在同一個頁面上。 通過其多年積累的入口優勢吸引流量,進而完善自身的搜尋引擎技術,開發更成熟的產品。 推出360搜索蜘蛛,將更加完善其搜尋引擎演算法和排名系統,吸引更多站長關注360綜合搜索,並針對其展開相應的優化獲取流量。
從以往百度、谷歌的成功來看,搜尋引擎在獲得巨大的流量後,搜索競價廣告將是最好的流量變現方式。 此前360也已經推出針對其網址導航等產品的推廣行銷平臺。 《第一財經週刊》爆料稱奇虎360內部已經開發出自己的搜索競價排名廣告系統,也在招募搜索廣告管道代理商。 A5悅懷行銷(HTTP://www.yuehuai.com/)也表示360綜合搜索在獲得一定流量的同時,勢必會在原有網址導航競價系統的基礎上開發自己的競價排名系統與百度展開競爭,在爭奪普通線民使用者的同時, 搶佔個人站長和企業使用者市場。
相關資料:
什麼是搜尋引擎蜘蛛
由於搜尋引擎專門用於檢索資訊的「機器人」程式象蜘蛛一樣在網路間爬來爬去,因此,搜尋引擎的「機器人」程式就被稱為「蜘蛛」程式。
搜尋引擎抓取網站頁面主要靠的是編目程式也就是我們常說的爬蟲。 不同的爬蟲分工意義不一樣,常見的爬蟲有批量爬蟲、增量爬蟲和垂直爬蟲,這三者都有所區別。
搜尋引擎主要是由編目程式(網頁爬行器爬蟲)、切詞器、索引子、查詢器幾個部分組成。 編目程式主要負責頁面的抓取,與切詞器、索引子一起共同對網頁內容進行分詞處理,建立索引資料庫。 查詢器主要是根據使用者的查詢準則檢索索引資料庫,並對索引結構進行計算和排名,並提取簡要摘要回饋給使用者。 (文/揚揚)