一步步教您學會大資料擷取之福士點評商家資訊及電話採集教程

來源:互聯網
上載者:User

標籤:福士   pos   外賣   type   alt   軟體   style   ref   通過   

本文主要介紹如何使用后羿採集器的智能模式,免費採集福士點評商家的地址、人均、評價、電話等資訊。

採集工具簡介:

后羿採集器是一款基於人工智慧技術的網頁採集器,只需要輸入網址就能夠自動識別網頁資料,無需配置即可完成資料擷取,是業內首家支援三種作業系統(包括Windows、Mac和Linux)的網路爬蟲軟體。

該軟體是一款真正免費的資料擷取軟體,對採集結果匯出沒有任何限制,沒有編程基礎的小白使用者也可輕鬆實現資料擷取要求。

採集對象簡介:

福士點評是中國領先的本地生活資訊及交易平台,也是全球最早建立的獨立第三方消費點評網站。福士點評不僅為使用者供應商戶資訊、消費點評及消費優惠等資訊服務,同時亦提供團購、餐廳預訂、外賣及電子會員卡等O2O交易服務。

採集欄位:

商家名、商家連結、地址、點評數、人均、口味、環境、服務、團購數、展示圖片、電話

功能點目錄

如何採集列表+詳情頁類型網頁

如何採集手機版網頁的資料

如何下載圖片

採集結果預覽:

匯出到Excel表格:

匯出到本地的圖片:

下面我們來詳細介紹一下如何免費採集福士點評網商家資料,我們以杭州自助餐的商家資料為例,具體步驟如下:

步驟一:下載安裝后羿採集器,並註冊登入

1、點此開啟后羿採集器官網,下載並安裝爬蟲軟體工具—后羿採集器軟體

2、點擊註冊登入,註冊新帳號,登入后羿採集器

【溫馨提示】您可以直接使用此款爬蟲軟體,不需要進行註冊,但是匿名賬戶下的任務在切換到註冊使用者時會丟失,因此建議您註冊後使用。

后羿採集器為神箭手雲旗下產品,如果您是神箭手使用者,可直接登入。

步驟二:建立採集任務

1、複製福士點評網自助餐商家的網頁(需要搜尋結果頁的網址,而不是首頁的網址)

點此瞭解關於如何正確地輸入網址。

2、建立智能模式採集任務

您可以在軟體上直接建立採集任務,也可以通過匯入規則來建立任務。

點此瞭解如何匯入和匯出採集規則。

步驟三:配置採集規則

1、設定提取資料欄位

在智能模式下,我們輸入網址後軟體即可自動識別出頁面上的資料並產生採集結果,每一類資料對應一個採集欄位,我們可以右擊欄位進行相關設定,包括修改欄位名稱、增減欄位、處理資料等。

點此瞭解如何對採集欄位進行配置。

在列表頁上,我們需要採集福士點評網商家的商家名、商家連結、地址、點評數、人均、口味、環境、服務、團購數及展示圖片等內容,由於星級評價元素比較特殊,后羿V2.1.22版本暫不支援採集此欄位,後續版本中會實現這一功能,欄位設定效果如下:

2、使用深入採集功能提取詳情頁資料

在列表頁上只展示出了自助餐商家的部分資訊,如果需要採集商家電話,我們需要右擊商家連結使用“深入採集”功能,跳轉到詳情頁進行採集。

點此深入瞭解如何採集列表+詳情頁類型網頁。

在詳情頁面我們可以看到商家電話,我們點擊“添加欄位”按鈕,然後在頁面中點擊商家電話。

我們可以看到添加的欄位採集出來的是字元而不是實際上的商家電話,這是由於在PC瀏覽器模式下,福士點評對商家電話元素進行了設定,當我們複製這個電話號碼是並不是實際上的電話號碼而是字元。

由於不同網頁在不同瀏覽器模式下呈現的內容可能不同,福士點評網的商家電話在手機瀏覽器模式下能展示出實際的內容,因此我們可以通過切換瀏覽器模式的方式來抽取商家號碼的欄位。

點此瞭解更多切換瀏覽器模式的內容。

點此瞭解如何採集手機版網頁的內容。

步驟四:設定並啟動採集任務

1、設定採集任務

完成了採集資料添加,我們可以開始啟動採集任務了。在啟動之前我們需要對採集任務進行一些設定,從而提高採集的穩定性和成功率。

點擊“設定”按鈕,在彈出的回合設定頁面中我們可以進行回合設定和防屏蔽設定,這裡我們勾選“跳過繼續採集”,設定“2”秒請求等待時間,勾選“不載入網頁圖片”,防屏蔽設定就按照系統預設設定,然後點擊儲存。

點此深入瞭解如何對採集任務進行配置。

2、啟動採集任務

點擊“儲存並啟動”按鈕,可在彈出的頁面中進行一些進階設定,包括定時啟動、自動入庫和下載圖片,本次樣本中未使用到定時採集及自動入庫功能,勾選下載圖片到本地的功能後,點擊“啟動”運行爬蟲工具。

點此深入瞭解什麼是定時採集。

點此深入瞭解什麼是自動入庫。

點此深入瞭解如何下載圖片。

【溫馨提示】免費版本可以使用非周期性定時採集功能,下載圖片功能是免費的。個人專業版及以上版本可以使用進階定時功能和自動入庫功能。

3、運行任務提取資料

任務啟動之後便開始自動採集資料,我們從介面上可以直觀的看到程式運行過程和採集結果,採集結束之後會有提醒。

步驟五:匯出並查看資料

資料擷取完成後,我們可以查看和匯出資料,后羿採集器支援多種匯出方式(手動匯出到本地、手動匯出到資料庫、自動發布到資料庫、自動發布到網站)和匯出檔案的格式(EXCEL、CSV、HTML和TXT),我們選擇自己需要方式和檔案類型,點擊“確認匯出”。

點此深入瞭解如何查看和清空採集資料。

點此深入瞭解如何匯出採集結果。

【溫馨提示】:所有手動匯出功能都是免費的。個人專業版及以上版本可以使用發布到網站功能。

一步步教您學會大資料擷取之福士點評商家資訊及電話採集教程

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.