【簡易採集】美團數據抓取方法 八爪魚

【簡易採集】美團數據抓取方法

最近學習了 一下 如何爬取數據  而後就接觸了 八爪魚 數據分析  這個軟件

 

詳細信息訪問這個：http://www.bazhuayu.com/tutorial/hottutorial/shfw/xfdp

 

對於某些用戶來講，直接自定義規則可能有難度，因此在這種狀況下，咱們提供了網頁簡易模式，網頁簡易模式下存放了國內一些主流網站爬蟲採集規則，在你須要採集相關網站時能夠直接調用，節省了製做規則的時間以及精力。

 

對於咱們採集用戶來講，美團數據抓取下來能夠分析每一家商鋪的價格，銷量，位置，人均消費，好評率等各類主要信息，幫助你作出更好的判斷，分析當下主流消費用戶的消費狀況。

 

因此本次介紹八爪魚簡易採集模式下「美團爬蟲規則」的使用教程以及注意要點。

 

步驟1、下載八爪魚軟件並登錄

 

一、打開/download，即八爪魚軟件官方下載頁面，點擊圖中的下載按鈕。

 

 

 

 

二、軟件下載好了以後，雙擊安裝，安裝完畢以後打開軟件，輸入八爪魚用戶名密碼，而後點擊登錄

 

 

 

步驟2、設置美團數據抓取規則任務

一、進入登錄界面以後就能夠看到主頁上的網站簡易採集了，選擇當即使用便可。

 

二、進去以後即可以看到目前網頁簡易模式裏面內置的全部主流網站了，須要採集美團內容的，這裏選擇第四個--美團便可。

 

三、美團爬蟲規則下內置了不少經常使用的採集規則，你們能夠根據自身實際需求選擇相應的規則，這裏僅以「美團-》商家信息-關鍵詞搜索」這條爬蟲規則舉例說明，點擊「當即使用」便可使用。

 

四、美團-商家信息-關鍵詞搜索簡易採集模式任務界面介紹

查看詳情：點開能夠看到示例網址

任務名：自定義任務名，默認爲美食商家列表信息採集

任務組：給任務劃分一個保存任務的組，若是不設置會有一個默認組

城市頁面地址：輸入你要在美團網上採集的城市url（可放入多個）

搜索關鍵詞：設置你要搜索的關鍵詞，填入便可

示例數據：這個規則採集到的全部字段信息。

 

 

五、 美團數據抓取規則設置示例

 

例如要採集南昌市全部燒烤類的商家信息

在設置裏以下圖所示：

任務名：自定義任務名，也能夠不設置按照默認的就行

任務組：自定義任務組，也能夠不設置按照默認的就行

城市頁面地址：http://nc.meituan.com/

搜索關鍵詞：燒烤

注意事項：URL列表中建議不超過2萬條，大量的URL能夠經過八爪魚先抓取美團裏每個城市的url，少許可直接去瀏覽器裏獲取。

 

步驟3、保存並運行美團數據抓取規則

一、設置好爬蟲規則以後點擊保存。

 

二、保存以後，點擊會出現開始採集的按鈕。

 

三、 選擇開始採集以後系統將會彈出運行任務的界面，能夠選擇啓動本地採集（本地執行採集流程）或者啓動雲採集（由雲服務器執行採集流程），這裏以啓動本地採集爲例，咱們選擇啓動本地採集按鈕。

 

四、選擇本地採集按鈕以後，系統將會在本地執行這個採集流程來採集數據，下圖爲本地採集的效果。（因爲數據量較大，我這展現可以採集到數據後手動中止了）

 

五、採集完畢以後選擇導出數據按鈕便可，這裏以導出excel2003爲例，選擇這個選項以後點擊肯定。

 

六、而後選擇文件存放在電腦上的路徑，路徑選擇好以後選擇保存。

七、這樣美團上南昌市關於燒烤類的商家數據就被完整的採集導出到本身的電腦上來了。

 

   爬取數據就是這麼的簡單哦