大數據開發的五個步驟

大數據的開發過程,如圖1-1所示。 圖 1-1大數據開發通用步驟圖 上圖只是一個簡化後的步驟和流程,實際開發中,有的步驟可能不需要,有的還需要增加步驟,有的流程可能更復雜,因具體情況而定。 下面以Google搜索引擎爲例,來說明以上步驟。 1. 大數據採集 Google的數據來源於互聯網上的網頁,它們由Google Spider(蜘蛛、爬蟲、機器人)來抓取,抓取的原理也很簡單,就是模擬我們人的行爲
相關文章
相關標籤/搜索