大數據採集

一、大數據的來源 1.人類活動 2.計算機 3.物理世界 二、大數據採集設備 1.科研數據 （1）大型強子對撞機 （2）射電望遠鏡 （3）電子顯微鏡 2.網絡數據 我們可以利用數據中心採集網絡中的數據。 三、大數據採集方法 1.科研數據 2.網絡數據 爬蟲（慎用） 3.系統日誌 （1）Scribe是Facebook開源的日誌收集系統，在Facebook內部已經得到大量應用。Scribe架構如下圖所

>>阅读原文<<