一文讀懂大數據計算框架與平臺

1.02前言 計算機的基本工作就是處理數據，包括磁盤文件中的數據，通過網絡傳輸的數據流或數據包，數據庫中的結構化數據等。隨着互聯網、物聯網等技術得到越來越廣泛的應用，數據規模不斷增加，TB、PB量級成爲常態，對數據的處理已無法由單臺計算機完成，而只能由多臺機器共同承擔計算任務。而在分佈式環境中進行大數據處理，除了與存儲系統打交道外，還涉及計算任務的分工，計算負荷的分配，計算機之間的數據遷移等工作，

>>阅读原文<<