Spark學習之在集羣上運行Spark

一、簡介   Spark 的一大好處就是可以通過增加機器數量並使用集羣模式運行,來擴展程序的計算能力。好在編寫用於在集羣上並行執行的 Spark 應用所使用的 API 跟本地單機模式下的完全一樣。也就是說,你可以在小數據集上利用本地模式快速開發並驗證你的應用,然後無需修改代碼就可以在大規模集羣上運行。   首先介紹分佈式 Spark 應用的運行環境架構,然後討論在集羣上運行 Spark 應用時的一
相關文章
相關標籤/搜索