spark概述與編程模型

spark快的原因 1.內存計算 2.DAG spark shell已經初始化好了SparkContext，直接用sc調用即可 lineage 血統 RDD wide and narrow dependencies 窄依賴每個 RDD partition最多被一個子RDD partirion依賴 /sbin（system binary)放的都是涉及系統管理的命令。 有些系統裏面，普通用戶沒有執行這

>>阅读原文<<