Spark-Core應用詳解之高級篇

文章目錄 3、RDD高級應用 1.RDD的分片數量 2.RDD的函數傳遞問題 <1>若是RDD的轉換操做中使用到了class中的方法或者變量，那麼該class須要支持實例化。 <2>若是經過局部變量的方式將class中的變量賦值爲局部變量，那麼就不須要傳遞對象。 3.RDD的運行方式 (1)RDD的依賴關係 (2)DAG 有向無環圖 (3)RDD的任務劃分 Stage 4.RDD的持久化 5.RD

>>阅读原文<<