Spark中RDD特性|RDD編程模型|集合創建RDD的兩種方式|數據集創建RDD

RDD特性 A list of partitions : 多個分區，分區可以看成是數據集的基本組成單位對於 RDD 來說， 每個分區都會被一個計算任務處理， 並決定了並行計算的粒度。用戶可以在創建 RDD 時指定 RDD 的分區數， 如果沒有指定， 那麼就會採用默認值。 默認值就是程序所分配到的 CPU Core 的數目.每個分配的存儲是由BlockManager 實現的， 每個分區都會被邏輯映射

>>阅读原文<<