Spark-RDD詳解

什麼是RDD? 彈性分佈式數據集分佈在不一樣集羣節點的內存中 能夠理解成一大數組 數組的每一元素是RDD的一分區 RDD的每一分區是一數據塊 一個RDD能夠分佈並被運算在多臺計算機節點的內存及硬盤中 RDD表明了一系列數據集合分佈在機羣的內存中。SPARK CORE 的任務是對這些數據進行分佈式計算。php RDD特性 RDD數據塊能夠放在磁盤上也可放在內存中(取決於設置) 如出現緩存失效或丟失，

>>阅读原文<<