Spark學習總結(一)

RDD及其特色 一、RDD是Spark的核心數據模型,可是個抽象類,全稱爲Resillient Distributed Dataset,即彈性分佈式數據集。java 二、RDD在抽象上來講是一種元素集合,包含了數據。它是被分區的,分爲多個分區,每一個分區分佈在集羣中的不一樣節點上,從而讓RDD中的數據能夠被並行操做。(分佈式數據集)算法 三、RDD一般經過Hadoop上的文件,即HDFS文件或者H
相關文章
相關標籤/搜索