RDD的5大特性

worker裏有不少Excutor,真正完成計算的是Excutor,Excutor計算都是在內存進行計算, Excutor裏面有partitioner,partitioner裏面的數據若是內存足夠大的話放到內存中,它是一點一點讀的 RDD是分佈式數據集,所說RDD就是這個, RDD有5個特色: 1.a list of partiotioner有不少個partiotioner(這裏有3個partio
相關文章
相關標籤/搜索