第3章 鍵值對RDD數據分區器

上篇:第 2 章大數據SparkCore的RDD編程案例(下)javascript 1、鍵值對RDD數據分區器 Spark目前支持Hash分區和Range分區,用戶也能夠自定義分區,Hash分區爲當前的默認分區,Spark中分區器直接決定了RDD中分區的個數、RDD中每條數據通過Shuffle過程屬於哪一個分區和Reduce的個數java 注意: (1)只有Key-Value類型的RDD纔有分區器
相關文章
相關標籤/搜索