spark內核揭祕-10-RDD源碼分析

RDD的核心方法: 首先看一下getPartitions方法的源碼: getPartitions返回的是一系列partitions的集合,即一個Partition類型的數組 我們就想進入HadoopRDD實現: 1、getJobConf():用來獲取job Configuration,獲取配置方式有clone和非clone方式,但是clone方式 是not thread-safe,默認是禁止的,非
相關文章
相關標籤/搜索