Hadoop源代碼分析(MapTask輔助類,II)

爲什麼80%的碼農都做不了架構師?>>>    有了上面Mapper輸出的內存存儲結構和硬盤存儲結構討論,我們來仔細分析MapOutputBuffer的流程。首先是成員變量。最先初始化的是作業配置job和統計功能reporter。通過配置,MapOutputBuffer可以獲取本地文件系統(localFs和rfs),Reducer的數目和Partitioner。 SpillRecord是文件spi
相關文章
相關標籤/搜索