Hadoop源代碼分析(IFile)

爲什麼80%的碼農都做不了架構師?>>>    Mapper的輸出,在發送到Reducer前是存放在本地文件系統的,IFile提供了對Mapper輸出的管理。我們已經知道,Mapper的輸出是<Key,Value>對,IFile以記錄<key-len, value-len, key,value>的形式存放了這些數據。爲了保存鍵值對的邊界,很自然IFile需要保存key-len和value-len。
相關文章
相關標籤/搜索