實踐Hadoop MapReduce 任務的性能翻倍之路

簡介: eBay每天產生PB量級的CAL日誌,其數據量每天都在增加。對於日益增長的數據量,Hadoop MapReduce job的優化將會大大節省計算資源。本文將分享eBay團隊如何對這些Hadoop job進行優化,希望爲開發者帶來啓發,解決Hadoop MapReduce(MR)job實踐中存在的問題。 作者:李萬雪, eBay軟件開發工程師,2017年畢業於上海交通大學。目前負責日誌在大數
相關文章
相關標籤/搜索