讀Coded-TeraSort筆記

本文是我閱讀文獻《Coded TeraSort》後,通過翻譯、整理、加上自己的理解做的筆記。希望大家一起探討,如有錯誤還請指教。 paper鏈接:Coded TeraSort 一、簡介 在一個傳統的MapReduce程序中(Map-shuffle-reduce),程序的瓶頸發生在shuffle階段(高達50%-70%時間)。作者提出了一種爲數據增加結構化冗餘,以此來降低MapReduce的shuf
相關文章
相關標籤/搜索