分佈式並行計算框架MapReduce

理解MapReduce思想 需求:有一個五層的圖書館,需要獲取圖書館中一共有多少本書。 只有一個人時,是能一本一本的數!工作量巨大,耗時較長。 分配五個人由你支配。此時你怎麼支配? 五個人,每個人數一層的書量,最終將五個人的量彙總求和,就是圖書館中最終書的數量。   MapReduce的思想核心是「分而治之,先分後合」。即將一個大的、複雜的工作或任務,拆分成多個小的任務,並行處理,最終進行合併。適
相關文章
相關標籤/搜索