Hadoop——JobTracker和TaskTracker,以及如何演變成Yarn架構

MapReduce計算框架是如何實現計算向數據移動的呢? 計算向數據移動面臨着諸多問題,如:怎麼讓機器自動移動,面對block的許多副本,怎麼判別移動到的是最合適的Datanode 這個問題牽扯到兩個概念:資源管理,任務調度 資源管理:掌握各機器當前可用內存,可用CPU等情況 任務調度:根據可用資源,進行計算任務的分配(也就是向哪個Datanode移動) MapReduce想要完成資源管理和任務調
相關文章
相關標籤/搜索