白話hadoop yarn的調度過程以mapreduce程序爲例

今天上完班,終於能夠回去了,如今在公司沒什麼事幹,就用白話來總結下mapreduce的執行流程吧,若是有錯誤的地方你們儘管指出。node 首先在hadoop 1.x中和hadoop 2.x中,mapreduce的執行流程也不同(徹底不同),在hadoop1.x中 mapreduce的 資源管理與分配和任務監控都是集中在 jobtracker 上,這樣會形成jobtracker的負擔很是大,並且在h
相關文章
相關標籤/搜索