[Spark基礎]--Spark的任務調度

轉自：http://blog.csdn.net/pelick/article/details/41866845（僅作爲學習和備忘用） 本文嘗試從源碼層面梳理Spark在任務調度與資源分配上的做法。 先從Executor和SchedulerBackend說起。Executor是真正執行任務的進程，本身擁有若干cpu和內存，可以執行以線程爲單位的計算任務，它是資源管理系統能夠給予的最小單位。Sched

>>阅读原文<<