spark的任務執行流程解析

1、從架構上看Spark的Job工做（Master\Worker）算法 [睡着的水-hzjs-2016.8.18]shell 1.Master節點上是Master進程，主要是管理資源的，資源主要是內存和CPU。Master可以接收客戶端發送的程序而且爲程序進行註冊。worker節點有worker進程，負責當前節點的內存和cpu的使用，spark是主從結構式架構。編程 2.Spark運行做業的方式有

>>阅读原文<<