3.3 Spark的部署和應用方式

1、Spark的部署

1.單機Local

2.集羣

（1）Standalonc

Spark自帶的資源管理器，效率不高

（2）YARN

若是部署的是Hadoop集羣，能夠用YARN資源調度

（3）Mesos

 

Spark和Mesos是相互優化的，它們之間性能匹配得很是好。

2、Spark的應用方式

Spark優點：

• 延遲低
• 批處理快
• 組件多

之前Spark沒法知足毫秒級流計算需求，但Spark2.3（2018年）版本出來後，增長了Structured Streaming持續流模式，這意味着它能夠和Flink同樣，能夠知足毫秒級別的流計算需求。

 

 

 

 

 

 

 

參考文獻：

【1】Spark編程基礎_中國大學MOOC(慕課)