Spark中RDD與DAG的執行邏輯

Spark中RDD與DAG的執行邏輯 核心： 1.當Driver端向master申請完成後，調用worker，這時worker會同Driver端進行通信，將執行程序接收，從而執行邏輯。 2.當數據的規則被切分放到各個worker中時，因爲規則的不完整，這時Driver端會將將各切分的數據進行拉回組合，形成完整的規則後，再以廣播的形式（broadcast）發送到不同worker上。使得規則完整，從而

>>阅读原文<<