spark streaming 3: Receiver 到 submitJobSet

spark streaming 3: Receiver 到 submitJobSet  對於spark streaming來說，receiver是數據的源頭。spark streaming的框架上，將receiver替換spark-core的以磁盤爲數據源的做法，但是數據源（如監聽某個tcp鏈接）顯然不是可靠且不知道數據什麼時候準備好的，所以spark streaming使用shuffle隔離re

>>阅读原文<<