Spark學習筆記(9)源碼解讀之Receiver在Driver的精妙實現

本期內容: 1. Receiver啓動的方式設想 2. Receiver啓動源碼徹底分析 1. Receiver啓動的方式設想   Spark Streaming是個運行在Spark Core上的應用程序。這個應用程序既要接收數據,還要處理數據,這些都是在分佈式的集羣中進行的,應該啓動多個Job,讓它們分工並能協調。Receiver的工作是接收數據,應該是用Spark Core中的Job來實現。
相關文章
相關標籤/搜索