Spark-Streaming

SparkStreaming原理 客戶端提交作業後啓動Driver,Driver是spark作業的Master。 每個作業包含多個Executor,每個Executor以線程的方式運行task,Spark Streaming至少包含一個receiver task。 Receiver接收數據後生成Block,並把BlockId彙報給Driver,然後備份到另外一個Executor上。 Receive
相關文章
相關標籤/搜索