[大數據]連載No17之Kafka搭建+SparkStreaming整合Kafka

本次總結圖如下 Kafka 特點: 1、分佈式流平臺,零拷貝,依賴zookeper,保存每一個消費者偏移量,kafka集羣中一些元素(topic,partitions) 2、主從建構,需要每一個節點啓動kafka進程,主(leader)是在集羣啓動後選舉出來的,不是用戶選擇的,類似zookeper 概念: broker:每個節點 producer:消息生產者 consumer:消息消費者 topi
相關文章
相關標籤/搜索