SparkStreaming部分：kafka的leader的負載均衡機制（原理邏輯）

kafka的leader的均衡機制 當一個broker停止或者crashes時，所有本來將它作爲leader的分區將會把leader轉移到其他broker上去，極端情況下，會導致同一個leader管理多個分區，導致負載不均衡，同時當這個broker重啓時，如果這個broker不再是任何分區的leader,kafka的client也不會從這個broker來讀取消息，從而導致資源的浪費。 kafka中

>>阅读原文<<