大数据技术之kafka (第 3 章 Kafka 架构深入) 分区策略在分析
生活随笔
收集整理的這篇文章主要介紹了
大数据技术之kafka (第 3 章 Kafka 架构深入) 分区策略在分析
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
如果不懂分區策略請看我之前的文章:https://blog.csdn.net/ywl470812087/article/details/105328015
默認的方式我們采用的是Range策略方式(按主題給消費者消費,主題被誰訂閱了就誰消費)
?先看下下面這個圖,畫的很丑,將就看看吧
我們從圖知道現在有兩個主題?T1? 和? T2?它們都有[0,1,2]三個分區,現在有3個消費者A、B、C??
A和B是同一個組的,?C單獨一個組。
消費者A和B、C都訂閱了主題T1? ?,T2主題只有消費者B訂閱了
消費的時候,因為T2主題只有B消費者訂閱了,T2的3個分區都要給B消費
對于消費者C很容易理解,主題T1的3個分區只能都給C消費。
對于消費者A和B它們兩個都訂閱了T1,但是A和B是同一個組的,所以不能把T1主題的分區都發給A和B ,這樣就重復消費了,一個主題被一個組消費兩次,這時候A和B就要平均分配,3個分區2個消費者,3除以2除不盡,這樣就分配不均,這樣A就可能被分到主題T1的[0,1]兩個分區,B負責消費分區3
總結
以上是生活随笔為你收集整理的大数据技术之kafka (第 3 章 Kafka 架构深入) 分区策略在分析的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: java 等比缩放图片_java处理图片
- 下一篇: java 颜色比较_我该如何比较Java