1、整體流程

流程圖

詞匯

topic：主題

producer：生產(chǎn)者

consumer：消費者

consumer-group：消費者組

offset：偏移量

follower：副本

要點概述

kafka是以topic進行分類的，由producer生產(chǎn)數(shù)據(jù)發(fā)送到topic，再被consumer進行消費，同時offset會記錄每個分區(qū)的消費進度，就算中途掛掉了，下次也會從offset開始繼續(xù)消費

每個topic可以有多個分區(qū)，每個分區(qū)可以配置1個或多個副本，形成leader-follower的關(guān)系，leader和follower不會在同一個節(jié)點上（這點和Elasticsearch類似）

每個分區(qū)只能被一個consumer消費，如果consumer數(shù)量比分區(qū)還多，會存在部分consumer閑置，沒有數(shù)據(jù)可以消費

2、生產(chǎn)者

總結(jié)

以上是生活随笔為你收集整理的Kafka工作原理简要概述的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。