01 kafka入門

1.1 什么是kafka

1.2 kafka中的基本概念

1.2.1 消息和批次

1.2.2 主題和分區

1.2.3 生產者和消費者、偏移量、消費者群組

1.2.4 Broker和集群

1.2.5 保留消息

02 為什么選擇kafka

2.1 優點

2.2 常見場景

2.2.1 活動跟蹤

2.2.2 傳遞消息

2.2.3 收集指標和日志

2.2.4 提交日志

2.2.5 流處理

03 kafka的安裝、管理和配置

3.1 安裝

3.1.1 預備環境

3.1.2 下載和安裝kafka

3.1.3 運行

3.1.4 kafka基本的操作和管理

3.2 Broker配置

3.3 硬件配置對kafka性能的影響

3.3.1 磁盤吞吐量/磁盤容量

3.3.2 內存

3.3.3 網絡

3.3.4 CPU

3.3.5 總結

04 kafka的集群

4.1 為何需要kafka集群

4.2 如何估算kafka集群中Broker的數量

4.3 Broker如何加入kafka集群

05 第一個kafka程序

5.1 創建我們的主題

5.2 生產者發送消息

5.2.1 必選屬性（bootstrap.servers、key.serializer、value.serializer）

5.3 消費者接受消息

5.3.1 必選參數（group.id）

5.4 演示示例

06 kafka的生產者

6.1 生產者發送消息的基本流程

6.2 使用kafka生產者

6.2.1 三種發送方式（發送并忘記、同步發送、異步發送）

6.2.2 多線程下的生產者

6.2.3 更多發送配置（acks、buffer.mempry、max.block.ms、retries、batch.size、linger.ms、compression.type、client.id、、、順序保證）

6.3 序列化

6.3.1 自定義序列化需要考慮的問題

6.4 分區

6.4.1 自定義分區器

07 kafka的消費者

7.1 消費者的入門

7.1.1 消費者群組

7.1.2 消費者配置

7.2 消費者中的基礎概念

7.2.1 消費者群組

7.2.2 訂閱

7.2.3 輪詢

7.2.4 提交和偏移量

7.3 消費者中的核心概念

7.4 kafka中的消費安全

7.5 消費者提交偏移量導致的問題

7.5.1 自動提交

7.5.2 手動提交（同步）

7.5.3 異步提交

7.5.4 同步和異步組合

7.5.5 特定提交

7.6 分區再均衡

7.7 優雅1退出

7.8 反序列化

7.9 獨立消費者

08 深入理解kafka

8.1 集群的成員關系

8.2 什么是控制器

8.3 復制-kafka的核心

8.3.1 replication-factor

8.3.2 副本類型

8.3.3 工作機制

8.4 處理請求的內部機制

8.4.1 生產請求

8.4.2 獲取請求

8.4.3 ISR

8.5 物理存儲機制

8.5.1 分區分配

8.5.2 文件管理

8.5.3 文件格式

8.5.4 索引

8.5.5 超時數據的清理機制

09 可靠的數據傳遞

9.1 kafka提供的可靠性保證和架構上的權衡

9.2 復制

9.3 Broker配置對可靠性的影響

9.3.1 復制系數

9.3.2 不完全的首領選舉

9.3.3 最少同步副本

9.4 可靠系統里的生產者

9.4.1 發送確認

9.4.2 配置生產者的重試參數

9.4.3 額外的錯誤處理

9.5 可靠系統里的消費者

9.5.1 消費者的可靠性配置

9.5.2 顯式提交偏移量

10 kafka和Spring的整合

10.1 與Spring集成

10.1.1 pom文件

10.1.2 統一配置

10.1.3 生產者端

10.1.4 消費者端

11 SpringBoot和kafka的整合

12 kafka實戰之削峰填谷

13 數據管道和流式處理（了解即可）

13.1 數據管道基本概念

13.2 流式處理基本概念

最后

這份《“java高分面試指南”-25分類227頁1000+題50w+字解析》同樣可分享給有需要的朋友，感興趣的伙伴們可挑戰一下自我，在不看答案解析的情況，測試測試自己的解題水平，這樣也能達到事半功倍的效果！（好東西要大家一起看才香，下載請點擊這里）

最后

這份《“java高分面試指南”-25分類227頁1000+題50w+字解析》同樣可分享給有需要的朋友，感興趣的伙伴們可挑戰一下自我，在不看答案解析的情況，測試測試自己的解題水平，這樣也能達到事半功倍的效果！（好東西要大家一起看才香，下載請點擊這里）

[外鏈圖片轉存中…(img-2J1C5jQZ-1624875859362)]

[外鏈圖片轉存中…(img-5MHAdWlW-1624875859363)]

總結

以上是生活随笔為你收集整理的Java架构师必备框架技能核心笔记，工作感悟的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。