01 kafka入門(mén)

1.1 什么是kafka

1.2 kafka中的基本概念

1.2.1 消息和批次

1.2.2 主題和分區(qū)

1.2.3 生產(chǎn)者和消費(fèi)者、偏移量、消費(fèi)者群組

1.2.4 Broker和集群

1.2.5 保留消息

02 為什么選擇kafka

2.1 優(yōu)點(diǎn)

2.2 常見(jiàn)場(chǎng)景

2.2.1 活動(dòng)跟蹤

2.2.2 傳遞消息

2.2.3 收集指標(biāo)和日志

2.2.4 提交日志

2.2.5 流處理

03 kafka的安裝、管理和配置

3.1 安裝

3.1.1 預(yù)備環(huán)境

3.1.2 下載和安裝kafka

3.1.3 運(yùn)行

3.1.4 kafka基本的操作和管理

3.2 Broker配置

3.3 硬件配置對(duì)kafka性能的影響

3.3.1 磁盤(pán)吞吐量/磁盤(pán)容量

3.3.2 內(nèi)存

3.3.3 網(wǎng)絡(luò)

3.3.4 CPU

3.3.5 總結(jié)

04 kafka的集群

4.1 為何需要kafka集群

4.2 如何估算kafka集群中Broker的數(shù)量

4.3 Broker如何加入kafka集群

05 第一個(gè)kafka程序

5.1 創(chuàng)建我們的主題

5.2 生產(chǎn)者發(fā)送消息

5.2.1 必選屬性（bootstrap.servers、key.serializer、value.serializer）

5.3 消費(fèi)者接受消息

5.3.1 必選參數(shù)（group.id）

5.4 演示示例

06 kafka的生產(chǎn)者

6.1 生產(chǎn)者發(fā)送消息的基本流程

6.2 使用kafka生產(chǎn)者

6.2.1 三種發(fā)送方式（發(fā)送并忘記、同步發(fā)送、異步發(fā)送）

6.2.2 多線程下的生產(chǎn)者

6.2.3 更多發(fā)送配置（acks、buffer.mempry、max.block.ms、retries、batch.size、linger.ms、compression.type、client.id、、、順序保證）

6.3 序列化

6.3.1 自定義序列化需要考慮的問(wèn)題

6.4 分區(qū)

6.4.1 自定義分區(qū)器

07 kafka的消費(fèi)者

7.1 消費(fèi)者的入門(mén)

7.1.1 消費(fèi)者群組

7.1.2 消費(fèi)者配置

7.2 消費(fèi)者中的基礎(chǔ)概念

7.2.1 消費(fèi)者群組

7.2.2 訂閱

7.2.3 輪詢

7.2.4 提交和偏移量

7.3 消費(fèi)者中的核心概念

7.4 kafka中的消費(fèi)安全

7.5 消費(fèi)者提交偏移量導(dǎo)致的問(wèn)題

7.5.1 自動(dòng)提交

7.5.2 手動(dòng)提交（同步）

7.5.3 異步提交

7.5.4 同步和異步組合

7.5.5 特定提交

7.6 分區(qū)再均衡

7.7 優(yōu)雅1退出

7.8 反序列化

7.9 獨(dú)立消費(fèi)者

08 深入理解kafka

8.1 集群的成員關(guān)系

8.2 什么是控制器

8.3 復(fù)制-kafka的核心

8.3.1 replication-factor

8.3.2 副本類型

8.3.3 工作機(jī)制

8.4 處理請(qǐng)求的內(nèi)部機(jī)制

8.4.1 生產(chǎn)請(qǐng)求

8.4.2 獲取請(qǐng)求

8.4.3 ISR

8.5 物理存儲(chǔ)機(jī)制

8.5.1 分區(qū)分配

8.5.2 文件管理

8.5.3 文件格式

8.5.4 索引

8.5.5 超時(shí)數(shù)據(jù)的清理機(jī)制

09 可靠的數(shù)據(jù)傳遞

9.1 kafka提供的可靠性保證和架構(gòu)上的權(quán)衡

9.2 復(fù)制

9.3 Broker配置對(duì)可靠性的影響

9.3.1 復(fù)制系數(shù)

9.3.2 不完全的首領(lǐng)選舉

9.3.3 最少同步副本

9.4 可靠系統(tǒng)里的生產(chǎn)者

9.4.1 發(fā)送確認(rèn)

9.4.2 配置生產(chǎn)者的重試參數(shù)

9.4.3 額外的錯(cuò)誤處理

9.5 可靠系統(tǒng)里的消費(fèi)者

9.5.1 消費(fèi)者的可靠性配置

9.5.2 顯式提交偏移量

10 kafka和Spring的整合

10.1 與Spring集成

10.1.1 pom文件

10.1.2 統(tǒng)一配置

10.1.3 生產(chǎn)者端

10.1.4 消費(fèi)者端

11 SpringBoot和kafka的整合

12 kafka實(shí)戰(zhàn)之削峰填谷

13 數(shù)據(jù)管道和流式處理（了解即可）

13.1 數(shù)據(jù)管道基本概念

13.2 流式處理基本概念

最后

這份《“java高分面試指南”-25分類227頁(yè)1000+題50w+字解析》同樣可分享給有需要的朋友，感興趣的伙伴們可挑戰(zhàn)一下自我，在不看答案解析的情況，測(cè)試測(cè)試自己的解題水平，這樣也能達(dá)到事半功倍的效果！（好東西要大家一起看才香，下載請(qǐng)點(diǎn)擊這里）

最后

這份《“java高分面試指南”-25分類227頁(yè)1000+題50w+字解析》同樣可分享給有需要的朋友，感興趣的伙伴們可挑戰(zhàn)一下自我，在不看答案解析的情況，測(cè)試測(cè)試自己的解題水平，這樣也能達(dá)到事半功倍的效果！（好東西要大家一起看才香，下載請(qǐng)點(diǎn)擊這里）

[外鏈圖片轉(zhuǎn)存中…(img-2J1C5jQZ-1624875859362)]

[外鏈圖片轉(zhuǎn)存中…(img-5MHAdWlW-1624875859363)]

總結(jié)

以上是生活随笔為你收集整理的Java架构师必备框架技能核心笔记，工作感悟的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。