產品規格
更新時間 2025-09-11 12:44:01
最近更新時間: 2025-09-11 12:44:01
分享文章
本節介紹分布式消息服務Kafka的產品規格,以便您正確理解和使用。
Kafka實例規格
(1)以下規格適用于 華東1、華北2、西南1、華南2、上海36、青島20、長沙42、南昌5、武漢41、杭州7、西南2-貴州、太原4、鄭州5、西安7、呼和浩特3 節點
注意
通用型規格已調整為白名單特性,如需了解該規格參數請聯系技術支持。
單機版實例面向用戶體驗和業務測試場景,無法保證性能和高可用。如果需要在生產環境使用Kafka實例,建議購買集群版實例。
集群版
Intel計算增強型
| 實例規格 | 代理個數 | 單個代理TPS | 單個代理分區上限 | 單個代理建議主題數 | 單個代理建議消費組數 | 單個代理客戶端總連接數上限 | 存儲空間范圍 | 單個代理流量規格(MB/S) |
|---|---|---|---|---|---|---|---|---|
| kafka.2u4g.cluster | 3-50 | 30000 | 250 | 250 | 20 | 2000 | 300-500000GB | 100 |
| kafka.4u8g.cluster | 3-50 | 100000 | 500 | 500 | 100 | 4000 | 300-500000GB | 200 |
| kafka.8u16g.cluster | 3-50 | 150000 | 1000 | 1000 | 150 | 4000 | 300-500000GB | 375 |
| kafka.12u24g.cluster | 3-50 | 200000 | 1500 | 1500 | 200 | 4000 | 300-500000GB | 625 |
| kafka.16u32g.cluster | 3-50 | 250000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 750 |
| kafka.24u48g.cluster | 3-50 | 250000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 1125 |
| kafka.32u64g.cluster | 3-50 | 250000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 1500 |
| kafka.48u96g.cluster | 3-50 | 250000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 2250 |
| kafka.64u128g.cluster | 3-50 | 250000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 3000 |
海光計算增強型
| 實例規格 | 代理個數 | 單個代理TPS | 單個代理分區上限 | 單個代理建議主題數 | 單個代理建議消費組數 | 單個代理客戶端總連接數上限 | 存儲空間范圍 | 單個代理流量規格(MB/S) |
|---|---|---|---|---|---|---|---|---|
| kafka.hg.2u4g.cluster | 3-50 | 20000 | 250 | 250 | 20 | 2000 | 300-500000GB | 62 |
| kafka.hg.4u8g.cluster | 3-50 | 64000 | 500 | 500 | 100 | 4000 | 300-500000GB | 188 |
| kafka.hg.8u16g.cluster | 3-50 | 120000 | 1000 | 1000 | 150 | 4000 | 300-500000GB | 563 |
| kafka.hg.16u32g.cluster | 3-50 | 200000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 1063 |
| kafka.hg.32u64g.cluster | 3-50 | 200000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 2000 |
鯤鵬計算增強型
| 實例規格 | 代理個數 | 單個代理TPS | 單個代理分區上限 | 單個代理建議主題數 | 單個代理建議消費組數 | 單個代理客戶端總連接數上限 | 存儲空間范圍 | 單個代理流量規格(MB/S) |
|---|---|---|---|---|---|---|---|---|
| kafka.kp.2u4g.cluster | 3-50 | 25000 | 250 | 250 | 20 | 2000 | 300-500000GB | 62 |
| kafka.kp.4u8g.cluster | 3-50 | 80000 | 500 | 500 | 100 | 4000 | 300-500000GB | 188 |
| kafka.kp.8u16g.cluster | 3-50 | 150000 | 1000 | 1000 | 150 | 4000 | 300-500000GB | 563 |
| kafka.kp.16u32g.cluster | 3-50 | 250000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 1063 |
| kafka.kp.32u64g.cluster | 3-50 | 250000 | 2000 | 2000 | 200 | 4000 | 300-500000GB | 2000 |
單機版
Intel計算增強型
| 實例規格 | 代理個數 | 單個代理TPS | 單個代理分區上限 | 單個代理建議主題數 | 單個代理建議消費組數 | 單個代理客戶端總連接數上限 | 存儲空間范圍 | 單個代理流量規格(MB/S) |
|---|---|---|---|---|---|---|---|---|
| kafka.2u4g.single | 1 | 30000 | 250 | 250 | 20 | 2000 | 100-10000GB | 100 |
| kafka.4u8g.single | 1 | 100000 | 500 | 500 | 100 | 4000 | 100-10000GB | 200 |
| kafka.8u16g.single | 1 | 150000 | 1000 | 1000 | 150 | 4000 | 100-10000GB | 375 |
海光計算增強型
| 實例規格 | 代理個數 | 單個代理TPS | 單個代理分區上限 | 單個代理建議主題數 | 單個代理建議消費組數 | 單個代理客戶端總連接數上限 | 存儲空間范圍 | 單個代理流量規格(MB/S) |
|---|---|---|---|---|---|---|---|---|
| kafka.hg.2u4g.single | 1 | 20000 | 250 | 250 | 20 | 2000 | 100-10000GB | 62 |
| kafka.hg.4u8g.single | 1 | 64000 | 500 | 500 | 100 | 4000 | 100-10000GB | 188 |
| kafka.hg.8u16g.single | 1 | 120000 | 1000 | 1000 | 150 | 4000 | 100-10000GB | 563 |
鯤鵬計算增強型
| 實例規格 | 代理個數 | 單個代理TPS | 單個代理分區上限 | 單個代理建議主題數 | 單個代理建議消費組數 | 單個代理客戶端總連接數上限 | 存儲空間范圍 | 單個代理流量規格(MB/S) |
|---|---|---|---|---|---|---|---|---|
| kafka.kp.2u4g.single | 1 | 20000 | 250 | 250 | 20 | 2000 | 100-10000GB | 62 |
| kafka.kp.4u8g.single | 1 | 80000 | 500 | 500 | 100 | 4000 | 100-10000GB | 188 |
| kafka.kp.8u16g.single | 1 | 150000 | 1000 | 1000 | 150 | 4000 | 100-10000GB | 1063 |
(2)以下規格適用于 蕪湖2、上海7、重慶2、烏魯木齊27、石家莊20、內蒙6、北京5 節點
| 產品類型 | 產品規格 |
|---|---|
| 高級版 | 三節點 8核32GB TOPIC數上限100 集群流量峰值300MB/s 總磁盤范圍 1200GB – 6000GB |
| 基礎版 | 三節點 4核16G TOPIC數上限50 集群流量峰值100MB/s 總磁盤范圍 600GB – 6000GB |
實例規格和網絡帶寬說明
Kafka實例的網絡帶寬主要由以下兩個部分組成:
- 實例Broker對應的網絡帶寬
- 實例Broker的磁盤所對應的帶寬值(不同類型的磁盤對應的帶寬值不同,具體參考:如何選擇磁盤類型)
注意事項:
- Kafka默認情況下測試均為尾讀場景(即僅消費最新生產的數據),而不是冷讀場景(即從頭開始消費歷史數據的場景)。
流量規格測算模型說明如下:
- 測試模型讀寫比例為1:1
- 默認Topic的副本數為3
- 實例網絡總流量 = 單個代理流量規格 * 代理數量
- 實例整體流量 = 業務流量 + 代理節點間數據復制流量
參考上述測算模型說明,假如當前規格為kafka.2u4g.cluster,單個代理流量規格為100MB/s,代理數量為3,實例網絡總流量、最大讀流量和最大寫流量的計算方式如下:
- 實例網絡總流量 = 單個代理流量規格 * 代理數量 = 100MB/s * 3 = 300MB/s
- 最大讀流量 = 實例網絡總流量 / 默認副本數 / 2 = 300MB/s / 3 / 2 = 50MB/s
- 最大寫流量 = 實例網絡總流量 / 默認副本數 / 2 = 300MB/s / 3 / 2 = 50MB/s
Kafka實例Topic數量計算
Kafka實例對Topic分區數之和設置了上限,當達到上限之后,用戶無法繼續創建Topic。
所以,Topic數量和實例分區數上限、每個Topic的分區數有關,其中,每個Topic分區數可在創建Topic時設置,實例分區數上限參考上面實例規格說明表。
kafka.2u4g.cluster * 3 broker實例的分區數上限為750。
- 如果該實例下每個Topic的分區個數都為3,則Topic個數為750/3=250個。
- 如果該實例下每個Topic的分區個數都為1,則Topic個數為750/1=750個。