华为云首页用户手册

分布式消息服务KAFKA版-为什么限制Topic的总分区数？

分布式消息服务KAFKA版-为什么限制Topic的总分区数？

时间：2024-11-16 13:23:57

分布式消息服务KAFKA版

为什么限制Topic的总分区数？

Kafka以分区为粒度管理消息，分区多导致生产、存储、消费都碎片化，影响性能稳定性。在使用过程中，当Topic的总分区数达到上限后，用户就无法继续创建Topic。

不同规格配置的Topic总分区数不同，如下表所示。

表1 Kafka集群实例规格
规格名称	代理个数范围	单个代理TPS	单个代理分区上限	单个代理建议消费组数	单个代理客户端总连接数上限	存储空间范围（GB）	单个代理流量规格（MB/s）
kafka.2u4g.cluster.small	3~30	20000	100	15	2000	300~300000	40
kafka.2u4g.cluster	3~30	30000	250	20	2000	300~300000	100
kafka.4u8g.cluster	3~30	100000	500	100	4000	300~600000	200
kafka.8u16g.cluster	3~50	150000	1000	150	4000	300~1500000	375
kafka.12u24g.cluster	3~50	200000	1500	200	4000	300~1500000	625
kafka.16u32g.cluster	3~50	250000	2000	200	4000	300~1500000	750

表2 Kafka单机实例规格
规格名称	代理个数	单个代理TPS	单个代理分区上限	单个代理建议消费组数	单个代理客户端总连接数上限	存储空间范围（GB）	单个代理流量规格（MB/s）
kafka.2u4g.single.small	1	20000	100	15	2000	100~10000	40
kafka.2u4g.single	1	30000	250	20	2000	100~10000	100

父主题： Topic和分区问题

上一篇：分布式消息服务KAFKA版-Kafka实例的连接地址默认有多少个？

下一篇：分布式消息服务KAFKA版-如何将Kafka实例中的数据同步到另一个Kafka实例中？

新客秒杀 2核2G 3M L实例

68元/年

普惠上云领千元上云礼券

立即前往

企业专享 X实例 4核8G 5M

888元/年

热门域名 1元随心购

1元/年起

分布式消息服务KAFKA版-为什么限制Topic的总分区数？

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题