kafka集群依赖zookeeper

Kafka 集群中只能有一个 leader, 其他都是 follower, 这都需要 Zookeeper 来保证.

此外,comsumer的offset也可以保存在zookeeper(新版本保存在kafka)

注意:zookeeper集群的工作机制,leader负责读写请求,follower负责读请求。这点和kafka集群的partition分区副本不一样。(kafka的负载通过多个不同partition)

分区数(分文件夹),副本数

生产者和消费者如何找leader

zookeeper保存topic信息是保存在磁盘上的(每条消息都被追加(append)到分区(patition)中,属于顺序写磁盘(顺序写磁盘效率比随机写内存要高,保障kafka吞吐率)。),有时间和大小限制。

猜你喜欢

转载自blog.csdn.net/qq_43193797/article/details/86622311
今日推荐