简述Kafka架构设计

简述Kafka架构设计。小编来告诉你更多相关信息。简述Kafka架构设计如果想了解简述Kafka架构设计方面的介绍,一定能解决您的问题的,一起来了解吧!ConsumerGroup:消

简述Kafka架构设计。小编来告诉你更多相关信息。

简述Kafka架构设计

如果想了解简述Kafka架构设计方面的介绍,一定能解决您的问题的,一起来了解吧!

简述Kafka架构设计

  • Consumer Group:消费者组,消费者组内每个消费者负责消费不同分区的数据,提高消费能力。逻 辑上的一个订阅者。
  • Topic:可以理解为一个队列,Topic 将消息分类,生产者和消费者面向的是同一个 Topic。
  • Partition:为了实现扩展性,提高并发能力,一个Topic 以多个Partition的方式分布到多个 Broker 上,每个 Partition 是一个 有序的队列。一个 Topic 的每个Partition都有若干个副本(Replica),一个 Leader 和若干个 Follower。生产者发送数据的对象,以及消费者消费数据的对象,都是 Leader。Follower负责实时从 Leader 中同步数据,保持和 Leader 数据的同步。Leader 发生故障时,某个 Follower 还会成为新的 Leader。
  • Offset:消费者消费的位置信息,监控数据消费到什么位置,当消费者挂掉再重新恢复的时候,可以从 消费位置继续消费。
  • Zookeeper:Kafka 集群能够正常工作,需要依赖于 Zookeeper,Zookeeper 帮助 Kafka 存储和管理 集群信息。

上述的关于简述Kafka架构设计的全面介绍了,希望给网的网友们带来一些相关知识。

本文内容由互联网用户自发贡献,该文观点仅代表作者本人。如发现本站有涉嫌抄袭侵权/违法违规的内容,请发送邮件至 5733401@qq.com 举报,一经查实,本站将立刻删除。本文链接:https://fajihao.com/i/255537.html

(0)
汤卡西的头像汤卡西
上一篇 2023-11-05
下一篇 2023-11-05

相关推荐