开篇:Kafka 为什么能扛住每秒百万级消息?
如果你在一个大型快递公司工作,每天要处理上百万件包裹。普通的方式是一件一件登记、分拣、投递,效率可想而知。但如果你把包裹按区域分成几十条流水线,每条线并行运转,效率就完全不同了。
Kafka 就是这样一个"超级快递中心"。它是 LinkedIn 开源、后来进入 Apache 基金会的分布式流处理平台,以每秒百万级消息的吞吐量闻名于世。无论是日志采集、实时数仓还是事件驱动架构,Kafka 都是当之无愧的主力军。
接下来,我们从核心概念出发,逐步拆解 Kafka 为什么这么快、这么可靠。
大约 19 分钟