Kafka

Apache Kafka

開發者	Apache软件基金会
首次发布	2011年1月​（2011-01）
当前版本	0.10.1（2016年10月​（2016-10））
源代码库	github.com/apache/kafka
编程语言	Scala，Java
操作系统	跨平台
类型	流式处理, 消息中间件
许可协议	Apache许可证 2.0
网站	kafka.apache.org

Apache Kafka是由Apache软件基金会开发的一个开源消息中间件项目，由Scala写成。Kafka最初是由LinkedIn开发，并于2011年初开源。2012年10月从Apache Incubator毕业。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。

相关术语

• Topic 用来对消息进行分类，每个进入到Kafka的信息都会被放到一个Topic下
• Broker 用来实现数据存储的主机服务器
• Partition 每个Topic中的消息会被分为若干个Partition，以提高消息的处理效率
• Producer 消息的生产者
• Consumer 消息的消费者
• Consumer Group 消息的消费群组

Kafka文件格式

00000000000000000000.index 00000000000000000000.log 00000000000000000000.timeindex 00000000000000782248.snapshot leader-epoch-checkpoint

参见

• Apache ActiveMQ
• StormMQ
• Qpid
• 面向消息的中间件
• 企业消息系统
• 企业集成模式
• 面向服务的架构
• 事件驱动SOA

外部链接

• Apache Kafka网站（英文）
• 项目设计讨论（英文）
• Github镜像
• Morten Kjetland对Apache Kafka的介绍（英文）
• Quora上与RabbitMQ的对比（英文）
• Kafka开发者邮件列表中与RabbitMQ的对比（英文）
• Stackoverflow上与RabbitMQ和ZeroMQ的对比（英文）
• Apache Kafka中的集群内部响应（英文）
• Kafka用户邮件列表讨论（英文）