Kafka Kafka是由Apache软件基金会开发的一个开源流处理平台由Scala和Java编写该项目的目标是为处理实时数据提供一个统一高吞吐低延迟的平台其持久化层本质上是一个按照分布式事务日志架构的大规模发布订阅消息队列这使它作为企业级基础设施来处理流式数据非常有价值此外Kafka可以通过Kafka Connect连接到外部系统用于数据输入输出并提供了Kafka Streams一个Java流式处理库 该设计受事务日志英语Transaction log的影响较大