极客教程Apache Kafka 和 Apache Flume 的区别
Apache Kafka： 它是一个用 Java 和 Scala 编写的开源流处理软件平台。它由 LinkedIn 制作，并捐赠给了 Apache 软件基金会。Apache Kafka 旨在提供一个高吞吐量、统一、低延迟的平台来处理实时数据馈送。Kafka 通常使用基于 TCP 的协议，该协议针对效率进行了优化。它非常快，每秒执行 200 万次写入。
它还保证零数据丢失。Apache Kafka 通常用于实时分析、将数据摄取到 Hadoop 中并用于触发、错误恢复、网站活动跟踪。
Flume： Apache Flume 是一种可靠的、分布式的、可用的软件，用于有效地聚合、收集和移动大量日志数据。它具有基于流数据流的灵活简单的架构。它是用java编写的。它有自己的查询处理引擎，可以在将每批新数据移动到预期的接收器之前对其进行转换。它具有灵活的设计。
下表列出了 Apache Kafka 和 Apache Flume 之间的差异：
| Apache Kafka | Apache Flume |
|---|---|
| Apache Kafka 是一个分布式数据系统。 | Apache Flume 是一个可用、可靠的分布式系统。 |
| Apache Kafka针对实时摄取和处理流数据进行了优化。 | Apache Flume有效地收集、聚合大量日志数据并将其从许多不同的来源移动到集中式数据存储。 |
| Apache Kafka基本上是作为一个拉模型工作的。 | Apache Flume基本上是作为推送模型工作的。 |
| Apache Kafka很容易扩展。 | 与 Kafka 相比，Apache Flume不可扩展。 |
| 一个容错、高效和可扩展的消息传递系统。 | Apache Flume是专为 Hadoop 设计的。 |
| 如果对节点故障有弹性，它支持自动恢复。 | 一旦 Flume 代理失败，将丢失通道中的事件。 |
| Kafka 作为一个集群运行，实时处理传入的大量数据流。 | Flume 是一个从分布式 Web 服务器收集日志数据的工具。 |
| Kafka 会将每个主题分区视为一组有序的消息。 | Flume 可以从 Hadoop 中使用的多个源中获取流数据进行存储和分析。 |