Kafka不是一个单纯的消息引擎系统,而是能够实现精确一次(Exactly-once)处理语义的实时流处理平台

Storm/Spark Streaming/F ,在大规模流处理领域主流

Kafka经过这么长时间不断的迭代,现在已经能够稍稍比肩这些框架

  • Kafka社区对于这些框架心存敬意
  • 目前国内鲜有大厂将Kafka用于流处理的尴尬境地,毕竟Kafka是从消息引擎“半路出家”转型成流处理平台的,它在流处理方面的表现还需要经过时间的检验。

从流处理平台扩展到流处理生态圈,Kafka更是还有很长的路要走

Kafka Streams提供了Kafka实时处理流数据的能力

但是其实还有一个重要的组件Kafka Connect

在评估流处理平台时,框架本身的性能、所提供操作算子(Operator)的丰富程度固然是重要的评判指标,但框架与上下游交互的能力也

收藏 打印