是否有 AWS Kinesis Firehose 的 Kafka 对应物？

Question

看起来 AWS Kinesis Firehose 是一种将数据（一起缓冲）摄取到对象的方法，是否有此类功能的 Kafka 对应物？

Answer 1

是的，Kafka Connect，它是 Apache Kafka 的一部分。

您可以将它与 variety of connectors 一起使用，用于将数据从源（RDBMS、JMS、MQTT、CSV 等）流式传输到 Kafka 主题，以及从 Kafka 主题流式传输到目标（ RDBMS、S3、BigQuery、HDFS 等）

Kafka 连接在行动：

• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-1/
• https://www.confluent.io/blog/blogthe-simplest-useful-kafka-connect-data-pipeline-in-the-world-or-thereabouts-part-2/
• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-3/

免责声明：我为 Confluent 工作。