如何从 Kafka 加载数据到 CrateDB?
How to load data from Kafka into CrateDB?
从 CrateDB GitHub 页面的以下问题来看,这似乎是不可能的,即 CrateDB 不支持 Kafka 协议。
https://github.com/crate/crate/issues/7459
还有其他方法可以将数据从 Kafka 加载到 CrateDB 吗?
通常您会使用 Kafka Connect 将 Kafka 集成到目标(和源)系统,使用适合目标技术的连接器。
我找不到用于 CrateDB 的 Kafka Connect 连接器,但有一个 JDBC sink connector for Kafka Connect, and a JDBC driver for CrateDB,所以这可能值得一试。
您可以阅读有关 Kafka Connect here 的更多信息,并在本博客系列中查看它的实际应用:
- https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-1/
- https://www.confluent.io/blog/blogthe-simplest-useful-kafka-connect-data-pipeline-in-the-world-or-thereabouts-part-2/
- https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-3/
免责声明:我为 Confluent 工作,并且我撰写了以上博文。
从 CrateDB GitHub 页面的以下问题来看,这似乎是不可能的,即 CrateDB 不支持 Kafka 协议。 https://github.com/crate/crate/issues/7459
还有其他方法可以将数据从 Kafka 加载到 CrateDB 吗?
通常您会使用 Kafka Connect 将 Kafka 集成到目标(和源)系统,使用适合目标技术的连接器。
我找不到用于 CrateDB 的 Kafka Connect 连接器,但有一个 JDBC sink connector for Kafka Connect, and a JDBC driver for CrateDB,所以这可能值得一试。
您可以阅读有关 Kafka Connect here 的更多信息,并在本博客系列中查看它的实际应用:
- https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-1/
- https://www.confluent.io/blog/blogthe-simplest-useful-kafka-connect-data-pipeline-in-the-world-or-thereabouts-part-2/
- https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-3/
免责声明:我为 Confluent 工作,并且我撰写了以上博文。