是否有AWS Kinesis Firehose的Kafka对应物？

Question

看起来像AWS Kinesis Firehose是一种将数据（缓冲在一起）摄取到一个对象的方法，这种功能是否有Kafka对应物？

Answer 1

是的，Kafka Connect，它是Apache Kafka的一部分。

您可以将它与variety of connectors一起使用，用于将数据从源（RDBMS，JMS，MQTT，CSV等）流式传输到Kafka主题，从Kafka主题流向目标（RDBMS，S3，BigQuery，HDFS等）等等）

Kafka Connect在行动：

• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-1/
• https://www.confluent.io/blog/blogthe-simplest-useful-kafka-connect-data-pipeline-in-the-world-or-thereabouts-part-2/
• https://www.confluent.io/blog/simplest-useful-kafka-connect-data-pipeline-world-thereabouts-part-3/

免责声明：我为Confluent工作。