Kafka连接亚马逊msk

yfwxisqw  于 2021-06-04  发布在  Kafka
关注(0)|答案(1)|浏览(467)

如何在amazon msk中使用kafka连接适配器?根据aws文档,它支持kafka connect,但没有关于如何设置适配器和使用它的文档。

7ajki6be

7ajki6be1#

afaik amazon msk不提供托管连接器,因此您必须自己运行它们。这是通过运行kafka connect worker进程(一个jvm)并为其提供一个或多个连接器配置来完成的。
从kafka连接工作者的Angular 来看,它只需要一个kafka集群来连接;不管它是msk还是本地的,因为它最终只是一个消费者/生产者。
您可以在这里看到更多内容,包括现场演示:https://rmoff.dev/bbuzz19-kafka-connect
有关配置kafka connect以使用云托管的kafka平台(在本例中为合流云)的示例,请参阅本文。
如果您对云中的托管连接器感兴趣,请查看confluent cloud中提供的连接器。
免责声明:我为confluent工作:)

相关问题