我正在尝试将kafka实时数据从一台服务器镜像到另一台服务器。
在apache网站上找到了一个名为“mirror maker”的工具。
【Apache·Kafka制镜师】【1】https://cwiki.apache.org/confluence/pages/viewpage.action?pageid=27846330#kafkamirroring(mirrormaker)-如何设置镜像
但是描述太简单,没有consumer.config和producer.config文件的配置细节。
如何使用正确的配置文件部署此工具,以便在两个kafka服务器之间镜像数据:
实时主题传输
不稳定网络下的容错
任何其他可能实现这一目标的方法也都是非常受欢迎的。
谢谢。
1条答案
按热度按时间daolsyd01#
apache的mirror maker是一个相对简单的工具,这就是为什么您阅读的所有文档似乎都没有令人难以置信的信息。没有多少信息可以提供。它所做的只是使用集群a中的数据并生成集群b。mirror maker确实提供了实时的主题传输,但就稳定性而言,您可能需要使用第三方工具,如https://eng.uber.com/ureplicator/.