我要安装Kafka公司的消息。计划是首先在一台巨大的机器上安装Kafka，如果需要的话，可以扩展到4-5台机器（一个集群）。我对Kafka没有什么经验。想知道是否可以通过在代理配置中更改参数来扩展，并在新加入的机器上安装zookeeper。或者我怎样才能用最简单的方法大致做到这一点？更具体地说，Kafka在cdh。谢谢
cgvd09ve1#
要缩放kafka，如果需要使用kafka-topics.sh，则必须向主题添加更多分区。然后使用kafka-reassign-partitions.sh将分区重新分配给新的代理。重新分配实用程序将自动复制和分派数据。您可以对整个主题或一组有选择的分区执行此操作。完整的文档在这里。看看第六节。
1条答案
按热度按时间cgvd09ve1#
要缩放kafka，如果需要使用kafka-topics.sh，则必须向主题添加更多分区。然后使用kafka-reassign-partitions.sh将分区重新分配给新的代理。
重新分配实用程序将自动复制和分派数据。您可以对整个主题或一组有选择的分区执行此操作。
完整的文档在这里。看看第六节。