同一台机器上的多个flume代理

jqjz2hbq  于 2021-06-04  发布在  Hadoop
关注(0)|答案(1)|浏览(454)

我有一个问题陈述,我需要从多台机器收集数据(每台机器以不同的格式转发数据)到集中式存储(hbase)。
我需要为收集的每种类型的日志制作一个不同的表。
如何使用Flume?是否可以在同一台机器上运行多个flume代理?我可以将每种类型分配给一个将写入hbase的代理。

b4lqfgs4

b4lqfgs41#

只需在同一flume.conf中配置它们,然后重新启动代理。
对于每个不同的数据流,您将需要不同的源、通道和接收器。你可以按你想的任何方式给他们铅锤。

相关问题