flume:我们可以在使用kafka通道的同时使用kafka主题和分区动态创建hdfs路径(hdfs sink)吗

vu8f3i0k  于 2021-06-01  发布在  Hadoop
关注(0)|答案(0)|浏览(197)

我将数据发送到具有多个分区的kafka主题。
例如,有10个分区的主题,我想基于分区(在多个hdfs目录中)将数据保存在hdfs路径中。
例如,我的hdfs路径目录应该是:/topicname/partition1、/topicname/partition2等。。
我正在使用kafka频道-org.apache.flume.channel.kafka.kafkachannel。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题