hadoop—flume中的hdfs接收器是否使用默认配置的“反模式”

9q78igpj  于 2021-06-03  发布在  Hadoop
关注(0)|答案(0)|浏览(163)

查看apacheflume中的hdfs sink默认参数,这似乎会产生大量非常小的文件(1kb卷)。从我对gfs/hdfs的了解来看,块大小是64mb,文件大小应该是千兆字节,以确保一切都能高效运行。
所以我很好奇flume的默认参数是否只是误导,或者我是否遗漏了其他一些东西。
干杯。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题