查看apacheflume中的hdfs sink默认参数,这似乎会产生大量非常小的文件(1kb卷)。从我对gfs/hdfs的了解来看,块大小是64mb,文件大小应该是千兆字节,以确保一切都能高效运行。所以我很好奇flume的默认参数是否只是误导,或者我是否遗漏了其他一些东西。干杯。
目前还没有任何答案,快来回答吧!
暂无答案!
目前还没有任何答案,快来回答吧!