使用log4j flume appender将应用程序事件发送到flume。然后flume可以将事件写入hdfs，稍后可以使用hive或其他框架进行分析。请查看本文中的代码和配置文件的详细说明。文中提到的附加器是flume的一部分，已经移到log4j 2中。
另外，看看facebook上的scribe。但是，它已经两年多没有更新了。看起来没有引起太多的注意。