我是ApacheFlume的新手,我有一个用例,其中有一个定期更新的输入文件“sample.txt”,它最初包含以下数据
Name Age Sex Addressxxx 20 M Chennai
Name Age Sex Address
xxx 20 M Chennai
有时会更新为
Name Age Sex AddressYYY 25 F SalemZZZ 18 M Covai
YYY 25 F Salem
ZZZ 18 M Covai
我希望在输入文件发生更改时,使用apacheflume将此文件写入hdfs。有人能给我推荐这个链接吗?或者有人能告诉我如何实现这个目标吗
hmtdttj41#
你可以考虑作为一个来源Flume尾巴。我指向一些网址。请参考他们。
http://www.rittmanmead.com/2014/05/trickle-feeding-webserver-log-files-to-hdfs-using-apache-flume/ http://www.ibm.com/developerworks/library/bd-flumews/ http://mapredit.blogspot.in/2012/03/flumeng-evolution.html https://flume.apache.org/FlumeUserGuide.html http://stackoverflow.com/questions/13721930/flume-ng-tail-a-file
http://www.rittmanmead.com/2014/05/trickle-feeding-webserver-log-files-to-hdfs-using-apache-flume/
http://www.ibm.com/developerworks/library/bd-flumews/
http://mapredit.blogspot.in/2012/03/flumeng-evolution.html
https://flume.apache.org/FlumeUserGuide.html
http://stackoverflow.com/questions/13721930/flume-ng-tail-a-file
1条答案
按热度按时间hmtdttj41#
你可以考虑作为一个来源Flume尾巴。我指向一些网址。请参考他们。