当我们使用flume从mysql数据库中获取实时流数据时,是否会发生重复性?flume如何将实时数据存储在hdfs上创建的表上?
oewdyzsn1#
看看这个帖子里的日志图片您可以看到,当flume操作看到一个新的表条目时 id > X 不断增加x的值。flume(应该)在内部维护代理文件系统上以前使用的id值
id > X
1条答案
按热度按时间oewdyzsn1#
看看这个帖子里的日志图片
您可以看到,当flume操作看到一个新的表条目时
id > X
不断增加x的值。flume(应该)在内部维护代理文件系统上以前使用的id值