任何工具或实用程序生成高速日志

olmpazwi  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(307)

我们正在进行大数据项目,需要对flume集群进行大小调整。flume集群将收集以15 mbps(兆字节每秒)速度生成的日志。为了模拟这种情况,我们需要一个实用程序/工具,它可以以这种速度(或按比例缩小的速度)生成日志。让我知道是否有任何现有的工具可用。

zc0qhyus

zc0qhyus1#

我在twitter上得到了很好的结果。
它读取日志以获取示例数据,这样您就可以发送实际的生产数据。
它使用泊松/指数分布,因此请求之间的时间是随机产生的。
它可以以设定的速率发送,并且可以使用更多的负载生成服务器来达到该速率。

相关问题