在spark 2.3带来了1毫秒延迟的“连续处理”的情况下,选择flink而不是新的spark 2.3对于流媒体应用程序有什么好处吗?
mwngjboj1#
我选择flink的原因之一是spark structured streaming 2.3仍然没有连接到aws kinesis的连接器。另外,新的“连续处理”模式非常新,仍然不支持这里显示的聚合。我们可能会在6-12个月内得到支持。最后,Flink是建立从地面上做流,而Spark是适应。所以flink仍然有更低的延迟和更丰富的api。
1条答案
按热度按时间mwngjboj1#
我选择flink的原因之一是spark structured streaming 2.3仍然没有连接到aws kinesis的连接器。另外,新的“连续处理”模式非常新,仍然不支持这里显示的聚合。我们可能会在6-12个月内得到支持。最后,Flink是建立从地面上做流,而Spark是适应。所以flink仍然有更低的延迟和更丰富的api。