使用spark结构化流kafka预取事件

vxqlmq5t 于 2021-05-19 发布在 Spark

关注(0)|答案(0)|浏览(208)

我正在使用spark structured streaming kafka（2.4.0）来处理一些事件，我看到它在从kafka获取数据上花费了一定的时间。我想知道在当前批处理过程中是否有任何方法可以预取内存中的数据。
谢谢，亚历山德鲁

apache-spark apache-spark-sql spark-structured-streaming spark-streaming spark-streaming-kafka

来源：https://stackoverflow.com/questions/64443993/pre-fetch-events-using-spark-structured-streaming-kafka

暂无答案！

目前还没有任何答案，快来回答吧！

相关问题

热门标签

Java query python Node 开发语言 request Util 数据库 Table 后端算法 Logger Message Element Parser

最新问答

xxl-job 安全组扫描到执行器端口服务存在信息泄露漏洞
回答(1) 发布于 3个月前
xxl-job 不能和nacos兼容？
回答(3) 发布于 3个月前
xxl-job 任务执行完后无法结束，日志一直转圈
回答(3) 发布于 3个月前
xxl-job-admin页面上查看调度日志样式问题
回答(1) 发布于 3个月前
xxl-job 参数512字符限制能否去掉
回答(1) 发布于 3个月前