gcp数据融合twitter推特流错误：java.lang.noclassdeffounderror:org/apache/spark/logging

sirbozc5 于 2021-06-30 发布在 Java

关注(0)|答案(1)|浏览(446)

我正在尝试使用gcp数据融合将twitter数据流到一个大的查询表中。我已经将我的twitter凭据添加到twitter组件中，并且验证没有错误。我还验证了没有错误的大查询组件。当我运行预览时，它会在大约30秒后停止，并出现以下错误：

java.lang.NoClassDefFoundError: org/apache/spark/Logging

这是我的数据融合工作的图像

任何帮助都将不胜感激。
2020年12月15日：添加一些关于我的数据融合示例的基本信息
日志：https://pastebin.com/pxkpqfcp

1条答案

似乎是众所周知的问题，通过cdap问题跟踪，我发现了相关的线程插件-194描述同样的问题，特别是影响twitter推特流插件功能。让我们追踪这个案子，看看有没有进一步的进展。