我正在尝试使用oozie工作流运行spark应用程序。oozie共享库包含许多导致冲突的相同依赖项。
我的问题是:如何应对?
使用的spark版本:2.4.0-cdh6.1.1 JA009: cache file (mapreduce.job.cache.files) scheme: "hdfs" host: "nameservice1" port: -1 file: "/applications/test_app/lib/javax.inject-2.4.0-b34.jar" conflicts with cache file (mapreduce.job.cache.files) hdfs://nameservice1/user/oozie/share/lib/lib_20190806172847/spark/javax.inject-2.4.0-b34.jar
暂无答案!
目前还没有任何答案,快来回答吧!