我的配置单元作业失败,错误如下,即使我在运行作业之前设置了exec目录和scratch目录,我也不知道为什么默认属性没有得到更新。
SET hive.exec.scratchdir=/domain/usecase/warehouse/hive_scratch_tmp;
SET hive.exec.stagingdir=/domain/usecase/warehouse/.staging;
例外情况:
17/09/13 11:30:42[thread-126]:错误mr.execdriver:yarn java.io.ioexception:无法设置/var/mapr/cluster/yarn/rm/staging/usecase/.staging/job_/job.jar的权限,位于com.mapr.fs.maprfilesystem.setpermission(maprfilesystem)。java:2100)在org.apache.hadoop.mapreduce.jobresourceuploader.copyjar(jobresourceuploader。java:248)
我还需要设置其他属性吗?谢谢
这里有一个类似的问题,我已经使用的属性。
1条答案
按热度按时间fcy6dtqo1#
请尝试配置单元外壳中的以下配置属性以覆盖配置单元mapreduce am stage目录。使用完整uri
yarn.app.mapreduce.am.staging-dir
http://doc.mapr.com/display/mapr/default+mapred+parameters