我已经启用了kerbores的cloudera集群。当我使用客户机部署模式时,spark可以访问配置单元表。
我执行kinit命令,然后执行spark2 submit。当我使用客户机模式时,spark可以访问配置单元表。
spark2-submit --master yarn --deploy-mode client --keytab XXXXXXXXXX.keytab --principal XXXXXXXXXXX@USER.COM --conf "spark.driver.extraJavaOptions=-XX:+UseG1GC -XX:MaxPermSize=1024M -Djava.security.krb5.conf=/etc/krb5.conf" test.jar
但是当我使用集群模式时,spark给出了table not found错误。
spark2-submit --master yarn --deploy-mode cluster --keytab XXXXXXXXXX.keytab --principal XXXXXXXXXXX@USER.COM --conf "spark.driver.extraJavaOptions=-XX:+UseG1GC -XX:MaxPermSize=1024M -Djava.security.krb5.conf=/etc/krb5.conf" test.jar
暂无答案!
目前还没有任何答案,快来回答吧!