将Parquet工具与kerberos cdh结合使用

ryhaxcpt  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(312)

我试图从Parquet文件中发现一个模式。我试着使用代码:

parquet-tools schema hdfs://<MY_IP>:8020//<PATH_TO_PARQUER>/<PARQUET_FILE_NAME>.parquet

但我错了:

SIMPLE authentication is not enabled.  Available:[TOKEN, KERBEROS]

有没有人知道如何在煤焦化的环境中使用Parquet工具。我拥有具有权限的keytab,并且在knit命令之前运行。

2wnc66cl

2wnc66cl1#

的配置 hadoop.security.authentication 可以采用简单值或kerberos值。
从您得到的错误来看,很明显它被设置为kerberos。
一定要跟着kinit跑。
如果它不起作用,你必须检查你的眼睛 core-site.xml 以及 hadoop-policy.xml 正确配置的文件。

相关问题