除了hadoop集群中设置的时间外,如何为长时间运行的应用程序更新委派令牌

m2xkgtsf  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(403)

我有一个在hadoop环境下运行的apacheapex应用程序。
我对申请没有意见,只是7天后就不及格了。而且,我意识到这是因为任何应用程序的集群级设置。
有没有什么办法,我可以更新一段时间的授权令牌perodically,以确保作业连续运行没有失败!!
我可以在网上找到任何关于如何更新hdfs委派令牌的资源!!有人能分享你的知识吗?

wwtsj6pe

wwtsj6pe1#

apex文档中提到了这个问题。并详细介绍了两种解决方案。对于hadoop系统来说,选择“自动刷新方法”是非侵入性的。基本上,您需要将keytab文件复制到hdfs中并进行配置

<property>
    <name>dt.authentication.store.keytab</name>
    <value>hdfs-path-to-keytab-file</value>
</property>

在dt-site.xml中。
hth公司

相关问题