我有一个4节点集群(cloudera发行版),我想在一个特定的节点标签下使用2个节点。但我无法创建Yarn标签。记下我做的步骤。
sudo su hdfs
hadoop fs -mkdir -p /yarn/node-labels
hadoop fs -chown -R yarn:yarn /yarn
hadoop fs -chmod -R 700 /yarn
# Set following properties under YARN Service Advanced Configuration Snippet (Safety Valve) for yarn-site.xml in Cloudera
yarn.node-labels.fs-store.root-dir hdfs://<master_node_ip>:8020/yarn/node-labels/
yarn.node-labels.enabled true
yarn rmadmin -addToClusterNodeLabels label1
yarn rmadmin -replaceLabelsOnNode <node1_ip>=label1, <node2_ip>=label2
文档要求运行 yarn cluster --list-node-labels
查看所有节点标签,但它提供:
错误:无法找到或加载主类群集
当我打开ls时 hadoop fs -ls hdfs://<master_node_ip>:8020/yarn/node-labels/
我看不到在它下面创建的任何文件
任何帮助都将不胜感激。
暂无答案!
目前还没有任何答案,快来回答吧!