在resourcemanager启动后在引导脚本中运行操作

y4ekin9u  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(282)

我正在使用amazonaws-cli工具启动aws-emr集群。我有一个boostrap操作,在master上运行并运行以下命令

hdfs dfs -put /home/hadoop/X.tar.gz /

但是我得到以下错误

put: Call From X.internal/X1 to X.internal:9000 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused

但是,一旦集群启动(这个错误不会导致启动失败),我就可以成功地运行上面的命令。
如何在引导脚本中运行hdfs命令?

9jyewag0

9jyewag01#

作为一个步骤而不是一个动作来运行它。请看下面的示例:http://docs.aws.amazon.com/elasticmapreduce/latest/developerguide/emr-hadoop-script.html

相关问题