hdfs上的本地文件有问题

ecbunoof  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(321)

我正在aws上使用hadoop和spark。运行此命令:

hdfs dfs -put testfile

给我这个错误:

18/08/29 02:59:06 WARN hdfs.DataStreamer: DataStreamer Exception
org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /user/ubuntu/testfile._COPYING_ could only be replicated to 0 nodes instead of minReplication (=1).  There are 0 datanode(s) running and no node(s) are excluded in this operation.

下面是日志文件:
8月29日03:31 hadoop-ubuntu-namenode-ambari.master.com.log
有人能告诉我这是怎么回事吗?谢谢。

crcmnpdw

crcmnpdw1#

我想是因为我忘了在aws的网络设置中设置网络限制,所以datanode无法连接到namenode。我为这个愚蠢的错误向你道歉。我昨天更改了网络设置,一切正常。

相关问题