如何将数据从边缘节点加载到hadoop集群?

jutyujz0  于 2021-05-29  发布在  Hadoop
关注(0)|答案(2)|浏览(505)

我有两个服务器a(边缘节点)和b(hadoop集群)。我需要将目录从a移到b(hadoop位置)。我可以复制到b集群本地,但不知道确切的命令复制到hdfs在b服务器的位置

vltsax25

vltsax251#

用途:

  1. hadoop fs -put <local_src> <hdfs_src>

请参阅此以获得进一步帮助。还要查看cli上有哪些可用命令:

  1. hadoop --help
cnjp1d6j

cnjp1d6j2#

您可以使用以下两种方法之一:

  1. hadoop fs -copyFromLocal /home/username/abc.txt /user/username/

其中/home/username/.txt是边缘节点上的文件,/user/username/是hdfs上要复制文件的目录。

  1. hadoop fs -put /home/username/abc.txt /user/username/

其中/home/username/.txt是边缘节点上的文件,/user/username/是hdfs上要复制文件的目录。

相关问题