hadoopteragen没有将文件存储在我指定的目录中

iezvtpos  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(436)

我做了以下工作:

  1. hadoop jar /home/yarn/hadoop-2.4.1/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.4.1.jar teragen 10 /home/yarn/terasort-input
  2. ``` `teragen` 执行给我看似正常的终端输出,但没有在指定的目录?我做错了什么?我应该在哪里检查?
qni6mghb

qni6mghb1#

我想出来了。
输出文件存储在hdfs中,我需要做

  1. hadoop fs -ls

例如:

  1. hadoop jar hadoop-mapreduce-examples-2.4.1.jar teragen 10 terainput

在中生成以下文件 terainput 文件夹,总大小为10 x 100字节。

  1. yarn@master:~$ hadoop fs -ls terainput
  2. Found 7 items
  3. -rw-r--r-- 2 yarn supergroup 0 2015-09-29 05:14 terainput/_SUCCESS
  4. -rw-r--r-- 2 yarn supergroup 200 2015-09-29 05:14 terainput/part-m-00000
  5. -rw-r--r-- 2 yarn supergroup 200 2015-09-29 05:14 terainput/part-m-00001
  6. -rw-r--r-- 2 yarn supergroup 100 2015-09-29 05:14 terainput/part-m-00002
  7. -rw-r--r-- 2 yarn supergroup 200 2015-09-29 05:13 terainput/part-m-00003
  8. -rw-r--r-- 2 yarn supergroup 200 2015-09-29 05:14 terainput/part-m-00004
  9. -rw-r--r-- 2 yarn supergroup 100 2015-09-29 05:14 terainput/part-m-00005
展开查看全部

相关问题