限制hadoop客户端不创建隐藏的校验和文件

41ik7eoe  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(385)

copytolocal命令正在创建隐藏的校验和文件。有没有办法避免这种情况的产生?

dm7nw8vv

dm7nw8vv1#

除非您运行的是非常旧的版本,否则如果您选择通过传递 -crc 选项,如apachehadoop文档中显示的copytolocal命令。

  1. > hdfs dfs -copyToLocal /LICENSE.txt
  2. > ls -lrta
  3. drwxr-xr-x+ 131 naurc001 SWNA\Domain Users 4.3K Jan 27 09:18 ../
  4. -rw-r--r-- 1 naurc001 SWNA\Domain Users 140K Jan 27 10:11 LICENSE.txt
  5. drwxr-xr-x 7 naurc001 SWNA\Domain Users 238B Jan 27 10:11 ./
  6. > hdfs dfs -copyToLocal -crc /LICENSE.txt
  7. > ls -lrta
  8. drwxr-xr-x+ 131 naurc001 SWNA\Domain Users 4.3K Jan 27 09:18 ../
  9. -rw-r--r-- 1 naurc001 SWNA\Domain Users 140K Jan 27 10:07 LICENSE.txt
  10. -rw-r--r-- 1 naurc001 SWNA\Domain Users 1.1K Jan 27 10:07 .LICENSE.txt.crc
  11. drwxr-xr-x 8 naurc001 SWNA\Domain Users 272B Jan 27 10:07 ./

如果您可以选择,那么我建议运行当前版本并进行测试,以确保 -crc 选项未在任何位置传递。

展开查看全部

相关问题