是这样吗 /tmp hdfs中的目录每24小时自动清除一次(默认情况下)?
/tmp
gwo2fgha1#
hdfs/tmp目录主要用于mapreduce操作期间的临时存储。mapreduce工件、中间数据等将保存在此目录下。当mapreduce作业执行完成时,这些文件应自动清除。如果删除此临时文件,可能会影响当前正在运行的mapreduce作业。临时文件由pig创建。临时文件删除发生在最后。如果脚本执行被归档或终止,pig不会处理临时文件删除。那你就得处理这种情况。最好在脚本本身中处理这个临时文件清理活动。
1条答案
按热度按时间gwo2fgha1#
hdfs/tmp目录主要用于mapreduce操作期间的临时存储。mapreduce工件、中间数据等将保存在此目录下。当mapreduce作业执行完成时,这些文件应自动清除。如果删除此临时文件,可能会影响当前正在运行的mapreduce作业。
临时文件由pig创建。临时文件删除发生在最后。如果脚本执行被归档或终止,pig不会处理临时文件删除。那你就得处理这种情况。最好在脚本本身中处理这个临时文件清理活动。