清除 hdfs 中的 /tmp 目录

Question

这是否正确，hdfs 中的 /tmp 目录每 24 小时自动清除一次（默认情况下）？

Answer 1

HDFS /tmp目录主要用作mapreduce运行时的临时存储。 Mapreduce 工件、中间数据等将保存在此目录下。当 mapreduce 作业执行完成时，这些文件应该被自动清除。如果删除此临时文件，可能会影响当前 运行 个 mapreduce 作业。

临时文件由 pig 创建。临时文件删除发生在最后。如果脚本执行已归档或终止，Pig 不会处理临时文件删除。然后你必须处理这种情况。您最好在脚本本身中处理此临时文件清理 activity。