HDFS space release - 最优解

Question

我想在HDFS中释放一些space，所以我需要找出一些unwanted/unusedHDFS blocks/files需要删除或归档。那么，到目前为止，什么会被视为最佳解决方案？我正在使用 Clouder 发行版。 （我的集群 HDFS 容量是 900 TB，使用了 700 TB）

Answer 1

如果您是运行 Cloudera 的授权版本，您可以使用Cloudera Navigator 来查看哪些文件有一段时间未被使用，并且您可以指定删除它们的策略。

如果没有，您可能正在考虑编写脚本来识别未使用的文件，并且您必须手动删除它们。