Apache Spark 可以在 ZFS 上 运行 吗？

Question

我正在对 ZFS 做一些研究，看看它是否可以用作分布式处理框架的一个组件。我要回答的主要问题是 - 如果数据驻留在 zfs 中，Apache Spark 运行 是否会以一种高效的分布式方式？

即。 Spark on HDFS有数据局部性的概念，ZFS也可以这样说。

Answer 1

可以运行用ZFS作为本地文件系统吗？无论如何。 ZFS 是 POSIX 兼容的，因此这里没有阻止程序。

是否可以作为分布式文件系统的替代品？当然不。 ZFS 是文件系统和卷管理器，而不是分布式存储。