我期待在 Linux 集群中使用 MPI 的并行文件系统。我想知道像 lustre/并行虚拟文件系统这样的并行文件系统是否需要特殊的硬件支持(特殊硬盘)。
答案1
对于 Lustre,答案是“否”——不需要特殊硬盘。具体要求(主要与软件相关)讨论如下: http://wiki.lustre.org/index.php/Preparing_to_Install_Lustre
更多详细信息请参见此处: http://wiki.lustre.org/index.php/Configuring_the_Lustre_File_System
当然还有常见问题解答: http://wiki.lustre.org/index.php/Lustre_FAQ
答案2
Rob Neely 的观点是正确的,不需要特殊的硬盘,而且他选择了很好的资源来帮助您入门。
让我来回答问题的另一部分——硬盘中不需要特殊配置并不意味着没有硬件要求。您不能只在用作 NFS 文件服务器的同一系统上设置 Lustre,并期望获得 Lustre、PVFS、Ceph 等并行文件系统的好处。要使并行文件系统取得成功,访问实际上必须是并行的——这意味着数据存储(Lustre 称之为 ODS、对象数据存储;PVFS 称之为 I/O 服务器;等等)的多个系统、元数据以及文件系统服务器和客户端节点之间的良好网络连接。
尽管如此,系统的这些部分都是可扩展的,你可以从小处着手,找出你的需求,然后在系统运行后再进行扩展。但这绝不是单纯的软件部署。