研究小组的网络存储,10-100 TB

研究小组的网络存储,10-100 TB

这与这篇文章相关:

适用于研究部门的可扩展 (> 24 TB) NAS

但也许更笼统一些。

背景:

我们是一个大约有 10 人的研究实验室,我们进行大量实验,包括在实验室中的一台设备上拍照,然后在实验室的几台计算机上进行分析。每次实验可能会产生 2 或 3 GB 的数据,我们每年生成数据的速度约为 10 TB。

目前,我们将数据存储在 6 托架 Netgear Readynas Pro 上,但即使使用 2 TB 驱动器,也只能提供 10 TB 的存储空间。此外,目前我们根本没有备份。我们的短期备份计划是购买第二个 Readynas,将其放在另一栋建筑中,然后将一个驱动器镜像到另一个驱动器上。显然,这有点不理想。

我们的选择:

1) 我们可以每年向大学支付 400 美元/TB 的费用,用于“备份”在线存储。我们对他们的信任程度超过了对自己的信任程度,但也不是完全没有。

2) 我们可以继续购买小型 NAS 并在办公室之间镜像它们。有一个限制,虽然很愚蠢,但我们的以太网插孔数量有限。

3)我们可以尝试实现我们自己的数据存储解决方案,这就是我向你们询问的原因。

需要考虑的一点是,我们是一个流动人口,没有人是网络管理专家。我可能只会在这里待一年左右,而在这里待得最久的研究生也有 5-6 年的时间。所以没有什么需要专家监督的。

我们的数据传输率很低 - 大部分数据只是停留在服务器上,等待有人查看一两次 - 所以我们不需要真正高速的系统。

考虑到这些限制,有人能推荐一种成本较低、可扩展、或多或少交钥匙的共享数据存储系统,并在单独的物理位置进行备份吗?这样的系统存在吗?还是我们应该付钱让大学替我们处理?

第二个问题,我们的教授刚刚获得终身教职,正在制定预算。这里的目标是尽可能多地索取,并希望得到其中的一小部分。所以同样的问题,减去低成本。在没有预算限制的情况下,您能推荐一款可扩展的交钥匙备份存储系统吗?

谢谢

答案1

有一篇关于构建 NAS“pod”的非常出色且极其详细的文章,由一家为自己使用而开发该系统的公司撰写,网址为http://www.backblaze.com/petabytes-on-a-budget-how-to-build-cheap-cloud-storage.html。他们将其描述为“67 TB 售价 7,867 美元”,这非常划算。他们在 Debian 下的 RAID-6 卷上运行 JFS;然后他们通过 https 提供该服务,但没有什么可以阻止您将(例如)SaMBa 放入其中(您没有说明您当前的远程文件访问协议是什么)。

免责声明:除了我读到的内容之外,我对这些人一无所知,而且我也没有尝试自己建造这些东西。尽管如此,除非他们伪造照片,否则他们确实建造和部署了大量这些东西,而且他们还没有破产。

编辑:我花了一点时间才找到具体的供应商列表(详细部分列表在上面的原始链接中),但它位于http://blog.backblaze.com/2009/10/07/backblaze-storage-pod-vendors-tips-and-tricks/#more-199我确实很钦佩这些人将他们的详细基础设施开放以供重复使用的方式;但正如他们在原始帖子中所说的那样:

最后,我们要感谢数以千计的工程师,他们辛苦工作了数百万小时,为我们带来了价格低廉甚至完全免费的 pod 组件,比如英特尔处理器、千兆以太网、高密度硬盘、Linux、Tomcat、JFS 等。我们意识到我们站在巨人的肩膀上。

我不了解他们的产品(我有自己的磁带堆叠器用于备份)但我赞同他们的谦逊。

答案2

我认为这是应该外包的情况之一。让大学 IT 部门处理存储,他们负责存储解决方案的备份和维护。从长远来看,这样会更好。

答案3

询问你的大学同事是否有较低级别的存储。也许是一些不备份或仅每周/每月备份的东西。如果有更便宜的“无备份”选项,那么购买 2-3 倍的存储空间并编写一些脚本以半自动进行备份。备份,尤其是磁带备份,可能是网络存储成本的三分之二。

还询问他们是否提供“近线存储”。

相关内容