每月存储 10TB 的解决方案

每月存储 10TB 的解决方案

我在一家小型电视公司工作。他们每月生成 11TB 的视频文件。

我能做什么?我只需要普通的 SATA 磁盘,在 RAID 中。我应该购买什么解决方案?

(他们使用了很多 Iomega NAS)

答案1

“无限扩展”让我感到害怕。你真的需要随时随地在线观看每一秒的电影吗?你可以考虑分层存储吗?快速存储用于最近/经常使用的内容;较慢的高容量存储用于你需要但不需要的东西打响指就在那里;最后用磁带或类似的东西来存档旧数据?

至于实际选择,您的预算是多少?我将建议使用戴尔系列产品,因为这是我最熟悉的产品,但所有顶级服务器供应商都会在同一点推出自己的产品,但我对这些产品不太熟悉,您需要的是建议,而不是一长串驱动器型号。

我喜欢戴尔的平等逻辑如果你想通过多台服务器发布这些数据,那么你可以选择一系列 SAN 设备,它们有多种选择,可以为你提供快速存储层和较慢的高容量层,当然你也可以购买磁带库戴尔还提供您喜欢的任何尺寸的存档层。

如果您只想通过一台服务器发布这些内容,那么请考虑直接附加存储选项 - 可以插入服务器的磁盘组。同样,从我所知道的戴尔系列来看,您会谈论电源库范围

正如我之前所说,我并不是建议你必须购买戴尔,我不为他们工作,我也不为他们做广告——只是我们使用了很多他们的产品,我对它们非常了解。你可以看看惠普、Sun/Oracle、IBM,它们都有类似系列的相同级别的产品,而且还有很多专门从事存储的公司。但在我看来,让文件使用量增长而不进行这样的管理是灾难的根源。

我知道你可能被告知他们需要所有东西都立即可用,而且你需要以低成本完成这项工作,我理解这种压力。但是,在没有管理策略的情况下尝试管理这样的数据是奢望,根本行不通。

答案2

我在一家广播公司工作,我们每个月都会产生大量的视频/音频数据。我们的解决方案是 2 个日立 SAN,一个更快(FC),一个更慢(SATA),并带有大量缓存(256GB 缓存)。我们预计它会在 3 年内耗尽。是的,高清视频很麻烦。

我们正在开发一个管理系统,该系统将处理所有内容生命周期,并将其从较快的存储(在线)移动到较慢的存储(近线),最后归档到磁带上(涉及大量元数据,以便以后快速轻松地在档案中找到内容)。我们有一个(可扩展的)1000 LTO 4 磁带库用于归档。

这是你应该记住的事情。你真的只需要快速访问/空间来保存节目的某个特定时间。比如说,上个月。这将是来自新闻团队的原始镜头、录制的演播室节目、现场表演录音,以及外部制作(联合制作的内容、广告等)。这些内容将进入播出和编辑阶段,因此必须能够快速访问(例如,SAN 连接到进行编辑的 MAC)。

节目播出后,您可以(也应该)将其移至收藏/存档(不知道英文中正确的术语是什么),可能是磁带。如果稍后需要确定的新闻、节目或节目,请将其重新注入更快的存储以供使用,并在完成所有操作后将其移除。

希望我的个人经历能有所帮助。

答案3

如果您正在寻找商业解决方案,Isilon 是目前最便宜的解决方案之一,应该可以轻松满足您的需求。他们的产品是一种集群解决方案。您可以用 3 个以上的节点构建一个存储集群。每个节点都有一堆磁盘,容错能力是可定制的,您可以丢失一个节点和/或多个磁盘,但仍然可以运行。您只需在现有节点上添加一个新节点或外部磁盘组即可进行扩展。非常简单易用。

之后,我会将 NetApp 视为亚军。它们的价格稍贵一些,但其产品提供的功能和性能比 Isilon 更强大。

答案4

如果你有时间自己设置一些东西,Backblaze 上的小伙子们有一篇关于如何构建存储舱的很好的文章:http://blog.backblaze.com/2009/09/01/petabytes-on-a-budget-how-to-build-cheap-cloud-storage/

相关内容