压缩大型类似文件

Question

我们有大量且不断增长的 Windows 图像和其他大型文件。我假设其中的大多数文件在多个文件中都是相同的。

是否有一个压缩系统或者文件系统可以检测到这种情况？

Answer 1

是的，你需要一种叫做“重复数据删除”的技术。它不像压缩那样查看单个文件，而是查找块级重复 - 因此，如果你有一百万个相同文件的副本，那么应该只存储一个真实副本，然后使用一百万个指针引用它。让我们知道您正在寻找哪种操作系统，我会尝试找到一个在“服务器中”为您执行此操作的程序，这通常是 NAS/SAN 系统（例如 NetApp 文件管理器）的功能。

Answer 2

你可以尝试 DZO（仍处于测试阶段）http://essensolabs.com/它结合了重复数据删除和无损压缩。

Answer 3

您指的是 ISO/WIM 文件中的“图像”，还是仅指包含不同 Windows 安装图像的目录结构？

如果是后者，Windows Storage Server 2003 R2 使用单实例存储，这是一种奇特的说法，即它会检测相同文件的多个副本，将它们存储在 SIS 通用存储中，并将链接放置在文件应该在的位置。这发生在文件系统的底层，对应用程序来说是透明的。

问题在于您不能简单地购买 WSS 产品的许可证，它只能通过 OEM 合作伙伴获得，因此您必须从 HP、Dell 等公司购买运行 WSS 的新机箱。