将 2TB 文件从本地迁移到 Google Cloud Storage

将 2TB 文件从本地迁移到 Google Cloud Storage

我们的旧基础设施托管在本地服务器上,现在我们正在转向 Google Cloud Storage。问题是,我的外发服务器连接速度非常慢,有什么想法可以将我的文件从本地同步到云存储吗?

答案1

如果您的带宽有限,您可以按照文档该文件将为您解答以下问题:

为什么我应该使用传输服务来传输本地数据?我的带宽有限。我可以使用传输服务来传输本地数据吗?

根据文档,其工作方式是通过以下步骤:

以下是本地数据传输服务的工作原理的高级概述:

  1. 安装 Docker 并在您的私有数据中心运行一小段软件(称为代理)。代理在 Docker 容器内运行,可以访问您本地安装的 NFS 数据。

有关详细信息,请参阅安装和运行本地代理。

  1. 首次设置时完成本地传输。

  2. 从 Google Cloud Console 启动用于本地数据传输的传输服务。您将提供 NFS 目录和用于传输数据的目标 Cloud Storage 存储桶。

有关详细信息,请参阅创建传输作业。

  1. 传输开始时,它会递归遍历给定的 NFS 目录并将找到的数据移动到您的 Cloud Storage 存储桶。

传输的数据会进行校验,出现错误的文件会重新尝试,数据会通过安全连接发送。传输进度记录会写入目标 Cloud Storage 存储桶内的日志对象中。您可以在 Google Cloud Console 中跟踪传输进度。

  1. 传输完成后,您可以在 Google Cloud Console 中查看错误示例。您还可以查看传输日志,了解已传输文件和任何错误的目录。

在文档中,您可以找到更多详细信息和所需的额外步骤。

答案2

检查是否转移装置是一个选项:

Transfer Appliance 是您在数据中心设置的机架式高容量存储服务器。将数据填入其中,然后将其发送给我们,我们会将您的数据上传到 Google Cloud Storage。Transfer Appliance 的压缩容量高达 1PB,可帮助您以比通过典型网络快几个数量级的速度迁移数据。

相关内容