如何从 url 下载文件并将其存储在 aws s3 存储桶中?

如何从 url 下载文件并将其存储在 aws s3 存储桶中?

如上所述,我正在尝试下载包含图像的 zip 文件夹数据集:https://data.broadinstitute.org/bbbc/BBBC006/并将它们存储在 S3 存储桶中,以便我稍后可以将它们解压缩到存储桶中,重新组织它们,并将它们以较小的块拉入虚拟机进行一些计算。问题是,我不知道如何从https://data.broadinstitute.org/bbbc/BBBC006/BBBC006_v1_images_z_00.zip例如或任何其他的,然后将其发送 s3 这是我第一次使用 aws 或任何云平台所以请耐心等待:]

答案1

您无法操作 S3 中的数据,您只能上传到 S3、从 S3 下载和从 S3 中删除,但您无法在 S3 中执行“解压”等操作。如果您想上传解压档案的内容,您必须在笔记本电脑上本地解压它们,然后上传到 S3。

如果你使用的是 Windows,则可以使用 S3 客户端,例如S3 浏览器使用您的 S3 存储。

希望有帮助:)

相关内容