将本地文件放入 Amazon EBS 卷的最快方法是什么？

Question

我一直在使用分段上传将 200+GB 的文件放入 S3。然后我必须通过 Web 界面将其下载到 EBS 卷中。还有比这更有效的方法吗？

Answer 1

选项A

使用 AWS Import/Export 服务将文件复制到硬盘并将物理介质运送到 Amazon 可能会更快、更轻松：

http://aws.amazon.com/importexport/

然后，AWS 会将内容复制到您指定的 S3 或 EBS 卷中，并将磁盘寄回给您。

选项B

这是我建议测试的另一种方法：

1. 将文件分成多个部分（例如，使用“split”）

2. 创建 EBS 卷并附加到正在运行的 EC2 实例（较大以获得高带宽）

3. 使用压缩 (-z) 对并行运行的多个 rsync 进程进行 rsync。 拥有多个并行网络对于解决延迟问题至关重要，否则会减慢传输速度。

4. 将这些片段粘贴回目标 EBS 卷上的单个文件中（例如，使用“cat”）