移动数 TB 信息的最快方法

Question

我需要将多个 TB 的信息从一个 NFS 系统（NFS 系统在 AWS 中）移动到亚马逊 EFS，但我需要它以最快的方式移动这些数据。我试过 rsync，但它花费的时间太长，我也试过与 rsync 并行使用，但它没有给我我需要的结果。

数据包含在多个目录中，其中包含许多小文件

是否有任何经过试验和测试的方法可以非常快速地移动数据，同时仍然确保它在到达时没有损坏（如 rsync）？

Answer 1

移动如此大量数据的最快方法仍然是 Sneakernet。因此，亚马逊雪球。该设备会被运送到您所在的位置，在那里它可以通过 10 Gb 以太网连接直接从您的本地网络传输多达 80 TB 的数据。然后它会被运回亚马逊，在那里他们将数据上传到您的亚马逊账户。