是否有比gsutil rsync更便宜的选项来备份到云存储？

Question

我们目前正在利用新的冷线存储来备份现场文件,存储部分超级划算.我们每天使用gsutil rsync确保我们的冷线存储是最新的.

问题是使用gsutil rsync会产生大量的A类请求,这些请求非常昂贵.在这种情况下,它至少是冷线存储量的5倍,使其不再是一个好的交易.

我们是否必须自定义代码以避免这些费用的自定义解决方案,这种类型的支持是否有更好的选择,或者是否有某种方式让rsync不生成这么多请求？

Answer 1

我认为如果费用来自运营，您可以使用一种定价技巧storage.objects.list。从GCS 操作定价页面：“当操作应用于某个存储桶时，例如列出存储桶中的对象，为该存储桶设置的默认存储类决定了操作成本。所以技巧是：

• 将存储桶的默认存储类别设置为 STANDARD
• 上传时，将对象的存储类别设置为 ARCHIVE（使用gsutil cp -s ARCHIVE，或使用 API 在上传请求上设置适当的选项）。

据我了解：这现在意味着您将按标准费率列出存储桶（$0.005/10k 操作而不是 $0.050/10k 操作）。

一个挑战是gsutil rsync不支持-s ARCHIVE所支持的标志gsutil cp，因此您将无法使用它。您可能想查看其他工具，例如rclone。