从Linux上载10,000,000个文件到Azure blob存储

use*_*208 7 azure azure-storage

我有一些S3的经验,过去曾经在s3-parallel-put那里放了很多(数百万)个小文件.与Azure相比,S3的PUT价格昂贵,所以我想切换到Azure.

但是,我似乎无法弄清楚如何使用本地目录同步到远程容器azure cli.特别是,我有以下问题:

1- aws客户提供sync选项.有这样的选择azure吗?

2-我可以同时使用多个文件上传到Azure存储cli吗?我注意到有-concurrenttaskcount一面旗帜azure storage blob upload,所以我认为原则上它必须是可能的.

sle*_*pox 0

https://github.com/Azure/azure-sdk-tools-xplat是 azure-cli 的来源,因此可以在那里找到更多详细信息。您可能想向存储库提出问题:)

  1. 到目前为止,azure-cli 不支持“同步”。
  2. -concurrenttaskcount是支持单个文件内并行上传,这样会提高很多上传速度,但是目前还不支持多个文件。