如何将 .zip 文件加载到 BigQuery?

Dra*_*gon 5 google-bigquery google-cloud-platform

我们能够完全正常地加载未压缩的 CSV 文件和 gzip 文件。但是,如果我们想加载以“.zip”格式压缩的 CSV 文件 - 继续前进的最佳方法是什么?我们需要手动将 zip 转换为 gz 还是 BigQuery 添加了一些支持来处理这个问题?

谢谢

Mik*_*ant 4

BigQuery 支持加载 gzip 文件

限制是 - 如果您使用 gzip 压缩,BigQuery 无法并行读取数据。将压缩的 CSV 数据加载到 BigQuery 比加载未压缩的数据慢。

  • 请注意,gzip 与 zip 有很大不同。如果 OP 有 zip 文件启动,那么处理 gzip 的能力将无济于事。 (4认同)