小编Kul*_*shi的帖子

将 BigQuery 数据传输到亚马逊 s3 存储桶

我有一个存储在 Big Query 中的架构,我需要将其传输到亚马逊 s3 存储桶。过程是什么?BigQuery 数据属于愿意提供适当访问权限来传输数据的其他组织。我找到了从 s3 存储桶导入到 gcp 的方法,但没有办法直接从大查询导出到 s3..我真的陷入了这部分。另外,我需要安排此过程,因为 bigquery 中的数据正在发生变化,并且我每天都需要不断地将数据添加到我的 s3 存储桶中。请提及相关参考文献。请注意,每天的数据将以 TB 为单位

python amazon-s3 google-bigquery google-cloud-platform

3
推荐指数
1
解决办法
4589
查看次数