如何将多个文件(相同的模式)加载到BigQuery中的表中？

Question

我有一个csv文件的文件夹,其中包含我想要加载到bigquery表中的相同模式.

是否有选项可以将文件夹路径作为BQ命令的输入加载到bigquery表中？我很想知道是否可以在不迭代文件或在源处合并输入文件的情况下完成.

Answer 1

如果使用云存储是一个选项,您可以将它们全部放在存储桶中的公共前缀中并使用通配符,例如gs://my_bucket/some/path/files*,快速指定具有多个输入的单个装入作业.

Answer 2

注意

您只能对存储桶中的对象（文件名）使用一个通配符。通配符可以出现在对象名称内部或对象名称末尾。不支持将通配符附加到存储桶名称。

所以gs://my_bucket/some/*/files*不支持类似的东西。