我正在尝试使用 bigquery 导出功能将数据以 json 格式推送到 GCS。在该过程结束时,为了验证 GCS 文件中导出的记录计数,我创建了一个具有自动模式检测功能的外部表,只是为了获取导出的 GCS 文件中的记录计数。
这适用于单个导出的文件。但对于大小大于 1GB 的表,我使用通配符来拆分为多个文件。这会产生多个文件,并创建一些空文件。
空文件在查询外部表时导致错误:“400 架构没有字段”。
请向以下人员提出任何想法:
json export external-tables google-bigquery
export ×1
external-tables ×1
google-bigquery ×1
json ×1