可以在 bigquery 预览我的流数据吗

Question

可以在 bigquery 预览我的流数据吗？

我正在使用 bigquery 来存储我的流数据，但这些数据将进入流缓冲区，这意味着我无法预览这些数据。在进行任何查询之前，有什么方法可以预览这些数据？

Answer 1

如果问题是成本，您可以使用表装饰器来扫描“最后 x 毫秒”，而不是进行整个表/列扫描。

例如，此查询显示最后 15 分钟的 GDELT 记录，成本为 132 MB（而不是没有@-900000-装饰器的 2.91 TB）：

SELECT *
FROM [gdelt-bq:gdeltv2.gkg@-900000-]
LIMIT 1000