小编Ech*_*cho的帖子

向 BiqQuery 表添加列描述?

需要为 BigQuery 表的每一列添加描述,似乎我可以手动完成,如何以编程方式完成?

google-bigquery

5
推荐指数
3
解决办法
3587
查看次数

如何向现有的bigquery表添加描述?

我正在寻找一种向现有表属性添加描述的方法,是否有任何简单的命令行命令,例如“alter table zzz add description...”?

google-bigquery

4
推荐指数
1
解决办法
4185
查看次数

Google存储api列表存储桶名称中带有"/"

我想在google storage api中列出存储桶中的所有对象(Google存储).存储桶像文件夹一样嵌套,例如"my-bucket/sub-folder".我收到以下错误:

com.google.api.client.googleapis.json.GoogleJsonResponseException: 404 Not Found
Run Code Online (Sandbox Code Playgroud)

如果我使用没有"/"的存储桶名称,它可以正常工作.如何列出像文件夹结构一样的存储桶?

google-cloud-storage

2
推荐指数
1
解决办法
1122
查看次数

谷歌云数据流从压缩数据中读取数据

我正在尝试使用谷歌云数据流从GCS读取数据并加载到BigQuery表,但GCS中的文件是压缩的(gzip),是否有任何类可用于从压缩/ gzip文件中读取数据?

谢谢!

google-cloud-dataflow

2
推荐指数
1
解决办法
338
查看次数

带有where子句的Google Bigquery表装饰器

据说桌面装饰器更具成本效益,所以我做了我的测试:

从[myDataSet.myTable@-86400000--30000]中选择计数(不同的ID)

它显示只有15.6 GB的数据将被扫描有效:此查询在运行时将处理15.6 GB.

当我添加一个where子句时,它显示它将处理双倍数据大小:

从[myDataSet.myTable@-86400000--30000]中选择计数(不同的ID),其中col ='something'有效:此查询在运行时将处理34.0 GB.***

为什么会有区别?我怎么能避免这种情况?

google-bigquery

2
推荐指数
1
解决办法
86
查看次数

使用命令行工具在项目级别获取BigQuery大小的简便方法是什么?

想找出整个项目的BigQuery储存空间,我有指令码可遍历所有表格并总结其大小,运作正常但速度较慢,有没有bq指令可以轻松做到?

google-bigquery

2
推荐指数
1
解决办法
697
查看次数

我如何知道设置了多少个VM来运行我的数据流作业?

我使用数据流服务来运行我的工作来从GCS读取数据并写入BQ表,成功运行作业,我想知道如何或在哪里可以找到谷歌为我的工作设置了多少个虚拟机?

谢谢.

google-cloud-dataflow

1
推荐指数
1
解决办法
100
查看次数