我有一个P1包含 ID 字段的PCollection 。我想从 PCollection 中获取完整的 ID 列作为列表,并将此值传递给 BigQuery 查询以过滤一个 BigQuery 表。
这样做的最快和最优化的方法是什么?
我是 Dataflow 和 BigData 的新手。任何人都可以对此提供一些提示吗?
谢谢!
import sys
import os
log = os.system('cat /var/log/demesg')
Run Code Online (Sandbox Code Playgroud)
此代码通过运行shell脚本打印文件cat /var/log/dmesg.但是,它不会复制到日志中.我想在其他地方使用这些数据,或者只打印数据,如打印日志.
我该如何实现呢?
在我的数据库中,我以下列格式存储日期时间.我想在几秒钟内得到两个样本之间的差异.是否有任何简单的方法可用?
u'2013-05-20 05:09:06'
u'2013-05-20 05:10:06'
Run Code Online (Sandbox Code Playgroud)