使用Python SDK创建Cloud Dataflow模板的步骤

Question

我使用Apache Beam SDK在Python中创建了Pipeline,并且Dataflow作业在命令行中运行良好.

现在,我想从UI运行这些工作.为此,我必须为我的工作创建模板文件.我找到了使用maven在Java中创建模板的步骤.

但是我如何使用Python SDK呢？

Answer 1

自 2017 年 4 月起，可以在 Dataflow Python SDK 中创建模板。以下是文档。

要运行模板，不需要 SDK（这是模板尝试解决的主要问题），因此您可以从 UI、REST API 或 CL 运行它们，以下是如何运行它们。