如何为 Google 数据流作业设置自定义作业 ID

Question

我想为我运行的每个 google 数据流作业自定义作业名称和作业 ID。我要为作业创建一个自定义的作业名称。

但我无法设置自定义作业 ID。

我找到了一个com.google.cloud.dataflow.sdk.options.DataflowWorkerHarnessOptions接口，它有一个方法 setJobId(String value)。但是我无法使用它来创建自定义的作业 ID。

有没有办法创建自定义的作业 ID？

Answer 1

JobId 是 Dataflow 服务的作业标识符，必须是全局唯一的，因此该服务不允许用户选择一个。