小编dee*_*ent的帖子

Dataproc(Spark v2)中的纱线队列示例

有没有人能够在Dataproc的Spark 2.x上向纱线添加更多默认队列?

在集群创建时失败的尝试:

capacity-scheduler:yarn.scheduler.capacity.root.queues=alpha,beta,default yarn:yarn.scheduler.capacity.root.queues=alpha,beta,default

此外,设置yarn.scheduler.fair.allow-undeclared-pools=true以上任一配置前缀以激活动态队列也将失败。

所有情况似乎都使守护程序失败,从而使资源管理器在启动时失效。

hadoop-yarn apache-spark google-cloud-dataproc

1
推荐指数
1
解决办法
272
查看次数