有没有人能够在Dataproc的Spark 2.x上向纱线添加更多默认队列?
在集群创建时失败的尝试:
capacity-scheduler:yarn.scheduler.capacity.root.queues=alpha,beta,default
yarn:yarn.scheduler.capacity.root.queues=alpha,beta,default
此外,设置yarn.scheduler.fair.allow-undeclared-pools=true以上任一配置前缀以激活动态队列也将失败。
所有情况似乎都使守护程序失败,从而使资源管理器在启动时失效。