小编tak*_*tak的帖子

Dataproc 集群无法初始化

使用标准 dataproc 映像 1.5(Debian 10、Hadoop 2.10、Spark 2.4),无法创建 dataproc 集群。区域设置为europe-west-2

堆栈驱动程序日志说:

"Failed to initialize node <name of cluster>-m: Component hdfs failed to activate See output in: gs://.../dataproc-startup-script_output"
Run Code Online (Sandbox Code Playgroud)

扫描输出 (gs://.../dataproc-startup-script_output),我可以看到 hdfs 激活失败:

Aug 18 13:21:59 activate-component-hdfs[2799]: + exit_code=1
Aug 18 13:21:59 activate-component-hdfs[2799]: + [[ 1 -ne 0 ]]
Aug 18 13:21:59 activate-component-hdfs[2799]: + echo 1
Aug 18 13:21:59 activate-component-hdfs[2799]: + log_and_fail hdfs 'Component hdfs failed to activate' 1
Aug 18 13:21:59 activate-component-hdfs[2799]: + local component=hdfs
Aug 18 13:21:59 activate-component-hdfs[2799]: + …
Run Code Online (Sandbox Code Playgroud)

google-cloud-platform google-cloud-dataproc

5
推荐指数
1
解决办法
819
查看次数