小编use*_*081的帖子

使用spark-submit向EC2集群提交申请

我是Spark的新手,我正试图在EC2上运行它.我通过使用spark-ec2启动Spark集群来关注spark网页上的教程.然后,我尝试使用spark-submit将应用程序提交到群集.该命令如下所示:

./bin/spark-submit --class org.apache.spark.examples.SparkPi --master spark://ec2-54-88-9-74.compute-1.amazonaws.com:7077 --executor-memory 2G --total-executor-cores 1 ./examples/target/scala-2.10/spark-examples_2.10-1.0.0.jar 100

但是,我收到以下错误:

ERROR SparkDeploySchedulerBackend: Application has been killed. Reason: All masters are unresponsive! Giving up.

请让我知道如何解决它.谢谢.

amazon-ec2 apache-spark

8
推荐指数
2
解决办法
3606
查看次数

标签 统计

amazon-ec2 ×1

apache-spark ×1