在 Windows 上运行 Spark Slave

Question

我已经在网络上的一台计算机上启动并在 http 192.168.1.52:4040 上运行 Spark master。当我尝试使用此主 url 和/或使用 Spark 而不是 http 连接另一台计算机上的从属设备时，从属设备将无法启动。当我在第二台计算机上访问 http 192.168.1.52:4040 时，Web UI 工作正常。

这是我正在使用的命令：

.sbin>start-slave.sh http://192.168.1.52:4040

或者

使用 Spark:// 而不是 http://

预先感谢您的任何帮助！

Answer 1

我能够启动并运行它。该文档提到了 Windows 计算机的以下内容：

要在Windows上运行Spark集群，请手动启动master和worker。

我必须跑

\spark-1.6.1-bin-hadoop2.6\bin>spark-class org.apache.spark.deploy.master.Master

和

\spark-1.6.1-bin-hadoop2.6\bin>spark-class org.apache.spark.deploy.worker.Worker spark://192.168.56.1:7077

分别运行Master和Workers。