无法连接到EMR上的Spark UI

Ror*_*rne 5 ssh hadoop amazon-ec2 amazon-emr apache-spark

我已经按照使用EMR控制台上的说明设置了SSH隧道ssh -i ~/SparkTest.pem -ND 8157 hadoop@ec2-52-1-245-67.compute-1.amazonaws.com。我还按照说明设置了FoxyProxy。

我可以在上访问Hadoop ResourceManager http://master-public-dns-name:8088/,并且可以看到我的应用程序正在运行。

单击任何应用程序的主URL或任何节点HTTP URL都将导致“问题加载页面”,其中SSH隧道提供以下输出channel 2: open failed: connect failed: Connection refused

我应该改用YARN ResourceManager吗?在哪里可以找到该网址?设置代理和SSH隧道时,是否有某种配置步骤会以某种方式错过?

干杯。

Sah*_*pal 0

为了进行 SSH 并获取 Spark UI。尝试这个

ssh -i ~/SparkTest.pem -D 8157 hadoop@ec2-52-1-245-67.compute-1.amazonaws.com
Run Code Online (Sandbox Code Playgroud)

这对我有用