Q B*_*Bit 9 pyspark jupyter-notebook spark-submit
我能够运行pyspark并在Jupyter笔记本上运行脚本.但是当我尝试使用spark-submit从终端运行文件时,收到此错误:
执行Jupyter命令文件路径时出错[Errno 2]没有这样的文件或目录
任何人都可以帮我解决配置错误吗？
我正在使用Python 2.7和Spark 1.6
Shu*_*rma 20
出现这些问题的原因是您已将jupyter设置为运行pyspark脚本.现在你应该取消设置PYSPARK_DRIVER_PYTHON变量命令,$ unset PYSPARK_DRIVER_PYTHON然后再次尝试spark-submit
./bin/spark-submit examples/src/main/python/streaming/network_wordcount.py localhost 9999.
| 归档时间： |
|
| 查看次数： |
2931 次 |
| 最近记录： |