目前使用 Python = 3.5 和 Spark = 2.4 版本。
我试图PySpark
在一Windows
台机器上的 Linux 上下文 (git bash) 中运行,我得到以下信息:
set PYSPARK_SUBMIT_ARGS="--name" "PySparkShell" "pyspark-shell" && python3
Run Code Online (Sandbox Code Playgroud)
有谁知道我应该在哪里设置这些变量?我在谷歌上找不到任何对我有用的东西。
spark-shell
与Scala
作品,所以我猜是与Python
配置有关的东西。