错误:未找到:值sc

Question

我是Scala的新手,我正在尝试使用以下代码编写读取文件的代码

scala> val textFile = sc.textFile("README.md")
scala> textFile.count()

但我不断收到以下错误

error: not found: value sc

我已经尝试了一切,但似乎没有任何效果.我使用Scala版本2.10.4和Spark 1.1.0(我甚至尝试过Spark 1.2.0,但它也不起作用).我已经安装并编译但无法运行sbt/sbt assembly.是因为这个错误？

Answer 1

您应该使用 运行此代码./spark-shell。它是带有提供的 SparkContext 的 scala repl。您可以在 apache Spark 发行版的 文件夹 中找到它spark-1.4.1/bin。