无法通过Jupyter导入sqlContext.implicits._而不会出错

Question

当我尝试使用import sqlContext.implicits._我的Jupyter笔记本时,我收到以下错误:

Name: Compile Error
Message: <console>:25: error: stable identifier required, but $iwC.this.$VAL10.sqlContext.implicits found.
       import sqlContext.implicits._
                         ^

我在本地尝试了它并且它可以工作,但是在我的Jupyter Notebook服务器(托管在ec2上)上使用它时,它没有正常工作.我尝试导入涉及它的不同库,但遗憾的是无法使其运行.

Answer 1

你需要像这样实例化一个sqlContext:

val sqlC = new org.apache.spark.sql.SQLContext(sc)
import sqlC.implicits._

你应该看到这个错误:

需要稳定的标识符