小编mha*_*ham的帖子

Spark SQL 错误

我尝试使用 Spark-sql 但出现以下错误:

错误:加载类文件“package.class”时检测到缺少或无效的依赖项。无法访问包 org.apache.spark 中的术语注释,因为它(或其依赖项)丢失。检查您的构建定义是否缺少或冲突的依赖项。(重新运行-Ylog-classpath以查看有问题的类路径。)如果“package.class”是针对不兼容的 org.apache.spark 版本编译的,则完全重建可能会有所帮助。警告:未找到类 org.apache.spark.annotation.InterfaceStability - 继续使用存根。错误:加载类文件“SparkSession.class”时检测到缺少或无效的依赖项。无法访问包 org.apache.spark 中的术语注释,因为它(或其依赖项)丢失。检查您的构建定义是否缺少或冲突的依赖项。(重新运行-Ylog-classpath以查看有问题的类路径。)如果“SparkSession.class”是针对不兼容的 org.apache.spark 版本进行编译的,则完全重建可能会有所帮助。

我的配置:

  • 斯卡拉 2.11.8
  • Spark-core_2.11-2.1.0
  • Spark-sql_2.11-2.1.0

  • 注意:我使用 SparkSession。

apache-spark apache-spark-sql

2
推荐指数
1
解决办法
8052
查看次数

标签 统计

apache-spark ×1

apache-spark-sql ×1