我尝试使用 Spark-sql 但出现以下错误:
错误:加载类文件“package.class”时检测到缺少或无效的依赖项。无法访问包 org.apache.spark 中的术语注释,因为它(或其依赖项)丢失。检查您的构建定义是否缺少或冲突的依赖项。(重新运行
-Ylog-classpath以查看有问题的类路径。)如果“package.class”是针对不兼容的 org.apache.spark 版本编译的,则完全重建可能会有所帮助。警告:未找到类 org.apache.spark.annotation.InterfaceStability - 继续使用存根。错误:加载类文件“SparkSession.class”时检测到缺少或无效的依赖项。无法访问包 org.apache.spark 中的术语注释,因为它(或其依赖项)丢失。检查您的构建定义是否缺少或冲突的依赖项。(重新运行-Ylog-classpath以查看有问题的类路径。)如果“SparkSession.class”是针对不兼容的 org.apache.spark 版本进行编译的,则完全重建可能会有所帮助。
我的配置:
Spark-sql_2.11-2.1.0
注意:我使用 SparkSession。