小编VSP*_*VSP的帖子

如何从spark shell设置spark.local.dir属性?

我正在尝试spark.local.dir使用spark-shell进行设置sc.getconf.set("spark.local.dir","/temp/spark"),但它无法正常工作.有没有其他方法可以从sparkshell设置此属性.

scala apache-spark

7
推荐指数
1
解决办法
9708
查看次数

检查HDFS中的目录是否为空

HDFS中是否有任何命令来检查目录是否为空

hadoop hdfs

6
推荐指数
2
解决办法
5962
查看次数

标签 统计

apache-spark ×1

hadoop ×1

hdfs ×1

scala ×1