小编kru*_*z14的帖子

写入Apache Spark中的文件

我正在写一个Scala代码,要求我写入HDFS中的文件.当我Filewriter.write在本地使用时,它的工作原理.同样的事情不适用于HDFS.经检查,我发现有下列选项中的Apache火花写 RDD.saveAsTextFile和DataFrame.write.format.

我的问题是:如果我只想在Apache Spark中为文件写一个int或字符串怎么办?

跟进:我需要在输出文件中写入一个标题,DataFrame内容然后追加一些字符串.有sc.parallelize(Seq(<String>))帮助吗?

hadoop scala filewriter apache-spark

7
推荐指数
2
解决办法
4万
查看次数

标签 统计

apache-spark ×1

filewriter ×1

hadoop ×1

scala ×1