我有数据帧,我想保存在hdfs位置的单个文件中.
我在这里找到了解决方案使用spark-csv编写单个CSV文件
df.coalesce(1)
.write.format("com.databricks.spark.csv")
.option("header", "true")
.save("mydata.csv")
但是所有数据都将写入mydata.csv/part-00000,我想成为mydata.csv文件.
那可能吗？
任何帮助欣赏