小编Sre*_*h V的帖子

如何在pyspark中将具有空值的数据框写入CSV

我正在使用下面的代码写入CSV文件。

df.coalesce(1).write.format("com.databricks.spark.csv").option("header", "true").option("nullValue"," ").save("/home/user/test_table/")
Run Code Online (Sandbox Code Playgroud)

当我执行它时,出现以下错误:

java.lang.UnsupportedOperationException:CSV数据源不支持null数据类型。

谁能帮忙吗?

python apache-spark pyspark

6
推荐指数
1
解决办法
1937
查看次数

标签 统计

apache-spark ×1

pyspark ×1

python ×1