pyspark 中的 to_json 排除空值，但我需要将空值作为空白

Question

我正在使用 pyspark 中的 to_json 将 dataframe 中的结构列转换为 json 列，但少数结构字段中的空值在 json 中被忽略，我不希望忽略空值。

Answer 1

在阅读 的官方文档时to_json，它说：

options dict，
控制转换的可选选项。接受与 JSON 数据源相同的选项。请参阅您使用的版本的数据源选项。此外，该函数支持 Pretty 选项，可以生成漂亮的 JSON。

在链接之后，ignoreNullFields您可以尝试设置一个选项False：

pyspark.sql.functions.to_json(col, options={"ignoreNullFields":False})

测试站在你这边，因为你没有提供任何最小的、可重复的示例。