小编Nit*_*ish的帖子

查找 pyspark Dataframe 中缺失值的列名称

我有一个数据框 -

+---+--------+------+-----+-------+
| id|    name|  city|state|country|
+---+--------+------+-----+-------+
|  1|abhishek|  pune| null|   null|
|  2| devansh|  pune|   mh|  india|
|  3| urvashi|bglore|   ka|   null|
+---+--------+------+-----+-------+
Run Code Online (Sandbox Code Playgroud)

我想要一个新列“审计”,其中包含每行都有空值的列列表,因此审计列中的第一行将有[州,国家/地区],第二行为空,第三行为[国家/地区]

我认为我们可以在这里使用 isNull 函数,但我不确定如何获取列名列表。

bigdata dataframe apache-spark pyspark

2
推荐指数
1
解决办法
335
查看次数

标签 统计

apache-spark ×1

bigdata ×1

dataframe ×1

pyspark ×1