如何将数组列表转换为 Spark 数据帧

Question

假设我有一个列表：

x = [[1,10],[2,14],[3,17]]

我想转换x为具有两列id(1,2,3) 和value(10,14,17)的 Spark 数据帧。

我怎么能那样做？

谢谢

Answer 1

x = [[1,10],[2,14],[3,17]]
df = sc.parallelize(x).toDF(['ID','VALUE'])
df.show()