小编use*_*665的帖子

在pyspark中列出DataFrame

有人可以告诉我如何将包含字符串的列表转换为 pyspark 中的数据框。我使用 python 3.6 和 spark 2.2.1。我刚刚开始学习火花环境,我的数据如下所示

my_data =[['apple','ball','ballon'],['cat','camel','james'],['none','focus','cake']]
Run Code Online (Sandbox Code Playgroud)

现在,我想创建一个数据框如下

---------------------------------
|ID | words                     |
---------------------------------
 1  | ['apple','ball','ballon'] |
 2  | ['cat','camel','james']   |
Run Code Online (Sandbox Code Playgroud)

我什至想添加与数据无关的 ID 列

pyspark pyspark-sql

3
推荐指数
1
解决办法
2万
查看次数

标签 统计

pyspark ×1

pyspark-sql ×1