我可以将pandas dataframe转换为spark rdd吗?

Ram*_*nan 3 pyspark

PBM:

a)将本地文件读入Panda数据帧说PD_DF b)操纵/标记PD_DF并向数据帧添加列c)需要使用spark将PD_DF写入HDFS.我该怎么做 ?

tri*_*ta2 8

您可以使用该SQLContext对象来调用该createDataFrame方法,该方法接受一个data可选择为Pandas DataFrame对象的输入.