小编tec*_*hie的帖子

重命名在hadoop中创建的文件-Spark

通过写入在HDFS中创建的文件具有其自己的命名约定。要将其更改为自定义名称,可以通过脚本使用hadoop fs -mv oldname newname

Spark / Hadoop中是否有其他可用选项可为创建的文件提供自定义名称。

hadoop apache-spark spark-dataframe

0
推荐指数
1
解决办法
2887
查看次数

将数据框转换为 Scala 地图

我有一个像这样的数据框,

df.show
+----+-------+
| age|   name|
+----+-------+
|  20|Michael|
|  30|   Andy|
|  19| Justin|
+----+-------+
Run Code Online (Sandbox Code Playgroud)

我需要把它放在一个像 (Michael->20,Andy->30,Justin->19)

我怎样才能做到这一点?

apache-spark

0
推荐指数
1
解决办法
6109
查看次数

标签 统计

apache-spark ×2

hadoop ×1

spark-dataframe ×1