小编dne*_*nej的帖子

如何使用 spark/scala 解析 YAML

我有包含以下详细信息的 yaml 文件。文件名:config.yml

- firstName: "James"
  lastName: "Bond"
  age: 30

- firstName: "Super"
  lastName: "Man"
  age: 25
Run Code Online (Sandbox Code Playgroud)

由此,我需要使用 spark 和 scala 来获取 spark 数据帧

+---+---------+--------+
|age|firstName|lastName|
+---+---------+--------+
|30 |James    |Bond    |
|25 |Super    |Man     |
+---+---------+--------+
Run Code Online (Sandbox Code Playgroud)

我曾尝试转换为 json,然后转换为数据帧,但我无法在数据集序列中指定它。

yaml scala dataframe apache-spark

2
推荐指数
1
解决办法
3152
查看次数

标签 统计

apache-spark ×1

dataframe ×1

scala ×1

yaml ×1