如何从列创建结构?

Avr*_*ian 1 scala apache-spark apache-spark-sql

所以我有一个看起来像这样的数据框:

 |-- id: string (nullable = true)
Run Code Online (Sandbox Code Playgroud)

我想实现一个看起来像:

 |-- id: string (nullable = true)
Run Code Online (Sandbox Code Playgroud)

我怎样才能做到这一点?我为第二个结构创建了案例类,但我不知道映射第一个数据框。

谢谢!

Ram*_*jan 6

使用struct功能。

import org.apache.spark.sql.functions._
val newdf = df.select(
  $"id", struct($"os_infos", $"product_infos", $"vendor_infos") as "data")
Run Code Online (Sandbox Code Playgroud)