Avr*_*ian 1 scala apache-spark apache-spark-sql
所以我有一个看起来像这样的数据框:
|-- id: string (nullable = true)
Run Code Online (Sandbox Code Playgroud)
我想实现一个看起来像:
|-- id: string (nullable = true)
Run Code Online (Sandbox Code Playgroud)
我怎样才能做到这一点?我为第二个结构创建了案例类,但我不知道映射第一个数据框。
谢谢!
使用struct功能。
import org.apache.spark.sql.functions._
val newdf = df.select(
$"id", struct($"os_infos", $"product_infos", $"vendor_infos") as "data")
Run Code Online (Sandbox Code Playgroud)
| 归档时间: |
|
| 查看次数: |
2631 次 |
| 最近记录: |