小编FRI*_*IET的帖子

如何在不使用 Pyspark 的情况下在 Python 中写入增量表/增量格式?

我正在寻找一种在 python 中写回增量表而不使用 pyspark 的方法。我知道有一个名为 deltalake/ delta-lake-reader 的库,可用于读取 delta 表并将其转换为 pandas 数据帧。

目标是写回打开的增量表

输入代码如下所示:

from deltalake import DeltaTable
dt = DeltaTable('path/file')
df = dt.to_pandas()
Run Code Online (Sandbox Code Playgroud)

那么有没有办法让这样的东西从 pandas 数据帧写回增量表:

df = pandadf.to_delta()
DeltaTable.write(df, 'path/file')
Run Code Online (Sandbox Code Playgroud)

谢谢您的帮助!

python dataframe pandas delta-lake

13
推荐指数
1
解决办法
1万
查看次数

标签 统计

dataframe ×1

delta-lake ×1

pandas ×1

python ×1