小编VE8*_*E88的帖子

Spark 中是否有类似 Glue“书签”功能的功能可以在工作级别进行跟踪?

我想看看 Spark 中是否有类似 AWS Glue“书签”的东西。我知道 Spark 中有一个检查点,它适用于单个数据源。在 Glue 中,我们可以使用书签来使用单个书签来跟踪作业中涉及的不同表中的所有文件。

apache-spark spark-streaming pyspark aws-glue incremental-load

6
推荐指数
1
解决办法
909
查看次数