小编Tus*_*n93的帖子

Databricks集群完成后获取Executor日志

我正在 databricks 集群上运行作业。当集群运行时,我可以通过转到 Spark Cluster UI Master 下拉列表、选择一个工作线程并浏览 stderr 日志来找到执行程序日志。但是,一旦作业完成并且集群终止,我将无法看到这些日志。我到达屏幕下方

完成后的databricks集群

我无法访问 Spark UI(最后一个选项卡)。有什么方法可以在集群终止后获取执行程序日志,就像我们可以下载驱动程序日志一样?

log4j apache-spark databricks

5
推荐指数
1
解决办法
3939
查看次数

标签 统计

apache-spark ×1

databricks ×1

log4j ×1