小编Pet*_*han的帖子

如何在提交后退出spark-submit

当使用spark-submit(YARN模式)提交spark spark程序时,它会保持轮询状态并永不退出

提交后退出spark-submit中是否有任何选项?

===为什么这会让我烦恼===

流程序将永远运行,我不需要状态更新

我可以按ctrl + c来停止它,如果我手动启动它但我有很多流上下文启动,我需要使用脚本启动它们

我可以把spark-submit程序放在后台,但是经过大量的后台java进程创建后,用户对应的,将无法运行任何其他java进程,因为JVM无法创建GC线程

hadoop-yarn apache-spark

15
推荐指数
2
解决办法
9913
查看次数

标签 统计

apache-spark ×1

hadoop-yarn ×1