齐柏林飞艇能否与火花纱簇一起运行

San*_*mar 5 hadoop-yarn apache-zeppelin

它可以与火花纱客户一起很好地运行,但是纱线簇又如何呢?如果可能的话,请分享我们如何做到这一点。

Era*_*kon 0

目前zeppelin不支持yarn cluster,仅支持yarn-client。这有什么用途?

  • 原因是,每次 zeppelin 需要重新启动时,执行器都会被杀死,因此缓存会丢失。为了避免这种行为,spark应该作为yarn-cluster运行,以便驱动程序在application master中运行。 (2认同)