小编Nit*_*oel的帖子

Mesos上的Spark框架

我对Mesos-spark的问题很少:

  1. 当我在Mesos上使用不同的spark上下文提交spark作业时,它是否会调用不同的mesos-spark框架实例或使用相同的内容.
  2. 如何确保每次创建不同的spark框架.
  3. 我是否可以指定约束来为特定的spark上下文或框架实例保留/预分配mesos-slave.据我所知,它稍微违背了Mesos的目的,Mesos可以保证粗粒度模式下的内存和CPU.但出于某种原因,我不希望在不同的火花作业(用于不同的用户)之间共享运行任务(从属)的物理机器

mesos apache-spark mesosphere

3
推荐指数
1
解决办法
1094
查看次数

标签 统计

apache-spark ×1

mesos ×1

mesosphere ×1