Ram*_*ami 4 apache-spark
对不起基本问题,但我自己也想不出来.
我试图在Spark UI上找出每个工作者和驱动程序可用和使用的内存量.
是否有任何直接和简单的方法来监控这些信息？
我的目标是根据我的数据占据工人和驱动程序的数量来决定我的持久性策略.
PS我在Spark 1.6.1上使用独立模式
小智 6
我认为在Executors选项卡中,您将获得所需的信息.如果你有火花,你会在http:// localhost:4040/executors / Best中找到它!
归档时间：
9 年，11 月 前
查看次数：
4392 次
最近记录：