我在纱线上运行火花。我不明白以下设置spark.yarn.executor.memoryOverhead和spark.memory.offHeap.size. 两者似乎都是分配堆外内存以触发执行程序的设置。我应该使用哪一种?另外,执行程序堆外内存的推荐设置是什么?
spark.yarn.executor.memoryOverhead
spark.memory.offHeap.size
非常感谢!
hadoop-yarn apache-spark
apache-spark ×1
hadoop-yarn ×1