监控Spark执行和存储内存利用率

时间:2018-02-07 17:46:36

标签: apache-spark memory memory-management out-of-memory heap-memory

我知道有几种方法可以监控Spark应用程序的存储内存利用率,但是有人知道监视执行内存利用率的方法。我也在寻找一种监视“用户存储器”的方法,即不用于执行的存储器,也不存储存储器。请参阅Spark关于内存管理的文档https://spark.apache.org/docs/latest/tuning.html未分配给M或spark.memory.fraction的内存。

0 个答案:

没有答案