Spark应用程序请求的内存比群集多,会发生什么?

时间:2019-04-15 07:14:16

标签: apache-spark spark-streaming yarn livy

如果存在一个带有说x GB内存的工作程序节点的Spark集群,并且有5个这样的工作程序节点,则在以下情况下应用将会发生什么:

1. Driver memory requested in the application is > x GB

2. Driver Memory + Executor Memory * Number of executor requested in the application is > 5x GB

此外,如果该应用程序未在Yarn处接受,livy队列会刷​​新它还是在队列中说?

0 个答案:

没有答案