当缺乏资源时，火花工作需要多长时间等待纱线资源？

Question

当Spark作业无法获得足够的资源来启动时，它就会挂起来等待。

它会等多久？如何控制挂起火花作业的超时？

谢谢

Answer 1

在YARN下，工作可以无限期地挂起，等待资源。但是，由于大型任务通常在较小的任务中被中断，因此通常不会阻止它们，除非最小的任务超过最大容器限制。