添加的影响是什么:spark.yarn.submit.waitAppCompletion = false

问题描述 投票:0回答:1

[这里,我试图了解在提交Spark步骤时添加:spark.yarn.submit.waitAppCompletion = false配置的影响。据我所知,如果将其设置为true,则客户端进程将保持活动状态,报告应用程序的状态。否则,客户端进程将在提交后退出。

当集群的KeepJobFlowAliveWhenNoSteps = False且细分的步骤具有spark.yarn.submit.waitAppCompletion = false时,会发生什么。财产?当工作尚未完成时,该步骤会被杀死吗?其余所有其他步骤都已完成执行?

[这里,我试图了解在提交Spark步骤时添加:spark.yarn.submit.waitAppCompletion = false配置的影响。据我所知,如果将其设置为true,则...

apache-spark amazon-emr
1个回答
0
投票
© www.soinside.com 2019 - 2024. All rights reserved.