Azure Databricks 管道:等待集群启动消息

问题描述 投票:0回答:0

我有一个笔记本作为 Azure Databricks Pipeline 的一部分运行。笔记本中的命令之一需要很长时间(大约 10 小时)——当那个长命令正在运行时,后续命令最初的状态为“命令提交到集群执行”,但在 8 小时左右后,它的状态更改为“等待集群启动”。

想知道:

  1. 如果这影响了当前正在运行的长命令,是否意味着它将被集群卡住
  2. 下一个命令启动时-是否会顺利获取集群/是否会失败
  3. 有什么办法可以避免这种情况

任何紧急帮助将不胜感激

到目前为止,我们还没有做任何修复。

azure cluster-computing azure-databricks
© www.soinside.com 2019 - 2024. All rights reserved.