大查询作业在执行期间遇到错误

Question

我在BigQuery中有这个查询，我在过去几个月里每天都在更新。这很好 - 有些偶然的错误，但重试已经解决了这个问题。

最后几天打赌我收到错误：作业在执行过程中遇到错误。重试工作可能会解决问题。

错误描述说这是一个外部错误，所以我该如何解决？

我一直在重试（中间有相当长的暂停），但我仍然得到错误。 JobID示例：bquxjob_152ced5d_169917f0145

有谁知道发生了什么事？我可能遇到任何数据/时间限制（但为什么只是最后几天）？

Answer 1

您可以使用CGP stackdriver来监视您的BigQuery进程使用此URL

您可以找到的有趣信息是queryTime热图和插槽使用，这可能有助于您更好地了解您的问题

关于外部表使用的主题，您可以使用Google transfer（有关详细信息，请参阅此link）来安排从CSV到BigQuery表的重复传输。下面的图像显示了如何从webUI进入传输设置页面