写入分区文件时触发lambda函数

Question

我正在尝试在Glue作业完成对文件的分区并将其写入S3时触发lambda函数。我的胶水工作是这样的：

df.repartition(10).write.format("csv").option("sep",",").option("header", "true").option("mode","Overwrite").save("s3://Bucket/a/b/c")

我创建了一个具有以下参数的触发器：

我以run为前缀，因为我的胶水作业会生成以run-开头的所有部分。

我现在怀疑，当胶水作业完成时，我的Lambda函数根本没有启动。 （我希望Lambda为所有文件分区运行。

我到底可以在哪里看到Lambda的历史？我显然是AWS的新手。

谢谢

我正在尝试在Glue作业完成对文件的分区并将其写入S3时触发lambda函数。我的胶水工作是这样做的：df.repartition（10）.write.format（“ csv”）。option（“ sep”，“，”）。option（“ ...

Answer 1

如John Rotenstein所说，日志和执行历史记录可在lambda函数页面的“监视”选项卡中找到。