无法在遗留页面下的 aws 中运行 glue 0.9 和 1.0 作业-->作业

问题描述 投票:0回答:0

我们计划从 glue 0.9 迁移到 3.0,并且我们正在关注相同的 aws 文档。

https://docs.aws.amazon.com/glue/latest/dg/migrating-version-30.html

作为其中的一部分,我们尝试在 glue 0.9、1.0 和 2.0 中运行作业,在 legacy --> jobs 部分

source --> csv 加载到目标 parquet

enter image description here

作业因错误而失败:

enter image description here

检查日志和错误日志链接时,显示“指定的日志流不存在”

enter image description here

enter image description here

我们使用 Glue 1.0 版本运行时出现同样的问题(“指定的日志流不存在”)

enter image description here

然而,使用 Glue 2.0,相同的配置工作正常

enter image description here

你能告诉我如何进行吗,在所有 3 个测试中选择的区域 us-east-1(N Virginia)

创建源表和目标数据库,上传测试文件以在 glue 0.9、1.0 和 2.0 中运行作业

0.9 和 1.0 失败,而 2.0 运行良好。作为我们正在进行的迁移的一部分,这是检查版本 0.9 和 1.0 的可行性和当前状态的重要步骤。

如果其他人也面临同样的问题,请告诉我如何解决。

amazon-web-services aws-glue
© www.soinside.com 2019 - 2024. All rights reserved.