我们计划从 glue 0.9 迁移到 3.0,并且我们正在关注相同的 aws 文档。
https://docs.aws.amazon.com/glue/latest/dg/migrating-version-30.html
作为其中的一部分,我们尝试在 glue 0.9、1.0 和 2.0 中运行作业,在 legacy --> jobs 部分
source --> csv 加载到目标 parquet
作业因错误而失败:
检查日志和错误日志链接时,显示“指定的日志流不存在”
我们使用 Glue 1.0 版本运行时出现同样的问题(“指定的日志流不存在”)
然而,使用 Glue 2.0,相同的配置工作正常
你能告诉我如何进行吗,在所有 3 个测试中选择的区域 us-east-1(N Virginia)
创建源表和目标数据库,上传测试文件以在 glue 0.9、1.0 和 2.0 中运行作业
0.9 和 1.0 失败,而 2.0 运行良好。作为我们正在进行的迁移的一部分,这是检查版本 0.9 和 1.0 的可行性和当前状态的重要步骤。
如果其他人也面临同样的问题,请告诉我如何解决。