执行 AWS 胶水作业时出现错误

问题描述 投票:0回答:1

编写 AWS 胶水作业以从 s3 获取数据并加载到 rds 中,作业失败并出现错误

错误类别:UNCCLASSIFIED_ERROR;调用 o106.getDynamicFrame 时发生错误。
com.amazon.ws.emr.hadoop.fs.shaded.com.amazonaws.SdkClientException:
无法执行 HTTP 请求:连接到 s3-bucketanme.s3.eu-west-2.amazonaws.com:443

我尝试创建各种东西,例如创建nat,任何有关此问题的帮助将不胜感激,因为我陷入了这个问题

amazon-web-services aws-glue aws-glue-connection
1个回答
0
投票

似乎是网络连接/安全问题。请务必检查以下内容:

  • 检查同一个桶是否可用
    region
  • 检查您在胶水作业中使用的角色是否有足够的权限来访问 s3 存储桶(例如[此策略][1])
  • 检查您作业的 VPC/子网配置,并确保它可以访问互联网。
  • 列出项目

P.S 这些说明太长,无法作为评论,这就是我发布作为答案的原因 [1]:https://docs.aws.amazon.com/aws-management-policy/latest/reference/AmazonS3FullAccess.html

© www.soinside.com 2019 - 2024. All rights reserved.