使用boto3从S3运行Python脚本后创建EMR集群并终止

问题描述 投票:0回答:1

是否可以使用boto3创建一个emr集群并在s3中读取python脚本然后终止。我知道这可以通过创建集群然后在引导期间手动将脚本从s3复制到主服务器来完成,但是想知道是否有一种方法可以采用不同的方式来执行,而不会涉及复制文件。换句话说,创建一个集群并添加一个直接从s3读取的步骤。

python amazon-web-services boto emr boto3
1个回答
0
投票

使用boto3,您可以使用编程方式向EMR集群添加步骤

add_job_flow_steps

http://boto3.readthedocs.org/en/latest/reference/services/emr.html#EMR.Client.add_job_flow_steps

© www.soinside.com 2019 - 2024. All rights reserved.