使用 AWS Data Pipelines 运行计划的 EMR Spark 应用程序的自定义指标

问题描述 投票:0回答:0

对于我们的项目,我们有一个在 EMR 集群上运行的 spark 应用程序——它使用 AWS Data Pipelines 按计划运行。 (即实例在应用程序/作业完成后关闭)。我目前正在寻找生成自定义指标的替代方案(即发布业务指标)

到目前为止我找到的最佳解决方案是使用 AWS Cloudwatch API 发布这些指标。

还有其他替代方法可以达到同样的效果吗?

谢谢

amazon-web-services apache-spark emr metrics amazon-cloudwatch
© www.soinside.com 2019 - 2024. All rights reserved.