如何以编程方式在 AWS SageMaker 中获得预测准确性

问题描述 投票:0回答:1

我正在通过 AWS SageMaker 构建航班延误预测。我想以编程方式获得每对机场的预测准确性。因此,对于从 伦敦 飞往 纽约 的所有航班,总预测的准确性可能与东京 -> 伦敦 的航班不同。因此,当预测从伦敦到纽约的任何航班时,我还想显示该具体航班(伦敦 -> 纽约)的预测正确的概率。整个模型的预测精度可能与具体的 Flight 不同。所以我需要每个起始点 -> 目的地对的预测准确性。 SageMaker中有什么东西可以获取这些信息,还是需要我手动编写脚本并通过历史预测来计算?

我正在阅读 SageMaker 文档,只有模型监控工具提供有关整个模型的信息以及某些条件(例如每个起点 -> 目的地)的信息。

amazon-sagemaker
1个回答
0
投票

如果没有分享所用模型类型、数据等的详细信息,这个问题还不清楚。但我会尽力用我最好的知识来回答。 SageMaker端点提供模型监控,其中“模型质量”的指标之一是准确性。因此,为了获得模型的准确性,您需要捕获 GroundTruth 和预测标签进行比较。 SageMaker 常见问题解答和文档对此进行了很好的解释此处

注意:我在 AWS 工作,但意见是我自己的。

© www.soinside.com 2019 - 2024. All rights reserved.