哪些指标用于二元预测，哪些指标用于概率？

Question

我正在构建一个 ML 模型（逻辑回归），该模型使用前一天的天气指标观测来预测天气状况。我已经获得了二进制 prediction 以及 predict_proba，现在我需要根据几个参数对其进行评估：

1. 准确率分数，
2. 杰卡德指数，
3. F1 分数，以及
4. 对数丢失。

问题是，我对其中哪些使用 Predict_proba，对哪些使用预测？

谢谢您的帮助！

我尝试了几种组合，但我不确定这些组合是否输出正确的评估，我需要在这里 100% 确定。

Answer 1

预测给出了每个样本的类别索引，因此可以使用准确度、F1 分数和杰卡德相似度。

但是，predict_proba 给出的是属于正类的概率，介于 0 和 1 之间。因此，对数损失更好。