准确率掩盖了失败。一个几乎每次都检测不到任何异常的欺诈检测器,虽然正确,却毫无用处。精确率和召回率揭示了这种权衡。精确率衡量的是预测为正例的样本中有多少实际上是正例。召回率衡量的是实际找到的正例样本数量。
两者相互制约。提高阈值会减少误报,但会漏掉更多真阳性,从而提高精确率但降低召回率。降低阈值则相反。合适的平衡点取决于哪种错误代价更大。
在它们之间做出选择
- 高精度,尤其是在假阳性代价高昂的情况下。
- 高召回率,却漏掉阳性结果,这很危险。
- F1 成绩,当两者同等重要时
- 用于阈值选择的精确率-召回率曲线
癌症筛查侧重于召回率,垃圾邮件过滤侧重于精确率。单独使用任何一项指标都无法全面反映情况,因此在严肃的评估报告中,这两项指标通常会同时出现。
Comments
No comments yet. Be the first to share a thought.
Leave a comment