準確率掩蓋了失敗。一個幾乎每次都檢測不到任何異常的詐欺偵測器,雖然正確,卻毫無用處。精確率和召回率揭示了這種權衡。精確率衡量的是預測為正例的樣本中有多少實際上是正例。召回率衡量的是實際找到的正例樣本數。
兩者相互制約。提高門檻會減少誤報,但會漏掉更多真陽性,從而提高精確率但降低召回率。降低閾值則相反。適當的平衡點取決於哪種錯誤代價較大。
在它們之間做出選擇
- 高精度,尤其是在假陽性代價高昂的情況下。
- 高召回率,卻漏掉陽性結果,這很危險。
- F1 成績,當兩者同等重要時
- 閾值選擇的精確率-召回率曲線
癌症篩檢著重於召回率,垃圾郵件過濾著重於精確率。單獨使用任何一項指標都無法全面反映情況,因此在嚴肅的評估報告中,這兩項指標通常會同時出現。
Comments
No comments yet. Be the first to share a thought.
Leave a comment