Nauwkeurigheid verhult falen. Een fraudedetector die bijna altijd niets detecteert, heeft het goed, maar is nutteloos. Precisie en recall laten de afweging zien. Precisie vraagt hoeveel voorspelde positieve gevallen daadwerkelijk positief zijn. Recall vraagt hoeveel daadwerkelijk positieve gevallen zijn gevonden.
De twee factoren werken elkaar tegen. Het verhogen van de drempelwaarde leidt tot minder valse positieven, maar mist meer echte positieven, waardoor de precisie verbetert en de recall verslechtert. Het verlagen van de drempelwaarde heeft het omgekeerde effect. De juiste balans hangt af van welke fout de meeste kosten met zich meebrengt.
Kiezen tussen deze opties
- Hoge precisie, wanneer valse positieven kostbaar zijn.
- Hoge recall, wanneer het missen van positieve resultaten gevaarlijk is.
- F1-score, wanneer beide even belangrijk zijn
- Precisie-recallcurve voor drempelselectie
Kankerscreening is gericht op het oproepen van potentiële kankerpatiënten. Spamfiltering is gericht op nauwkeurigheid. Geen van beide meetmethoden op zich vertelt het hele verhaal, daarom worden ze ook samen opgenomen in serieuze evaluatierapporten.
Comments
No comments yet. Be the first to share a thought.
Leave a comment