Akurasi menyembunyikan kegagalan. Detektor penipuan yang tidak menandai apa pun hampir selalu benar, namun tidak berguna. Presisi dan recall mengungkap pertukaran tersebut. Presisi menanyakan berapa banyak prediksi positif yang sebenarnya positif. Recall menanyakan berapa banyak positif aktual yang ditemukan.
Kedua hal tersebut saling bertentangan. Menaikkan ambang batas akan mengurangi kesalahan positif palsu tetapi melewatkan lebih banyak kesalahan positif sejati, sehingga meningkatkan presisi dan menurunkan recall. Menurunkannya akan menghasilkan efek sebaliknya. Keseimbangan yang tepat bergantung pada kesalahan mana yang lebih merugikan.
Memilih di antara mereka
- Presisi tinggi, ketika kesalahan positif (false positive) itu mahal.
- Tingkat recall yang tinggi, ketika melewatkan hasil positif itu berbahaya.
- Skor F1, ketika keduanya sama pentingnya.
- Kurva presisi-recall, untuk pemilihan ambang batas.
Pemeriksaan skrining kanker lebih mengutamakan daya ingat. Penyaringan spam lebih mengutamakan ketepatan. Tak satu pun metrik tersebut yang menceritakan keseluruhan cerita, itulah sebabnya keduanya muncul bersamaan dalam laporan evaluasi yang serius.
Comments
No comments yet. Be the first to share a thought.
Leave a comment