Độ chính xác che giấu sai sót. Một công cụ phát hiện gian lận không báo cáo bất cứ điều gì hầu như luôn đúng, nhưng lại vô dụng. Độ chính xác (precision) và độ thu hồi (recall) cho thấy sự đánh đổi. Độ chính xác hỏi có bao nhiêu trường hợp được dự đoán là dương tính thực sự là dương tính. Độ thu hồi hỏi có bao nhiêu trường hợp thực sự dương tính đã được tìm thấy.
Hai yếu tố này mâu thuẫn nhau. Nâng ngưỡng sẽ giảm số lượng kết quả dương tính giả nhưng lại bỏ sót nhiều kết quả dương tính thật hơn, giúp cải thiện độ chính xác nhưng làm giảm khả năng thu hồi. Hạ ngưỡng thì ngược lại. Sự cân bằng phù hợp phụ thuộc vào việc lỗi nào gây thiệt hại nhiều hơn.
Lựa chọn giữa chúng
- Độ chính xác cao, khi tỷ lệ dương tính giả cao.
- Khả năng nhớ lại cao, khi bỏ sót các kết quả dương tính là điều nguy hiểm.
- Điểm F1, khi cả hai đều quan trọng như nhau
- Đường cong độ chính xác-độ thu hồi, để lựa chọn ngưỡng
Sàng lọc ung thư ưu tiên khả năng nhớ lại. Lọc thư rác ưu tiên độ chính xác. Không một chỉ số nào có thể phản ánh toàn bộ bức tranh, đó là lý do tại sao cả hai thường xuất hiện cùng nhau trong các báo cáo đánh giá nghiêm túc.
Comments
No comments yet. Be the first to share a thought.
Leave a comment