Точность скрывает недостатки. Детектор мошенничества, который ничего не обнаруживает, почти всегда оказывается прав, но при этом бесполезен. Точность и полнота показывают компромисс между этими показателями. Точность определяет, сколько прогнозируемых положительных результатов действительно оказались положительными. Полнота определяет, сколько фактически обнаруженных положительных результатов было найдено.
Эти два фактора противоречат друг другу. Повышение порогового значения выявляет меньше ложных срабатываний, но пропускает больше истинных срабатываний, повышая точность и снижая полноту. Снижение порогового значения приводит к обратному результату. Правильный баланс зависит от того, какая из ошибок обходится дороже.
Выбор между ними
- Высокая точность в условиях, когда ложные срабатывания обходятся дорого.
- Высокая степень запоминания, когда упущение положительных моментов опасно.
- Показатель F1, когда оба параметра имеют одинаковое значение.
- Кривая точности-полноты для выбора порогового значения.
При скрининге рака предпочтение отдается точности выявления случаев заболевания. При фильтрации спама предпочтение отдается точности. Ни один из этих показателей сам по себе не отражает всей картины, поэтому в серьезных отчетах об оценке они фигурируют вместе.
Comments
No comments yet. Be the first to share a thought.
Leave a comment