L'exactitude masque les erreurs. Un détecteur de fraude qui ne signale rien a raison presque toujours, mais il est inutile. La précision et le rappel mettent en évidence ce compromis. La précision mesure le nombre de cas positifs prédits qui sont effectivement positifs. Le rappel, quant à lui, mesure le nombre de cas positifs réellement détectés.

Ces deux paramètres s'opposent. Relever le seuil réduit le nombre de faux positifs, mais en manque davantage, améliorant ainsi la précision au détriment du rappel. L'abaisser produit l'effet inverse. Le juste équilibre dépend de l'erreur la plus coûteuse.

Choisir entre eux

• Haute précision, lorsque les faux positifs sont coûteux
• Un taux de rappel élevé, lorsque le fait de manquer des cas positifs est dangereux
• Le score F1, quand les deux ont autant d'importance
• Courbe précision-rappel, pour la sélection du seuil

Le dépistage du cancer privilégie la mémorisation. Le filtrage des spams privilégie la précision. Aucun de ces indicateurs, pris isolément, ne permet d'appréhender la situation dans son ensemble ; c'est pourquoi ils figurent conjointement dans les rapports d'évaluation sérieux.