Veiledet læring trenger svar. En etikett er målverdien knyttet til et treningseksempel, det modellen skal forutsi. Et bilde av en katt merket katt. En lånesøknad merket misligholdt eller tilbakebetalt. En setning merket positiv eller negativ.
Etikettkvalitet bestemmer modellkvaliteten. Støyende etiketter lærer modellen å reprodusere feil. Tvetydige etiketter forvirrer beslutningsgrensen. Manglende etiketter etterlater hull i dekningen. Utøvere bruker mye mer tid på merking enn utenforstående forventer.
Vanlige merkingsmetoder
- Menneskelig annotering av trente arbeidere
- Crowdsourcing med kvalitetskontroller
- Automatisk merking fra heuristikker
- Svagt tilsyn fra flere kilder
- Aktiv læring for å prioritere usikre saker
Noen oppgaver krever eksperter innen merking. Medisinsk avbildning, juridiske dokumenter og vitenskapelige data krever alle domenekunnskap som det vanlige publikum ikke kan tilby. Kostnaden for ekspertmerking dominerer ofte budsjettet til et nytt prosjekt.
Comments
No comments yet. Be the first to share a thought.
Leave a comment