Clasificarea etichetează o imagine întreagă. Segmentarea etichetează fiecare pixel. Sarcina împarte o imagine în regiuni, atribuind fiecărui pixel unei clase, cum ar fi drum, pieton, cer sau tumoră. Este esențială pentru imagistica medicală, conducerea autonomă și analiza satelitară.

Trei variante contează. Segmentarea semantică etichetează fiecare pixel după categorie. Segmentarea instanțelor distinge obiectele individuale dintr-o categorie. Segmentarea panoptică combină ambele, etichetând fiecare pixel și separând instanțele.

Arhitecturi comune de segmentare

• U-Net pentru imagini biomedicale
• Mască R-CNN pentru segmentarea instanțelor
• DeepLab pentru segmentare semantică
• Segmentați orice pentru măști de uz general

Adnotarea este costisitoare. Etichetarea fiecărui pixel dintr-un set de date durează mult mai mult decât desenarea unor cutii de delimitare. Supravegherea slabă și instrumentele interactive ajută, dar datele de segmentare de înaltă calitate rămân un blocaj pentru noile domenii.