Az osztályozás egy teljes képet címkéz. A szegmentálás minden egyes pixelt címkéz. A feladat a képet régiókra osztja, és minden pixelt egy osztályhoz rendel, például úthoz, gyalogoshoz, égbolthoz vagy daganathoz. Ez elengedhetetlen az orvosi képalkotáshoz, az önvezető autókhoz és a műholdas elemzéshez.

Három változat számít. A szemantikai szegmentálás minden pixelt kategóriák szerint címkéz. A példány szegmentálás megkülönbözteti az egyes objektumokat egy kategórián belül. A panoptikus szegmentálás mindkettőt kombinálja, minden pixelt címkéz és a példányokat elválasztja.

Gyakori szegmentációs architektúrák

• U-Net orvosbiológiai képekhez
• R-CNN maszkolása például szegmentáláshoz
• DeepLab a szemantikus szegmentáláshoz
• Általános célú maszkokhoz bármit szegmentáljon

Az annotáció költséges. Egy adathalmaz minden egyes pixelének címkézése sokkal tovább tart, mint a határoló dobozok megrajzolása. A gyenge felügyelet és az interaktív eszközök segítenek, de a kiváló minőségű szegmentációs adatok továbbra is szűk keresztmetszetet jelentenek az új területek számára.