Veien er et fiendtlig miljø for programvare. Andre sjåfører oppfører seg uforutsigbart. Fotgjengere går ut uten forvarsel. Regn, gjenskinn og falmede kjørefeltmarkeringer forringer sensorenes inndata. Autonome kjøretøy må håndtere alt dette i sanntid, uten rom for kollisjoner.

Persepsjon kombinerer kameraer, radar og lidar for å bygge en modell av omgivelsene. Planlegging beregner en trygg rute. Kontroll utfører styring, akselerasjon og bremsing. Hvert lag er avhengig av de andre, og feil oppstår raskt.

Nivåer av autonomi

• Nivå 0, ingen automatisering
• Nivå 1, førerassistanse som adaptiv cruisekontroll
• Nivå 2, delvis automatisering med hender på rattet
• Nivå 3, betinget automatisering med en reservedriver
• Nivå 4, høy automatisering i definerte områder
• Nivå 5, full automatisering overalt

Utplasseringen er fortsatt begrenset. Robotakser opererer i utvalgte byer med sikkerhetssjåfører eller fjernovervåking. Fullstendig selvkjøring under vilkårlige forhold er ikke kommersielt tilgjengelig, og tidslinjen fortsetter å gli.