Silnice je pro software nehostinným prostředím. Ostatní řidiči se chovají nepředvídatelně. Chodci vystupují z vozovky bez varování. Déšť, oslnění a vybledlé vodorovné dopravní značení zhoršují výkon senzorů. Autonomní vozidla musí vše zvládat v reálném čase, bez prostoru pro nehodu.

Vnímání kombinuje kamery, radar a lidar k vytvoření modelu okolí. Plánování vypočítává bezpečnou cestu. Řízení provádí řízení, zrychlování a brzdění. Každá vrstva závisí na ostatních a selhání se rychle hromadí.

Úrovně autonomie

• Úroveň 0, žádná automatizace
• Úroveň 1, asistenční systémy pro řidiče, jako je adaptivní tempomat
• Úroveň 2, částečná automatizace s rukama na volantu
• Úroveň 3, podmíněná automatizace s záložním ovladačem
• Úroveň 4, vysoká automatizace v definovaných oblastech
• Úroveň 5, plná automatizace všude

Nasazení zůstává omezené. Robotaxíky fungují ve vybraných městech s bezpečnostními řidiči nebo vzdáleným monitorováním. Plně autonomní řízení za libovolných podmínek není komerčně dostupné a časový harmonogram se neustále posouvá.