Yol, yazılım için düşmanca bir ortamdır. Diğer sürücüler tahmin edilemez davranışlar sergiler. Yayalar aniden yola çıkar. Yağmur, parlama ve solmuş şerit işaretleri sensör girdilerini bozar. Otonom araçlar, tüm bunları gerçek zamanlı olarak, kaza olasılığına yer vermeden ele almak zorundadır.

Algılama, çevrenin bir modelini oluşturmak için kameraları, radarı ve lidar verilerini birleştirir. Planlama, güvenli bir yol hesaplar. Kontrol ise direksiyon, hızlanma ve frenleme işlemlerini gerçekleştirir. Her katman diğerlerine bağlıdır ve arızalar hızla zincirleme reaksiyona neden olur.

Özerklik düzeyleri

• Seviye 0, otomasyon yok
• Seviye 1, adaptif hız sabitleyici gibi sürücü destek sistemleri
• Seviye 2, kısmi otomasyon, direksiyon başında eller
• Seviye 3, yedek sürücülü koşullu otomasyon
• Seviye 4, belirli alanlarda yüksek otomasyon
• Seviye 5, her yerde tam otomasyon.

Kullanım alanı hala sınırlı. Robot taksiler, güvenlik sürücüleri veya uzaktan izleme ile belirli şehirlerde çalışıyor. Keyfi koşullarda tam otonom sürüş ticari olarak mevcut değil ve zaman çizelgesi sürekli erteleniyor.