Ο δρόμος αποτελεί ένα εχθρικό περιβάλλον για το λογισμικό. Άλλοι οδηγοί συμπεριφέρονται απρόβλεπτα. Οι πεζοί βγαίνουν έξω χωρίς προειδοποίηση. Η βροχή, η αντανάκλαση και οι ξεθωριασμένες σημάνσεις των λωρίδων κυκλοφορίας υποβαθμίζουν την είσοδο των αισθητήρων. Τα αυτόνομα οχήματα πρέπει να τα χειρίζονται όλα σε πραγματικό χρόνο, χωρίς περιθώριο για σύγκρουση.

Η αντίληψη συνδυάζει κάμερες, ραντάρ και lidar για να δημιουργήσει ένα μοντέλο του περιβάλλοντος χώρου. Ο σχεδιασμός υπολογίζει μια ασφαλή διαδρομή. Ο έλεγχος εκτελεί το τιμόνι, την επιτάχυνση και το φρενάρισμα. Κάθε επίπεδο εξαρτάται από τα άλλα και οι βλάβες καταρρέουν γρήγορα.

Επίπεδα αυτονομίας

• Επίπεδο 0, χωρίς αυτοματοποίηση
• Επίπεδο 1, υποβοήθηση οδηγού όπως προσαρμοζόμενο cruise control
• Επίπεδο 2, μερικός αυτοματισμός με τα χέρια στο τιμόνι
• Επίπεδο 3, αυτοματοποίηση υπό όρους με εφεδρικό πρόγραμμα οδήγησης
• Επίπεδο 4, υψηλός αυτοματισμός σε καθορισμένες περιοχές
• Επίπεδο 5, πλήρης αυτοματοποίηση παντού

Η ανάπτυξη παραμένει περιορισμένη. Τα Robotaxi λειτουργούν σε επιλεγμένες πόλεις με οδηγούς ασφαλείας ή τηλεπαρακολούθηση. Η πλήρης αυτόνομη οδήγηση σε τυχαίες συνθήκες δεν είναι εμπορικά διαθέσιμη και το χρονοδιάγραμμα συνεχώς καθυστερεί.