Τα ρομπότ αντιλαμβάνονται, σχεδιάζουν και ενεργούν. Ο τομέας αυτός συνδυάζει τον μηχανολογικό σχεδιασμό, τη θεωρία ελέγχου, την αντίληψη και ολοένα και περισσότερο τη μηχανική μάθηση. Τα βιομηχανικά όπλα, τα οχήματα αποθήκης, τα χειρουργικά συστήματα και τα drones εμπίπτουν όλα στην ίδια κατηγορία.

Η αντίληψη μετατρέπει τα δεδομένα αισθητήρων σε ένα μοντέλο του κόσμου. Ο σχεδιασμός υπολογίζει μια διαδρομή ή μια ακολουθία ενεργειών. Ο έλεγχος εκτελεί αυτές τις ενέργειες με ανατροφοδότηση. Κάθε επίπεδο έχει τους δικούς του τρόπους αποτυχίας και η ενσωμάτωση είναι συχνά το πιο δύσκολο κομμάτι.

Κοινοί τομείς ρομποτικής

• Βιομηχανική χειραγώγηση
• Κινητά ρομπότ και πλοήγηση
• Ανθρωποειδή και ρομπότ με πόδια
• Ιατρική και χειρουργική ρομποτική
• Γεωργικά και χωραφικά ρομπότ
• Ρομποτική σμήνους

Τα περιβάλλοντα του πραγματικού κόσμου είναι ακατάστατα. Ο φωτισμός αλλάζει, τα αντικείμενα κινούνται και οι άνθρωποι συμπεριφέρονται απρόβλεπτα. Ένα ρομπότ που εργάζεται σε εργαστήριο μπορεί να παρουσιάσει βλάβη σε μια αποθήκη, γι' αυτό και η ανάπτυξη παραμένει πιο αργή από ό,τι υποδηλώνουν οι επιδείξεις.