Τα εργαλεία μπορούν να «δείχνουν, να κάνουν κλικ και να πλοηγούνται» σε ό,τι εμφανίζεται στην οθόνη, ώστε να ανοίγουν αρχεία, να χρησιμοποιούν τον browser και να τρέχουν εργαλεία ανάπτυξης αυτόματα όταν χρειάζεται για την ολοκλήρωση μιας εργασίας, 

Όταν είναι εφικτό, η Anthropic αναφέρει ότι τα Claude Code και Cowork θα συνεχίσουν να δίνουν προτεραιότητα στη χρήση Connectors για άμεση πρόσβαση και έλεγχο εξωτερικών εφαρμογών ή πηγών δεδομένων. Αν όμως δεν υπάρχει διαθέσιμη τέτοια σύνδεση, τα εργαλεία μπορούν να ζητούν άδεια ώστε να κάνουν scrolling, να πατούν για άνοιγμα και να εξερευνούν «όπως απαιτείται» το ίδιο το μηχάνημα για να εκτελέσουν αυτό που ζητήθηκε.

Η εταιρεία σημειώνει επίσης ότι αυτός ο άμεσος χειρισμός του υπολογιστή μπορεί να ξεκινά και να διαχειρίζεται απομακρυσμένα μέσω του Claude Dispatch, με την προϋπόθεση ότι ο υπολογιστής στόχος παραμένει ενεργοποιημένος. Σε βίντεο της Anthropic παρουσιάζονται παραδείγματα εργασιών που μπορεί να ολοκληρώσει το Claude Code στην επιφάνεια εργασίας μέσω του Dispatch.

Η νέα λειτουργία διατίθεται σε συνδρομητές Claude Pro και Max που χρησιμοποιούν MacOS, σε αυτό που η Anthropic χαρακτηρίζει «research preview». Η εταιρεία προειδοποιεί ότι το σύστημα δεν θα λειτουργεί πάντα τέλεια και ότι για σύνθετες εργασίες μπορεί να χρειάζεται δεύτερη προσπάθεια. Παράλληλα, η ολοκλήρωση εργασιών μέσω «computer use» περιγράφεται ως πιο αργή και πιο επιρρεπής σε σφάλματα σε σύγκριση με την εκτέλεση των ίδιων εργασιών μέσω Connectors.

Η επέκταση των δυνατοτήτων σε άμεσο έλεγχο επιφάνειας εργασίας συνοδεύεται από ανησυχίες ασφάλειας, καθώς ένα εργαλείο που αναγνωρίζεται ως «ατελές» και «επιρρεπές σε λάθη» μπορεί να εξερευνά τον υπολογιστή «όπως απαιτείται». Η Anthropic αναφέρει ότι διαθέτει δικλίδες ασφαλείας για την αποτροπή συνηθισμένων κινδύνων, όπως το prompt injection, και ότι θα περιορίζει από προεπιλογή την πρόσβαση σε ορισμένες «εκτός ορίων» εφαρμογές, όπως επενδυτικές και πλατφόρμες συναλλαγών ή κρυπτονομισμάτων.

Σε σελίδα υποστήριξης, η εταιρεία αναφέρει ότι το μοντέλο έχει εκπαιδευτεί να αποφεύγει «επικίνδυνες λειτουργίες», όπως μεταφορά ή επένδυση χρημάτων, τροποποίηση αρχείων, συλλογή εικόνων προσώπων ή εισαγωγή «ευαίσθητων δεδομένων». Την ίδια στιγμή, προειδοποιεί ότι αυτές οι εκπαιδευτικές δικλίδες δεν είναι τέλειες ούτε απόλυτες και ότι το Claude μπορεί κατά καιρούς να ενεργήσει εκτός αυτών των ορίων.

Η Anthropic τονίζει ακόμη ότι, όταν ενεργοποιείται το computer use, το Claude θα μπορεί να βλέπει οτιδήποτε είναι ορατό στην οθόνη, συμπεριλαμβανομένων προσωπικών δεδομένων, ευαίσθητων εγγράφων ή ιδιωτικών πληροφοριών. Για τον λόγο αυτό, συνιστά να ξεκινήσει η χρήση με εφαρμογές που εμπιστεύονται οι χρήστες και να αποφεύγεται η εργασία με ευαίσθητα δεδομένα κατά τη φάση του research preview.

Η κίνηση έρχεται λίγες εβδομάδες μετά τη διάθεση των Personal Computer της Perplexity, My Computer της Manus και NemoClaw της Nvidia, τα οποία επιτρέπουν επίσης σε AI agents να αναλαμβάνουν άμεσο έλεγχο της επιφάνειας εργασίας. Αυτές οι εταιρικές κινήσεις ακολούθησαν τη viral διάδοση του OpenClaw νωρίτερα μέσα στη χρονιά, εξέλιξη που οδήγησε την OpenAI να προσλάβει τον δημιουργό του OpenClaw, Peter SteinBerger, για να προωθήσει την επόμενη γενιά προσωπικών agents.