L'utilisation de l'ordinateur dans Claude fonctionne exactement comme l'utilisation d'outils standard - elle est construite sur les mêmes bases que vous connaissez déjà. La différence clé est qu'au lieu d'appeler une API météo ou une fonction de base de données, Claude effectue des requêtes pour contrôler une interface informatique.
Rappel sur l'utilisation d'outils
Avant de plonger dans l'utilisation de l'ordinateur, passons rapidement en revue le fonctionnement de l'utilisation d'outils standard. Lorsque vous souhaitez que Claude utilise un outil, vous envoyez une requête qui inclut à la fois un message utilisateur et un schéma d'outil. Le schéma d'outil décrit la fonctionnalité supplémentaire que vous souhaitez exposer à Claude.
Voici le flux typique :
- Vous envoyez à Claude une question ainsi que les schémas d'outils disponibles
- Claude analyse la requête et décide qu'il doit utiliser un outil
- Claude répond avec une requête d'utilisation d'outil contenant le nom de l'outil et les entrées requises
- Votre serveur exécute la fonction de l'outil et renvoie le résultat
- Vous renvoyez le résultat de l'outil à Claude
Par exemple, si vous posez une question sur la météo à San Francisco, Claude pourrait appeler une fonction get_weather avec le paramètre de localisation, votre serveur récupère les données météorologiques, et vous renvoyez le résultat à Claude.
Utilisation de l'ordinateur : même flux, outil différent
L'utilisation de l'ordinateur suit exactement le même schéma. La différence réside dans ce que l'« outil » fait réellement - au lieu de récupérer des données météorologiques, il simule des interactions informatiques comme des clics de souris et des saisies au clavier.
Lorsque vous activez l'utilisation de l'ordinateur, vous envoyez à Claude un schéma d'outil spécial qui est automatiquement développé en arrière-plan. Ce qui commence comme un schéma simple de votre côté devient une interface complète qui indique à Claude qu'il peut effectuer des actions telles que :
- Mouvements et clics de souris
- Saisie au clavier et combinaisons de touches
- Prise de captures d'écran
- Défilement et autres interactions avec l'interface
Le schéma d'outil que vous envoyez est minimal, mais il se convertit automatiquement en une spécification détaillée qui inclut toutes les capacités d'interaction informatique dont Claude a besoin.
L'implémentation technique
Pour que l'utilisation de l'ordinateur fonctionne, vous avez besoin d'un environnement informatique capable d'exécuter de manière programmatique les actions demandées par Claude. L'implémentation de référence utilise un conteneur Docker exécutant Firefox, ainsi qu'un code capable de simuler des frappes de touches et des mouvements de souris.
Lorsque Claude décide d'interagir avec l'ordinateur, il envoie une requête d'utilisation d'outil comme pour tout autre outil. Votre serveur reçoit cette requête et exécute l'action correspondante dans l'environnement conteneurisé - qu'il s'agisse de cliquer sur un bouton, de saisir du texte ou de prendre une capture d'écran.
L'important à comprendre est que Claude ne contrôle pas directement un ordinateur. Il effectue des requêtes d'outils, et votre infrastructure traduit ces requêtes en interactions informatiques réelles.
Pour commencer
Vous n'avez pas besoin de construire cette infrastructure à partir de zéro. Anthropic fournit une implémentation de référence qui gère toutes les parties complexes pour vous.
Pour configurer l'utilisation de l'ordinateur, vous avez besoin de :
- Un runtime Docker installé sur votre système
- Un profil AWS configuré localement (généralement « default »)
- L'implémentation de référence du dépôt Anthropic quickstarts
Une fois que vous disposez de ces prérequis, vous pouvez démarrer le conteneur Docker avec une seule commande. Cela vous donne accès à la même interface que celle présentée dans les démonstrations - une interface de chat à gauche où vous pouvez parler à Claude, et un environnement de navigateur à droite où Claude peut interagir avec des pages web et des applications.
Le processus de configuration est simple, et le guide de configuration complet est disponible dans le dépôt Anthropic quickstarts sur GitHub. Cette implémentation de référence fournit tout ce dont vous avez besoin pour commencer à expérimenter avec les capacités d'utilisation de l'ordinateur de Claude dans un environnement sûr et contrôlé.