Claude AI, le meilleur LLM pour coder et écrire vient de sortir une nouvelle fonctionnalité "Computer Use" qui permet à l'IA de prendre le contrôle de ton PC.
Les ressources, outils et liens consultés pour ce tuto
Pour installer Computer Use sur un PC Windows :
CONCLUSION :
L’article explore le fonctionnement de "Claude AI Computer Use", une version de l'IA Claude d'Anthropic conçue pour interagir avec l'ordinateur de l’utilisateur en temps réel. L'auteur teste différentes applications, comme le Scrabble, la création de sites web, la correction orthographique et la génération de graphiques, en cherchant à déterminer dans quelle mesure cette IA peut véritablement accomplir des tâches variées de manière autonome.
Les résultats montrent que, bien que prometteuse, la technologie présente plusieurs limitations. Par exemple, Claude peine à naviguer de manière fluide dans des applications (comme scroller et cliquer aux bons endroits), à effectuer une correction orthographique fluide sur LibreOffice ou à générer des graphiques correctement sur Calc. De plus, la latence et les contraintes d’utilisation dans un environnement de machine virtuelle Linux ralentissent le processus, rendant l’expérience parfois frustrante.
Commentaire sur la fin : Bien que l'outil soit encore peu performant dans des scénarios d'utilisation quotidiens, l'auteur entrevoit un potentiel futur où une IA pourrait véritablement accomplir des tâches complexes avec peu d’intervention humaine. Pour l’instant, cette version reste surtout un prototype qui illustre les défis techniques de l’automatisation interactive.
"Claude AI Computer Use", une version d’IA capable de contrôler un ordinateur pour exécuter des tâches de manière autonome, comme un assistant virtuel. L'auteur teste plusieurs usages pratiques : jouer au Scrabble, créer un site web, corriger un document et générer des graphiques. Cependant, il constate plusieurs limites : difficulté de navigation, erreurs dans les tâches et lenteur due à l'utilisation d'une machine virtuelle Linux. Bien que prometteur pour l’avenir, l’outil reste pour le moment expérimental et rencontre des difficultés dans des cas d’usage réels.
Voici les étapes détaillées pour installer Claude AI Computer Use sur votre PC :
---
### 1. Préparer l’environnement virtuel
Claude AI Computer Use nécessite l'installation dans une machine virtuelle pour éviter tout risque que l’IA prenne le contrôle direct de votre ordinateur.
Voici les étapes :
1. Créer un compte sur Anthropic Console :
- Allez sur [console.anthropic.com](https://console.anthropic.com).
- Créez un compte (le site fournit 5 dollars de crédit à l’inscription).
- Allez dans Settings > API Key et créez une clé API en choisissant un nom (par exemple, "Computer Test"). Copiez cette clé.
2. Installer Docker Desktop :
- Téléchargez [Docker Desktop](https://www.docker.com/products/docker-desktop) pour votre système d'exploitation (choisissez la version appropriée, généralement pour Windows AMD64 ou ARM64).
- Lancez Docker Desktop pour qu’il fonctionne en arrière-plan. Assurez-vous qu'il indique "Engine Running" (en fonctionnement).
3. Préparer la clé API dans PowerShell (Windows uniquement) :
- Ouvrez PowerShell en tant qu’administrateur.
- Tapez la commande suivante pour enregistrer la clé API dans votre environnement PowerShell :
```powershell
$env:ANTHROPIC_API_KEY = "votre_clé_api"
```
- Remplacez `"votre_clé_api"` par la clé copiée précédemment.
---
### 2. Télécharger et configurer l’image virtuelle de Claude
Claude AI fonctionnera dans une image de machine virtuelle VNC exécutée via Docker pour Linux.
1. Exécuter l’image Docker pour Claude AI Computer Use :
- Dans PowerShell, entrez la commande suivante pour télécharger et lancer l’image VNC virtuelle sous Docker :
```powershell
docker run -p 5900:5900 anthropic/claude-computer-use
```
- Cette commande télécharge et initialise une machine virtuelle avec un environnement Linux.
2. Accéder à l’environnement virtuel :
- Une fois l'image installée, un message affichera une adresse locale (par ex., `http://localhost:5900`) pour accéder à la machine virtuelle.
- Ouvrez cette adresse dans votre navigateur pour voir l’interface de la machine virtuelle.
---
### 3. Lancer Claude AI dans l’environnement virtuel
1. Naviguer dans la machine virtuelle :
- Dans l’interface VNC, accédez aux applications comme Firefox ou Calc pour tester l’IA.
- Connectez-vous à Claude AI via une console de chat intégrée pour lui donner des instructions, par exemple, pour naviguer sur le Web ou pour effectuer des tâches spécifiques.
---
### 4. Résoudre les problèmes courants
- Latence : La machine virtuelle peut être lente. Il est possible de rencontrer des délais pour l'affichage et la réponse des commandes.
- Limites de facturation : Anthropic peut imposer une limite de requêtes ou d'utilisation quotidienne. Si vous recevez un message d'attente, cela signifie que vous avez dépassé votre quota d'utilisation.
---
### En résumé :
- Créez un compte Anthropic et obtenez une clé API.
- Installez Docker Desktop et configurez PowerShell avec la clé API.
- Exécutez l’image Docker de Claude pour lancer l’environnement virtuel.
- Accédez à l’interface via l’adresse locale dans votre navigateur et testez les fonctionnalités de Claude dans cet environnement sécurisé.
En suivant ces étapes, vous devriez pouvoir explorer les capacités de Claude AI Computer Use dans un environnement virtuel sécurisé.
"Claude AI Computer Use", une version d’IA capable de contrôler un ordinateur pour exécuter des tâches de manière autonome, comme un assistant virtuel. L'auteur teste plusieurs usages pratiques : jouer au Scrabble, créer un site web, corriger un document et générer des graphiques. Cependant, il constate plusieurs limites : difficulté de navigation, erreurs dans les tâches et lenteur due à l'utilisation d'une machine virtuelle Linux. Bien que prometteur pour l’avenir, l’outil reste pour le moment expérimental et rencontre des difficultés dans des cas d’usage réels.
.jpeg)
.jpeg)