Translate

mardi 29 octobre 2024

"Computer Use" qui permet à l'IA de prendre le contrôle de ton PC pour utiliser le nouveau Claude AI ?

Claude AI, le meilleur LLM pour coder et écrire vient de sortir une nouvelle fonctionnalité "Computer Use" qui permet à l'IA de prendre le contrôle de ton PC. 


Je te montre comment l'utiliser facilement. Abonne-toi à ma chaîne YouTube ici : http://jbv.ovh/jeanviet

---------

Au sommaire :

00:00 Computer Use, c'est quoi ?
01:06 Test Scrabble : analyse et limites
03:07 Mammouth.ai pour le jeu de mots efficace
04:46 Test de création d’un site Web depuis LinkedIn
05:18 Machine virtuelle : avantages et inconvénients
07:00 Test de correction orthographique sur Word
08:00 Test de création de graphique Excel
10:17 Installation de Computer Use sur Docker
12:23 Configuration API de Claude
13:40 Mon avis sur Computer Use

---------

Les ressources, outils et liens consultés pour ce tuto


Computer Use - Claude AI

La vidéo Computer Use for coding de ‪@anthropic-ai‬ 
   • Claude | Computer use for coding  

Le tuto de Alex Albert pour installer Computer Use

Un autre tuto de mon cru pour comprendre l'utilisation de Docker Desktop (outil LibreChat)
   • Installer LibreChat sur Mac ou PC ave...  

Le projet Git Computer Use

Mammouth AI ‪@Mammouth_ai‬ 

Pour générer une Clé API Claude AI

La démo bluffante de ‪@Shubham_Sharma‬ 
   • Claude AI vient de RÉVOLUTIONER le mo...  

---------

Pour installer Computer Use sur un PC Windows : 


1- Crée une clé API Claude ici  

2- Lance PowerShell et copie-colle ceci 
$env:ANTHROPIC_API_KEY="ta-cle-api-a-la-place-de-ce-texte-ici-ne-mets-pas-la-mienne-je-lai-desactive"


3- Télécharger et Installe Docker Desktop ici 
Docker Desktop: The #1 Containerization Tool for Developers | Docker



4- Retourne dans PowerShell et copie-colle ceci 

docker run `
    -e ANTHROPIC_API_KEY=$env:ANTHROPIC_API_KEY `
    -v ${env:USERPROFILE}/.anthropic:/home/computeruse/.anthropic `
    -p 5900:5900 `
    -p 8501:8501 `
    -p 6080:6080 `
    -p 8080:8080 `
    -it ghcr.io/anthropics/anthropic-quickstarts:computer-use-demo-latest

5- Lance ensuite cette URL dans Chrome
http://localhost:8080/

Si ça marche pas, réagis en commentaire en tapant "Aide-moi Jeanviet", je te traiterai comme un chef, car j'aurais vu que tu as fait l'effort d'essayer

---------

Mon TikTok :   / jeanviet.fr  
Mon Instagram :   / jeanviet  
Mon Twitter :   / jeanviet  

---------

Pour devenir un bon créateur de contenu, lis mon livre ici :

Promis, je ne l'ai pas écrit avec une IA ;-)

---------

Abonne-toi à ma chaîne YouTube ici : http://jbv.ovh/jeanviet

CONCLUSION :

L’article explore le fonctionnement de "Claude AI Computer Use", une version de l'IA Claude d'Anthropic conçue pour interagir avec l'ordinateur de l’utilisateur en temps réel. L'auteur teste différentes applications, comme le Scrabble, la création de sites web, la correction orthographique et la génération de graphiques, en cherchant à déterminer dans quelle mesure cette IA peut véritablement accomplir des tâches variées de manière autonome.

Les résultats montrent que, bien que prometteuse, la technologie présente plusieurs limitations. Par exemple, Claude peine à naviguer de manière fluide dans des applications (comme scroller et cliquer aux bons endroits), à effectuer une correction orthographique fluide sur LibreOffice ou à générer des graphiques correctement sur Calc. De plus, la latence et les contraintes d’utilisation dans un environnement de machine virtuelle Linux ralentissent le processus, rendant l’expérience parfois frustrante.

Commentaire sur la fin : Bien que l'outil soit encore peu performant dans des scénarios d'utilisation quotidiens, l'auteur entrevoit un potentiel futur où une IA pourrait véritablement accomplir des tâches complexes avec peu d’intervention humaine. Pour l’instant, cette version reste surtout un prototype qui illustre les défis techniques de l’automatisation interactive.


"Claude AI Computer Use", une version d’IA capable de contrôler un ordinateur pour exécuter des tâches de manière autonome, comme un assistant virtuel. L'auteur teste plusieurs usages pratiques : jouer au Scrabble, créer un site web, corriger un document et générer des graphiques. Cependant, il constate plusieurs limites : difficulté de navigation, erreurs dans les tâches et lenteur due à l'utilisation d'une machine virtuelle Linux. Bien que prometteur pour l’avenir, l’outil reste pour le moment expérimental et rencontre des difficultés dans des cas d’usage réels.


Voici les étapes détaillées pour installer Claude AI Computer Use sur votre PC :

---

### 1. Préparer l’environnement virtuel

Claude AI Computer Use nécessite l'installation dans une machine virtuelle pour éviter tout risque que l’IA prenne le contrôle direct de votre ordinateur. 


Voici les étapes :

1. Créer un compte sur Anthropic Console :

- Allez sur [console.anthropic.com](https://console.anthropic.com).

- Créez un compte (le site fournit 5 dollars de crédit à l’inscription).

- Allez dans Settings > API Key et créez une clé API en choisissant un nom (par exemple, "Computer Test"). Copiez cette clé.

2. Installer Docker Desktop :

- Téléchargez [Docker Desktop](https://www.docker.com/products/docker-desktop) pour votre système d'exploitation (choisissez la version appropriée, généralement pour Windows AMD64 ou ARM64).

- Lancez Docker Desktop pour qu’il fonctionne en arrière-plan. Assurez-vous qu'il indique "Engine Running" (en fonctionnement).

3. Préparer la clé API dans PowerShell (Windows uniquement) :

- Ouvrez PowerShell en tant qu’administrateur.

- Tapez la commande suivante pour enregistrer la clé API dans votre environnement PowerShell :

```powershell

$env:ANTHROPIC_API_KEY = "votre_clé_api"

```

- Remplacez `"votre_clé_api"` par la clé copiée précédemment.

---

### 2. Télécharger et configurer l’image virtuelle de Claude

Claude AI fonctionnera dans une image de machine virtuelle VNC exécutée via Docker pour Linux.

1. Exécuter l’image Docker pour Claude AI Computer Use :

- Dans PowerShell, entrez la commande suivante pour télécharger et lancer l’image VNC virtuelle sous Docker :

```powershell

docker run -p 5900:5900 anthropic/claude-computer-use

```

- Cette commande télécharge et initialise une machine virtuelle avec un environnement Linux.

2. Accéder à l’environnement virtuel :

- Une fois l'image installée, un message affichera une adresse locale (par ex., `http://localhost:5900`) pour accéder à la machine virtuelle.

- Ouvrez cette adresse dans votre navigateur pour voir l’interface de la machine virtuelle.

---

### 3. Lancer Claude AI dans l’environnement virtuel

1. Naviguer dans la machine virtuelle :

- Dans l’interface VNC, accédez aux applications comme Firefox ou Calc pour tester l’IA.

- Connectez-vous à Claude AI via une console de chat intégrée pour lui donner des instructions, par exemple, pour naviguer sur le Web ou pour effectuer des tâches spécifiques.

---

### 4. Résoudre les problèmes courants

- Latence : La machine virtuelle peut être lente. Il est possible de rencontrer des délais pour l'affichage et la réponse des commandes.

- Limites de facturation : Anthropic peut imposer une limite de requêtes ou d'utilisation quotidienne. Si vous recevez un message d'attente, cela signifie que vous avez dépassé votre quota d'utilisation.

---


### En résumé :

- Créez un compte Anthropic et obtenez une clé API.

- Installez Docker Desktop et configurez PowerShell avec la clé API.

- Exécutez l’image Docker de Claude pour lancer l’environnement virtuel.

- Accédez à l’interface via l’adresse locale dans votre navigateur et testez les fonctionnalités de Claude dans cet environnement sécurisé.

En suivant ces étapes, vous devriez pouvoir explorer les capacités de Claude AI Computer Use dans un environnement virtuel sécurisé.


"Claude AI Computer Use", une version d’IA capable de contrôler un ordinateur pour exécuter des tâches de manière autonome, comme un assistant virtuel. L'auteur teste plusieurs usages pratiques : jouer au Scrabble, créer un site web, corriger un document et générer des graphiques. Cependant, il constate plusieurs limites : difficulté de navigation, erreurs dans les tâches et lenteur due à l'utilisation d'une machine virtuelle Linux. Bien que prometteur pour l’avenir, l’outil reste pour le moment expérimental et rencontre des difficultés dans des cas d’usage réels.






Aucun commentaire: