Comment fonctionne Computer Use

Computer Use fonctionne exactement comme l’utilisation d’outils classique — c’est une implémentation spéciale du même système d’outils sous-jacent.

Rappel : utilisation d’outils classique

1. Vous envoyez à Claude un message + schéma d'outil
2. Claude décide d'utiliser l'outil
3. Claude répond avec une demande d'appel d'outil
4. Votre serveur exécute la fonction
5. Vous renvoyez le résultat à Claude

Computer Use : même flux, outil différent

Le schéma de l’outil computer :

{
  "type": "computer_20250124",
  "name": "computer",
  "display_width_px": 1024,
  "display_height_px": 768,
  "display_number": 1
}

Actions disponibles : key, mouse_move, left_click, screenshot, scroll.

L’environnement informatique

Claude demande "cliquer aux coordonnées (500, 300)"
        ↓
Votre système exécute le clic dans Docker
        ↓
Capture d'écran du résultat
        ↓
Capture renvoyée à Claude

Démarrer rapidement

export ANTHROPIC_API_KEY="votre_cle_api"
docker run \
  -e ANTHROPIC_API_KEY=$ANTHROPIC_API_KEY \
  -p 5900:5900 -p 8501:8501 -p 6080:6080 -p 8080:8080 \
  -it ghcr.io/anthropics/anthropic-quickstarts:computer-use-demo-latest

À retenir : Computer Use n’est pas magique — c’est simplement le système d’outils classique appliqué à l’automatisation bureau.