Comprendre Claude

Outils, ordinateur, vision : comment Claude agit et voit

Claude ne se contente pas de répondre par écrit. Il peut appeler des outils, lire une image et même piloter un écran. Ce tuto démystifie ces trois mécanismes, à l’aide d’exemples que vous utilisez déjà.

⏱️ Durée : 20 min
🎯 Niveau : Tous niveaux
🛠️ Outil : Claude.ai, Claude dans Chrome, Claude in Excel

🎯 Objectif

Comprendre ce qui se cache derrière les fonctionnalités « intelligentes » de Claude que vous avez déjà croisées (recherche web, lecture d’écran, analyse d’image dans Excel…) pour mieux savoir quand et comment les solliciter, et quelles limites garder en tête.

✅ Avant de commencer

  • Avoir suivi (ou parcouru) les tutos Claude dans Chrome et Claude in Excel aide, mais n’est pas obligatoire.
  • Aucune notion de programmation n’est nécessaire : on reste au niveau des concepts.

Les trois notions à distinguer

1

Les « outils » : quand Claude sort de sa tête

Découverte

Par défaut, Claude répond avec ce qu’il « sait » déjà, comme n’importe quel texte généré. Un outil (on dit aussi « tool use » côté développeurs) est une fonction externe que Claude peut décider d’appeler pour obtenir une information fraîche ou déclencher une action : chercher sur le web, lire un fichier, consulter un agenda, interroger une base de données.

Concrètement, Claude ne fait pas ça lui-même en coulisses : il formule une demande structurée (« j’aimerais utiliser tel outil, avec tel paramètre »), l’application qui l’héberge exécute la demande, puis lui renvoie le résultat. Claude poursuit alors sa réponse en tenant compte de ce résultat.

💡 Vous croisez ce mécanisme à chaque fois que Claude affiche « Recherche en cours… » avant de répondre : c’est un outil de recherche web qui vient d’être appelé.
2

La vision : quand Claude regarde une image

Découverte

La vision désigne la capacité de Claude à analyser une image : capture d’écran, photo, graphique, tableau scanné, logo… Vous déposez une image dans la conversation, Claude la « lit » et peut décrire, comparer, extraire du texte ou des données, ou encore repérer une anomalie visuelle.

  • Coller le graphique d’un rapport pour en demander le commentaire.
  • Photographier un tableau papier pour le faire retranscrire dans Excel.
  • Comparer deux maquettes PowerPoint envoyées en image.
💡 C’est cette brique qui permet à Claude in Excel d’interpréter un graphique, ou à Claude dans Chrome de comprendre ce qui s’affiche réellement à l’écran.
3

Le computer use : quand Claude prend la souris et le clavier

Application

Le computer use combine la vision et les outils pour aller plus loin : Claude regarde une capture d’écran, décide d’une action (cliquer ici, taper ce texte, faire défiler la page), l’application l’exécute, prend une nouvelle capture, et le cycle recommence jusqu’à la tâche accomplie.

C’est le principe exact de Claude dans Chrome : Claude « voit » la page web via des captures d’écran successives, et agit dessus comme le ferait un utilisateur humain, sans passer par une API dédiée au site.

⚠️ C’est une fonctionnalité puissante mais encore en bêta : Claude peut se tromper de coordonnées de clic ou mal interpréter une page inhabituelle. On garde toujours un œil sur ce qu’il fait, surtout sur des sites sensibles.
4

Ce que vous utilisez déjà, sans le savoir

Application

Faites le lien avec vos outils du quotidien :

  • Recherche web dans Claude.ai → un outil de recherche.
  • Claude dans Chrome → vision + outils de clic/saisie = computer use.
  • Claude in Excel analysant un graphique collé dans une cellule → vision.
  • Claude Cowork orchestrant plusieurs de ces briques (navigateur, fichiers, applications) pour mener une tâche de bout en bout → tout combiné.
Exemple de prompt à tester Voici une capture d'écran de mon tableau de bord Google Analytics. Peux-tu me dire quelles pages ont le plus baissé en trafic ce mois-ci et me proposer 3 hypothèses d'explication ?
5

Limites et bon usage

Maîtrise
  • La vision reste sujette à erreur sur des images floues, très denses ou mal cadrées : vérifiez toujours les chiffres extraits d’un tableau image.
  • Le computer use peut se tromper d’action sur une interface inhabituelle ou surchargée : privilégiez le mode « demander avant d’agir » sur les sites sensibles (banque, RH, données clients).
  • Un outil n’est disponible que si l’application qui héberge Claude l’a explicitement activé : Claude ne « décide » jamais d’accéder à quelque chose qui ne lui a pas été proposé.
Ce que vous devez observer
  • Quand Claude affiche « recherche en cours » ou un indicateur d’outil actif
  • La différence entre une réponse « de mémoire » et une réponse appuyée sur une recherche ou une image
  • Le comportement de Claude dans Chrome face à une page inconnue : hésite-t-il, demande-t-il confirmation ?

🛠️ Atelier A3I

À faire dans une conversation Claude.ai :

  1. Prenez une capture d’écran d’un de vos tableaux Excel de formation (planning, résultats TOSA…).
  2. Collez-la dans Claude et demandez-lui d’en faire une synthèse en 3 points.
  3. Posez ensuite une question d’actualité récente pour observer l’outil de recherche web s’activer.
  4. Comparez les deux façons dont Claude a construit sa réponse : mémoire vs. outil vs. vision.

✅ Auto-évaluation