Aller au contenu

Méthode7 min de lecture

Superviser des agents IA au quotidien : alertes, rapport mensuel et agents qui signalent eux-mêmes leurs problèmes

Qui surveille un agent IA une fois installé ? Versions figées, alertes, tickets ouverts par l'agent lui-même, rapport mensuel et revue des paliers.

Sur un bureau en bois clair, un carnet à spirale ouvert sous une lampe de bureau articulée bleu pétrole allumée, un crayon posé dessus ; à côté, une sonnette de comptoir chromée.
Image générée par IA

En bref

  • Un agent IA en service peut dériver : le modèle d'IA évolue, vos logiciels changent, vos données aussi. La supervision sert à repérer ces dérives tôt.
  • L'agent, ses outils et ses connecteurs auront une version figée. Une mise à jour passera toujours par une recette courte, c'est-à-dire un essai avant la mise en service.
  • L'agent signalera lui-même les problèmes qu'il détecte : il ouvrira un ticket, nous serons alertés, et vous suivrez tout dans votre futur espace client.

Notre méthode tient en une règle : l'agent prépare, votre équipe valide aux étapes prévues, et l'agent s'arrête plutôt que de deviner dans les cas écrits à l'avance.

Une question vient pourtant vite : une fois l'agent installé, qui le surveille ? Et que se passe-t-il s'il se trompe ? La réponse tient dans l'abonnement de supervision, en préparation. Voici ce qu'il comprendra, et pourquoi.

Ce qui peut dériver une fois l'agent en service

Un agent IA ne s'installe pas pour être oublié. Trois choses peuvent changer autour de lui sans que personne ne touche à ses réglages.

Le modèle d'IA évolue. Le modèle est le moteur de l'agent : le programme qui lit un courriel ou une facture et rédige une proposition. Son fournisseur publie de nouvelles versions et retire les anciennes. Anthropic, qui développe les modèles Claude, l'écrit dans sa documentation : il retire régulièrement ses anciens modèles. Pour les modèles rendus publics, il prévient les clients concernés au moins 60 jours avant le retrait. Une demande envoyée à un modèle retiré échoue. Par exemple, le 30 septembre 2026, Anthropic a prévenu les développeurs qui utilisent Claude Sonnet 4.5 que ce modèle serait retiré de son API le 30 novembre 2026. Les modèles Claude sont aussi proposés par Amazon (service Amazon Bedrock) et par Google (Google Cloud). Ces deux plateformes fixent leur propre calendrier de retrait. Il faut donc suivre chaque calendrier qui concerne l'agent.

Un logiciel connecté change. L'agent se branche sur vos outils (messagerie, facturation, banque) via leurs interfaces officielles (API) : les portes d'entrée que ces logiciels ouvrent aux autres programmes. Le petit programme qui fait ce lien s'appelle un connecteur. Ces portes évoluent. Le logiciel de comptabilité Pennylane a annoncé que la première version (V1) de son API serait entièrement obsolète fin 2025, la V2 étant devenue sa version stable officielle. Le logiciel de gestion Odoo prévoit, d'après sa documentation pour développeurs, de retirer deux anciennes API (nommées XML-RPC et JSON-RPC) dans sa version 22, attendue à l'automne 2028.

Vos données changent. Un nouveau type de client, un nouveau modèle de facture, un pic saisonnier : l'agent rencontre des cas que personne n'avait prévus à la mise en place.

Des versions figées pour l'agent, ses outils et ses connecteurs

Face à ces changements, notre règle est simple : de notre côté, rien ne bouge sans décision.

Chaque agent déployé chez vous portera un numéro de version. Ses outils et ses connecteurs aussi. Le modèle d'IA sera désigné par un identifiant précis : chez Anthropic, chaque identifiant de modèle correspond à une version figée. L'agent qui aura passé la recette chez vous sera donc celui qui tournera le lendemain : même version, mêmes outils, mêmes connecteurs, même modèle.

Pourquoi y tenir ? Figer les versions ne rend pas l'agent infaillible. Mais l'agent ne change pas à votre insu. Si un résultat se dégrade, on cherche du côté de vos données ou d'un logiciel connecté, pas d'une mise à jour passée inaperçue.

Une mise à jour devient parfois nécessaire : un modèle annoncé comme retiré, une API qui évolue, une correction. Elle passera alors par une recette courte. Nous ferons tourner la nouvelle version sur les jeux d'essai de l'agent, des cas tirés de votre activité et anonymisés, puis nous comparerons ses propositions à celles de la version en place. Si les résultats tiennent, la nouvelle version remplacera l'ancienne. Sinon, nous la corrigerons avant de la mettre en service.

Quand un modèle est annoncé comme retiré, on ne peut pas attendre indéfiniment : après la date de retrait, l'ancien modèle ne répond plus. Nous lancerons donc la recette bien avant cette date. C'est aussi ce que recommande Anthropic : tester ses applications avec les nouveaux modèles bien avant la date de retrait de l'ancien.

Le signalement automatique : l'agent ouvrira lui-même un ticket

Votre équipe n'aura pas à guetter les pannes. L'agent signalera lui-même les problèmes qu'il détecte.

Il ouvrira un ticket, c'est-à-dire une fiche de suivi dans notre outil de support, en préparation, quand :

Le ticket sera rattaché à votre entreprise et à votre projet. Il contiendra le détail technique dont nous avons besoin pour comprendre, et nous recevrons une alerte. Si le même problème revient plusieurs fois, il restera un seul ticket : pas de pluie de messages.

Et si l'agent se trompe sans s'en rendre compte ? Deux garde-fous jouent alors.

D'abord, chaque agent a des cas d'arrêt écrits dans sa fiche : un client en litige, un montant hors des règles, une donnée manquante, un doute sur l'expéditeur d'un courriel. Dans ces cas, il ne devine pas. Il s'arrête et passe la main à un humain.

Ensuite, chaque agent avance par paliers d'autonomie, de 0 à 3 :

Aux paliers 0 et 1, chaque proposition passe sous les yeux d'un humain avant d'avoir un effet. Après une alerte grave, l'agent redescendra automatiquement d'un palier. Certaines actions ne dépassent jamais le palier 1 : un paiement, l'envoi à un tiers d'un document qui vous engage, la suppression de données.

Le tableau de bord et le schéma visuel de chaque agent

De notre côté, chaque agent apparaîtra dans un tableau de bord de supervision, en préparation. On y suivra :

Ce coût se compte en tokens. Un token est un petit morceau de texte : un mot, une partie de mot ou quelques caractères. C'est l'unité avec laquelle Anthropic facture l'usage de ses modèles, avec un prix pour le texte envoyé au modèle et un autre pour le texte qu'il produit. Chaque agent remontera ses propres chiffres : nous suivrons ainsi le coût de l'IA de votre projet, mois par mois.

Chaque action sera aussi inscrite dans un journal : ce que l'agent a lu, ce qu'il a proposé, ce que l'humain a décidé, qui, quand, et avec quelle version de l'agent.

L'agent tournera là où vous l'aurez choisi : dans votre compte cloud (des serveurs loués chez un grand fournisseur, en région européenne), sur vos propres serveurs ou sur un serveur dédié chez nous. Seuls les indicateurs, les alertes et les tickets remonteront jusqu'à notre tableau de bord, pas vos dossiers. Le détail technique d'un ticket sera filtré pour en retirer les données personnelles.

Une précision : pour faire son travail, l'agent enverra au modèle d'IA le texte qu'il doit traiter. Les données personnelles envoyées se limitent à ce qui est écrit dans la fiche de l'agent, que vous validez avant la construction. Le chemin vers le modèle, et donc le lieu où ce texte est traité, dépend du déploiement choisi. Selon le fournisseur, le modèle peut être opéré hors de l'UE, sous les garanties du RGPD.

Enfin, chaque agent aura son schéma visuel : un dessin de son parcours, étape par étape, avec les points où un humain valide. Il se lira sans connaissance technique. Nous le tiendrons à jour. Comme l'agent, il portera un numéro de version : si le parcours change, une nouvelle version du schéma le montrera.

Rapport mensuel et revue trimestrielle des paliers

Chaque mois, vous recevrez un rapport. Il reprendra les indicateurs de chaque agent : volume traité, taux d'accord, erreurs, tickets ouverts et résolus. Il annoncera aussi ce qui arrive : un modèle bientôt retiré, une mise à jour à prévoir.

Chaque trimestre, nous ferons une revue plus large, sur deux sujets.

Ce que vous verrez dans votre futur espace client

Votre espace client, en préparation, rassemblera ce qui concerne vos agents :

La surveillance technique, c'est notre travail. Vous gardez la décision, et vous verrez où en est chaque agent.

L'abonnement est sur devis. Le délai de prise en charge des tickets est précisé dans votre devis.

Pour aller plus loin

Sources

Consultées le 13 octobre 2026.

  1. Anthropic, Model deprecations (documentation Claude)
  2. Anthropic, Models overview (documentation Claude)
  3. Anthropic, Glossary, entrée « Tokens » (documentation Claude)
  4. Pennylane, Migrate from API v1 to v2 (documentation développeur, page « api-v2-vs-v1 »)
  5. Odoo 19.0, External JSON-2 API (documentation développeur), section Migrating from XML-RPC / JSON-RPC

← Retour au blog

Prochaine étape

Dites-nous où votre équipe perd du temps.

Tout commence par un audit : vos outils, vos façons de faire, vos volumes. Vous recevez ensuite un devis.

Réserver mon audit