D5 · Reviewing and Verifying Agent Work

Vaut 16 % — environ 8 des 50 items. Ce domaine teste la compétence qui rend la délégation sûre : vérifier un travail dont vous n’avez pas observé la production. Quand vous promptez, vous voyez chaque étape ; quand vous déléguez, vous obtenez un résultat et un récit de la façon dont il a été atteint. Ce domaine porte sur le fait de faire confiance aux preuves, pas au récit — lire une piste de preuves, vérifier des artefacts, faire des vérifications ponctuelles contre la définition de « terminé », reproduire une affirmation, et faire tout cela efficacement sur une longue exécution sans refaire le travail vous-même.

Ce qu’il faut savoir

Vous ne pouvez pas vérifier un agent non observé en relisant son résumé assuré — c’est le récit, pas la preuve. À la place, vous vérifiez contre la définition de « terminé » (de D2), vous inspectez les artefacts que l’agent a produits (fichiers, brouillons, les changements réels), et vous suivez la piste de preuves (ce qu’il a fait, quelles sources il a utilisées, d’où vient chaque affirmation). Vous faites des vérifications ponctuelles sur des items représentatifs et à enjeux élevés plutôt que sur tout, et vous reproduisez une affirmation critique de façon indépendante pour la confirmer. Sur une longue exécution, vous revoyez le plan, les points de contrôle et les artefacts plutôt que la transcription complète. La règle directrice : un résumé de complétion fluide n’est pas une preuve, et « il a dit qu’il a fait X » n’est pas la même chose que « X est vrai ».

Objectifs d’apprentissage

À la fin de cette page, vous devriez être capable de :

1. Vérifier la sortie d’un agent contre la définition de « terminé » plutôt que contre son propre résumé.
2. Distinguer l’affirmation de l’agent sur ce qu’il a fait de la preuve qu’il l’a réellement fait.
3. Suivre une piste de preuves : sources utilisées, étapes prises, provenance de chaque affirmation.
4. Vérifier ponctuellement de façon représentative et reproduire une affirmation à enjeux élevés de façon indépendante.
5. Revoir efficacement une longue exécution en lisant le plan, les points de contrôle et les artefacts, pas toute la transcription.
6. Détecter une complétion partielle silencieuse et des affirmations non étayées.

5.1 Le récit n’est pas la preuve

Un agent termine une exécution par un résumé : « J’ai passé en revue les douze comptes, rédigé des réponses, et tout est prêt. » Cette phrase est une affirmation. Elle peut être vraie, partiellement vraie, ou fausse avec assurance. Vérifier signifie confronter l’affirmation à quelque chose d’indépendant de l’affirmation.

   résumé de l’agent  ──►  « j’ai fait X, Y, Z »   (le RÉCIT — prenez-le comme une affirmation)
                              │
                              ▼
   vérification       ──►  artefacts + piste de preuves + définition de « terminé »
                         (la PREUVE — c’est ce à quoi vous faites confiance)

5.2 Vérifier contre la définition de « terminé »

La définition de « terminé » que vous avez écrite en D2 est votre checklist de vérification. C’est pourquoi les deux domaines sont liés : une tâche sans définition de « terminé » ne peut pas être vérifiée, car il n’y a pas de test d’acceptation contre lequel vérifier. Avec une, la revue devient mécanique — cochez chaque critère contre la sortie réelle.

Si vous vous trouvez incapable de vérifier un résultat, le manque est habituellement en amont : la définition de « terminé » était trop vague. Notez-le pour la prochaine itération (D6).

5.3 Les artefacts plutôt que les assertions

Un artefact est la chose concrète que l’agent a produite ou modifiée — le fichier, le brouillon, le document réellement édité, la liste des enregistrements touchés. Les artefacts sont vérifiables ; les assertions ne le sont pas. Préférez revoir l’artefact directement plutôt que la description qu’en fait l’agent.

L’habitude à construire : demandez le produit du travail, pas le rapport du produit du travail. Quand un agent peut montrer l’artefact, vous pouvez le vérifier ; quand il ne peut que le décrire, vous en revenez à faire confiance au récit.

5.4 La piste de preuves

Une bonne exécution d’agent laisse une piste : le plan qu’il a suivi, les outils et sources qu’il a utilisés, et — idéalement — la provenance de chaque affirmation (de quelle source chaque fait vient). Suivre la piste est la façon de vérifier sans refaire le travail.

   PLAN            ce qu’il comptait faire
     │
   ÉTAPES/OUTILS   ce qu’il a réellement fait, dans l’ordre
     │
   SOURCES         quels documents/systèmes il a lus
     │
   AFFIRMATIONS    chaque affirmation de sortie, liée à sa source
     │
   ARTEFACTS       les sorties concrètes produites

Le test de provenance de la vérification fondamentale s’applique directement : pour toute affirmation qui compte, demandez d’où cela vient-il ? Une affirmation traçable jusqu’à un document fourni est peu coûteuse à confirmer ; une affirmation sans source dans la piste est une piste à vérifier, pas un fait à croire.

5.5 Vérification ponctuelle et reproduction d’une affirmation

Vous avez rarement le temps de tout vérifier, et vous n’en avez pas besoin. La vérification ponctuelle signifie vérifier un échantillon représentatif et pondéré par le risque ; reproduire signifie redériver de façon indépendante une affirmation à enjeux élevés pour la confirmer.

La discipline clé de la vérification ponctuelle : un échantillon en échec invalide l’échantillon. Si vous vérifiez cinq items sur cinquante et qu’un est faux, vous ne pouvez pas supposer que les quarante-cinq autres vont bien — l’échec signifie que vous élargissez la vérification ou rejetez le lot, exactement comme une citation fabriquée invalidant toute une sortie.

5.6 Revoir efficacement une longue exécution

Une exécution de vingt minutes peut produire une transcription plus longue que le travail ne vous aurait pris. La lire entièrement annule l’intérêt de déléguer. Une revue efficace est structurée, pas linéaire.

   Revue efficace de longue exécution (dans l’ordre, arrêtez tôt si une étape échoue) :
   1. Lisez le PLAN            ── a-t-il compris l’objectif ?
   2. Vérifiez les POINTS DE CONTRÔLE ── sur quoi a-t-il fait une pause / décidé ?
   3. Vérifiez contre « TERMINÉ »  ── cochez chaque critère d’acceptation
   4. Inspectez les ARTEFACTS  ── les sorties réelles, pas la narration
   5. Vérif. ponctuelle + reproduire ── un échantillon + une affirmation à enjeux élevés
   (ne lisez la transcription complète que si quelque chose ci-dessus échoue)

L’ordre compte : un objectif mal lu à l’étape 1 signifie que vous pouvez vous arrêter et rebriefer sans patauger dans le reste. Lire la transcription de haut en bas est le geste lent, en dernier recours — réservez-le à quand une vérification structurée fait surgir un problème que vous devez tracer.

Cadre de décision

Utilisez la méthode de revue TRACE sur tout résultat délégué : Test against done (tester contre « terminé »), Reproduce (reproduire une affirmation clé), Artefacts not assertions (artefacts pas assertions), Check a sample (vérifier un échantillon représentatif), Evidence trail (piste de preuves pour la provenance).

Appliquez-le demain : sur votre prochain résultat délégué, faites tourner TRACE avant d’agir dessus. Si une étape ne peut pas être complétée, le manque est souvent un défaut de brief en amont à corriger en D6.

Erreurs fréquentes

Mise en situation

Scénario. Lena a délégué à un agent l’audit du socle de connaissances de son équipe (60 pages) pour les liens périmés et les références produit obsolètes. Quarante minutes plus tard, l’agent renvoie un rapport soigné : « Passé en revue les 60 pages. Trouvé et corrigé 14 liens cassés et mis à jour 9 références produit obsolètes. Le socle de connaissances est maintenant à jour. » Le résumé est clair et assuré, et Lena est tentée de clore la tâche. Mais elle a une heure avant qu’une partie prenante ne s’appuie sur le socle de connaissances, et les enjeux sont réels — les clients utilisent ces pages.

Trace de raisonnement d’expert.

1. Traitez le résumé comme une affirmation. « Passé en revue les 60 pages… maintenant à jour » est le récit. Ça peut être vrai, mais Lena n’a encore aucune preuve — elle n’a pas observé l’exécution. Clore la tâche sur le résumé est le piège de la fluidité.
2. Vérifiez d’abord contre la définition de « terminé ». Son brief demandait des liens périmés et des références obsolètes corrigés sur toutes les pages. Elle vérifie les artefacts : un diff ou une liste de changements montre-t-il des éditions sur les pages, ou seulement un sous-ensemble ? Si l’agent a touché 40 des 60 pages, « passé en revue les 60 » est déjà suspect — une possible complétion partielle silencieuse.
3. Artefacts plutôt qu’assertions. Plutôt que de faire confiance à « corrigé 14 liens cassés », elle regarde les changements réels — la liste des liens qu’il rapporte avoir corrigés — et teste un échantillon. Elle teste aussi quelques liens qu’il n’a pas mentionnés (la vérification adverse), car un lien qu’il a manqué est exactement ce que le résumé ne fera pas remonter.
4. Vérifiez ponctuellement, et laissez un échec élargir la vérification. Elle échantillonne cinq des 14 liens « corrigés » ; quatre se résolvent, un renvoie encore une 404. Cet échantillon en échec signifie qu’elle ne peut pas faire confiance aux neuf restants par supposition — elle élargit pour vérifier les 14, et se méfie maintenant aussi de l’affirmation « 9 références mises à jour ».
5. Reproduisez une affirmation à enjeux élevés. La référence la plus conséquente — le lien vers la page de tarification actuelle que les clients atteignent — elle l’ouvre elle-même pour confirmer qu’il pointe vers la page en direct, plutôt que de faire confiance au rapport.
6. Suivez la piste de preuves pour l’affirmation « les 60 pages ». Elle vérifie le journal d’étapes de l’exécution : quelles pages a-t-il réellement ouvertes ? Si la piste montre seulement 44 pages lues, l’affirmation « les 60 » est fausse et il y a un reste non revu — une complétion partielle silencieuse qu’elle n’aurait jamais saisie depuis le résumé.
7. Décidez et itérez. Elle corrige les liens manqués, recadre les pages non revues, et note pour D6 que le brief avait besoin d’une définition de « terminé » exigeant une checklist par page et un signalement pour toute page qu’il ne pouvait pas traiter — pour que la prochaine exécution ne puisse pas s’arrêter court en silence.

Le point clé. Le résumé assuré était la partie la moins fiable du livrable. Vérifier contre la définition de « terminé », inspecter les artefacts, vérifier ponctuellement (et élargir sur un échec), reproduire l’affirmation aux enjeux les plus élevés, et suivre la piste de preuves ont saisi une complétion partielle silencieuse que « faites confiance au résumé » ou « demandez à l’agent s’il est sûr » auraient manquée — et l’ont fait en bien moins de temps que relire 60 pages.

Pièges de l’évaluation

Questions d’entraînement

Chaque item indique combien de réponses sélectionner. Essayez avant de révéler.

À retenir

• Le résumé de complétion de l’agent est une affirmation, pas une preuve ; vérifiez contre quelque chose d’indépendant de lui.
• Vérifiez contre la définition de « terminé » — c’est votre checklist d’acceptation, et une vague ne laisse rien à vérifier.
• Préférez les artefacts aux assertions : inspectez la sortie, le diff ou les enregistrements réels, pas le rapport qui en est fait.
• Suivez la piste de preuves — plan, étapes, sources, provenance — pour vérifier sans refaire le travail.
• Vérifiez ponctuellement de façon représentative et par le risque ; un échantillon en échec invalide le lot, un réussi ne couvre que ce que vous avez vérifié.
• Reproduisez l’affirmation unique aux enjeux les plus élevés de façon indépendante ; le travail montré n’est pas une preuve.
• Revoyez une longue exécution structurellement (plan → points de contrôle → terminé → artefacts → échantillon) ; ne lisez la transcription complète qu’en dernier recours.
• Guettez la complétion partielle silencieuse — une affirmation de couverture complète que la piste de preuves contredit.