# D6 · Measurement and ROI

Indicateurs avancés vs retardés, établissement d’une référence avant le déploiement, indicateurs de qualité et de délai de cycle, coût complet des tokens et des licences, problèmes d’attribution et reporting au conseil sans surenchère.

import { Accordions, AccordionItem, Tabs, TabItem } from '@prosefly/astro-components';

Ce domaine représente **16 %** de l’examen blanc — soit environ **8 items sur 50**. Il vérifie si un dirigeant peut prouver la valeur honnêtement : choisir des indicateurs avancés et retardés, **établir une référence avant le déploiement** (la discipline la plus souvent sautée et la plus coûteuse), mesurer la qualité et le délai de cycle, comprendre le coût complet des tokens et des licences, affronter le problème d’attribution et faire un reporting au conseil sans la surenchère qui finit par détruire la crédibilité. Il boucle la boucle ouverte par le [chiffrage des opportunités](/fr/openai/leadership/domains/d1-opportunity-and-value/) : le chiffre que vous avez promis là-bas est le chiffre que vous devez désormais mesurer.

## Ce qu’il faut savoir
La mesure échoue au début, pas à la fin : si vous n’avez pas **établi une référence** de l’état actuel avant de déployer, vous ne pouvez jamais prouver l’amélioration — l’établissement d’une référence est donc le premier acte, pas une réflexion après coup. Distinguez les **indicateurs avancés** (usage actif, délai de cycle, adoption — visibles en semaines) des **indicateurs retardés** (coût, revenu, rétention — visibles en trimestres). Mesurez la **qualité** en parallèle de la vitesse, sinon vous optimiserez le débit tout en dégradant les résultats. Comprenez le **coût complet** : le coût, ce sont les tokens (tarifés à l’usage par million) plus les licences (par utilisateur), et la valeur doit couvrir ce coût avec une marge. Affrontez l’**attribution** honnêtement — l’IA est rarement la seule variable — et faites un reporting au conseil avec des références, des fourchettes et des contrefactuels plutôt que des chiffres héroïques, car une seule surenchère exposée escompte tout ce qui suit.

## Objectifs d’apprentissage
À la fin de cette page, vous devriez être capable de :

1. **Établir une référence** de l’état actuel avant le déploiement pour que l’amélioration soit prouvable.
2. **Choisir** des indicateurs avancés et retardés adaptés à chaque initiative et horizon temporel.
3. **Mesurer** la qualité et le délai de cycle ensemble, pas le débit seul.
4. **Modéliser** le coût complet à partir des coûts de tokens et de licences par rapport à la valeur réalisée.
5. **Traiter** le problème d’attribution par une comparaison contrôlée là où c’est possible.
6. **Rapporter** au conseil de façon crédible, avec des fourchettes, des contrefactuels et sans surenchère.

---

## 6.1 Baseline before deployment

L’échec de mesure le plus courant, c’est de déployer d’abord et de demander « est-ce que ça a aidé ? » après — moment où il n’y a plus de photo « avant » propre à comparer. Établissez la référence d’abord.

| Sans référence | Avec une référence |
| --- | --- |
| « Ça paraît plus rapide » — non prouvable | « Le temps de traitement est passé de 6,2 à 4,1 min » — prouvable |
| Bénéfice contesté par les sceptiques | Bénéfice défendable devant la finance |
| Attribution impossible | Changement mesuré par rapport à un départ connu |
| Le conseil escompte l’affirmation | Le conseil fait confiance à la méthode |

```text
  RIGHT ORDER                     WRONG ORDER
  ───────────                     ───────────
  1. define the metric            1. deploy the tool
  2. measure the baseline         2. announce success
  3. deploy                       3. try to prove it later
  4. measure the change           4. discover there is no baseline
  5. attribute honestly           5. claim vibes as ROI
```

:::tip[Signal d’évaluation]
Les énoncés disant **« nous avons déployé et voulons maintenant prouver le ROI », « comment savons-nous que ça a aidé », « la direction veut le dossier économique validé »** dépendent presque toujours de l’existence d’une référence. La bonne réponse établit ou reconstruit une référence avant de revendiquer un bénéfice ; les distracteurs rapportent l’anecdote ou l’activité comme un ROI.
:::

## 6.2 Leading vs lagging indicators

Vous avez besoin des deux, sur des horloges différentes. Les indicateurs avancés vous disent tôt si l’initiative est sur la bonne voie ; les indicateurs retardés confirment le résultat financier plus tard.

| Type | Exemples | Horizon | Répond à |
| --- | --- | --- | --- |
| **Leading** | Usage actif, taux d’adoption, délai de cycle, score de qualité, taux de reprise | Semaines | « Est-ce que ça marche et est-ce utilisé ? » |
| **Lagging** | Coût de service, revenu, rétention, marge | Trimestres | « Est-ce que cela a été rentable financièrement ? » |

Ne rapporter que les indicateurs retardés vous rend aveugle pendant un trimestre ; ne rapporter que les indicateurs avancés vous fait confondre l’activité avec la valeur. Le conseil veut le résultat retardé ; le programme est piloté par les avancés. Un reporting sain montre les indicateurs avancés en tendance maintenant et indique quand le résultat retardé sera mesurable.

## 6.3 Quality and cycle time together

La vitesse sans qualité est un piège : l’IA peut rendre les gens plus rapides à produire un travail de moins bonne qualité, et un gain de délai de cycle qui augmente le taux d’erreur ou de reprise est une perte nette. Associez toujours un indicateur de débit à un indicateur de qualité.

| Initiative | Indicateur de délai de cycle | Indicateur de qualité associé |
| --- | --- | --- |
| Brouillons de réponse au support | Temps de traitement | CSAT, taux de réouverture, taux d’escalade |
| Rédaction de propositions | Délai jusqu’au premier brouillon | Taux de gain, taux d’erreur/reprise |
| Relecture de documents | Temps par document | Taux d’oubli sur les points matériels |
| Assistance au code | Délai jusqu’au changement | Taux de défauts/incidents, constats de revue |

La discipline de leadership : définissez le garde-fou de qualité *avant* de célébrer le gain de vitesse, et traitez une amélioration de vitesse qui franchit le garde-fou comme un échec, pas un succès.

## 6.4 Unit economics: tokens and seats

Un dirigeant doit comprendre les deux inducteurs de coût, car « le pilote était gratuit » sur une période d’essai devient une vraie facture à l’échelle.

<Tabs>
<TabItem label="The two cost drivers">

- **Tokens** — coût à l’usage pour les charges API/agent, tarifé par million de tokens d’entrée et de sortie. Un raisonnement plus lourd, un contexte plus long et plus de sortie l’augmentent tous ; les paliers de capacité diffèrent largement en prix (un modèle plus léger et moins cher peut être un ordre de grandeur moins cher par token qu’un modèle de raisonnement haut de gamme).
- **Seats** — coût d’abonnement par utilisateur pour ChatGPT Business/Enterprise. Le coût évolue avec les licences *provisionnées*, ce qui est exactement pourquoi le [cimetière de licences](/fr/openai/leadership/domains/d4-adoption-and-change-management/) est un problème financier, pas seulement d’adoption : vous payez les licences qu’elles soient utilisées ou non.

</TabItem>
<TabItem label="The economics that must hold">

```text
  Value per period  >  (seats × seat price)
                     +  (tokens used × token price)
                     +  human review / oversight cost
                     +  run + support overhead

  If not, redesign: right-size the model tier,
  reclaim unused seats, tighten context length,
  or narrow scope — before scaling.
```

</TabItem>
</Tabs>

Deux leviers de leadership en découlent directement. D’abord, **adapter le palier de modèle à la tâche** : acheminer le travail simple à fort volume vers un modèle plus léger et moins cher, et réserver le palier de raisonnement haut de gamme au travail réellement difficile, est souvent le plus grand levier de coût unique. Ensuite, **récupérer les licences inutilisées** : payer pour des licences provisionnées mais inactives est du pur gaspillage qu’un rapport d’usage met en évidence.

:::tip[Signal d’évaluation]
Les énoncés portant sur **« le pilote était bon marché mais la facture a grimpé », « coût par utilisateur », « nous payons des licences que personne n’utilise », « quel modèle exécuter à volume »** sont des items de coût complet. Les bonnes réponses adaptent le palier de modèle, récupèrent les licences inactives ou vérifient la valeur par rapport au coût d’exploitation total ; les distracteurs supposent la tarification d’essai ou ignorent le coût de supervision.
:::

## 6.5 The attribution problem

L’IA est rarement la seule chose qui a changé. La vente a aussi recruté, le marché a bougé, un processus a été rationalisé en même temps. Surestimer l’attribution est la voie la plus rapide vers la perte de confiance du conseil quand un sceptique tire le fil.

| Tactique d’attribution | Force |
| --- | --- |
| A/B ou holdout (certaines équipes utilisent l’IA, d’autres non) | La plus forte ; isole l’effet de l’IA |
| Avant/après avec une référence stable | Bonne si aucun autre changement majeur n’a eu lieu |
| Comparaison de cohortes (équipes similaires) | Modérée ; contrôle certains facteurs de confusion |
| Corrélation avec l’usage | Faible ; suggestive, pas causale |
| « Le revenu a augmenté et nous avons lancé l’IA » | Nulle ; pure affirmation de coïncidence |

Là où les enjeux le justifient, concevez un **A/B ou un holdout** dès le départ. Là où vous ne le pouvez pas, énoncez les facteurs de confusion ouvertement et revendiquez une *fourchette* plutôt que tout le delta. L’honnêteté sur l’attribution est elle-même de la crédibilité : un dirigeant qui dit « l’IA a contribué à environ 30–50 % de cette amélioration, le reste est le changement de processus » est cru ; celui qui revendique 100 % ne l’est pas.

## 6.6 Reporting to a board without overclaiming

Le rapport au conseil est l’endroit où chaque discipline antérieure est encaissée ou dilapidée. Une seule surenchère exposée escompte chaque chiffre futur que vous présentez.

| À faire | À éviter |
| --- | --- |
| Montrer la référence et le changement par rapport à elle | Présenter un chiffre « après » brut sans « avant » |
| Donner des fourchettes et énoncer la confiance | Donner un unique chiffre héroïque |
| Séparer le bénéfice encaissable de la capacité | Comptabiliser tout le temps économisé comme du cash |
| Énoncer le contrefactuel / les facteurs de confusion | Revendiquer tout le delta comme dû à l’IA |
| Associer les gains de vitesse à des garde-fous de qualité | Rapporter le débit pendant que la qualité glisse |
| Rapporter les indicateurs avancés maintenant, les retardés quand ils sont prêts | Promettre des résultats retardés prématurément |

```text
  CREDIBLE BOARD LINE
  "Support handle time fell 34% (baseline 6.2 → 4.1 min) on the
   60% of tickets in scope. ~30% of the saved time is redeployed
   (cashable), the rest is capacity. Leading indicators are strong;
   the cost-to-serve outcome will be measurable next quarter.
   An A/B against two control regions attributes ~80% of the drop
   to the assist. Net run cost is below benefit with margin."
```

Voilà à quoi ressemble « rapporter sans surenchère » : spécifique, borné, attribué, et donc digne de confiance.

## Cadre de décision
### The P-R-O-V-E measurement plan

Attachez ceci à chaque initiative financée avant qu’elle ne se déploie, pour que la mesure soit conçue dès le départ, pas ajoutée après coup.

| Lettre | Étape | Échec si sautée |
| --- | --- | --- |
| **P**re-baseline | Mesurer l’état actuel avant de déployer | Aucune amélioration prouvable |
| **R**ight indicators | Choisir avancés + retardés, avec un garde-fou de qualité | Activité confondue avec valeur ; la qualité glisse |
| **O**wn the economics | Modéliser tokens + licences + supervision vs valeur | Passer à l’échelle un pilote déficitaire |
| **V**erify attribution | Concevoir A/B ou holdout, ou énoncer les facteurs de confusion | Surenchère, ensuite discréditée |
| **E**vidence to the board | Rapporter référence, fourchette, contrefactuel honnêtement | Crédibilité perdue à la première affirmation exposée |

## Erreurs fréquentes
| Erreur | Pourquoi elle survient | Que faire à la place |
| --- | --- | --- |
| Déployer avant d’établir une référence | Tout le monde veut commencer | Établir d’abord la référence de l’indicateur ; sinon l’amélioration est non prouvable |
| Ne rapporter que les indicateurs retardés (ou que les avancés) | Une seule horloge paraît plus simple | Rapporter les deux ; piloter sur les avancés, prouver sur les retardés |
| Célébrer la vitesse pendant que la qualité chute | La vitesse est visible ; la qualité non | Associer chaque indicateur de débit à un garde-fou de qualité |
| Supposer la tarification d’essai à l’échelle | Les pilotes semblent gratuits | Modéliser tokens + licences + supervision avant de passer à l’échelle |
| Tout exécuter sur le modèle haut de gamme | Le meilleur modèle paraît le plus sûr | Adapter le palier à la tâche ; c’est le plus grand levier de coût |
| Payer des licences inactives | Personne ne revoit le provisionnement | Récupérer les licences inutilisées ; un rapport d’usage les met en évidence |
| Attribuer 100 % à l’IA | Tout le delta est tentant | Utiliser A/B/holdout ou énoncer les facteurs de confusion et revendiquer une fourchette |
| Un unique chiffre héroïque au conseil | Il est persuasif une fois | Les fourchettes, références et contrefactuels gagnent une confiance durable |

## Mise en situation
**Scénario.** Votre PDG veut dire au conseil que « l’IA a délivré 4 M£ de valeur cette année ». L’affirmation repose sur : une équipe de support dont le temps de traitement « paraît beaucoup plus rapide » depuis le lancement de l’assist ChatGPT (aucune mesure « avant » n’a été prise) ; une région de vente qui a crû de 12 % dans la même période où elle a adopté la rédaction de propositions par IA (et qui a aussi recruté deux commerciaux seniors et est entrée sur un marché en hausse) ; et un chiffre « 4 M£ » à l’échelle de l’entreprise produit en multipliant les minutes économisées estimées de chaque utilisateur par son taux chargé — incluant 40 % de licences qui ne montrent aucun usage actif. Le directeur financier est sceptique et le comité d’audit posera des questions.

**Trace de raisonnement expert.**

1. **Refuser le chiffre héroïque composite.** « 4 M£ » est exactement l’affirmation qui s’effondre sous une seule question tranchante, et son effondrement discréditerait tout le programme d’IA. Mon travail est de rendre le chiffre *plus petit et défendable* plutôt que grand et fragile.

2. **Corriger l’affirmation du support — ou la rétrograder.** « Paraît plus rapide » sans référence est non prouvable. Je vérifie si les journaux de temps de traitement précèdent le lancement ; si une référence peut être reconstruite, je rapporte le delta mesuré sur les tickets dans le périmètre ; sinon, je le rapporte comme une tendance d’indicateur avancé à mesurer correctement le trimestre prochain, pas comme de la valeur encaissée. Pas de référence, pas d’affirmation de ROI.

3. **Affronter l’attribution de la vente.** Une croissance régionale de 12 % coïncidant avec l’adoption de l’IA n’est pas la preuve que l’IA l’a causée — deux recrues seniors et un marché en hausse sont de gros facteurs de confusion. Le geste honnête est une comparaison de cohortes ou un holdout par rapport à des régions similaires ; à défaut, je ne revendique qu’une *fourchette* de la hausse et j’énonce les facteurs de confusion. Revendiquer les 12 % complets serait la surenchère que le comité d’audit est fait pour détecter.

4. **Retirer l’inflation par les licences.** Multiplier les minutes estimées par le taux chargé sur *toutes* les licences — dont 40 % inactives — est un double non-sens : cela compte la capacité comme du cash et compte les non-utilisateurs comme bénéficiaires. Je retire entièrement les licences inactives (et je signale la dépense de licences gaspillée comme un coût à récupérer, selon D4), et je sépare le bénéfice restant en encaissable vs capacité.

5. **Reconstruire le rapport de façon crédible.** Présenter le delta de support mesuré (ou une tendance étiquetée), une contribution de vente en fourchette et attribuée, et un chiffre de productivité défendable net des licences inactives et séparé encaissable/capacité — avec le coût d’exploitation (tokens + licences + supervision) soustrait. Le total sera bien en dessous de 4 M£ et parfaitement défendable.

6. **Donner au conseil la méthode, pas seulement le chiffre.** Références, fourchettes, contrefactuels et l’action de récupération des licences signalent un dirigeant qui maîtrise — ce qui vaut plus qu’un grand chiffre fragile.

**Résultat prêt pour le conseil :** le composite de 4 M£ est refusé ; l’affirmation du support est référencée ou rétrogradée en tendance ; la hausse des ventes est attribuée avec un holdout/cohorte et rapportée en fourchette ; les licences inactives sont retirées et signalées pour récupération ; le chiffre final est plus petit, attribué, net de coût et digne de confiance — et la crédibilité du programme survit au comité d’audit.

## Pièges de l’évaluation
| Piège | Pourquoi il est tentant | Le discriminant |
| --- | --- | --- |
| Rapporter « ça paraît plus rapide » comme un ROI | L’équipe est convaincue | Pas de référence signifie pas de bénéfice prouvable ; mesurer ou rétrograder en tendance |
| Attribuer toute une hausse de revenu coïncidente à l’IA | Tout le delta paraît formidable | Les facteurs de confusion (recrutements, marché) exigent A/B/holdout ou une fourchette énoncée |
| Multiplier les minutes économisées sur toutes les licences | Produit un grand titre | Exclut les licences inactives ; compte la capacité comme du cash — retirer et séparer |
| Exécuter chaque charge sur le modèle haut de gamme | Le meilleur modèle paraît le plus sûr | Adapter le palier est souvent le plus grand levier de coût |
| Ne rapporter que le résultat financier retardé | C’est ce que le conseil veut | Vous êtes alors aveugle un trimestre ; associer aux indicateurs avancés |
| Célébrer un gain de délai de cycle pendant que la qualité glisse | La vitesse est l’indicateur visible | Un gain de vitesse qui franchit le garde-fou de qualité est une perte nette |

## Questions d’entraînement
Chaque item indique combien de réponses sélectionner. Engagez-vous avant de révéler.

<Accordions>
  <AccordionItem title="Q1 · Une équipe a déployé un assist IA et veut maintenant prouver qu’il a fait gagner du temps, mais aucune mesure « avant » n’a été prise. Quel est le problème central ? (Sélectionnez une réponse)">
    A. Le modèle est trop lent.
    B. Sans référence, l’amélioration ne peut pas être prouvée ; la mesure aurait dû précéder le déploiement.
    C. L’équipe a utilisé le mauvais palier de modèle.
    D. Le rapport est trop court.

    **Réponse : B.** Pas de référence signifie pas d’amélioration prouvable — l’établissement d’une référence doit précéder le déploiement. La vitesse du modèle (A), le choix de palier (C) et la longueur du rapport (D) ne sont pas l’échec de mesure fondamental.
  </AccordionItem>

  <AccordionItem title="Q2 · Lesquels sont des indicateurs AVANCÉS (LEADING) pour une initiative d’IA ? (Sélectionnez deux réponses)">
    A. L’usage actif hebdomadaire et le taux d’adoption.
    B. Le délai de cycle sur la tâche cible.
    C. Le coût de service trimestriel.
    D. Le revenu annuel.
    E. La marge sur l’année complète.

    **Réponse : A et B.** L’usage actif et le délai de cycle bougent en semaines et pilotent le programme. Le coût de service (C), le revenu (D) et la marge (E) sont des résultats financiers retardés visibles sur des trimestres.
  </AccordionItem>

  <AccordionItem title="Q3 · Le temps de traitement d’une équipe de support a chuté de 30 % mais le taux de tickets rouverts a fortement augmenté. Comment juger cela ? (Sélectionnez une réponse)">
    A. Un succès clair ; la vitesse s’est améliorée.
    B. Pas un succès en l’état ; le gain de vitesse a franchi le garde-fou de qualité, ce qui peut être une perte nette.
    C. Sans importance ; seul le temps de traitement compte.
    D. Une raison de supprimer la relecture humaine.

    **Réponse : B.** Un gain de débit qui dégrade la qualité peut être une perte nette ; la vitesse et la qualité doivent être jugées ensemble. La vitesse seule (A, C) ignore la qualité, et supprimer la relecture (D) l’aggraverait.
  </AccordionItem>

  <AccordionItem title="Q4 · Un pilote « était pratiquement gratuit » sur une période d’essai, mais à l’échelle la facture a grimpé. Quels inducteurs de coût doivent être modélisés ? (Sélectionnez deux réponses)">
    A. L’usage de tokens pour les charges API/agent.
    B. Les coûts de licence par utilisateur pour les accès provisionnés.
    C. La palette de couleurs de l’interface.
    D. Le nombre de réunions du conseil tenues.
    E. Les dépenses marketing du fournisseur.

    **Réponse : A et B.** Les tokens et les licences sont les deux vrais inducteurs de coût à l’échelle. La couleur de l’interface (C), le nombre de réunions (D) et le marketing du fournisseur (E) ne font pas partie de votre coût complet.
  </AccordionItem>

  <AccordionItem title="Q5 · Une région a crû de 12 % dans la même période où elle a adopté l’IA, mais elle a aussi recruté deux commerciaux seniors et le marché a monté. Quelle est l’approche d’attribution la plus honnête (MOST) ? (Sélectionnez une réponse)">
    A. Attribuer les 12 % complets à l’IA.
    B. Utiliser un holdout ou une comparaison de cohortes, ou ne revendiquer qu’une fourchette et énoncer les facteurs de confusion.
    C. N’attribuer jamais rien à l’IA.
    D. L’attribuer au seul marché.

    **Réponse : B.** Avec de gros facteurs de confusion, une comparaison contrôlée ou une fourchette énoncée est l’affirmation honnête. Revendiquer tout (A), rien (C) ou le seul marché (D) sont tous des extrêmes non étayés.
  </AccordionItem>

  <AccordionItem title="Q6 · 40 % des licences ChatGPT provisionnées ne montrent aucun usage actif. Quelle est la réponse correcte en mesure et coût ? (Sélectionnez une réponse)">
    A. Inclure les économies estimées de ces licences dans le chiffre de ROI.
    B. Exclure les licences inactives des affirmations de bénéfice et les récupérer pour réduire le coût.
    C. Acheter plus de licences pour améliorer la moyenne.
    D. Rapporter les licences comme actives pour protéger le programme.

    **Réponse : B.** Les licences inactives ne délivrent aucun bénéfice et coûtent de l’argent ; excluez-les des affirmations et récupérez-les. Compter leurs économies (A) gonfle le ROI, en acheter plus (C) aggrave le gaspillage, et mal rapporter (D) est malhonnête.
  </AccordionItem>

  <AccordionItem title="Q7 · Un PDG veut présenter un unique chiffre « 4 M£ de valeur IA » construit à partir des minutes économisées estimées sur tous les utilisateurs. Que devrait conseiller un dirigeant ? (Sélectionnez une réponse)">
    A. Le présenter tel quel ; un grand chiffre impressionne le conseil.
    B. Le reconstruire avec des références, exclure les licences inactives, séparer l’encaissable de la capacité, attribuer honnêtement et rapporter une fourchette défendable.
    C. Le doubler pour tenir compte des bénéfices cachés.
    D. Refuser de rapporter la moindre valeur.

    **Réponse : B.** Un chiffre défendable, borné et attribué préserve la crédibilité ; un chiffre héroïque fragile met en jeu tout le programme. Le présenter tel quel (A) ou le doubler (C) invite l’effondrement sous l’examen ; refuser entièrement (D) renonce à un reporting légitime.
  </AccordionItem>

  <AccordionItem title="Q8 · Pourquoi ne rapporter QUE les indicateurs financiers retardés est-il risqué en cours de programme ? (Sélectionnez une réponse)">
    A. Les indicateurs retardés sont toujours faux.
    B. Ils n’apparaissent qu’après des trimestres, laissant le programme aveugle quant à savoir s’il fonctionne maintenant.
    C. Les conseils ne demandent jamais de résultats financiers.
    D. Ils coûtent trop cher à calculer.

    **Réponse : B.** Les indicateurs retardés arrivent tard, donc les indicateurs avancés sont nécessaires pour piloter entre-temps. Ils ne sont pas intrinsèquement faux (A), les conseils les veulent bien (C), et le coût (D) n’est pas le problème.
  </AccordionItem>

  <AccordionItem title="Q9 · Une charge de classification simple à fort volume s’exécute sur le modèle de raisonnement haut de gamme le plus cher. Quel est le levier de coût le plus fort (STRONGEST) ? (Sélectionnez une réponse)">
    A. Réduire le nombre d’utilisateurs.
    B. Adapter à un palier de modèle plus léger et moins cher adapté à la tâche simple.
    C. Désactiver la journalisation.
    D. Augmenter le reasoning effort pour la précision.

    **Réponse : B.** Adapter le palier de modèle à la difficulté de la tâche est souvent le plus grand levier de coût unique ; une tâche simple à fort volume a rarement besoin du palier haut de gamme. Réduire les utilisateurs (A) réduit la valeur, désactiver la journalisation (C) nuit à la gouvernance, et augmenter l’effort (D) accroît le coût.
  </AccordionItem>

  <AccordionItem title="Q10 · Pour une initiative de rédaction de propositions, quelle PAIRE d’indicateurs combine correctement le délai de cycle et la qualité ? (Sélectionnez une réponse)">
    A. Délai jusqu’au premier brouillon et nombre de brouillons produits.
    B. Délai jusqu’au premier brouillon et taux de gain (avec taux d’erreur/reprise).
    C. Nombre de connexions et licences émises.
    D. Latence du modèle et nombre de tokens.

    **Réponse : B.** Le délai jusqu’au premier brouillon (vitesse) associé au taux de gain et à la reprise (qualité) mesure le résultat, pas seulement le débit. Le nombre de brouillons (A), les connexions/licences (C) et la latence/tokens (D) sont des indicateurs d’activité ou de coût, pas de qualité.
  </AccordionItem>

  <AccordionItem title="Q11 · Selon P-R-O-V-E, que DOIT-il se passer avant qu’une initiative ne se déploie ? (Sélectionnez une réponse)">
    A. Le conseil doit approuver le chiffre de ROI final.
    B. La référence de l’état actuel doit être mesurée.
    C. Toutes les licences doivent être provisionnées.
    D. Le modèle le plus avancé doit être sélectionné.

    **Réponse : B.** L’établissement d’une référence est la première étape de P-R-O-V-E et doit précéder le déploiement. Un chiffre de ROI final (A) ne peut pas encore exister, un provisionnement complet des licences (C) est prématuré, et le choix du modèle (D) n’est pas un prérequis de mesure.
  </AccordionItem>

  <AccordionItem title="Q12 · Quelles DEUX pratiques rendent un rapport au conseil sur la valeur de l’IA crédible plutôt que fragile ? (Sélectionnez deux réponses)">
    A. Montrer la référence et le changement mesuré par rapport à elle.
    B. Énoncer une fourchette avec le contrefactuel ou les facteurs de confusion.
    C. Présenter un unique grand chiffre héroïque sans méthode.
    D. Comptabiliser tout le temps économisé comme du cash.
    E. Omettre les coûts d’exploitation pour maintenir le chiffre élevé.

    **Réponse : A et B.** Les références et les affirmations en fourchette et attribuées résistent à l’examen. Un chiffre héroïque (C), comptabiliser tout le temps comme du cash (D) et omettre les coûts d’exploitation (E) rendent tous le chiffre fragile et finalement discréditant.
  </AccordionItem>
</Accordions>

## À retenir
- **Établissez une référence avant le déploiement** ; sans photo « avant », l’amélioration est non prouvable et le conseil escompte l’affirmation.
- Rapportez les **indicateurs avancés** (usage, délai de cycle, qualité — semaines) et les **indicateurs retardés** (coût, revenu, marge — trimestres) ensemble.
- **Associez la vitesse à la qualité** ; un gain de délai de cycle qui franchit le garde-fou de qualité est une perte nette.
- Modélisez le **coût complet** — tokens plus licences plus supervision — et adaptez le palier de modèle ; récupérez les licences inactives.
- Affrontez l’**attribution** honnêtement par des comparaisons A/B ou holdout, ou énoncez les facteurs de confusion et revendiquez une fourchette.
- **Rapportez sans surenchère** : références, fourchettes, contrefactuels, encaissable-vs-capacité — une seule surenchère exposée discrédite tout.
- Attachez **P-R-O-V-E** à chaque initiative avant qu’elle ne se déploie : pre-baseline, right indicators, own the economics, verify attribution, evidence to the board.
