Évaluer et itérer — Critères FACTS

Section 10.2.9 : Évaluer et itérer — Critères FACTS

🎯 Objectif pédagogique

Développer une méthode systématique pour évaluer la qualité des réponses IA et itérer efficacement jusqu'à obtenir un résultat exploitable. Maîtriser la grille FACTS et les stratégies d'itération pour ne plus jamais accepter une réponse médiocre.

Le piège de l'acceptation passive

Le plus grand risque avec l'IA générative n'est pas qu'elle se trompe — c'est que vous acceptiez sa réponse sans évaluation critique. Un bon praticien IA ne prend jamais la première réponse pour argent comptant.

Pourquoi ce piège est si courant :

• →L'IA produit des réponses fluides et confiantes — le ton "expert" donne l'illusion de la compétence
• →La fatigue cognitive nous pousse à accepter la première réponse quand elle est "à peu près correcte"
• →Le biais d'automatisation : nous faisons excessivement confiance aux systèmes automatisés
• →Le coût de l'itération semble élevé — mais il est toujours inférieur au coût d'utiliser un résultat médiocre

En réalité, la différence entre un utilisateur IA moyen et un utilisateur IA expert tient en un mot : l'itération. L'expert évalue systématiquement et itère 2-3 fois. L'utilisateur moyen prend la première réponse.

Les critères FACTS : votre grille d'évaluation

Fidélité — Actionnabilité — Complétude — Ton — Structure

Le scoring en pratique :

• →Score total ≥ 40/50 : la réponse est utilisable telle quelle
• →Score 30-39 : une itération ciblée suffit
• →Score < 30 : reformulez le prompt initial — l'itération ne suffira pas

Les 5 stratégies d'itération

Stratégie 1 : L'itération chirurgicale — Ciblez le problème spécifique

La plus efficace et la plus rapide. Identifiez précisément ce qui ne va pas et demandez une correction chirurgicale.

Bonne réponse dans l'ensemble, mais 3 ajustements :

1. La section sur le pricing est trop vague. Remplace 
   les fourchettes génériques par des prix concrets 
   pour le marché français en 2026 :
   - Starter : [fourchette exacte]
   - Pro : [fourchette exacte]
   - Enterprise : [fourchette exacte]

2. Le ton est trop académique pour mon audience (PME, 
   dirigeants non-techniques). Reformule les paragraphes 
   3 et 5 en langage business direct, sans jargon.

3. Il manque totalement la dimension légale. 
   Ajoute un paragraphe sur le RGPD et les obligations 
   de conformité.

Garde tout le reste identique.

Stratégie 2 : L'auto-évaluation forcée — Faire critiquer l'IA par elle-même

Technique puissante quand vous n'êtes pas sûr de ce qui ne va pas. L'IA identifie souvent des faiblesses que vous n'auriez pas vues.

Relis ta réponse ci-dessus et note-la de 1 à 10 
sur chaque critère FACTS :

- F (Fidélité) : /10 — les infos sont-elles vérifiables ?
- A (Actionnabilité) : /10 — peut-on agir immédiatement ?
- C (Complétude) : /10 — tous les aspects sont-ils couverts ?
- T (Ton) : /10 — adapté à l'audience cible ?
- S (Structure) : /10 — clair et bien organisé ?

Pour chaque score < 8 :
1. Explique précisément la faiblesse
2. Propose une amélioration concrète
3. Réécris la section concernée

Puis produis la version finale intégrant toutes 
les améliorations.

Stratégie 3 : L'itération par confrontation — Simuler un regard externe critique

Idéale quand la réponse semble "correcte" mais manque de profondeur. On simule le feedback d'un expert exigeant.

Tu montres ta réponse à 3 personnes :

1. Un expert du domaine (15 ans d'expérience) qui dit : 
   "C'est superficiel. Un junior pourrait écrire ça."
2. Le CEO qui dit : "Où sont les chiffres ? 
   Je ne peux rien décider avec ça."
3. Un client qui dit : "Concrètement, je fais quoi 
   lundi matin à 9h ?"

Réécris ta réponse en adressant chacune de ces critiques :
- Plus de profondeur technique (expert)
- Plus de données chiffrées (CEO)
- Plus d'actions concrètes step-by-step (client)

Stratégie 4 : Le changement de perspective — Voir le problème autrement

Quand l'itération classique ne suffit pas, changez l'angle d'attaque.

Ta réponse précédente abordait le sujet du point de vue 
[PERSPECTIVE A]. Maintenant, réécris-la du point de vue de :

1. Un sceptique qui doute de chaque affirmation
2. Un débutant absolu qui n'a aucun contexte
3. Un concurrent qui cherche les failles

Ensuite, fusionne les 3 perspectives en une réponse 
équilibrée qui anticipe les objections.

Stratégie 5 : L'itération par soustraction — Rendre plus concis

Souvent, le problème n'est pas qu'il manque du contenu — c'est qu'il y en a trop. Le superflu noie l'essentiel.

Ta réponse fait [X] mots. Réécris-la en [X/2] mots maximum 
en supprimant :
- Tout ce qui est évident ou déjà connu de l'audience
- Les transitions et phrases de liaison inutiles
- Les exemples redondants (garde le meilleur de chaque catégorie)
- Les qualificatifs vides ("très", "vraiment", "tout à fait")

Règle : chaque phrase restante doit apporter une information 
que le lecteur ne possédait pas avant de la lire.

Le workflow d'itération en 4 étapes

Exemples concrets d'itération

Cas 1 : Le rapport trop vague

Prompt initial : "Analyse les tendances du marché SaaS en France"

• →F: 5/10 (chiffres non sourcés), A: 4/10 (aucune recommandation), C: 6/10 (B2C ignoré), T: 8/10, S: 7/10
• →Score : 30/50 → Itération chirurgicale nécessaire

Itération :

Bonne base, mais nécessite 3 corrections majeures :
1. FIDÉLITÉ : cite tes sources pour chaque chiffre. 
   Si tu n'as pas de source, indique "estimation" 
   et donne la fourchette.
2. ACTIONNABILITÉ : pour chaque tendance identifiée, 
   ajoute "Ce que cela signifie pour une PME SaaS 
   française : [action concrète]".
3. COMPLÉTUDE : tu as ignoré le segment B2C et le marché 
   vertical. Ajoute une section sur chacun.

Cas 2 : Le code review trop gentil

Prompt initial : "Fais une code review de ce fichier Python"

• →F: 8/10, A: 5/10 (suggestions vagues), C: 3/10 (sécurité absente), T: 9/10, S: 7/10
• →Score : 32/50 → Confrontation + chirurgical

Itération :

Ta review est trop indulgente. Un senior lead ingénieur 
la relirait et dirait : "Tu n'as pas checké la sécurité 
et tes suggestions ne contiennent pas de code corrigé."

Reprends ta review en ajoutant :
1. Section SÉCURITÉ complète (injection SQL, XSS, auth, 
   données sensibles exposées)
2. Pour CHAQUE problème identifié : le code actuel ET 
   le code corrigé, pas juste une description
3. Un tableau récapitulatif avec gravité et priorité

Exercice pratique : Le challenge FACTS

Durée : 20 minutes

1. →Prenez une réponse IA récente que vous avez utilisée dans votre travail
2. →Notez-la sur chaque critère FACTS (F, A, C, T, S) de 1 à 10
3. →Pour chaque score < 8, rédigez un prompt d'itération ciblé
4. →Envoyez les itérations et comparez la V1 et la V2
5. →La V2 a-t-elle un score ≥ 40/50 ? Si non, essayez la stratégie de confrontation