Module 8 — Intégrer l'éthique, la sécurité et la conformité

Contrôle des hallucinations en production : ce qui marche, ce qui ne marche pas, ce qui est de la poudre aux yeux

L'hallucination est le mode d'échec LLM le plus discuté et le plus mal compris. La littérature académique et praticienne 2024-2026 a convergé vers une taxonomie workable, mais le discours populaire sur r/MachineLearning, r/LocalLLaMA et r/ChatGPTPro est encore encombré de réclamations qui ne survivent pas à l'examen.

Ce qui réduit vraiment l'hallucination en production :

• →Génération augmentée par récupération bien faite. Pas la version jouet (une recherche vectorielle one-shot). La version qui inclut réécriture de requête, récupération hybride mot-clé + vecteur, reranking et instructions de grounding explicites. Les papiers du travail de récupération contextuelle d'Anthropic et la documentation LlamaIndex décrivent les détails opérationnels.
• →Génération contrainte pour sorties structurées. Mode JSON, function calling et décodage contraint par grammaire éliminent des classes entières d'hallucination en rendant les sorties invalides impossibles.
• →Modèles vérificateurs ou self-consistency sur les réclamations critiques. Utiliser un second modèle (ou le même modèle avec un prompt différent) pour fact-check le premier réduit l'hallucination sur les requêtes factuelles d'une quantité mesurable dans les évaluations publiées.
• →Température plus basse pour les tâches factuelles, plus haute pour la créative. Évident mais régulièrement ignoré. Le 0.7 par défaut est faux pour la plupart des workloads factuels.

Ce que les gens pensent qui aide mais qui aide peu :

• →« Dis au modèle de ne pas halluciner. » Effet négligeable dans les évaluations robustes. Le modèle « veut » déjà être correct ; il est juste statistiquement faux parfois.
• →Ajouter « pense étape par étape » à chaque prompt. Aide pour certaines tâches de raisonnement ; pour le rappel factuel, parfois ça empire l'hallucination en inventant des chaînes plausibles.
• →Switcher au plus grand modèle disponible. GPT-5 et Claude Opus hallucinent moins que les modèles plus petits sur les tâches dures, mais pas moins que Gemini Flash sur les faciles. La sélection de modèle compte ; « plus grand = moins d'hallucination » est faux.

Ce qui est activement de la poudre aux yeux :

• →Garanties « sans hallucination ». Aucun produit commercial ne peut livrer ça. Toute réclamation vendeur de zéro hallucination est du marketing.
• →Systèmes de détection sans coût de faux positif. Tous les détecteurs d'hallucination ont des faux positifs qui bloquent des sorties légitimes. Les vendeurs qui cachent ça induisent les acheteurs en erreur.

Le cadrage honnête pour les builders : l'hallucination est un phénomène probabiliste que vous mitigez, pas éliminez. La bonne architecture (RAG + sortie contrainte + vérificateur) vous amène au niveau de fiabilité dont votre application a besoin. La mauvaise architecture (LLM brut + espoir) vous amène en une de Hacker News pour les mauvaises raisons.

Pourquoi les Modèles Hallucinent

Les modèles ne sont pas des bases de données, ce sont des moteurs de complétion de patterns. Ils prédisent ce qui SONNE juste, pas ce qui EST juste.

Prompt : 'Qui a écrit l'article fondateur de 1987 sur la plasticité neuronale ?'
Modèle : 'Dr. Sarah Chen a publié l'article Neural Plasticity and Adaptive Learning dans Science, 1987.'
Réalité : Cet article, cet auteur et cette publication n'existent pas.

Mesurer les Hallucinations

Détection des Biais

Stratégies d'Atténuation

1. →Prompt engineering, Ajouter « Considérez des perspectives diversifiées » ou « Évitez les suppositions de genre » aux prompts système.
2. →Ancrage RAG, Contraindre les réponses à des sources vérifiées et curées.
3. →Filtres de sortie, Post-traiter les sorties pour détecter et signaler les hallucinations potentielles.
4. →Revue humaine, Pour le contenu à enjeux élevés, toujours faire vérifier par un humain avant publication.
5. →Seuils de confiance, Ne présenter les sorties du modèle que quand la confiance dépasse un seuil défini.

Testez Votre Compréhension

Approfondir le sujet

Vous savez maintenant détecter les hallucinations et les biais. Dans le prochain atelier, vous passerez à l'offensive : le red teaming des systèmes IA pour trouver et corriger proactivement les vulnérabilités.

Continuez vers l'atelier : Red Teaming IA et Charte Éthique pour apprendre les tests adversariaux.

Qu'est-ce qu'une Charte de Red Team ?

Une charte de red team est un document formel qui définit :

• →Périmètre : Quel système testons-nous ? Qu'est-ce qui est inclus vs exclu ?
• →Objectifs : Quels types de défaillances cherchons-nous ?
• →Méthodes : Quelles techniques d'attaque sommes-nous autorisés à utiliser ?
• →Rapport : Comment documentons-nous et escaladons-nous les découvertes ?

Périmètre : Chatbot de support client utilisant GPT-5.4
Contexte : Application bancaire, gère les requêtes de compte
Inclus : Contenu des réponses, comportement de refus, traitement des données
Exclu : Infrastructure serveur, système d'authentification

Catégories d'Attaque

Stratégies d'Atténuation

Testez Votre Compréhension

Continuez votre apprentissage

Vous pouvez maintenant trouver et corriger systématiquement les vulnérabilités IA. Dans le prochain module, vous maîtriserez le context engineering, les techniques avancées qui poussent les performances IA à leurs limites.

Continuez vers Context Engineering : Les Quatre Piliers pour apprendre l'architecture de prompting avancée.