Guides pratiques approfondis

Vérifier une synthèse IA avant de l’utiliser

Relier chaque affirmation importante à son passage source, puis contrôler nombres, versions, omissions et incertitudes.

Mise à jour :

Synthèse et sources posées côte à côte. Scène illustrative.

Synthèse et sources posées côte à côte. Scène illustrative.

Le texte résume-t-il les documents ou ajoute-t-il des conclusions ?

Une synthèse fluide peut contenir une référence inventée, une attribution erronée ou un lien que le document ne démontre pas. Le profil NIST sur l’IA générative décrit notamment le risque de confabulation. Le contrôle proposé ici est un travail de lecture et de traçabilité ; il ne mesure pas la vérité par le style du texte.

  1. Décomposer les affirmations

    Découper les phrases qui portent un fait, un chiffre, une causalité ou une identité. Séparer ce que le document déclare et ce que la synthèse infère ; prioriser les éléments qui changent la décision.

  2. Ouvrir les pièces citées

    Vérifier titre, auteur, identifiant, date et version. Retrouver le passage exact et noter s’il soutient réellement la proposition ; une URL existante n’est pas une citation probante.

  3. Recalculer et comparer

    Reprendre unités, dénominateurs, périodes et signe des variations. Vérifier négations, réserves, populations exclues et différences entre « associé à » et « causé par ».

  4. Rendre les écarts visibles

    Marquer chaque affirmation : étayée, contradite ou non établie dans le corpus. Réviser le texte ou demander une pièce complémentaire ; garder la réponse originale et les motifs de correction.

Situations et arbitrages

Situations types pour préparer un contrôle. Elles ne décrivent pas des missions ou observations réalisées.

Référence réelle, affirmation absente

Dans un cas fictif, une page existe mais ne contient pas le chiffre annoncé. Classer la proposition non établie, puis retrouver la table exacte ; ne pas valider au seul vu du domaine.

Une réserve disparaît

Une synthèse illustrative transforme « dans cet échantillon » en « dans tous les cas ». Restaurer population et limite, même si la phrase résultante paraît moins catégorique.

Preuve à conserver

  • Réponse originale et contexte de production
  • Liste d’affirmations et passages sources
  • Calculs repris et versions
  • Écarts, correction, responsable et date

Références officielles

Fiches de sources associées

Protocoles connexes

Points à vérifier avant de conclure

  • Chaque fait important a-t-il un passage ?
  • Les nombres ont-ils été recalculés ?
  • Les limites de population sont-elles conservées ?
  • L’inférence est-elle distinguée du document ?

Une matrice affirmation, passage, version et décision, accompagnée du texte corrigé.

Questions fréquentes

Une réponse citant plusieurs liens est-elle automatiquement fiable ?

Non. Chaque lien doit soutenir le passage concerné. Des liens répétés vers une même source ne constituent pas plusieurs confirmations indépendantes.

Que faire si le document source est inaccessible ?

Conserver l’URL, la date et l’état de consultation. Classer l’affirmation non vérifiée dans ce contrôle ; chercher une version accessible sans traiter l’absence d’accès comme une réfutation.

OUTILS / REGISTRES

Rédiger un relevé

Une relecture d’un petit corpus ne certifie ni tous les comportements du modèle ni les faits externes aux documents. Ne pas envoyer de pièces confidentielles à un outil tiers pour reproduire un cas sans cadre d’accès approprié.

  • Date de consultation et fuseau
  • URL exacte
  • Affirmation à vérifier
  • Interface / mode / compte
  • Version / révision
  • Passage / valeur observée
  • Limite / incertitude
  • Décision / prochaine action
  • Responsable du contrôle
  • Prochain contrôle