Réponses d’IA avec citations : comment vérifier une réponse sur vos documents

Pour vérifier une réponse d’IA fondée sur des documents, considérez chaque citation comme une promesse à tester : rattachez chaque phrase au passage qu’elle cite, ouvrez ce passage et assurez-vous qu’il dit bien la même chose, avec les mêmes chiffres, les mêmes conditions et les mêmes exceptions. Avec un peu d’habitude, cela prend quelques minutes par réponse. Voici une méthode en cinq étapes, un exemple commenté avec passages numérotés, les signaux d’alerte des citations inventées et les cas où il vaut mieux lire soi-même les passages.

Pourquoi les citations comptent dans une IA documentaire

Un outil de questions-réponses sur documents répond à partir d’un ensemble de fichiers défini : règlement intérieur, accords d’entreprise, documentation produit, guides de l’URSSAF ou de l’INRS. À chaque question, il retrouve quelques passages pertinents et demande à un modèle de langage de rédiger la réponse à partir d’eux. Ce circuit est détaillé dans comment fonctionne le RAG, étape par étape.

La citation est ce qui distingue cette réponse de celle d’un assistant généraliste : elle vous donne un chemin vers le texte, pour juger sur pièce plutôt que sur le ton assuré de la réponse. Mais elle prouve seulement qu’un passage a été montré au modèle. Elle ne garantit pas qu’il l’a bien lu, qu’il a conservé les conditions attachées à la règle, ni qu’il n’a rien ajouté de sa mémoire. Côté conception, on limite ces erreurs par l’ancrage et le droit de refuser (voir réduire les hallucinations de l’IA grâce aux réponses sourcées). Cet article se place de l’autre côté : celui du lecteur qui doit décider s’il peut agir sur la réponse.

Vérifier une réponse d’IA en cinq étapes

1. Reformulez votre question. Avant de lire la réponse, écrivez en une ligne ce que vous cherchez à savoir. Vérifiez ensuite que la réponse traite bien cette question, et non une question voisine plus facile à trouver dans les documents.
2. Associez chaque affirmation à sa citation. Phrase par phrase, repérez les renvois [1], [2], etc. Notez les phrases sans renvoi : ce sont des transitions, ou bien un apport du modèle lui-même.
3. Ouvrez le passage et lisez-le en entier. Ne vous arrêtez pas aux mots surlignés. Comparez les montants, les unités, les dates, les verbes (doit, peut, est recommandé) et les conditions.
4. Identifiez le document source. Quel fichier, quelle version, quelle date, quel émetteur ? Une citation exacte d’une note de service remplacée reste une mauvaise réponse.
5. Cherchez ce qui manque. Un spécialiste ajouterait-il une exception, un seuil, une règle différente pour les temps partiels ou selon la convention collective ? Si oui, posez une question de relance ciblée ou interrogez directement les passages.

Les étapes 2 et 3 révèlent la plupart des problèmes. Les étapes 4 et 5 attrapent les erreurs plus discrètes : des réponses fidèles à un passage, mais incomplètes ou périmées.

Cas pratique : lire une réponse avec passages numérotés

Prenons la base documentaire interne d’une PME fictive. Une salariée demande : « Est-ce que je peux me faire rembourser ma box internet si je suis en télétravail ? » L’outil répond :

Oui. Les salariés en télétravail perçoivent une participation de 20 € par mois à leurs frais de connexion [1]. Elle est versée avec le salaire [2]. Vous pouvez aussi commander un siège ergonomique dans la limite de 250 € [3].Réponse générée (exemple fictif)

Les trois passages affichés dessous disent ceci. Passage [1], accord de télétravail (mis à jour en janvier 2026) : « Les salariés en télétravail régulier d’au moins deux jours par semaine, après validation du manager, bénéficient d’une participation forfaitaire de 20 € par mois aux frais de connexion. » Passage [2], FAQ paie : « Les indemnités récurrentes sont versées sur la paie du mois suivant. » Passage [3], guide des équipements (2023) : « Les salariés travaillant sur site peuvent demander un équipement ergonomique auprès des services généraux. »

La première phrase est la plus piégeuse : le montant est juste, donc elle semble vérifiée, mais les conditions d’éligibilité ont disparu. Une salariée en télétravail un jour par semaine lirait « Oui » et se tromperait. La troisième illustre la dérive de citation : le passage porte sur un sujet proche (l’équipement), le renvoi paraît plausible, mais il ne parle ni de télétravail ni de 250 €. Tant qu’aucun passage ne montre ce chiffre, considérez-le comme inventé.

Regardez aussi les dates : le guide de 2023 est plus ancien que l’accord de 2026. Même s’il avait mentionné un budget, il faudrait vérifier qu’il s’applique encore.

Les signaux d’alerte des citations inventées ou trompeuses

• Un chiffre introuvable dans le passage cité. Montants, pourcentages, délais, numéros d’article doivent se retrouver mot pour mot. Sinon, ils ne sont pas sourcés.
• Le bon thème, mais pas la bonne règle. Le passage traite du même domaine, mais d’une autre catégorie : salariés ou intérimaires, cadres ou non-cadres, site ou domicile.
• Une formulation plus catégorique que la source. « Doit » dans la réponse, « peut » ou « est recommandé » dans le passage ; les « en principe » et « sauf » disparaissent.
• Des exceptions oubliées. La règle est reprise, la condition « uniquement si » ne l’est pas.
• Tout renvoie à [1]. Un seul passage sert de référence générale à plusieurs affirmations sans rapport.
• Des guillemets autour d’un texte introuvable. Une citation entre guillemets doit être exacte ; une paraphrase présentée comme citation est suspecte.
• Un article de loi ou un document absent des passages. Si la réponse cite un article du Code du travail que les passages ne contiennent pas, il vient de la mémoire du modèle.
• Des sources sans nom ni date, ou une version ancienne en concurrence avec une plus récente.
• Un outil qui ne dit jamais « je ne sais pas ». S’il répond avec aplomb à tout, y compris hors de ses documents, il comble les trous seul.

Mode « passages » ou réponse rédigée : quand lire soi-même les sources ?

Certains outils permettent de se passer de la réponse rédigée et de n’obtenir que les extraits retrouvés. Pour plusieurs types de questions, c’est la voie la plus sûre.

Sur Kopik, chaque base de connaissances propose les deux. La réponse par défaut est rédigée à partir des seuls passages retrouvés, avec des citations numérotées, et indique quand la base ne contient pas la réponse. Le mode « passages » renvoie uniquement les extraits pertinents, sans réponse rédigée. Via MCP, ce sont les outils `ask_base` (réponse et passages sources numérotés) et `search_base` (passages seuls), au même prix : choisir le texte brut pour une vérification sensible ne coûte rien de plus. La documentation développeurs explique comment se connecter.

Créer la confiance chez vos utilisateurs

Si vous mettez un outil de questions-réponses à disposition de vos équipes ou de vos clients, rendez la vérification naturelle plutôt que de compter sur la bonne volonté de chacun :

• Affichez les passages à côté de la réponse, avec le nom et la date du document, pas seulement un numéro.
• Faites de « ce n’est pas dans les documents » une réponse normale. On fait davantage confiance à un outil qu’on a vu refuser.
• Retirez les versions périmées pour que l’ancienne et la nouvelle règle ne se contredisent pas ; notre guide pour préparer ses documents pour l’IA détaille la démarche.
• Contrôlez un échantillon chaque mois : dix vraies questions, les cinq étapes, et une correction des documents là où les réponses échouent.
• Dites où l’humain décide. En RH, en juridique ou en sécurité, la réponse est un point de départ. L’AI Act fixe des obligations de transparence pour certains systèmes d’IA, et la CNIL publie des recommandations utiles dès que des données personnelles sont en jeu.

Pour vous entraîner, interrogez une base publique comme Santé et sécurité au travail : les obligations de l’employeur, puis vérifiez chaque phrase de la réponse avec les passages numérotés.

Liste de contrôle avant d’agir sur une réponse

• La réponse traite exactement ma question.
• Chaque chiffre, date et obligation porte une citation.
• J’ai retrouvé chaque chiffre clé dans le passage cité.
• Les conditions et exceptions du passage figurent dans la réponse.
• Le document source est à jour et vient du bon émetteur.
• La réponse ne cite aucun texte absent des passages.