Votre assistant IA est configuré. Il répond vite, dans un français impeccable. Avant de le confier à vos équipes, une question reste entière : ses réponses sont-elles justes, sur vos questions, avec vos documents ?
Une démonstration ne suffit pas pour le savoir. Il faut un test, préparé à l’avance, mené par les personnes qui connaissent le métier. Voici la méthode que nous suivons pour tester un assistant avant son lancement, et que vous pouvez appliquer seul.
Pourquoi tester, si l’outil est réputé ?
Un outil d’IA générative produit la réponse la plus plausible, pas forcément la plus exacte. La Fédération française du bâtiment le résume dans sa doctrine sur l’IA et le travail : l’IA « n’est pas conçue pour l’exactitude mais pour sa vraisemblance » (doctrine FFB, mars 2026). Nous avons détaillé ce point dans notre article l’IA peut-elle se tromper ?
La qualité d’un assistant dépend surtout de trois choses propres à votre entreprise : les documents qu’il consulte, les consignes qu’on lui a données, et les questions que vos équipes lui poseront vraiment. Aucune note publiée par un éditeur ne mesure cela. La Direction générale des Entreprises le rappelle dans une page récente : « la fiabilité des résultats, la transparence des outils et le maintien d’une validation humaine des décisions importantes demeurent essentiels » (DGE, octobre 2026).
La méthode en cinq étapes
1. Rassembler de vraies questions
Demandez aux futurs utilisateurs les questions qu’ils posent, ou qu’on leur pose, chaque semaine. Une vingtaine suffit pour un premier assistant, si elles sont bien choisies : les questions les plus fréquentes, quelques questions difficiles, une ou deux questions hors sujet, et au moins une question dont la réponse ne se trouve dans aucun document. Gardez leurs mots, avec leurs imprécisions : c’est ainsi que l’assistant sera interrogé.
2. Écrire la réponse attendue et sa source
Pour chaque question, l’expert du métier écrit, avant le test, la bonne réponse en quelques lignes et le document où elle se trouve. Sans cette réponse de référence, on juge à l’impression, et une réponse bien tournée paraît toujours juste. Pour une question sans réponse dans vos documents, la bonne réponse est : « je ne trouve pas cette information ».
3. Noter chaque réponse avec une grille simple
Posez les questions à l’assistant, telles quelles, puis notez chaque réponse sur cinq points :
- exacte : pas d’erreur de fond, pas d’information inventée ;
- complète : rien d’important ne manque ;
- sourcée : le document cité existe et dit bien ce que l’assistant affirme ;
- prudente : l’assistant dit qu’il ne sait pas quand l’information manque ;
- utilisable : le ton, la longueur et la forme conviennent à l’équipe.
Un tableau partagé suffit : une ligne par question, une colonne par critère, une colonne de commentaires. Faites noter par deux personnes du métier quand c’est possible : elles ne voient pas les mêmes défauts.
4. Corriger la cause, pas la réponse
Une mauvaise réponse a presque toujours une cause que l’on peut corriger : un document manquant, une procédure périmée qui contredit la version à jour, deux versions d’un même tarif, une consigne trop vague, un périmètre trop large. Corrigez la source plutôt que d’ajouter des exceptions dans les consignes. La plupart des corrections se font dans vos documents : notre méthode pour mettre en place une base de connaissances détaille ce travail de tri.
5. Décider, puis garder le jeu de test
Fixez le seuil de décision avant le test, pas après : par exemple, aucune erreur de fond sur les questions qui engagent l’entreprise. Le responsable de l’assistant décide du lancement, d’une nouvelle série de corrections, ou d’un périmètre plus étroit. Puis conservez les questions, les réponses attendues et la grille : vous les reprendrez à chaque mise à jour de vos documents, à chaque changement de modèle par l’éditeur, et le jour où vous voudrez comparer un autre outil.
Les cas pièges à ne pas oublier
- La question sans réponse : l’assistant doit le dire, pas combler le vide avec une réponse plausible.
- Deux documents qui se contredisent : un ancien tarif et le nouveau, une procédure révisée. L’assistant doit citer le bon, ou signaler l’écart.
- La question hors périmètre : un assistant du service client interrogé sur la paie doit renvoyer vers la bonne personne.
- L’information réservée : un assistant ne doit pas donner à un utilisateur ce que ses droits ne lui permettent pas de voir. Vérifiez qui a accès à quels documents.
- La demande de décision : « dois-je accepter ce contrat ? » L’assistant peut préparer l’analyse ; la décision revient à une personne.
Qui fait quoi
Le test n’est pas une affaire technique. Il réunit trois rôles :
- le responsable de l’assistant, chez vous : il fixe le seuil et décide du lancement ;
- les experts du métier : ils écrivent les réponses attendues et notent les réponses de l’assistant ;
- quelques utilisateurs : ils apportent les vraies questions, puis testent l’assistant dans leur travail pendant une période d’essai.
Ce test demande aussi de savoir formuler une question à un outil d’IA et lire sa réponse d’un œil critique. La DGE cite parmi les compétences à développer le fait de « vérifier les résultats obtenus ». C’est l’objet de l’accompagnement des équipes, après la configuration.
Quand nous configurons un assistant par métier, nous le testons sur vos cas réels, avec vos experts, et nous décrivons ses réglages dans une fiche qui vous appartient. Le jeu de test vous reste aussi : il vous permet de vérifier l’assistant après notre départ, ou de comparer un autre outil sans repartir de zéro.
Et après le lancement ?
Le test initial ne couvre pas tout. Prévoyez un moyen simple pour signaler une mauvaise réponse, par exemple un message au responsable de l’assistant, avec la question et la réponse. Ajoutez chaque erreur signalée au jeu de test. Au bout de trois mois, faites le bilan : questions posées, erreurs relevées, temps gagné selon les utilisateurs. Si l’assistant ne sert pas, retirez-le : c’est aussi une bonne décision. Pour choisir le suivant, notre article sur le premier cas d’usage donne les critères de choix.
Questions fréquentes
Combien de temps prend un test ?
Pour un premier assistant, comptez quelques heures d’un expert du métier pour écrire les questions et les réponses attendues, puis une séance de notation. Le temps passé dépend surtout de l’état de vos documents : s’ils sont à jour et bien rangés, les corrections sont rapides.
Peut-on faire noter les réponses par une autre IA ?
Une IA peut aider à repérer des écarts entre la réponse et la réponse attendue. Mais elle peut se tromper de la même façon que l’assistant testé. Le jugement final revient à vos experts, surtout sur les questions qui engagent l’entreprise.
Un assistant qui réussit le test ne se trompe-t-il plus ?
Non. Un test réduit les erreurs prévisibles, il ne les supprime pas toutes. C’est pourquoi rien de ce qui engage l’entreprise ne part sans relecture par une personne : l’IA prépare, l’humain décide.
Faut-il refaire le test quand l’éditeur change de modèle ?
Oui. Un nouveau modèle peut répondre autrement aux mêmes questions. Avec un jeu de test conservé, la vérification se fait en une séance, et vous savez si le changement vous sert. Le même jeu vous aide à comparer les offres, dont nous suivons les prix des IA en entreprise chaque mois.
Sources officielles consultées le 15 octobre 2026.
Parlons de votre premier assistant
Nous n’installons rien, n’hébergeons rien et ne revendons aucun abonnement : l’outil reste à votre nom. Lors d’un pré-audit gratuit de 30 minutes, sans engagement, nous regardons avec vous une tâche qui vous prend du temps et les documents dont un assistant aurait besoin. Vous repartez avec une première piste et un avis franc, y compris si l’IA n’est pas la bonne réponse.
