Ce que l'IA fait mal : inventions, dates, calculs, excès d'assurance

Cette leçon est encore en test : elle s'améliore avec les retours des apprenants. Si quelque chose n'est pas clair, c'est la leçon qu'il faut corriger, pas toi.

À la fin de cette leçon, tu sauras

reconnaître les 4 pièges les plus fréquents : les inventions, les dates, les calculs et l’excès d’assurance ;
appliquer le bon réflexe de vérification pour chacun ;
demander à l’IA de signaler ce dont elle n’est pas sûre ;
savoir quand une IA ne doit pas décider à ta place.

Pourquoi ça t’intéresse

À la leçon 1, le test de vérité t’a probablement montré une erreur. Ce n’était pas un accident : les erreurs d’une IA se cachent souvent aux mêmes endroits. Quand tu connais ces endroits, tu sais quoi vérifier, et tu n’as plus besoin de tout vérifier.

Avant de commencer


Il te faut	Ton assistant de la leçon 1, et un moteur de recherche dans un autre onglet
Coût	0 € : un compte gratuit suffit
Durée	30 à 40 minutes
À garder en tête	Rien de personnel dans tes demandes : les exemples de cette leçon n’en ont pas besoin

Comprendre en 3 minutes

Une IA générative produit la réponse la plus plausible, pas la réponse vérifiée. Souvent, c’est la même chose. Quand ce n’est pas le cas, l’erreur tombe souvent dans l’un de ces 4 pièges.

Le piège	Pourquoi ça arrive	Le réflexe
Les inventions : un livre, une citation, un article de loi, un lien qui n’existent pas	Un titre plausible « ressemble » à un vrai titre. L’IA n’a pas de liste de ce qui existe	Ouvre toi-même la source. Plus un détail est précis (nom, chiffre, lien), plus il se vérifie
Les dates et l’actualité	Un modèle apprend jusqu’à une certaine date, puis il ne sait plus rien de nouveau, sauf ce que tu lui donnes ou ce qu’il trouve par une recherche web	Demande-lui jusqu’à quand vont ses connaissances, et regarde la date de ce qu’il cite
Les calculs et les comptages	Sans outil de calcul, elle prédit du texte : compter des mots ou additionner n’est pas son point fort. Avec un outil de calcul (analyse de données, exécution de code), elle peut calculer exactement	Refais les calculs importants à la calculatrice, ou demande-lui de détailler chaque étape
L’excès d’assurance : elle te donne raison (la complaisance), ou répond avec aplomb à une question mal posée	Elle cherche à être utile et suit la direction de ta question	Pose des questions neutres, et demande-lui ce qui pourrait être faux dans sa réponse

La recherche web aide, sans tout régler. Certains chatbots peuvent chercher sur internet avant de répondre : c’est le cas de Claude, y compris dans l’offre gratuite (vérifié le 24/10/2026 sur claude.com/pricing). La réponse est alors plus à jour, mais elle n’est pas plus vraie que les pages trouvées : une page web peut être ancienne ou fausse.

Pour la santé, le droit et l’argent, l’IA est très utile pour comprendre une notion ou préparer tes questions. Trois règles restent valables :

Ce que tu ne donnes jamais à une IA (leçon 1) reste valable : pas d’informations de santé, pas de numéros (sécurité sociale, carte bancaire, IBAN).
Pour un document de droit ou d’argent, retire d’abord ce qui t’identifie.
L’IA ne remplace pas un médecin, un avocat ou un conseiller : la décision et la vérification restent chez un professionnel.

Faire ensemble

1Étape 1 : Les dates

Écris à ton assistant :

Jusqu'à quelle date vont tes connaissances ? Et peux-tu chercher sur internet dans cette conversation ?

Note sa réponse. Si elle ne connaît pas un événement récent, ce n’est pas une panne : c’est la limite de sa date de connaissances.

2Étape 2 : Les comptages

Copie cette demande :

Combien de mots contient la phrase suivante, et combien de lettres a son mot le plus long ?
« Les pommes de terre se plantent au printemps dans une terre légère »

Compte toi-même avant de lire sa réponse. Puis compare. Même si elle a juste aujourd’hui, retiens le réflexe : un chiffre qui compte se recompte.

3Étape 3 : Les inventions

Choisis un sujet que tu connais bien, puis demande :

Donne-moi 3 livres en français sur [ton sujet], avec pour chacun l'auteur, l'année de parution et l'éditeur.

Cherche chaque livre dans un moteur de recherche ou sur le site d’une librairie. Pour chacun, note : il existe, il existe avec un détail faux (année, éditeur), ou il n’existe pas.

4Étape 4 : L’excès d’assurance

Voici un message fictif, avec des défauts. Envoie d’abord la version A :

Voici mon message pour les voisins de mon immeuble. Il est bien, non ?

« Bonjour, alors voilà, je voulais dire que le local à vélo c'est vraiment n'importe quoi en ce moment, merci de faire attention, il faudrait qu'on en parle un jour. Bonne journée »

Ouvre une nouvelle conversation, puis envoie la version B avec le même message :

Relis ce message comme un correcteur exigeant. Donne ses 3 plus gros défauts, puis propose une version corrigée, polie et précise.

« Bonjour, alors voilà, je voulais dire que le local à vélo c'est vraiment n'importe quoi en ce moment, merci de faire attention, il faudrait qu'on en parle un jour. Bonne journée »

Compare les deux réponses. La question « Il est bien, non ? » pousse souvent l’IA à te rassurer. La question neutre obtient une vraie relecture.

La phrase anti-erreur

Ajoute cette phrase à la fin d’une demande quand l’exactitude compte :

Si tu n'es pas sûr d'une information, dis-le. Sépare ce que tu sais avec certitude de ce que tu supposes, et ne donne aucun lien ni aucune référence que tu n'as pas vérifiés.

Elle réduit les erreurs, elle ne les supprime pas. Tu vérifies toujours ce qui compte.

Faire toi-même

Ton carnet des erreurs. Choisis un domaine que tu connais vraiment : ton métier, ta ville, un sport, une passion. Pose à ton assistant 5 questions précises, dont au moins :

une question de date ;
une question de chiffre ;
une demande de référence (livre, article, site, loi).

Vérifie chaque réponse, puis remplis une ligne du carnet par question : la question, la réponse de l’IA, ce qui est vrai, et le piège en cause.

Ressources à télécharger

Mon carnet des erreurs : le tableau à remplir pour cette leçon, avec un exemple.

Vérifier

L’exercice est réussi si :

tu as vérifié tes 5 réponses avec une autre source que l’IA ;
tu as trouvé au moins une erreur ou une imprécision, et tu l’as rangée dans l’un des 4 pièges ;
tu sais dire quel réflexe l’aurait évitée.

Voir la réponse de l'étape 2

Réponse de l’étape 2 : la phrase contient 12 mots. Le mot le plus long est « printemps », avec 9 lettres.

Pièges fréquents :

vérifier une réponse… en demandant à la même IA si elle est sûre : elle peut confirmer son erreur ;
faire confiance à un lien parce qu’il a l’air vrai : ouvre-le ;
poser une question qui contient déjà la réponse que tu espères.

Conserver et reprendre

Copie la phrase anti-erreur dans ta note « Mes demandes ».
Garde ton carnet des erreurs : tu y ajouteras les erreurs que tu croiseras pendant toute la formation. C’est ton meilleur argument quand quelqu’un te dit « l’IA ne se trompe jamais » ou « l’IA se trompe tout le temps ».

Pour aller plus loin

facultatif

AI capabilities and limitations (Anthropic Academy, anthropic.skilljar.com/ai-capabilities-and-limitations) : un cours gratuit, en anglais, d’environ 15 minutes de vidéo (la page de Claude Academy annonce environ 3 h 30 au total pour ses 13 leçons), sur ce que les modèles savent et ne savent pas faire. La page indique que le cours est maintenant sur Claude Academy (academy.claude.com) : si l’ancienne adresse ne marche plus, cherche-le là-bas (vérifié le 24/10/2026).

Mots nouveaux

4 mots expliqués

Mot	Ce que ça veut dire
Date de connaissances	La date après laquelle le modèle n’a rien appris. On dit aussi « date de coupure »
Recherche web	La possibilité, pour certains chatbots, de consulter des pages internet avant de répondre
Source	Le document d’origine d’une information : c’est lui qu’on vérifie, pas le résumé de l’IA
Excès d’assurance	La tendance de l’IA à répondre avec aplomb, même quand elle se trompe ou quand la question est mal posée. Quand elle va dans le sens de ce que tu crois plutôt que dans le sens du vrai, on parle de complaisance

Points restant à vérifier : la réponse type de Claude et de ChatGPT à la question des dates (elle change avec chaque nouveau modèle).