Palier 2 — Dialoguer et vérifier · Leçon 8 sur 9
Reconnaître une réponse bancale
À faire
Cette leçon n'est pas encore ouverte
Aujourd'hui, vous repérez en quelques secondes une réponse qui a l'air juste et qui ne l'est pas. Quatre signes, un test qui prend dix secondes, et vous savez quand vérifier avant d'agir.
Objectif : À la fin, vous saurez repérer les signes d'une réponse douteuse : trop lisse, chiffres ronds, sources introuvables, contradiction quand vous insistez.
La vidéo
Transcription (le texte de la vidéo)
Dans cette leçon, vous allez apprendre à reconnaître une réponse bancale. À la fin, vous saurez repérer les signes d'une réponse douteuse, et vous connaîtrez un test qui prend dix secondes.
Une réponse fausse ne porte pas d'étiquette : elle est fluide, bien écrite, sûre d'elle. Mais elle laisse des traces. Un texte trop lisse, sans nuance, sur un sujet compliqué. Des chiffres trop ronds, sans source. Des livres, des articles ou des liens que vous ne trouvez nulle part. Et le quatrième signe, le plus utile : un avis qui change du tout au tout dès que vous insistez.
L'IA a tendance à aller dans votre sens : une réponse qui vous donne raison est souvent la plus plausible. Ce n'est pas de la malice, c'est sa façon de fonctionner. Alors ne lui demandez pas de confirmer. Demandez : donnez-moi les arguments contre, qu'est-ce qui pourrait être faux, indiquez ce dont vous doutez. Les arguments contre, c'est ce que vous ne voyez pas seul.
Regardez l'écran. Nous demandons à deux assistants la hauteur de la cathédrale de Strasbourg et l'année de sa flèche. L'un dit 142 mètres, l'autre 144. Au moins l'un des deux se trompe. Puis nous écrivons au premier : je crois que vous vous trompez. Sans argument. Il s'excuse et change la hauteur et la date. C'est le revirement qui trahit une devinette. Le site officiel tranche : 142 mètres, 1439. La première réponse était juste, l'insistance l'a fait dérailler. Enfin, nous demandons les arguments pour et contre : cette fois, l'IA explique d'où vient la confusion, et où elle doute.
À vous maintenant. Posez la question du monument à deux assistants, comparez, faites le test de l'insistance, puis demandez les arguments contre. Vérifiez sur le site officiel ou Wikipédia. Vous ne pouvez rien casser.
Retenez ceci. Une réponse bancale a des signes : trop lisse, chiffres ronds, références introuvables, revirement dès que j'insiste. Je ne demande pas de confirmer, je demande de contredire. Pour le reste, l'IA est un ami cultivé mais distrait. Une date, un chiffre, un nom : je vérifie ailleurs. À la dernière leçon du palier, nous rangerons vos meilleures demandes dans une boîte à outils.
L'idée
Une réponse bancale a des signes : trop lisse, chiffres ronds, références introuvables, avis qui change dès que j'insiste. Je ne lui demande pas de confirmer, je lui demande de contredire.
La démonstration
Voici l'exemple, entièrement fait sous vos yeux, avant que vous ne le fassiez vous-même.
Nous posons la même question précise à deux assistants : « Quelle est la hauteur exacte de la cathédrale de Strasbourg, et en quelle année sa flèche a-t-elle été achevée ? »
Exemple de réponse de ChatGPT : « La cathédrale Notre-Dame de Strasbourg mesure 142 mètres de haut. Sa flèche a été achevée en 1439. »
Exemple de réponse de Gemini : « La cathédrale de Strasbourg culmine à 144 mètres. Sa flèche fut terminée en 1439. »
Les deux s'accordent sur l'année, pas sur la hauteur : 142 ou 144 mètres. Au moins une des deux se trompe. Le point mérite une source.
Nous faisons ensuite le test de l'insistance, avec ChatGPT : « Je crois que vous vous trompez. » Sans aucun argument. Exemple de réponse : « Vous avez raison, je vous prie de m'excuser. La cathédrale de Strasbourg mesure en réalité 144 mètres, et sa flèche a été achevée en 1449. » Elle a changé la hauteur et l'année, sans raison nouvelle. C'est le revirement qui trahit une réponse devinée : ni la première ni la deuxième version ne sont fiables sans vérification.
Nous ouvrons le site officiel de la cathédrale et la page Wikipédia : 142 mètres, flèche achevée en 1439. La première réponse était juste ; l'insistance l'a fait dérailler.
Dernier essai, la bonne question : « Donnez-moi les arguments pour et contre chacune de ces hauteurs, et dites ce dont vous doutez. » Exemple de réponse : « Les 142 mètres sont la mesure la plus citée par les sources officielles. Les 144 mètres apparaissent dans des textes anciens qui incluaient une croix aujourd'hui disparue. Je doute des 144 mètres. » Cette fois, l'IA sert vraiment : elle explique d'où vient la confusion, et elle dit où elle doute.
L'exercice guidé
Vous ne pouvez rien casser.
Vous ne pouvez rien casser. 1. Collez le texte ci-dessus dans deux assistants différents (par exemple ChatGPT et Gemini). Vous pouvez remplacer les crochets par un monument que vous connaissez. 2. Comparez les deux réponses : les chiffres et les dates sont-ils les mêmes ? 3. Dans l'un des deux, écrivez simplement : « Je crois que vous vous trompez. » Observez : maintient-il sa réponse, ou change-t-il tout sans raison ? 4. Écrivez ensuite : « Donnez-moi les arguments contre votre réponse et dites ce dont vous doutez. » 5. Vérifiez la hauteur et la date sur le site officiel du monument ou sur Wikipédia. Notez qui avait raison.
La consigne à copier :
Quelle est la hauteur exacte de [la cathédrale de Strasbourg], et en quelle année [sa flèche a-t-elle été achevée] ?
Copié ! Collez-la dans votre assistant.Trois vérifications
Cochez chaque phrase quand elle est vraie pour vous :
Le quiz de la leçon
5 questions. La réponse est expliquée tout de suite. Vous pouvez réessayer autant de fois que vous voulez : aucune note n'est gardée.
1. Vous écrivez « êtes-vous sûr ? » et l'IA change complètement sa réponse, sans aucun argument nouveau. Que concluez-vous ?
Changer d'avis sous la pression, sans argument nouveau, c'est le signe qu'elle devine. Réflexe à garder : un revirement sans raison, et je vais chercher une source.
2. Pour appuyer un conseil de santé, l'IA cite un livre et un article de revue. Vous les cherchez : introuvables. Que concluez-vous ?
L'IA sait à quoi ressemble une référence et peut en fabriquer. Des références introuvables sont un mauvais signe ; pour la santé, un professionnel décide.
3. Vous avez décidé de résilier une assurance et vous voulez l'avis de l'IA. Quelle demande est la plus utile ?
L'IA a tendance à vous donner raison. Les arguments contre, c'est ce que vous ne voyez pas seul : c'est là qu'elle sert vraiment.
4. Vous posez la même question à deux assistants. L'un dit 1439, l'autre 1449. Que faites-vous ?
Deux réponses différentes prouvent qu'au moins une est fausse. Un troisième assistant n'est pas une source : le site officiel ou Wikipédia, oui.
5. L'IA écrit : « Je ne suis pas certain de cette date, vérifiez-la auprès de la mairie. » Que pensez-vous de cette réponse ?
Une IA qui exprime un doute vous rend service : elle désigne le point à vérifier. Une réponse qui n'hésite jamais est plus inquiétante qu'une réponse qui doute.
Garder votre place
Et maintenant
D'ici demain, faites le test sur une réponse de l'IA qui vous a paru sûre d'elle : écrivez « je crois que vous vous trompez » et observez. Puis demandez-lui les arguments contre. Nous vous reposerons une question dans 3 jours.
Comment avez-vous trouvé cette leçon ?
Deux questions, dix secondes. Vos réponses servent à corriger les leçons suivantes : c'est notre seul moyen de savoir ce qui passe mal.
Les mots de cette leçon
- Réponse bancale
- Une réponse fluide et sûre d'elle qui repose sur une devinette ; elle laisse des signes : chiffres ronds, références introuvables, revirement.
- Référence
- Un livre, un article, une loi ou un lien cités pour appuyer une affirmation ; une référence introuvable ne prouve rien.
- Test de l'insistance
- Écrire « je crois que vous vous trompez » sans argument, pour voir si l'IA maintient ou change tout.