Es-tu vraiment compétent en IA ? Un autotest de 8 questions

Les gros utilisateurs d'IA se surestiment le plus. Oublie le quiz au feeling : cet autotest de 8 questions mesure ce que tu fais vraiment.

Petite question avant de continuer : sur une échelle de 1 à 10, tu te mets combien en IA ?

Garde ce chiffre en tête. Y a de fortes chances qu’il soit faux — et faux dans une direction bien précise.

Des chercheurs de l’université Aalto, en Finlande, ont fait passer une vraie version de ce test. Sur deux études (environ 246 personnes, puis 452), ils ont fait plancher des gens sur des problèmes de logique façon test d’entrée en école de droit, avec ChatGPT, puis leur ont demandé d’estimer leur score. L’IA a fait grimper les résultats d’à peu près 3 points. Mais les participants ont surestimé leur propre score d’environ 4. Ils sont repartis en pensant que la victoire de la machine était la leur.

Voilà le passage qui devrait te faire tiquer. Normalement, ce sont les moins compétents qui se surestiment le plus — c’est le fameux effet Dunning-Kruger. Là, il s’est inversé. Les gens qui se disaient les plus à l’aise avec l’IA avaient la plus mauvaise lecture de leur propre performance. Plus sûrs d’eux, moins justes. Welsch et ses co-auteurs ont donné au papier un titre sans détour : « L’IA te rend plus intelligent, mais pas plus lucide. »

Pourquoi ça s’inverse ? Le délestage en un coup — le « one-shot offloading ». Les gens demandent une fois, prennent la réponse, et ne vérifient jamais. Pas de vérification, pas de retour. Pas de retour, aucun moyen de se recalibrer.

En France, cette étude est passée quasi inaperçue — deux-trois titres, aucune explication de fond. Dommage, parce qu’elle touche une corde sensible très française : ce qu’on appelle la souveraineté cognitive, cette idée que plus la machine produit facilement, plus ton goût, ton contexte et ton jugement deviennent la vraie valeur. Alors on prend le temps de creuser ici.

Conséquence directe : si l’usage intensif gonfle en douce la note que tu te donnes, un quiz « note-toi de 1 à 5 » est pire qu’inutile. Il mesure ta confiance — c’est-à-dire exactement le truc qui est cassé. Un vrai check doit demander quelque chose que la confiance ne peut pas maquiller : qu’est-ce que tu as fait, la dernière fois ?

C’est ça, cet autotest. Huit questions, environ cinq minutes, bâti autour des quatre compétences qui composent la maîtrise de l’IA. Pas un test au feeling. Un test de comportement.

Deux façons de mesurer ton niveau en IA
La note que tu te donnes
Tu t'attribues un bon score. Les gros utilisateurs d'IA se notent plus haut que tout le monde.
L'IA a gonflé les scores d'environ 3 points. Les gens se sont crus 4 points au-dessus.
Ce que montre ta dernière session
Tu as réessayé en changeant vraiment un truc ? Attrapé une réponse fausse ? Vérifié avant d'envoyer ?
Ancré sur le comportement, donc ça ne peut pas te flatter.
Dans l'étude d'Aalto, les personnes les plus à l'aise avec l'IA jugeaient le plus mal leur propre niveau. Le check comportemental, c'est le remède.

Comment marche cet autotest

Deux questions par compétence. Huit en tout. Chacune pointe un comportement, pas un ressenti — du coup la réponse honnête, c’est soit « ouais, je l’ai fait », soit « non, pas fait ». Pas de zone grise confortable.

Et tu n’auras pas un score unique à la fin. Tu auras un profil. La plupart des gens sont bons sur une ou deux des quatre compétences et zappent discrètement le reste. Savoir laquelle tu zappes, c’est tout le butin.

C’est pas juste notre avis, d’ailleurs. Les chercheurs qui construisent des tests de littératie IA pour de vrai arrivent au même endroit. Les échelles académiques les plus solides — comme SAILS (douze scénarios concrets) ou la Meta AI Literacy Scale — évitent volontairement le « note ta compétence » et te plongent dans des situations à la place, parce que les auto-évaluations ne collent tout simplement pas avec la vraie capacité. Les quatre compétences elles-mêmes remontent à Ng et ses collègues en 2021, dont les quatre piliers (connaître, utiliser, évaluer, et l’éthique autour) font écho aux quatre D d’Anthropic. Tu veux la version longue ? Voilà le guide complet des 4 compétences. La version courte est juste en dessous, une ligne chacune.

Délégation
Choisir ce que tu confies et ce que tu gardes. Le test : nomme une tâche que tu as sciemment gardée pour toi cette semaine. Rien ? T'es en pilote auto.
Description
Dire à l'IA ce que tu veux vraiment. Le test : quand la première réponse rate, tu changes ce que tu entres, ou tu cliques juste sur régénérer ?
Discernement
Juger si ce qui sort vaut quelque chose. Le test : c'était quand, la dernière fois que tu as attrapé l'IA sûre d'elle mais fausse ? Aucun souvenir ? Tu ne vérifies pas.
Diligence
Assumer ce que tu livres. Le test : avant que ça quitte tes mains, tu as vérifié et signalé, ou collé et envoyé ?

L’autotest

Lis chaque paire. Réponds à voix haute si tu peux. Une réponse vague compte comme un non.

Délégation : tu as choisi, ou juste dégainé ?

Repense à la dernière tâche que tu as confiée à l’IA. Tu as vraiment décidé qu’elle valait le coup d’être déléguée ? Ou tu as demandé parce que la case était là, à portée de clic ?

Puis celle-ci : cite un seul truc, cette semaine, que tu aurais pu filer à l’IA et que tu as délibérément gardé pour toi. Si rien ne vient, c’est ta réponse. Dégainer sur tout, c’est pas de la compétence. C’est un réflexe.

Point faible ici ? La compétence à viser, c’est savoir quand utiliser l’IA — et tout autant, quand s’en passer. Commence par Fondamentaux de l’IA.

Description : tu pilotes, ou tu régénères ?

La dernière fois que la première réponse est tombée à côté, t’as changé quoi pour réessayer ?

Sois honnête. Si c’était « rien, j’ai juste cliqué sur régénérer en croisant les doigts », voilà le trou. Piloter, ça veut dire changer ce que tu entres — ajouter le contexte et l’exemple de « bon » — pas relancer les dés sur le même prompt.

Point faible ici ? C’est la compétence prompt-et-contexte, celle que les gens prennent pour le jeu tout entier. Prompt Engineering creuse ça à fond.

Discernement : c’était quand, la dernière fois que tu l’as prise en flag ?

Quand as-tu attrapé l’IA en train d’être sûre d’elle et précisément fausse pour la dernière fois ? Une citation bidon, un chiffre qui tombe pas juste, un nom inventé sur le moment.

Et comment tu l’as repérée ? Si tu te rappelles pas en avoir chopé une récemment, sois honnête avec toi-même : la raison la plus probable, c’est pas que l’IA a arrêté d’inventer. C’est que toi, tu as arrêté de regarder.

Point faible ici ? Apprends à repérer les hallucinations et à mettre la sortie à l’épreuve avant de lui faire confiance. Fondamentaux de l’IA couvre ça.

Diligence : tu l’as assumé, ou juste envoyé ?

Avant que ton dernier truc assisté par IA quitte tes mains — un mail, un rapport, une slide — tu as vérifié les faits dont tu ne pouvais pas te porter garant ?

Et tu as géré le reste ? Dire que l’IA a aidé, là où ça comptait. T’assurer que tu n’étais pas sur le point de coller un truc privé — un mot de passe, les données d’un client, un chiffre pas encore public.

Point faible ici ? C’est l’habitude de relecture et de responsabilité. Encore Fondamentaux de l’IA.

Laisse l’outil mesurer tes habitudes (avec une réserve)

Ta mémoire de la semaine dernière, c’est déjà une forme d’auto-déclaration — et tu sais maintenant à quel point s’y fier. Alors voici un moyen de te confronter à de vraies données : laisse l’outil te montrer ce que tu as vraiment fait.

Le 9 juillet, Anthropic a sorti une fonctionnalité appelée Reflect. Les gens ont vite parlé de « Claude Wrapped », le Spotify Wrapped de l’IA, et c’est à peu près ça. C’est un tableau de bord dans les Réglages de Claude, sur le web et le bureau, offert même en version gratuite. Il te renvoie ton usage : tes sujets, tes patterns (jour le plus actif, heure de pointe), et le temps passé par catégorie, sur une fenêtre de un, trois, six ou douze mois. Il faut activer la Mémoire pour que ça marche.

Le point qui nous intéresse : Anthropic le calque directement sur les mêmes quatre D. Reflect va littéralement te dire comment ta Délégation et ta Description se sont manifestées ce mois-ci.

Claude Reflect qui présente le mois d’un utilisateur comme des compétences IA, avec des cartes Délégation et Description et les boutons « Créer un projet dédié » et « Copier un prompt » Source : Reflect with Claude — Anthropic

Il te glisse même un prompt de réflexion de temps en temps. L’un d’eux : y a-t-il une chose que tu veux continuer à faire toi-même, même si Claude pouvait la faire plus vite ? Franchement, une bonne question sur laquelle s’arrêter.

Maintenant la réserve, parce qu’elle est réelle. TechCrunch a décrit Reflect comme une manière de « te vendre l’IA en douce », et ils n’ont pas tort. Regarde la capture encore une fois. Ces boutons — « Créer un projet dédié » et « Copier un prompt » — te poussent plus loin dans les fonctionnalités payantes d’Anthropic. Jamais vers un concurrent. Tout le truc tourne sur la Mémoire, que tu dois laisser activée. C’est un miroir, oui. Mais un miroir installé par le magasin, et qui veut que tu achètes plus.

(Un petit détail pour pas te faire avoir : une vue cumulée du « temps passé » est annoncée comme à venir, pas encore dispo. Va pas la chercher.)

Donc utilise Reflect. C’est vraiment pratique pour voir tes propres patterns. Mais ne laisse pas le vendeur être celui qui note ta compétence. C’est toute la raison d’être d’un check neutre, ancré sur le comportement, comme celui-ci.

Quoi faire de ton résultat

Ça dépend de qui tu es.

  • Si tu encadres une équipe : tes points faibles sont probablement la Délégation et la Diligence, parce que ton vrai job, c’est de décider quel travail l’IA devrait toucher et de fixer la norme de vérification. Passe les quatre questions à ta prochaine réunion d’équipe, à voix haute. Regarde combien de gens savent répondre à celle sur le Discernement.
  • Si tu cherches un poste : les employeurs ne sont plus impressionnés par « j’utilise ChatGPT ». Ils filtrent sur le Discernement et un résultat qu’ils peuvent voir. Prends ta compétence la plus faible, corrige-la ce mois-ci, et débarque avec une histoire à raconter.
  • Si tu es étudiant : mise sur le Discernement. Les outils vont changer cinq fois avant ton diplôme. Savoir quand la réponse est fausse, ça ne se périme pas.

Ce qu’un autotest ne peut pas faire

Soyons clairs sur les limites, parce que je préfère que tu fasses confiance à ce truc plutôt que je te le survende.

C’est pas une certification. Personne ne met « j’ai réussi mon propre quiz » sur un CV. C’est un diagnostic, pas un diplôme.

Une bonne semaine, c’est pas de la compétence. Tu peux cartonner les huit questions parce que tu as été carré sur un projet précis. La compétence, c’est l’habitude tenue sur des mois, quand tu es crevé, à la bourre, et que la deadline c’est maintenant.

Ça mesure des habitudes, pas des résultats. Faire les bonnes choses, c’est le meilleur indicateur qu’on ait, mais le check ne voit que ton processus, pas tes résultats réels.

Et ça se périme. Nouveaux outils, nouveaux modes de plantage, nouvelles choses à vérifier. Refais-le tous les deux ou trois mois, et observe comment tes réponses honnêtes glissent. Cette dérive t’en dit plus que n’importe quel score isolé.

En résumé

Utiliser beaucoup l’IA ne te rend pas bon pour juger ta propre compétence en IA. Au contraire, les données d’Aalto disent que ça te rend un peu moins bon : plus sûr, moins juste. Alors mets de côté le chiffre que tu t’es donné en haut de cette page. La bonne question n’a jamais été à quel point tu te sens bon. C’est ce que tu as fait la dernière fois. Tu as choisi la tâche, piloté la réponse, attrapé l’erreur, assumé le résultat ?

Si deux ou trois de ces trucs sont retombés en « non » honnête, tant mieux. C’est à ça que sert un check. Maintenant tu sais où viser.

Tu veux la version structurée plutôt qu’un check au feeling ? Notre cours Fondamentaux de l’IA déroule les quatre compétences depuis zéro. Commence par ta plus faible. C’est là que se cachent les gains les plus rapides.

Sources

Développe de Vraies Compétences IA

Cours pas à pas avec quiz et certificats pour ton CV