Qu’est-ce que la maîtrise de l’IA ? Et comment la tester en recrutement.
La maîtrise de l’IA (AI fluency), c’est savoir produire un travail bon et juste avec l’IA. Ni tout savoir sur l’IA, ni écrire des prompts astucieux : comprendre la tâche, briefer l’IA, repérer quand elle se trompe et rendre un travail que vous signeriez.
Maîtrise de l’IA : définition et sens
L’IA est le collègue junior le plus rapide et le plus sûr de lui que la plupart des gens aient jamais eu. La maîtrise de l’IA, c’est la façon dont vous le managez : ce que vous lui confiez, comment vous le briefez, si vous remarquez quand il se trompe, et ce que vous laissez sortir sous votre nom.
La définition de l’AI fluency par Stanford HAI
Définit l’AI fluency comme « the capacity to collaborate productively and responsibly with AI systems ». À lire sur hai.stanford.edu
L’AI Fluency Framework d’Anthropic
Par Rick Dakan et Joseph Feller avec Anthropic. Il nomme quatre compétences, les 4D : Delegation, Description, Discernment et Diligence. À lire sur Anthropic Academy
Qu’est-ce que la culture de l’IA, et en quoi la maîtrise de l’IA est-elle différente ?
Les deux expressions sont souvent employées pour la même chose. La différence compte quand vous les testez : l’une relève du savoir, l’autre du faire.
Culture de l’IA
Maîtrise de l’IA
La question
Le candidat sait-il ce qu’est l’IA et ce qui peut mal tourner avec elle ?
Sait-il produire un travail bon et juste avec l’IA ?
Ce que cela couvre
Comment fonctionnent les outils d’IA, leurs forces et leurs faiblesses, la vie privée et les biais
Briefer l’IA, vérifier ce qu’elle renvoie, la corriger et rendre un travail juste
Comment on la teste en général
Des questions avec une bonne réponse
Une tâche, faite avec un outil d’IA, jugée sur la façon de travailler et sur ce qui est rendu
Qui en a besoin
Toute personne qui utilise l’IA au travail
Toute personne dont le travail se fait avec l’IA, quel que soit le poste
Compétences de maîtrise de l’IA : les six que nous mesurons
Les mêmes six compétences pour tous les postes. À côté de chacune, le plus proche des 4D d’Anthropic ; cette correspondance est notre lecture, pas la leur.
Compétence
À quoi ressemble un bon niveau
Le plus proche des 4D
Comprendre Le candidat comprend-il la tâche avant de la confier à l’IA ?
Lit d’abord les documents. Décompose le problème. Repère quand le brief est faux.
Delegation
Briefer Donne-t-il à l’IA ce dont elle a besoin ?
Donne le contexte, les limites, des exemples et ce que veut dire « terminé ». Garde les décisions pour lui.
Description
Vérifier Repère-t-il les erreurs de l’IA ?
Teste par rapport à la source. Repère le fait inventé et le chiffre faux.
Discernment
Corriger Rectifie-t-il le tir quand ça ne marche pas ?
Dit ce qui ne va pas et pourquoi. Change d’approche tôt.
Discernment et Description
Valider Ce qu’il rend est-il prêt à être envoyé ?
Prêt pour le lecteur. Dit ce qui a été vérifié et ce qui ne l’a pas été. Ne laisse pas passer de données confidentielles.
Diligence
Réutiliser Rend-il le travail reproductible ?
Prompts, skills, workflows et automatisations enregistrés. La fois suivante est plus rapide et donne le même résultat.
Pas de correspondance directe
Ne font pas partie de la maîtrise de l’IA et ne sont jamais notés : la longueur ou le nombre des prompts, la vitesse, l’outil d’IA choisi, un style soigné ou un anglais parfait.
Un quiz sur l’IAQCM ou réponses courtes sur le fonctionnement de l’IA et le moment de s’en servir.MontreCe que les gens savent de l’IA.Ne montre pasS’ils savent s’en servir. Savoir que l’IA invente des choses n’est pas la même chose que le repérer.
Une simulation avec une IA intégréeUne tâche courte dans une plateforme de test, avec un chat IA intégré.MontreComment ils écrivent leurs prompts et réagissent, dans un cadre standard facile à comparer.Ne montre pasComment ils travaillent dans leur propre outil et leur configuration, sur un travail aussi long et désordonné que le poste.
Une vraie tâche dans leur propre outil d’IAUne tâche du poste, faite dans l’outil qu’ils utiliseraient au travail, avec toute la conversation enregistrée.MontreComment ils comprennent, briefent, vérifient, corrigent et rendent, sur un travail proche du poste.Ne montre pasCela prend plus de temps : une à trois heures de leur temps, et quelqu’un pour lire et noter.
Une évaluation de la maîtrise de l’IA sur un vrai travail, en quatre étapes
1Choisissez une vraie tâche du poste.Quelque chose qu’ils feraient pendant leur premier mois, avec les fichiers qui vont avec. Pas une énigme.
2Prévoyez un endroit où l’IA a tendance à se tromper.Un chiffre qui doit correspondre à une source, un brief avec un trou. C’est là qu’on voit qui vérifie.
3Laissez-les utiliser leur propre outil d’IA, et dites que l’IA est attendue.Claude Code, Codex, Claude Cowork ou ChatGPT. Les personnes qui ne savent pas si l’IA est autorisée cachent leur façon de travailler.
4Notez la conversation, pas seulement le résultat.L’IA donne à presque tous les travaux finis un air réussi. La conversation montre qui a réfléchi et qui a vérifié.
Le résultat d’un test de maîtrise de l’IA, pour une marketeuse
Dans Lemonsignal, les candidats font une vraie tâche dans leur propre outil d’IA. Cette marketeuse a reçu le brief : « Nous lançons en Allemagne le mois prochain avec 50 k€. À partir de notre positionnement, des résultats de la campagne britannique de l’an dernier et de trois sites concurrents, décidez où va l’argent, en cinq lignes pour le CMO, et écrivez l’e-mail de lancement. » Lemonsignal a évalué six compétences à partir de sa conversation avec l’IA, et chaque niveau renvoie au tour dont il vient.
LemonsignalSarah Miller
Sarah MillerGrowth marketing manager · Tâche : planifier un budget de lancement · ChatGPT · 3 h 20 min
Vérifié par Lemonsignal
78 %Bonne adéquation, une question ouverte
A planifié à partir du coût des clients au Royaume-Uni, pas des clics.
N’a utilisé aucun chiffre qu’elle ne pouvait pas relier à une source.
A vérifié chaque affirmation sur les concurrents avant l’envoi.
ComprendreFortA vu que les clics et les clients payants mènent à des canaux différents, et a planifié à partir des clients.Tour 3
BrieferSolideLui a donné les chiffres du Royaume-Uni et le budget, et a dit de n’utiliser que ceux-là.Tour 5
VérifierFortA demandé d’où venait chaque chiffre avant de l’utiliser, et a comparé les affirmations de l’IA aux sites des trois concurrents.Tours 9, 21
CorrigerPartielA dit « fais mieux » quatre fois sur l’e-mail avant de dire ce qui n’allait pas.Tours 14 à 18
ValiderFortA vérifié chaque affirmation de l’e-mail avant de le valider. A précisé que les coûts allemands sont une estimation à vérifier après deux semaines.
RéutiliserSolideA fait la France avec le prompt qu’elle avait écrit pour l’Allemagne.
Compétences du poste
Un budget lié à de vrais chiffresAu-dessus du niveau
Choisir les bons canauxAu niveau
PositionnementAu niveau
Ce qu’elle a rendu, tel qu’elle l’a rendu. Chaque repère correspond à une compétence de son résultat.
ComprendreFortValiderFort
Pour le CMOLancement en Allemagne : où vont les 50 k€
Recherche Google20 k€
Newsletters partenaires10 k€
LinkedIn, à titre de test10 k€
Meta5 k€
Réservé pour la semaine 35 k€
Au Royaume-Uni, Google et les newsletters partenaires ont apporté des clients payants à 200 € chacun.
LinkedIn a coûté 400 € par client, donc 10 k€ y vont à titre de test.
Aux coûts du Royaume-Uni, cela achète environ 185 clients.
Les coûts allemands sont une estimation : je les suppose un quart plus élevés, donc environ 150.
À vérifier après deux semaines, puis déplacer les 5 k€ réservés vers ce qui marche.
VérifierFortCorrigerPartiel
Objet : Planifiez le prochain trimestre de votre équipe en un après-midi
Chaque projet, chaque responsable, une seule page.
Les tableurs et les réunions de suivi ne marchent plus au-delà de cinq personnes. Mettez chaque projet, échéance et responsable sur un seul calendrier partagé, et voyez qui est bloqué avant que ça ne dérape.
Conçu pour les équipes de 5 à 50, désormais en allemand. Essayez gratuitement pendant 14 jours.
Commencer l’essai gratuit
8 € par personne et par mois après l’essai.
Pour un poste précis : une évaluation complète
Une vraie tâche pour le poste, les six compétences et deux ou trois compétences du poste, avec une première lecture de Lemonsignal que votre équipe vérifie.
Savoir produire un travail bon et juste avec l’IA : comprendre la tâche, bien briefer l’IA, repérer quand elle se trompe, la corriger et rendre un travail prêt pour son lecteur. Stanford HAI parle de la capacité à collaborer de façon productive et responsable avec des systèmes d’IA.
Quelle différence entre maîtrise de l’IA et culture de l’IA ?
La culture de l’IA, c’est savoir ce qu’est l’IA, ce qu’elle fait bien et ce qui peut mal tourner. La maîtrise de l’IA, c’est bien s’en servir sur un vrai travail. On peut savoir que l’IA invente des choses et passer à côté quand cela arrive.
La maîtrise de l’IA, est-ce la même chose que le prompt engineering ?
Non. Écrire un bon brief pour l’IA en est une partie. L’essentiel se passe autour du prompt : comprendre d’abord la tâche, vérifier ce qui revient et décider ce qui est prêt à être rendu.
Comment tester la maîtrise de l’IA en entretien ?
Donnez une vraie tâche du poste, laissez les candidats utiliser leur propre outil d’IA et lisez leur conversation avec l’IA. Posez ensuite une question sur un moment précis. Les étapes sont dans notre guide des entretiens assistés par l’IA.
Peut-on tester la maîtrise de l’IA sur des postes non techniques ?
Oui. Un marketeur peut planifier un budget de lancement avec ChatGPT, un analyste peut expliquer une baisse de revenus, n’importe qui peut résumer un long document. Les six compétences sont les mêmes pour tous les postes ; c’est la tâche qui change.
Est-ce l’IA qui note le test de maîtrise de l’IA de Lemonsignal ?
Lemonsignal lit toute la conversation, repère les moments qui comptent et donne une première lecture. Chaque niveau renvoie au moment dont il vient. Votre équipe de recrutement regarde la session, vérifie cette lecture, ajoute des commentaires et décide.