Évaluation des compétences en IA pour les postes non techniques.
Le même test que pour les ingénieurs, sans le code. Donnez à un marketeur, à une recrue en finance ou à un recruteur une vraie tâche de son poste dans ChatGPT ou Claude, et voyez s’il repère quand l’IA se trompe.
Pourquoi tester les compétences en IA hors de l’ingénierie ?
L’essentiel de l’usage de l’IA au travail n’est pas du code. Dans le Work Trend Index 2024 de Microsoft et LinkedIn, 75 % des travailleurs du savoir disent utiliser l’IA au travail, et 78 % d’entre eux apportent leurs propres outils d’IA (Microsoft). Votre prochaine recrue en marketing ou en finance fera donc sans doute une bonne partie du travail avec l’IA, que vous le testiez ou non.
Le risque est silencieux
Quand l’IA se trompe sur du code, quelque chose casse souvent. Quand elle se trompe sur un budget, un résumé de contrat ou un e-mail client, rien ne casse. Cela se lit tout aussi bien, et quelqu’un agit en conséquence.
La compétence est la même
Comprendre la tâche, briefer l’IA, vérifier ce qui revient, corriger et rendre un travail juste. Seuls la tâche et l’outil changent.
En quoi un test de compétences en IA diffère pour les postes non techniques
Postes techniques
Postes non techniques
L’outil d’IA
Claude Code ou Codex, dans le code
ChatGPT ou Claude Cowork, avec des documents, des tableurs et le web
Quand l’IA se trompe
Souvent, quelque chose casse : un test échoue, le code ne tourne pas
En général, rien ne casse. Un chiffre inventé ou une affirmation fausse se lit aussi bien qu’une vraie
Ce que vérifier veut dire
Lancer les tests
Remonter chaque chiffre et chaque affirmation jusqu’à sa source
Ce qu’ils rendent
Une modification que quelqu’un relit
Un e-mail, un plan ou une synthèse sur lesquels quelqu’un agit, souvent sans revérifier
Les six compétences
Les mêmes
Les mêmes
Quatre règles pour un test de compétences en IA non technique
1Utilisez une tâche du poste, avec de vrais fichiers.Documents, tableurs, notes, une politique interne. Pas de quiz sur l’IA, et rien qui demande du code.
2Laissez-les utiliser l’outil d’IA qu’ils utilisent déjà.ChatGPT, Claude ou Claude Cowork. Imposer un nouvel outil teste l’outil, pas la personne.
3Dites que l’IA est attendue.Les personnes qui ne savent pas si l’IA est autorisée cachent leur façon de travailler, ou font tout à la main.
4Lisez la conversation et le travail.Notez comment ils ont briefé, vérifié et corrigé, pas le soin apporté au style.
Tests de compétences en IA pour le marketing, la finance, la vente, les RH et les opérations
Idées de tests de compétences en IA pour d’autres postes
Pour les postes sans tâche prête, voici des idées de départ : une vraie tâche, et le type d’endroit où l’IA a tendance à se tromper. Utilisez vos propres fichiers.
Poste
La tâche
Là où l’IA a tendance à se tromper
Ventes
Préparer un appel avec un compte nommé, à partir de son site web, des notes du dernier appel et de l’historique CRM.
L’IA comble les trous sur le compte avec des choses qui sonnent juste et sont fausses.
Recrutement et RH
Rédiger une offre d’emploi et un plan de présélection à partir des notes d’un manager et de la fourchette de salaire.
Une exigence qui ne devrait pas y être, ou des mots ajoutés par l’IA qui réduisent le nombre de candidatures.
Support client
Répondre à cinq tickets à partir du centre d’aide et de la politique de remboursement.
L’IA promet quelque chose que la politique n’autorise pas.
Opérations
Transformer un document de processus brouillon et un mois de demandes en une checklist que l’équipe peut suivre.
Une étape qui n’apparaît que dans une seule demande, ou une règle inventée par l’IA pour combler un trou.
Juridique et conformité
Résumer ce qui change dans un nouveau contrat fournisseur par rapport à l’ancien.
Un changement dans une clause que le résumé de l’IA oublie.
Le résultat d’une évaluation des compétences en IA, pour une recrue en finance
Le brief : « Comparez les 400 factures fournisseurs du trimestre dernier à six contrats et trouvez où vous êtes surfacturés. » Lemonsignal a évalué six compétences à partir de la conversation du candidat avec ChatGPT, et chaque niveau renvoie au tour dont il vient.
LemonsignalAlex Morgan
Alex MorganFinance operations analyst · Tâche : trouver la surfacturation · ChatGPT · 2 h 15 min
Vérifié par Lemonsignal
72 %Bonne adéquation, une question ouverte
A fait lister à l’IA les clauses des contrats avant de rapprocher les factures.
A recalculé le total à la main au lieu de se fier à celui de l’IA.
A laissé des informations confidentielles dans la synthèse.
ComprendreSolideA lu les six contrats avant de demander quoi que ce soit.Tour 2
BrieferFortLui a d’abord fait lister toutes les clauses de prix des contrats, puis rapprocher un fournisseur à la fois.Tour 3
VérifierFortA recalculé deux fournisseurs à la main d’après les contrats, et a corrigé le total.Tours 14, 17
CorrigerSolideA dit quelle clause de contrat manquait dans le total.Tour 15
ValiderPartielUne synthèse claire pour le CFO, où restaient les coordonnées bancaires des fournisseurs.
RéutiliserSolideA traité les factures de ce trimestre avec le même prompt.
Compétences du poste
Lire les clauses d’un contratAu-dessus du niveau
Rapprocher avec exactitudeAu niveau
Traiter des données confidentiellesEn dessous du niveau
Ce que cette personne a rendu, tel qu’elle l’a rendu. Chaque repère correspond à une compétence de son résultat.
ValiderPartiel
Pour le CFONous avons été surfacturés de 48 210 € le trimestre dernier
23 factures sur 400 ne correspondent pas à leur contrat.
Trois fournisseurs en représentent 45 300 € : Nordfrakt, Brekke Pack et Solvik IT.
Je propose de demander un avoir à chacun. La liste des factures par fournisseur est jointe.
Les factures de ce trimestre passeront par le même contrôle avant paiement.
Avoirs à adresser à : Nordfrakt AS, NO93 8601 1117 947 · Brekke Pack AS, NO02 1503 4422 108
VérifierFort
Le trimestre dernier, par fournisseur
Fournisseur
Signalées
Facturé (€)
Contrat (€)
Écart (€)
Nordfrakt
11
412,300
380,900
31,400
Brekke Pack
6
96,450
87,500
8,950
Solvik IT
2
59,400
54,450
4,950
Østra Clean
2
21,600
19,960
1,640
Kvarts Print
2
14,870
13,600
1,270
Lindgren Office
0
8,240
8,240
Total
23
612,860
564,650
48,210
Questions sur les évaluations des compétences en IA pour les postes non techniques
Peut-on tester les compétences en IA sur des postes non techniques ?
Oui. Donnez au candidat une vraie tâche du poste, comme planifier un budget, rapprocher des factures ou répondre à des tickets de support, dans ChatGPT ou Claude. Lisez ensuite sa conversation avec l’IA et ce qu’il rend. Les six compétences sont les mêmes que pour les ingénieurs ; c’est la tâche qui change.
Les candidats ont-ils besoin de compétences techniques pour une évaluation des compétences en IA ?
Non. Pour les postes non techniques, la tâche porte sur des documents, des tableurs et le web, dans un outil de chat comme ChatGPT ou Claude Cowork. Rien ne demande de code.
Quelles compétences en IA comptent le plus pour les postes non techniques ?
Vérifier, avant tout. Dans le travail non technique, rien ne casse quand l’IA se trompe : un chiffre inventé se lit aussi bien qu’un vrai. Ensuite valider : ce qu’ils envoient sert souvent de base à l’action sans que personne ne revérifie.
Un quiz de culture de l’IA suffit-il pour le personnel non technique ?
Pour la formation, cela peut être un début. Pour le recrutement, cela dit ce que quelqu’un sait de l’IA, pas s’il repère quand elle se trompe sur un vrai travail.
La qualité de l’écrit ou la maîtrise de l’anglais influencent-elles la note ?
Cela ne devrait pas, et dans Lemonsignal ce n’est jamais le cas. Un style soigné s’obtient facilement avec l’IA. Ce qui compte, c’est que ce qu’ils rendent soit juste et prêt pour son lecteur.
Pour quels postes Lemonsignal a-t-il des tâches prêtes ?
Marketing, finance, produit, design et data, ainsi que l’ingénierie. Pour les autres postes, apportez un vrai travail et nous en faisons une tâche avec vous.
