Hvad er AI-fortrolighed? Sådan tester du den ved ansættelser

AI-fortrolighed: definition og betydning

AI er den hurtigste og mest selvsikre juniorkollega de fleste nogensinde har haft. AI-fortrolighed er hvor godt du leder den: hvad du giver den, hvordan du briefer den, om du opdager når den tager fejl, og hvad du lader gå ud i dit navn.

Stanford HAI’s definition af AI fluency

Definerer AI fluency som ”the capacity to collaborate productively and responsibly with AI systems”. Læs den på hai.stanford.edu

Anthropics AI Fluency Framework

Af Rick Dakan og Joseph Feller sammen med Anthropic. Det nævner fire kompetencer, de 4 D’er: Delegation, Description, Discernment og Diligence. Læs det på Anthropic Academy

Hvad er AI-forståelse, og hvordan adskiller AI-fortrolighed sig?

De to ord bruges ofte om det samme. Forskellen betyder noget når du tester for det: det ene handler om at vide, det andet om at gøre.

	AI-forståelse	AI-fortrolighed
Spørgsmålet	Ved de hvad AI er, og hvad der kan gå galt med den?	Kan de få godt og korrekt arbejde gjort med AI?
Hvad det dækker	Hvordan AI-værktøjer virker, hvad de er gode og dårlige til, privatliv og bias	At briefe AI’en, kontrollere det den giver tilbage, rette det og aflevere arbejde der er rigtigt
Hvordan det normalt testes	Spørgsmål med et rigtigt svar	En opgave, løst med et AI-værktøj, vurderet på hvordan de arbejdede, og hvad de afleverede
Hvem der har brug for det	Alle der bruger AI på arbejdet	Alle hvis job udføres med AI, i enhver rolle

Kompetencer i AI-fortrolighed: de seks vi måler

De samme seks kompetencer i alle roller. Ud for hver står den nærmeste af Anthropics 4 D’er; den kobling er vores læsning, ikke deres.

Kompetence	Sådan ser stærk ud	Nærmeste af de 4 D’er
Forstå Forstår de opgaven, før de giver den til AI?	Læser materialet først. Bryder problemet ned. Opdager når briefet er forkert.	Delegation
Briefe Giver de AI det den har brug for?	Giver kontekst, grænser, eksempler og hvad færdigt betyder. Beholder de svære vurderinger selv.	Description
Kontrollere Opdager de det, når AI tager fejl?	Tester mod kilden. Fanger det opdigtede faktum og det forkerte tal.	Discernment
Rette Retter de det, når det ikke virker?	Siger hvad der er galt og hvorfor. Skifter tilgang tidligt.	Discernment og Description
Godkende Er det de afleverer, klar til at blive sendt?	Klar til læseren. Siger hvad der er kontrolleret, og hvad der ikke er. Holder fortrolige data ude.	Diligence
Genbruge Gør de det gentageligt?	Gemte prompts, skills, workflows og automatiseringer. Næste kørsel er hurtigere og ens.	Intet direkte match

Ikke en del af AI-fortrolighed og vurderes aldrig: hvor lange eller hvor mange prompts der er, hastighed, hvilket AI-værktøj de valgte, og flot sprog eller perfekt engelsk.

Sådan vurderer vi hver kompetence

Sådan tester du AI-fortrolighed ved ansættelser

Der er tre almindelige måder at køre en test af AI-fortrolighed på. De måler forskellige ting.

En quiz om AI Multiple choice eller korte svar om hvordan AI virker, og hvornår den skal bruges. ViserHvad folk ved om AI. OverserOm de kan bruge den. At vide at AI finder på ting, er ikke det samme som at opdage det.
En simulering med indbygget AI En kort opgave på en testplatform med en indbygget AI-chat. ViserHvordan de prompter og reagerer, i en standardramme der er let at sammenligne. OverserHvordan de arbejder i deres eget værktøj og opsætning, med arbejde der er lige så langt og rodet som jobbet.
En rigtig opgave i deres eget AI-værktøj En opgave fra jobbet, løst i det værktøj de ville bruge på arbejdet, med hele samtalen optaget. ViserHvordan de forstår, briefer, kontrollerer, retter og afleverer, med arbejde der ligner jobbet. OverserDet tager længere tid: en til tre timer af deres tid og en der skal læse og vurdere det.

En test af AI-fortrolighed med rigtigt arbejde, i fire trin

1Vælg en rigtig opgave fra jobbet.Noget de ville lave i deres første måned, med de filer der hører til. Ikke en gåde.
2Byg ét sted ind hvor AI plejer at tage fejl.Et tal der skal stemme med en kilde, et brief med et hul. Det er der du ser hvem der kontrollerer.
3Lad dem bruge deres eget AI-værktøj, og sig at AI forventes.Claude Code, Codex, Claude Cowork eller ChatGPT. Folk der er usikre på om AI er tilladt, skjuler hvordan de arbejder.
4Vurder samtalen, ikke kun resultatet.AI får det meste færdige arbejde til at se godt ud. Samtalen viser hvem der tænkte, og hvem der kontrollerede.

Sådan kører du et AI-assisteret interview

Et testresultat for AI-fortrolighed, for en marketingmedarbejder

I Lemonsignal løser kandidater en rigtig opgave i deres eget AI-værktøj. Denne marketingmedarbejder fik briefet: ”Vi lancerer i Tyskland næste måned med 50.000 €. Brug vores positionering, sidste års britiske kampagneresultater og tre konkurrenters sites til at beslutte hvor pengene skal hen, i fem linjer til CMO’en, og skriv lanceringsmailen.” Lemonsignal læste seks kompetencer ud af hendes samtale med AI’en, og hvert niveau linker til den omgang, det kommer fra.

Sarah MillerGrowth marketing manager · Opgave: Planlæg et lanceringsbudget · ChatGPT · 3 t 20 min

Kontrolleret af Lemonsignal

78 %Godt match, ét åbent spørgsmål

Planlagde ud fra hvad britiske kunder koster, ikke klik.
Brugte intet tal hun ikke kunne føre tilbage til en kilde.
Kontrollerede hver påstand om konkurrenter før den gik ud.

Forstå Stærk Så at klik og betalende kunder peger på forskellige kanaler, og planlagde ud fra kunder. Omgang 3
Briefe Solid Gav den de britiske tal og budgettet og sagde at den kun måtte bruge dem. Omgang 5
Kontrollere Stærk Spurgte hvor hvert tal kom fra før hun brugte det, og holdt AI’ens påstande op mod de tre konkurrenters sites. Omgang 9, 21
Rette Delvis Skrev ”gør den bedre” fire gange om mailen, før hun sagde hvad der var galt. Omgang 14 til 18
Godkende Stærk Kontrollerede hver påstand i mailen før hun godkendte den. Sagde at de tyske omkostninger er et gæt, der skal tjekkes efter to uger.
Genbruge Solid Klarede Frankrig med den prompt hun skrev til Tyskland.

Kompetencer til jobbet

Et budget bundet til rigtige talOver niveau
At vælge de rigtige kanalerPå niveau
PositioneringPå niveau

Til en bestemt rolle: en fuld test

Én rigtig opgave til rollen, de seks kompetencer og to eller tre jobkompetencer, med en første vurdering fra Lemonsignal som dit team kontrollerer.

Opgaver efter rolle

Spørgsmål om AI-fortrolighed

Hvad er AI-fortrolighed?

At kunne få godt og korrekt arbejde gjort med AI: at forstå opgaven, briefe AI’en godt, opdage når den tager fejl, rette det og aflevere arbejde der er klar til læseren. Stanford HAI kalder det evnen til at samarbejde produktivt og ansvarligt med AI-systemer.

Hvad er forskellen på AI-fortrolighed og AI-forståelse?

AI-forståelse er at vide hvad AI er, hvad den er god til, og hvad der kan gå galt. AI-fortrolighed er at bruge den godt i rigtigt arbejde. Man kan godt vide at AI finder på ting og stadig overse det, når det sker.

Er AI-fortrolighed det samme som prompt engineering?

Nej. At skrive et godt brief til AI’en er en del af det. Det meste af resten sker omkring prompten: at forstå opgaven først, kontrollere det der kommer tilbage, og beslutte hvad der er klar til at blive afleveret.

Hvordan tester du AI-fortrolighed i et interview?

Giv en rigtig opgave fra jobbet, lad kandidaterne bruge deres eget AI-værktøj, og læs deres samtale med AI’en. Spørg derefter til ét øjeblik i den. Se vores guide til AI-assisterede interviews for trinene.

Kan du teste AI-fortrolighed i ikke-tekniske roller?

Ja. En marketingmedarbejder kan planlægge et lanceringsbudget med ChatGPT, en analytiker kan forklare et fald i omsætningen, og alle kan opsummere et langt dokument. De seks kompetencer er de samme i alle roller; opgaven skifter.

Vurderer AI Lemonsignals test af AI-fortrolighed?

Lemonsignal læser hele samtalen, markerer de øjeblikke der betyder noget, og giver en første vurdering. Hvert niveau linker til det øjeblik, det kommer fra. Dit ansættelsesteam ser sessionen, kontrollerer vurderingen, tilføjer kommentarer og beslutter.

Hvad er AI-fortrolighed? Og sådan tester du den ved ansættelser.