Was ist KI-Kompetenz (AI Fluency)? Und wie Sie sie bei der Einstellung testen.
KI-Kompetenz heißt, mit KI gute und korrekte Arbeit erledigen zu können. Nicht Wissen über KI und nicht raffinierte Prompts, sondern: die Aufgabe verstehen, die KI briefen, Fehler der KI erkennen und Arbeit abgeben, unter die man den eigenen Namen setzen würde.
KI-Kompetenz: Definition und Bedeutung
KI ist der schnellste und selbstsicherste Junior-Kollege, den die meisten Menschen je hatten. KI-Kompetenz ist, wie gut Sie ihn führen: was Sie ihm geben, wie Sie ihn briefen, ob Sie merken, wenn er falschliegt, und was Sie mit Ihrem Namen rausgehen lassen.
Die Definition von AI Fluency von Stanford HAI
Definiert AI Fluency als „the capacity to collaborate productively and responsibly with AI systems“, also die Fähigkeit, produktiv und verantwortungsvoll mit KI-Systemen zusammenzuarbeiten. Auf hai.stanford.edu lesen
Das AI Fluency Framework von Anthropic
Von Rick Dakan und Joseph Feller mit Anthropic. Es nennt vier Kompetenzen, die 4 Ds: Delegation, Description, Discernment und Diligence. In der Anthropic Academy lesen
Was ist KI-Grundwissen, und worin unterscheidet sich KI-Kompetenz?
Die beiden Begriffe werden oft für dasselbe verwendet. Der Unterschied zählt, wenn Sie testen: Das eine ist Wissen, das andere Können.
KI-Grundwissen (AI Literacy)
KI-Kompetenz (AI Fluency)
Die Frage
Wissen sie, was KI ist und was dabei schiefgehen kann?
Können sie mit KI gute und korrekte Arbeit erledigen?
Was es umfasst
Wie KI-Tools funktionieren, was sie gut und schlecht können, Datenschutz und Verzerrungen
Die KI briefen, prüfen, was sie liefert, es korrigieren und Arbeit abgeben, die stimmt
Wie es meist getestet wird
Fragen mit einer richtigen Antwort
Eine Aufgabe, erledigt mit einem KI-Tool, bewertet danach, wie gearbeitet und was abgegeben wurde
Wer es braucht
Alle, die bei der Arbeit KI nutzen
Alle, deren Arbeit mit KI erledigt wird, in jeder Rolle
KI-Kompetenzen: die sechs, die wir messen
Dieselben sechs Kompetenzen in jeder Rolle. Neben jeder steht das nächstliegende der 4 Ds von Anthropic; diese Zuordnung ist unsere Lesart, nicht ihre.
Kompetenz
So sieht stark aus
Nächstliegendes der 4 Ds
Verstehen Verstehen sie die Aufgabe, bevor sie sie an die KI geben?
Liest zuerst das Material. Zerlegt das Problem. Merkt, wenn das Briefing falsch ist.
Delegation
Briefen Geben sie der KI, was sie braucht?
Gibt Kontext, Grenzen, Beispiele und was als fertig gilt. Behält die Ermessensentscheidungen.
Description
Prüfen Merken sie, wenn die KI falschliegt?
Prüft gegen die Quelle. Findet die erfundene Tatsache und die falsche Zahl.
Discernment
Korrigieren Bessern sie nach, wenn es nicht funktioniert?
Sagt, was falsch ist und warum. Ändert früh den Ansatz.
Discernment und Description
Freigeben Ist das, was sie abgeben, versandfertig?
Bereit für die Lesenden. Sagt, was geprüft wurde und was nicht. Hält vertrauliche Daten heraus.
Diligence
Wiederverwenden Machen sie es wiederholbar?
Gespeicherte Prompts, Skills, Workflows und Automationen. Der nächste Durchlauf ist schneller und gleich.
Keine direkte Entsprechung
Nicht Teil der KI-Kompetenz und nie bewertet: wie lang oder wie viele die Prompts sind, Geschwindigkeit, welches KI-Tool gewählt wurde und geschliffene Texte oder perfektes Englisch.
Ein Quiz über KIMultiple Choice oder kurze Antworten dazu, wie KI funktioniert und wann man sie nutzt.ZeigtWas Menschen über KI wissen.ÜbersiehtOb sie sie nutzen können. Zu wissen, dass KI Dinge erfindet, ist nicht dasselbe, wie es zu bemerken.
Eine Simulation mit eingebauter KIEine kurze Aufgabe auf einer Testplattform, mit eingebautem KI-Chat.ZeigtWie sie prompten und reagieren, in einer standardisierten, leicht vergleichbaren Umgebung.ÜbersiehtWie sie im eigenen Tool und Setup arbeiten, an Arbeit, die so lang und unordentlich ist wie im Job.
Eine echte Aufgabe im eigenen KI-ToolEine Aufgabe aus dem Job, erledigt in dem Tool, das sie bei der Arbeit nutzen würden, mit aufgezeichneter Unterhaltung.ZeigtWie sie verstehen, briefen, prüfen, korrigieren und abgeben, an Arbeit wie im Job.ÜbersiehtEs dauert länger: ein bis drei Stunden ihrer Zeit und jemand, der es liest und bewertet.
Eine Bewertung der KI-Kompetenz an echter Arbeit, in vier Schritten
1Wählen Sie eine echte Aufgabe aus dem Job.Etwas, das sie im ersten Monat tun würden, mit den dazugehörigen Dateien. Kein Rätsel.
2Bauen Sie eine Stelle ein, an der KI oft danebenliegt.Eine Zahl, die zu einer Quelle passen muss, ein Briefing mit einer Lücke. Dort sehen Sie, wer prüft.
3Lassen Sie sie ihr eigenes KI-Tool nutzen und sagen Sie, dass KI erwartet wird.Claude Code, Codex, Claude Cowork oder ChatGPT. Wer unsicher ist, ob KI erlaubt ist, verbirgt, wie er arbeitet.
4Bewerten Sie die Unterhaltung, nicht nur das Ergebnis.KI lässt die meisten fertigen Ergebnisse gut aussehen. Die Unterhaltung zeigt, wer gedacht und wer geprüft hat.
Ein Testergebnis zur KI-Kompetenz, für eine Marketerin
Bei Lemonsignal bearbeiten Kandidaten eine echte Aufgabe in ihrem eigenen KI-Tool. Diese Marketerin bekam das Briefing: „Wir starten nächsten Monat in Deutschland mit 50 Tsd. €. Entscheiden Sie anhand unserer Positionierung, der Ergebnisse der britischen Kampagne aus dem letzten Jahr und dreier Websites von Wettbewerbern, wohin das Geld geht, in fünf Zeilen für den CMO, und schreiben Sie die Launch-E-Mail.“ Lemonsignal hat sechs Kompetenzen aus ihrer Unterhaltung mit der KI abgelesen, und jede Stufe ist mit dem Schritt verlinkt, aus dem sie stammt.
LemonsignalSarah Miller
Sarah MillerGrowth Marketing Managerin · Aufgabe: Ein Launch-Budget planen · ChatGPT · 3 h 20 min
Geprüft von Lemonsignal
78 %Gute Passung, eine offene Frage
Hat nach den Kosten britischer Kunden geplant, nicht nach Klicks.
Hat keine Zahl genutzt, die sie nicht auf eine Quelle zurückführen konnte.
Hat jede Aussage über Wettbewerber geprüft, bevor sie rausging.
VerstehenStarkHat erkannt, dass Klicks und zahlende Kunden auf unterschiedliche Kanäle zeigen, und nach Kunden geplant.Schritt 3
BriefenSolideGab ihr die britischen Zahlen und das Budget und sagte, sie solle nur diese verwenden.Schritt 5
PrüfenStarkFragte bei jeder Zahl, woher sie stammt, bevor sie sie nutzte, und prüfte die Aussagen der KI anhand der drei Websites der Wettbewerber.Schritte 9, 21
KorrigierenTeilweiseSagte viermal „mach es besser“ zur E-Mail, bevor sie sagte, was falsch war.Schritte 14 bis 18
FreigebenStarkHat jede Aussage in der E-Mail vor der Freigabe geprüft. Sagte, dass die deutschen Kosten eine Schätzung sind, die nach zwei Wochen zu prüfen ist.
WiederverwendenSolideHat Frankreich mit dem Prompt erledigt, den sie für Deutschland geschrieben hatte.
Fachliche Kompetenzen
Ein Budget, das auf echten Zahlen beruhtÜber der Messlatte
Die richtigen Kanäle wählenAuf der Messlatte
PositionierungAuf der Messlatte
Was sie abgegeben hat, so wie sie es abgegeben hat. Jede Markierung ist eine Kompetenz aus ihrem Ergebnis.
VerstehenStarkFreigebenStark
Für den CMOLaunch in Deutschland: wohin die 50 Tsd. € gehen
Google-Suche20 Tsd. €
Partner-Newsletter10 Tsd. €
LinkedIn, als Test10 Tsd. €
Meta5 Tsd. €
Zurückgehalten für Woche 35 Tsd. €
In Großbritannien brachten Google und Partner-Newsletter zahlende Kunden für je 200 €.
LinkedIn kostete 400 € pro Kunde, deshalb fließen 10 Tsd. € als Test hinein.
Zu britischen Kosten bringt das etwa 185 Kunden.
Die deutschen Kosten sind eine Schätzung: Ich gehe von einem Viertel mehr aus, also etwa 150.
Nach zwei Wochen prüfen und die zurückgehaltenen 5 Tsd. € in das verschieben, was funktioniert.
PrüfenStarkKorrigierenTeilweise
Betreff: Planen Sie das nächste Quartal Ihres Teams an einem Nachmittag
Jedes Projekt, jede verantwortliche Person, eine Seite.
Tabellen und Status-Meetings funktionieren ab fünf Personen nicht mehr. Bringen Sie jedes Projekt, jede Deadline und jede verantwortliche Person auf eine gemeinsame Zeitleiste und sehen Sie, wer blockiert ist, bevor etwas rutscht.
Gebaut für Teams von 5 bis 50 Personen, jetzt auf Deutsch. 14 Tage kostenlos testen.
Kostenlos testen
8 € pro Person und Monat nach dem Test.
Für eine bestimmte Rolle: eine vollständige Bewertung
Eine echte Aufgabe für die Rolle, die sechs Kompetenzen und zwei oder drei Kompetenzen für den Job, mit einer ersten Einschätzung von Lemonsignal, die Ihr Team prüft.
Die Fähigkeit, mit KI gute und korrekte Arbeit zu erledigen: die Aufgabe verstehen, die KI gut briefen, ihre Fehler erkennen, sie korrigieren und Arbeit abgeben, die für die Lesenden bereit ist. Stanford HAI nennt es die Fähigkeit, produktiv und verantwortungsvoll mit KI-Systemen zusammenzuarbeiten.
Was ist der Unterschied zwischen KI-Kompetenz und KI-Grundwissen?
KI-Grundwissen heißt zu wissen, was KI ist, was sie gut kann und was schiefgehen kann. KI-Kompetenz heißt, sie bei echter Arbeit gut zu nutzen. Man kann wissen, dass KI Dinge erfindet, und es trotzdem übersehen, wenn es passiert.
Ist KI-Kompetenz dasselbe wie Prompt Engineering?
Nein. Ein gutes Briefing für die KI zu schreiben ist ein Teil davon. Das meiste andere passiert rund um den Prompt: zuerst die Aufgabe verstehen, prüfen, was zurückkommt, und entscheiden, was bereit zur Abgabe ist.
Wie testet man KI-Kompetenz im Interview?
Geben Sie eine echte Aufgabe aus dem Job, lassen Sie Kandidaten ihr eigenes KI-Tool nutzen und lesen Sie ihre Unterhaltung mit der KI. Fragen Sie dann nach einem Moment darin. Die Schritte stehen in unserem Ratgeber zu KI-gestützten Interviews.
Kann man KI-Kompetenz auch für nicht-technische Rollen testen?
Ja. Eine Marketerin kann ein Launch-Budget mit ChatGPT planen, ein Analyst einen Umsatzrückgang erklären, jeder kann ein langes Dokument zusammenfassen. Die sechs Kompetenzen sind in jeder Rolle dieselben, nur die Aufgabe ändert sich.
Bewertet KI den Test zur KI-Kompetenz von Lemonsignal?
Lemonsignal liest die ganze Unterhaltung, markiert die entscheidenden Momente und gibt eine erste Einschätzung. Jede Stufe ist mit dem Moment verlinkt, aus dem sie stammt. Ihr Hiring-Team sieht sich die Sitzung an, prüft die Einschätzung, ergänzt Kommentare und entscheidet.