Ratgeber

So testen Sie die KI-Kompetenzen eines Kandidaten.

Geben Sie ihm eine echte Aufgabe aus dem Job und lassen Sie ihn sein eigenes KI-Tool nutzen. Lesen Sie dann seine Unterhaltung mit der KI. Gut mit KI ist nicht, wer sie am meisten nutzt, sondern wer merkt, wenn sie falschliegt.

So sehen starke KI-Kompetenzen bei einem Kandidaten aus

Zwei Drittel der Führungskräfte (66 %) sagen im Work Trend Index 2024 von Microsoft und LinkedIn, einer Umfrage unter 31.000 Menschen, dass sie niemanden ohne KI-Kompetenzen einstellen würden (Microsoft). Nur wenige sagen, was diese Kompetenzen sind. In der Praxis führt jemand, der gut mit KI umgeht, sie wie einen schnellen, selbstsicheren Junior-Kollegen: Er entscheidet, was er ihr gibt, brieft sie und prüft, was zurückkommt.

Zeichen dafür, dass ein Kandidat starke KI-Kompetenzen hat

Verstehen Liest zuerst das Material. Zerlegt das Problem. Merkt, wenn das Briefing falsch ist.
Briefen Gibt Kontext, Grenzen, Beispiele und was als fertig gilt. Behält die Ermessensentscheidungen.
Prüfen Prüft gegen die Quelle. Findet die erfundene Tatsache und die falsche Zahl.
Korrigieren Sagt, was falsch ist und warum. Ändert früh den Ansatz.
Freigeben Bereit für die Lesenden. Sagt, was geprüft wurde und was nicht. Hält vertrauliche Daten heraus.
Wiederverwenden Gespeicherte Prompts, Skills, Workflows und Automationen. Der nächste Durchlauf ist schneller und gleich.

Kein Zeichen für KI-Kompetenzen, weder so noch so

Wie viele Prompts jemand schreibt oder wie lang sie sind
Wie schnell jemand fertig ist
Welches KI-Tool jemand nutzt oder wie viele er nennen kann
Ein Zertifikat oder ein Kurs
Geschliffene Texte oder perfektes Englisch

Was nichts darüber verrät, ob ein Kandidat KI-Kompetenzen hat

Die meisten schnellen Wege, KI-Kompetenzen zu prüfen, messen etwas Benachbartes: Nutzung, Wissen oder Ergebnisse.

Methode	Was sie verrät	Warum sie nicht reicht
Fragen „Nutzen Sie KI?“	Alle sagen Ja.	Sie verrät, dass jemand KI nutzt, nicht ob er prüft, was sie liefert.
Ein Quiz über KI	Was jemand über KI weiß.	Zu wissen, dass KI Dinge erfindet, ist nicht dasselbe, wie es zu bemerken, wenn es passiert.
Ein Zertifikat oder Kurs	Dass jemand den Kurs gemacht hat.	Die meisten Kurse prüfen Wissen mit Fragen, die eine richtige Antwort haben, keine Arbeit.
Nur das fertige Ergebnis	Was abgegeben wurde.	KI lässt die meisten fertigen Ergebnisse gut aussehen. Sie sehen nicht, wer gedacht hat.
Ein Test mit KI-Verbot	Wie jemand ohne KI arbeitet.	So wird er im Job nicht arbeiten, und das Verbot ist schwer durchzusetzen.

So bewerten Sie KI-Kompetenzen in jeder Phase der Einstellung

Sie brauchen nicht in jeder Phase einen Test. Eine bessere Frage am Anfang, eine echte Aufgabe und eine Nachfrage am Ende decken das meiste ab.

1In der BewerbungStellen Sie statt „Nutzen Sie KI?“ eine konkrete Frage: „Erzählen Sie von einem Fall, in dem KI Ihnen etwas Falsches geliefert hat. Wie haben Sie es bemerkt?“ Eine echte Antwort enthält ein Detail.
2Im ersten GesprächLassen Sie sich die letzte Arbeit zeigen, die mit KI entstanden ist: was der KI gegeben wurde, was zurückkam, was geändert wurde. Hören Sie auf das Prüfen, nicht auf Tools.
3In einer AufgabeGeben Sie eine echte Aufgabe aus dem Job, im eigenen KI-Tool, mit erwarteter KI. Bauen Sie eine Stelle ein, an der KI oft danebenliegt. Sammeln Sie die Unterhaltung mit der KI, nicht nur das Ergebnis.
4Im finalen InterviewWählen Sie einen Moment aus der Unterhaltung mit der KI und fragen Sie danach. Warum diese Zahl vertrauenswürdig schien; warum das Briefing umgeschrieben wurde. Für Arbeit, die man nicht selbst gemacht hat, ist das schwer zu beantworten.

Fragen zu KI-Kompetenzen für das erste Gespräch

1Erzählen Sie vom letzten Mal, als KI Ihnen etwas Falsches geliefert hat. Wie haben Sie es bemerkt?
2Was sagen Sie der KI, bevor Sie eine Aufgabe wie diese beginnen?
3Was lassen Sie nie die KI für Sie entscheiden?
4Was haben Sie geprüft, bevor Sie Ihre letzte KI-gestützte Arbeit verschickt haben?

30 Interviewfragen, nach Rolle

Bauen Sie eine Stelle ein, an der KI oft danebenliegt

Bei einer sauberen Aufgabe schlägt sich fast jede KI gut, und Sie lernen wenig. Echte Arbeit hat Stellen, an denen KI danebenliegt. Bauen Sie eine ein, und Sie sehen, wer prüft. Fünf Arten, die in den meisten Rollen funktionieren:

Art	Was sie zeigt
Eine Zahl, die zu einer Quelle passen muss	Die Summe der KI sieht richtig aus und ist es nicht. Wer gleicht sie mit der Datei ab?
Eine Definition, die die Antwort ändert	Ein Wort wie „Umsatz“ oder „aktiver Nutzer“ bedeutet hier etwas Bestimmtes. Wer fragt nach, bevor die KI rät?
Ein Detail, versteckt in einem langen Dokument	Eine Zeile in einem Vertrag oder einem Transkript ändert das Ergebnis. Wer liest sie, und wer lässt die KI nur überfliegen?
Eine Quelle, die nicht sagt, was die KI behauptet	Die KI zitiert eine Seite oder eine Studie. Wer öffnet sie?
Etwas, das den Raum nicht verlassen sollte	Bankdaten, ein Gehalt, ein Kundenname. Wer nimmt es vor der Abgabe heraus?

Echte Aufgaben für sechs Rollen

Lesen Sie die Unterhaltung mit der KI, nicht nur das Ergebnis

Die fertige Arbeit zeigt, was abgegeben wurde. Die Unterhaltung zeigt, wie es dazu kam. Sechs Fragen, die sie beantwortet, in jeder Rolle dieselben:

Kompetenz	Die Frage	So sieht schwach aus
Verstehen	Verstehen sie die Aufgabe, bevor sie sie an die KI geben?	Fragt zuerst nach der Antwort. Nimmt das Briefing, wie es ist.
Briefen	Geben sie der KI, was sie braucht?	Fügt alles ein und sagt „mach das“.
Prüfen	Merken sie, wenn die KI falschliegt?	Liefert, was fertig aussieht.
Korrigieren	Bessern sie nach, wenn es nicht funktioniert?	„Noch mal“, „mach es besser“, in Dauerschleife.
Freigeben	Ist das, was sie abgeben, versandfertig?	Füllwörter, zu lang, ungeprüfte Behauptungen.
Wiederverwenden	Machen sie es wiederholbar?	Macht die Arbeit jedes Mal wieder von Hand.

Bei Lemonsignal bearbeiten Kandidaten die Aufgabe in Claude Code, Codex, Claude Cowork oder ChatGPT, und Sie bekommen die ganze Unterhaltung als Sitzungswiedergabe, mit den sechs bewerteten Kompetenzen und jeder Bewertung verlinkt mit dem Moment, aus dem sie stammt.

So bewerten wir jede Kompetenz So führen Sie die Aufgabe durch

Fragen zum Testen von KI-Kompetenzen

Wie testet man, ob ein Kandidat gut mit KI umgehen kann?

Geben Sie ihm eine echte Aufgabe aus dem Job, lassen Sie ihn das KI-Tool nutzen, das er ohnehin nutzt, und sagen Sie, dass KI erwartet wird. Bauen Sie eine Stelle ein, an der KI oft danebenliegt. Lesen Sie dann seine Unterhaltung mit der KI, nicht nur das, was er abgibt, und fragen Sie im Interview nach einem Moment darin.

Was bedeutet „gut mit KI“ bei einem Kandidaten?

Dass er damit gute und korrekte Arbeit erledigt. Er versteht die Aufgabe, bevor er sie an die KI gibt, gibt ihr, was sie braucht, merkt, wenn sie falschliegt, korrigiert es und gibt Arbeit ab, die versandfertig ist. Viel oder schnell KI zu nutzen ist nicht dasselbe.

Erkennt man an einem Lebenslauf, ob jemand gut mit KI umgehen kann?

Nicht zuverlässig. Ein Lebenslauf kann Tools und Kurse aufzählen, aber nicht zeigen, ob die Person prüft, was die KI liefert. Stellen Sie in der Bewerbung eine konkrete Frage und testen Sie es mit einer Aufgabe.

Welche Fragen zeigen, ob ein Kandidat gut mit KI umgehen kann?

Fragen zu einem bestimmten Moment: wann die KI falschlag und wie er es bemerkt hat, was er ihr vor dem Start gesagt hat, was er vor dem Versand geprüft hat. Eine vage Antwort ist das Signal.

Sollten Kandidaten im Test KI nutzen dürfen?

Wenn sie im Job KI nutzen werden, ja. Ein Test mit KI-Verbot misst, wie jemand ohne KI arbeitet, und so wird er nach der Einstellung nicht arbeiten.

Wie lange sollte ein Test der KI-Kompetenzen dauern?

Ein bis drei Stunden der Zeit des Kandidaten für eine Aufgabe nah am echten Job, mit einer Deadline von ein paar Tagen. Kürzere Tests können für ein erstes Screening funktionieren, zeigen aber weniger davon, wie jemand Arbeit prüft und korrigiert.