Jak testować umiejętności AI kandydata.
Daj prawdziwe zadanie z tej pracy i pozwól użyć własnego narzędzia AI. Potem przeczytaj rozmowę kandydata z AI. Dobry w AI nie jest ten, kto używa jej najwięcej, tylko ten, kto zauważa, kiedy się myli.
Jak wyglądają mocne umiejętności AI u kandydata
Dwie trzecie liderów (66%) mówi, że nie zatrudniłoby kogoś bez umiejętności AI, według Work Trend Index 2024 Microsoftu i LinkedIn, badania na 31 000 osobach (Microsoft). Niewielu mówi, czym są te umiejętności. W praktyce ktoś dobry w AI kieruje nią jak szybkim, pewnym siebie młodszym współpracownikiem: decyduje, co przekazać, briefuje i sprawdza, co wraca.
Oznaki mocnych umiejętności AI u kandydata
- Zrozumienie Najpierw czyta materiały. Rozkłada problem na części. Zauważa, gdy brief jest błędny.
- Brief Podaje kontekst, ograniczenia, przykłady i definicję gotowego. Decyzje wymagające osądu zostawia sobie.
- Weryfikacja Sprawdza ze źródłem. Wyłapuje zmyślony fakt i błędną liczbę.
- Korekta Mówi, co jest nie tak i dlaczego. Wcześnie zmienia podejście.
- Akceptacja Gotowe dla odbiorcy. Mówi, co sprawdzono, a czego nie. Nie ujawnia poufnych danych.
- Ponowne użycie Zapisane prompty, skille, workflowy i automatyzacje. Kolejne podejście jest szybsze i daje to samo.
Nie świadczy o umiejętnościach AI w żadną stronę
- Ile promptów pisze i jak są długie
- Jak szybko kończy
- Jakiego narzędzia AI używa i ile potrafi wymienić
- Certyfikat lub kurs
- Elegancki styl lub idealny angielski
Co nie mówi, czy kandydat ma umiejętności AI
Większość szybkich sposobów sprawdzania umiejętności AI mierzy coś obok: użycie, wiedzę lub wynik.
| Metoda | Co mówi | Dlaczego to nie wystarcza |
|---|---|---|
| Pytanie „Czy używasz AI?” | Każdy mówi, że tak. | Mówi, że kandydat jej używa, a nie czy sprawdza, co dostaje. |
| Quiz o AI | Co kandydat wie o AI. | Wiedzieć, że AI zmyśla, to nie to samo, co wyłapać to, gdy się dzieje. |
| Certyfikat lub kurs | Że kandydat ukończył kurs. | Większość kursów sprawdza wiedzę pytaniami z poprawną odpowiedzią, a nie pracę. |
| Tylko gotowa praca | Co kandydat oddał. | AI sprawia, że większość gotowej pracy wygląda dobrze. Nie widać, kto myślał. |
| Test z zakazem AI | Jak kandydat pracuje bez AI. | Tak nie będzie pracować w tej pracy, a zakaz trudno egzekwować. |
Jak oceniać umiejętności AI na każdym etapie rekrutacji
Nie potrzebujesz testu na każdym etapie. Lepsze pytanie na początku, prawdziwe zadanie i jedno pytanie uzupełniające na końcu wystarczą w większości przypadków.
- 1W aplikacjiZadaj jedno konkretne pytanie zamiast „Czy używasz AI?”: „Opowiedz o sytuacji, gdy AI dała Ci coś błędnego. Jak to wyszło na jaw?” Prawdziwa odpowiedź zawiera szczegół.
- 2Na pierwszej rozmowiePoproś o omówienie ostatniej pracy wykonanej z AI: co jej przekazano, co wróciło, co zmieniono. Słuchaj o sprawdzaniu, a nie o narzędziach.
- 3W zadaniuDaj prawdziwe zadanie z tej pracy, we własnym narzędziu AI, z oczekiwaniem użycia AI. Wbuduj jedno miejsce, w którym AI zwykle się myli. Zbierz rozmowę z AI, a nie tylko wynik.
- 4Na ostatniej rozmowieWybierz jeden moment z rozmowy z AI i zapytaj o niego. Dlaczego kandydat zaufał tej liczbie; dlaczego przepisał brief. Trudno odpowiadać za pracę, której się nie wykonało.
Pytania o umiejętności AI na pierwszą rozmowę
- 1Opowiedz o ostatniej sytuacji, gdy AI dała Ci coś błędnego. Jak to wyszło na jaw?
- 2Co mówisz AI, zanim zaczniesz zadanie takie jak to?
- 3Czego nigdy nie pozwalasz AI decydować za Ciebie?
- 4Co zostało sprawdzone przed wysłaniem Twojej ostatniej pracy z pomocą AI?
Wbuduj jedno miejsce, w którym AI zwykle się myli
Przy czystym zadaniu AI prawie każdego radzi sobie dobrze i niewiele się dowiesz. Prawdziwa praca ma miejsca, w których AI się myli. Dodaj jedno, a zobaczysz, kto sprawdza. Pięć rodzajów, które działają na większości stanowisk:
| Rodzaj | Co pokazuje |
|---|---|
| Liczba, która musi zgadzać się ze źródłem | Suma od AI wygląda dobrze, a jest błędna. Kto sprawdza ją z plikiem? |
| Definicja, która zmienia odpowiedź | Słowo takie jak „przychód” czy „aktywny użytkownik” znaczy tu coś konkretnego. Kto pyta, zanim AI zgadnie? |
| Szczegół ukryty w długim dokumencie | Jedna linijka w umowie lub transkrypcji zmienia wynik. Kto ją czyta, a kto pozwala AI przelecieć tekst? |
| Źródło, które nie mówi tego, co twierdzi AI | AI cytuje stronę lub badanie. Kto je otwiera? |
| Coś, co nie powinno wyjść na zewnątrz | Dane bankowe, wynagrodzenie, nazwa klienta. Kto usuwa to przed oddaniem? |
Czytaj rozmowę z AI, a nie tylko wynik
Gotowa praca pokazuje, co oddano. Rozmowa pokazuje, jak do tego doszło. Sześć pytań, na które z niej odpowiedzieć, takich samych na każdym stanowisku:
| Umiejętność | Pytanie | Jak wygląda słaby poziom |
|---|---|---|
| Zrozumienie | Czy rozumie zadanie, zanim przekaże je AI? | Prosi od razu o odpowiedź. Przyjmuje brief bez zastrzeżeń. |
| Brief | Czy daje AI to, czego ona potrzebuje? | Wkleja wszystko i pisze „zrób to”. |
| Weryfikacja | Czy wyłapuje błędy AI? | Oddaje to, co wygląda na gotowe. |
| Korekta | Czy poprawia, gdy coś nie działa? | „Spróbuj jeszcze raz”, „zrób to lepiej”, w kółko. |
| Akceptacja | Czy to, co oddaje, nadaje się do wysłania? | Wypełniacze, za długo, twierdzenia, których nikt nie sprawdził. |
| Ponowne użycie | Czy potrafi to powtarzać? | Za każdym razem robi to od nowa ręcznie. |
W Lemonsignal kandydaci wykonują zadanie w Claude Code, Codex, Claude Cowork lub ChatGPT, a Ty dostajesz całą rozmowę jako odtworzenie sesji, z oceną sześciu umiejętności i każdą oceną powiązaną z momentem, z którego pochodzi.
Pytania o testowanie umiejętności AI
Jak sprawdzić, czy kandydat dobrze radzi sobie z AI?
Daj prawdziwe zadanie z tej pracy, pozwól użyć narzędzia AI, którego już używa, i napisz, że AI jest oczekiwana. Wbuduj jedno miejsce, w którym AI zwykle się myli. Potem przeczytaj rozmowę kandydata z AI, a nie tylko to, co oddaje, i zapytaj o jeden moment z niej na rozmowie.
Co znaczy „dobry w AI” u kandydata do pracy?
Że wykonuje z nią dobrą, poprawną pracę. Rozumie zadanie, zanim przekaże je AI, daje jej to, czego potrzebuje, wyłapuje błędy, poprawia je i oddaje pracę gotową do wysłania. Używanie AI często lub szybko to nie to samo.
Czy z CV można poznać, że ktoś jest dobry w AI?
Nie w sposób wiarygodny. CV może wymieniać narzędzia i kursy, ale nie to, czy ktoś sprawdza, co daje mu AI. Zadaj jedno konkretne pytanie w aplikacji i sprawdź to zadaniem.
Jakie pytania pokazują, czy kandydat jest dobry w AI?
Pytania o konkretny moment: kiedy AI się pomyliła i jak to zauważono, co powiedziano jej na początku, co sprawdzono przed wysłaniem. Wymijająca odpowiedź to sygnał.
Czy kandydaci powinni móc używać AI w teście?
Jeśli będą używać AI w pracy, to tak. Test z zakazem AI mierzy, jak ktoś pracuje bez niej, a tak nie będzie pracować po zatrudnieniu.
Ile powinien trwać test umiejętności AI?
Od jednej do trzech godzin czasu kandydata przy zadaniu bliskim prawdziwej pracy, z terminem kilku dni. Krótsze testy mogą sprawdzić się na pierwszym etapie, ale mniej pokazują, jak ktoś sprawdza i poprawia pracę.