Тот же тест, что и для инженеров, только без кода. Дайте маркетологу, финансисту или рекрутеру настоящее задание с его работы в ChatGPT или Claude и посмотрите, заметит ли он ошибку ИИ.
Зачем проверять навыки ИИ вне разработки?
Большая часть использования ИИ на работе это не код. По данным Work Trend Index 2024 от Microsoft и LinkedIn, 75% работников умственного труда используют ИИ на работе, и 78% из них приносят свои ИИ-инструменты (Microsoft). Так что ваш следующий маркетолог или финансист, скорее всего, будет делать большую часть работы с ИИ, проверяете вы это или нет.
Риск незаметен
Когда ИИ ошибается в коде, часто что-то ломается. Когда он ошибается в бюджете, сводке контракта или письме клиенту, ничего не ломается. Текст читается так же хорошо, и кто-то действует на его основе.
Навык тот же
Понять задачу, поставить её ИИ, проверить ответ, исправить и сдать верную работу. Меняются только задание и инструмент.
Чем тест навыков ИИ отличается для нетехнических ролей
Технические роли
Нетехнические роли
ИИ-инструмент
Claude Code или Codex, работа в коде
ChatGPT или Claude Cowork, работа с документами, таблицами и вебом
Когда ИИ ошибается
Часто что-то ломается: падает тест, не запускается код
Обычно ничего не ломается. Выдуманная цифра или неверное утверждение читаются так же, как верные
Что значит проверять
Запускать тесты
Прослеживать каждую цифру и утверждение до источника
Что сдают
Изменение, которое кто-то проверит
Письмо, план или сводку, на основе которых кто-то действует, часто без повторной проверки
Шесть навыков
Общее
Общее
Четыре правила нетехнического теста навыков ИИ
1Используйте задание с этой работы, с настоящими файлами.Документы, таблицы, заметки, регламент. Не викторину об ИИ и ничего, что требует кода.
2Разрешите ИИ-инструмент, которым они уже пользуются.ChatGPT, Claude или Claude Cowork. Новый инструмент проверяет инструмент, а не человека.
3Скажите, что ИИ ожидается.Те, кто не уверен, можно ли ИИ, скрывают, как работают, или делают всё вручную.
4Читайте и разговор, и работу.Оценивайте, как ставили задачу, проверяли и исправляли, а не насколько гладко написано.
Тесты навыков ИИ для маркетинга, финансов, продаж, HR и операций
В Lemonsignal есть настоящее задание для каждой из этих ролей, в собственном ИИ-инструменте кандидата, с первичной оценкой от Lemonsignal, которую проверяет ваша команда.
Бриф: «Сверьте счета поставщиков за прошлый квартал (400) с шестью контрактами и найдите, где вам выставляют лишнее». Lemonsignal оценил шесть навыков по разговору кандидата с ChatGPT, и каждый уровень ведёт к реплике, откуда он взят.
LemonsignalAlex Morgan
Alex MorganFinance operations analyst · Задание: найти переплату · ChatGPT · 2 ч 15 мин
Проверено Lemonsignal
72%Хорошее соответствие, один открытый вопрос
Сначала список условий контрактов от ИИ, потом сверка счетов.
Итог пересчитан вручную, а не принят от ИИ на веру.
Конфиденциальные данные остались в сводке.
ПониманиеУверенноШесть контрактов прочитаны до первого запроса.Реплика 2
Постановка задачиСильноСначала запрос на все ценовые условия из контрактов, затем сверка по одному поставщику за раз.Реплика 3
ПроверкаСильноДва поставщика пересчитаны вручную по контрактам, итог исправлен.Реплики 14, 17
ИсправлениеУверенноНазвано условие контракта, которого не хватало в итоге.Реплика 15
ПриёмкаЧастичноПонятная сводка для CFO, но с банковскими реквизитами поставщиков.
ПовторяемостьУверенноСчета этого квартала проверены тем же промптом.
Навыки для работы
Чтение условий контрактовВыше планки
Точная сверкаНа уровне планки
Работа с конфиденциальными даннымиНиже планки
Что сдано, в том виде, в каком сдано. Каждая пометка это навык из результата.
ПриёмкаЧастично
Для CFOВ прошлом квартале нам выставили лишние 48 210 €
Счета, не соответствующие контракту: 23 из 400.
Три поставщика дают 45 300 € из этой суммы: Nordfrakt, Brekke Pack и Solvik IT.
Предлагаю запросить у каждого кредит-ноту. Список счетов по поставщикам приложен.
Счета этого квартала пройдут ту же проверку до оплаты.
Вопросы об оценке навыков ИИ для нетехнических ролей
Можно ли проверить навыки ИИ на нетехнических ролях?
Да. Дайте кандидату настоящее задание с этой работы, например спланировать бюджет, сверить счета или ответить на обращения в поддержку, в ChatGPT или Claude. Затем прочитайте его разговор с ИИ и то, что он сдал. Шесть навыков те же, что у инженеров, меняется задание.
Нужны ли кандидатам технические навыки для оценки навыков ИИ?
Нет. На нетехнических ролях задание состоит из документов, таблиц и веба и выполняется в чате, например в ChatGPT или Claude Cowork. Код не нужен.
Какие навыки ИИ важнее всего на нетехнических ролях?
Прежде всего проверка. В нетехнической работе ничего не ломается, когда ИИ ошибается: выдуманная цифра читается так же, как верная. Затем приёмка: на основе того, что человек отправляет, часто действуют без повторной проверки.
Достаточно ли викторины на ИИ-грамотность для нетехнических сотрудников?
Для обучения это может быть началом. Для найма она показывает, что человек знает об ИИ, но не то, поймает ли он ошибку в настоящей работе.
Влияют ли качество текста или владение английским на оценку?
Не должны, и в Lemonsignal никогда не влияют. Гладкий текст легко получить от ИИ. Важно, верно ли то, что сдаёт человек, и готово ли это для читателя.
Для каких ролей у Lemonsignal есть готовые задания?
Маркетинг, финансы, продукт, дизайн и данные, а также разработка. Для других ролей принесите настоящую работу, и мы вместе с вами превратим её в задание.
