Avaliação de habilidades em IA para funções não técnicas.
O mesmo teste feito com engenheiros, sem o código. Dê a um profissional de marketing, de finanças ou a um recrutador uma tarefa real do trabalho no ChatGPT ou no Claude, e veja se a pessoa percebe quando a IA erra.
Por que testar habilidades em IA fora da engenharia?
A maior parte do uso de IA no trabalho não é código. No Work Trend Index 2024 da Microsoft e do LinkedIn, 75% dos profissionais do conhecimento disseram usar IA no trabalho, e 78% deles trazem as próprias ferramentas de IA (Microsoft). Então é provável que sua próxima contratação de marketing ou finanças faça boa parte do trabalho com IA, você testando isso ou não.
O risco é silencioso
Quando a IA erra um código, muitas vezes algo quebra. Quando erra um orçamento, um resumo de contrato ou um e-mail para um cliente, nada quebra. O texto parece igualmente bom, e alguém age com base nele.
A habilidade é a mesma
Entender a tarefa, instruir a IA, conferir o que volta, corrigir e entregar um trabalho certo. Só a tarefa e a ferramenta mudam.
Como um teste de habilidades em IA muda em funções não técnicas
Funções técnicas
Funções não técnicas
A ferramenta de IA
Claude Code ou Codex, trabalhando no código
ChatGPT ou Claude Cowork, trabalhando com documentos, planilhas e a web
Quando a IA erra
Muitas vezes algo quebra: um teste falha, o código não roda
Em geral nada quebra. Um número inventado ou uma afirmação errada parece tão bom quanto um certo
O que significa verificar
Rodar os testes
Rastrear cada número e afirmação até a fonte
O que entregam
Uma alteração que alguém revisa
Um e-mail, um plano ou um resumo com base no qual alguém age, muitas vezes sem conferir de novo
As seis habilidades
O mesmo
O mesmo
Quatro regras para um teste não técnico de habilidades em IA
1Use uma tarefa do trabalho, com arquivos reais.Documentos, planilhas, anotações, uma política. Não um questionário sobre IA, e nada que exija código.
2Deixe usarem a ferramenta de IA que já usam.ChatGPT, Claude ou Claude Cowork. Impor uma ferramenta nova testa a ferramenta, não a pessoa.
3Diga que a IA é esperada.Quem não tem certeza se a IA é permitida esconde como trabalha, ou faz à mão.
4Leia a conversa e o trabalho.Pontue como instruíram, conferiram e corrigiram, não o polimento do texto.
Testes de habilidades em IA para marketing, finanças, vendas, pessoas e operações
Ideias de testes de habilidades em IA para outras funções
Para funções em que não temos tarefa pronta, estas são ideias de partida: uma tarefa real e o tipo de ponto em que a IA costuma errar nela. Use seus próprios arquivos.
Função
A tarefa
Onde a IA costuma errar
Vendas
Prepare-se para uma chamada com uma conta específica, usando o site dela, as anotações da última chamada e o histórico do CRM.
A IA preenche lacunas sobre a conta com coisas que parecem certas e não são.
Recrutamento e pessoas
Escreva um anúncio de vaga e um plano de triagem a partir das anotações do gestor da contratação e da faixa salarial.
Um requisito que não deveria estar lá, ou palavras que a IA acrescenta e que restringem quem se candidata.
Atendimento ao cliente
Responda a cinco chamados usando a central de ajuda e a política de reembolso.
A IA promete algo que a política não permite.
Operações
Transforme um documento de processo bagunçado e um mês de solicitações em um checklist que a equipe possa seguir.
Um passo que só aparece em uma solicitação, ou uma regra que a IA inventa para preencher uma lacuna.
Jurídico e compliance
Resuma o que muda em um novo contrato de fornecedor em relação ao antigo.
Uma mudança em uma cláusula que o resumo da IA deixa de fora.
O resultado de uma avaliação de habilidades em IA, de uma vaga de finanças
O briefing: “Confira as 400 faturas de fornecedores do último trimestre com base em seis contratos e encontre onde vocês estão sendo cobrados em excesso.” A Lemonsignal leu seis habilidades na conversa do candidato com o ChatGPT, e cada nível leva ao turno de onde veio.
LemonsignalAlex Morgan
Alex MorganAnalista de operações financeiras · Tarefa: encontrar a cobrança em excesso · ChatGPT · 2 h 15 min
Verificado pela Lemonsignal
72%Boa aderência, uma questão em aberto
Fez a IA listar os termos do contrato antes de comparar as faturas.
Recalculou o total à mão em vez de confiar no da IA.
Deixou dados confidenciais no resumo.
EntenderSólidoLeu os seis contratos antes de pedir qualquer coisa.Turno 2
InstruirForteFez a IA listar primeiro cada termo de preço dos contratos e depois comparar um fornecedor por vez.Turno 3
VerificarForteRecalculou dois fornecedores à mão com base nos contratos e corrigiu o total.Turnos 14, 17
CorrigirSólidoDisse qual termo do contrato faltava no total.Turno 15
AprovarParcialUm resumo claro para o CFO, ainda com os dados bancários dos fornecedores.
ReutilizarSólidoRodou as faturas deste trimestre com o mesmo prompt.
Habilidades para a função
Ler termos de contratoAcima do nível
Conciliar com precisãoNo nível
Lidar com dados confidenciaisAbaixo do nível
O que a pessoa entregou, como entregou. Cada marca é uma habilidade do resultado dela.
AprovarParcial
Para o CFOFomos cobrados €48.210 a mais no último trimestre
23 de 400 faturas não correspondem ao contrato.
Três fornecedores respondem por €45.300 disso: Nordfrakt, Brekke Pack e Solvik IT.
Sugiro pedir a cada um uma nota de crédito. A lista de faturas por fornecedor está em anexo.
As faturas deste trimestre passam pela mesma conferência antes de pagarmos.
Perguntas sobre avaliações de habilidades em IA para funções não técnicas
É possível testar habilidades em IA em funções não técnicas?
Sim. Dê ao candidato uma tarefa real do trabalho, como planejar um orçamento, conciliar faturas ou responder a chamados de suporte, no ChatGPT ou no Claude. Depois leia a conversa dele com a IA e o que ele entrega. As seis habilidades são as mesmas dos engenheiros; a tarefa muda.
Os candidatos precisam de habilidades técnicas para uma avaliação de habilidades em IA?
Não. Em funções não técnicas, a tarefa envolve documentos, planilhas e a web, feita em uma ferramenta de chat como ChatGPT ou Claude Cowork. Nada exige código.
Quais habilidades em IA importam mais em funções não técnicas?
Verificar, acima de tudo. No trabalho não técnico, nada quebra quando a IA erra: um número inventado parece tão bom quanto um certo. Depois, aprovar: muitas vezes alguém age com base no que a pessoa envia sem conferir de novo.
Um questionário de letramento em IA basta para equipes não técnicas?
Para treinamento, pode ser um começo. Para contratação, ele diz o que alguém sabe sobre IA, não se percebe quando ela erra em um trabalho real.
A qualidade do texto ou a fluência em inglês afetam a pontuação?
Não deveriam, e na Lemonsignal nunca afetam. Texto polido é fácil de obter da IA. O que importa é se o que a pessoa entrega está certo e pronto para quem vai ler.
Para quais funções a Lemonsignal tem tarefas prontas?
Marketing, finanças, produto, design e dados, além de engenharia. Para outras funções, traga um trabalho real e o transformamos em uma tarefa com você.
