O que é fluência em IA? Como testá-la na contratação

Definição e significado de fluência em IA

A IA é o colega júnior mais rápido e mais confiante que a maioria das pessoas já teve. Fluência em IA é o quanto você sabe gerenciá-lo: o que você passa, como instrui, se percebe quando ele erra e o que deixa sair com seu nome.

A definição de fluência em IA do Stanford HAI

Define fluência em IA como “the capacity to collaborate productively and responsibly with AI systems”. Leia em hai.stanford.edu

O AI Fluency Framework da Anthropic

De Rick Dakan e Joseph Feller com a Anthropic. Nomeia quatro competências, os 4Ds: Delegation, Description, Discernment e Diligence. Leia na Anthropic Academy

O que é letramento em IA, e como a fluência em IA é diferente?

As duas palavras costumam ser usadas para a mesma coisa. A diferença importa na hora de testar: uma é sobre saber, a outra sobre fazer.

	Letramento em IA	Fluência em IA
A pergunta	A pessoa sabe o que é IA e o que pode dar errado?	A pessoa consegue fazer um trabalho bom e correto com IA?
O que cobre	Como as ferramentas de IA funcionam, no que são boas e ruins, privacidade e viés	Instruir a IA, conferir o que ela devolve, corrigir e entregar um trabalho certo
Como costuma ser testado	Perguntas com uma resposta certa	Uma tarefa, feita com uma ferramenta de IA, avaliada por como a pessoa trabalhou e pelo que entregou
Quem precisa	Todos que usam IA no trabalho	Todos cujo trabalho é feito com IA, em qualquer função

Habilidades de fluência em IA: as seis que medimos

As mesmas seis habilidades em toda função. Ao lado de cada uma, o mais próximo dos 4Ds da Anthropic; essa correspondência é leitura nossa, não deles.

Habilidade	Como é o nível forte	O mais próximo dos 4Ds
Entender Entendem a tarefa antes de passá-la para a IA?	Lê o material primeiro. Divide o problema. Percebe quando o briefing está errado.	Delegation
Instruir Dão à IA o que ela precisa?	Dá contexto, limites, exemplos e o que significa estar pronto. Guarda para si as decisões de julgamento.	Description
Verificar Percebem quando a IA está errada?	Testa contra a fonte. Pega o fato inventado e o número errado.	Discernment
Corrigir Consertam quando não está funcionando?	Diz o que está errado e por quê. Muda de abordagem cedo.	Discernment e Description
Aprovar O que entregam está pronto para enviar?	Pronto para quem vai ler. Diz o que foi verificado e o que não foi. Mantém dados confidenciais de fora.	Diligence
Reutilizar Tornam o processo repetível?	Prompts salvos, skills, fluxos de trabalho e automações. A próxima execução é mais rápida e igual.	Sem correspondência direta

Não faz parte da fluência em IA e nunca é pontuado: tamanho ou quantidade de prompts, velocidade, qual ferramenta de IA a pessoa escolheu, e texto polido ou inglês perfeito.

Como pontuamos cada habilidade

Como testar fluência em IA na contratação

Há três formas comuns de aplicar um teste de fluência em IA. Elas medem coisas diferentes.

Um questionário sobre IA Múltipla escolha ou respostas curtas sobre como a IA funciona e quando usá-la. MostraO que as pessoas sabem sobre IA. Não mostraSe conseguem usá-la. Saber que a IA inventa coisas não é o mesmo que pegá-la inventando.
Uma simulação com IA integrada Uma tarefa curta dentro de uma plataforma de testes, com um chat de IA integrado. MostraComo escrevem prompts e reagem, em um ambiente padronizado e fácil de comparar. Não mostraComo trabalham na própria ferramenta e configuração, em um trabalho tão longo e bagunçado quanto o real.
Uma tarefa real na própria ferramenta de IA Uma tarefa do trabalho, feita na ferramenta que a pessoa usaria no dia a dia, com a conversa inteira gravada. MostraComo entendem, instruem, verificam, corrigem e entregam, em um trabalho parecido com o real. Não mostraLeva mais tempo: de uma a três horas da pessoa, e alguém para ler e pontuar.

Uma avaliação de fluência em IA com trabalho real, em quatro passos

1Escolha uma tarefa real do trabalho.Algo que fariam no primeiro mês, com os arquivos que vêm junto. Não um quebra-cabeça.
2Inclua um ponto em que a IA costuma errar.Um número que precisa bater com uma fonte, um briefing com uma lacuna. É aí que você vê quem confere.
3Deixe usarem a própria ferramenta de IA e diga que a IA é esperada.Claude Code, Codex, Claude Cowork ou ChatGPT. Quem não tem certeza se a IA é permitida esconde como trabalha.
4Pontue a conversa, não só o resultado.A IA faz a maioria dos trabalhos finais parecer boa. A conversa mostra quem pensou e quem conferiu.

Como fazer uma entrevista assistida por IA

O resultado de um teste de fluência em IA, de uma profissional de marketing

Na Lemonsignal, os candidatos fazem uma tarefa real na própria ferramenta de IA. Esta profissional de marketing recebeu o briefing: “Lançamos na Alemanha no mês que vem com €50 mil. Usando nosso posicionamento, os resultados da campanha do ano passado no Reino Unido e três sites de concorrentes, decida para onde vai o dinheiro, em cinco linhas para o CMO, e escreva o e-mail de lançamento.” A Lemonsignal leu seis habilidades na conversa dela com a IA, e cada nível leva ao turno de onde veio.

Sarah MillerGerente de growth marketing · Tarefa: planejar um orçamento de lançamento · ChatGPT · 3 h 20 min

Verificado pela Lemonsignal

78%Boa aderência, uma questão em aberto

Planejou com base no custo de clientes no Reino Unido, não em cliques.
Não usou nenhum número que não pudesse rastrear até uma fonte.
Verificou cada afirmação sobre concorrentes antes de enviar.

Entender Forte Percebeu que cliques e clientes pagantes apontam para canais diferentes e planejou com base nos clientes. Turno 3
Instruir Sólido Passou os números do Reino Unido e o orçamento e pediu para usar só isso. Turno 5
Verificar Forte Perguntou de onde vinha cada número antes de usá-lo e conferiu as afirmações da IA nos sites dos três concorrentes. Turnos 9, 21
Corrigir Parcial Disse “melhore isso” quatro vezes no e-mail antes de dizer o que estava errado. Turnos 14 a 18
Aprovar Forte Verificou cada afirmação do e-mail antes de aprovar. Avisou que os custos na Alemanha são uma estimativa a conferir depois de duas semanas.
Reutilizar Sólido Fez a França com o prompt que escreveu para a Alemanha.

Habilidades para a função

Um orçamento ligado a números reaisAcima do nível
Escolher os canais certosNo nível
PosicionamentoNo nível

Para uma função específica: uma avaliação completa

Uma tarefa real para a função, as seis habilidades e duas ou três habilidades da função, com uma primeira leitura da Lemonsignal que sua equipe confere.

Tarefas por função

Perguntas sobre fluência em IA

O que é fluência em IA?

Conseguir fazer um trabalho bom e correto com IA: entender a tarefa, instruir bem a IA, perceber quando ela erra, corrigir e entregar um trabalho pronto para quem vai ler. O Stanford HAI a define como a capacidade de colaborar de forma produtiva e responsável com sistemas de IA.

Qual é a diferença entre fluência em IA e letramento em IA?

Letramento em IA é saber o que é IA, no que ela é boa e o que pode dar errado. Fluência em IA é usá-la bem em um trabalho real. Alguém pode saber que a IA inventa coisas e ainda assim não perceber quando acontece.

Fluência em IA é o mesmo que engenharia de prompt?

Não. Escrever um bom briefing para a IA é uma parte. A maior parte do resto acontece em torno do prompt: entender a tarefa primeiro, conferir o que volta e decidir o que está pronto para entregar.

Como testar fluência em IA em uma entrevista?

Dê uma tarefa real do trabalho, deixe os candidatos usarem a própria ferramenta de IA e leia a conversa deles com a IA. Depois pergunte sobre um momento dela. Veja os passos no nosso guia de entrevistas assistidas por IA.

É possível testar fluência em IA em funções não técnicas?

Sim. Um profissional de marketing pode planejar um orçamento de lançamento com o ChatGPT, um analista pode explicar uma queda de receita, qualquer pessoa pode resumir um documento longo. As seis habilidades são as mesmas em toda função; a tarefa muda.

A IA pontua o teste de fluência em IA da Lemonsignal?

A Lemonsignal lê a conversa inteira, marca os momentos que importam e faz uma primeira leitura. Cada nível leva ao momento de onde veio. Sua equipe de contratação assiste à sessão, confere a leitura, adiciona comentários e decide.

O que é fluência em IA? E como testá-la na contratação.