Como revisar o que a IA entregou sem cair no "parece certo"
Como revisar o que a IA entregou sem cair no “parece certo”
Existe uma armadilha específica em trabalhar com IA, e ela não tem nada a ver com a máquina errar.
O texto sai bem escrito. A estrutura está certa, o tom está adequado, os parágrafos fluem. Você lê, não tropeça em nada, e aprova.
Só que fluência e correção são coisas separadas. Um relatório com um número inventado lê exatamente igual a um relatório com o número certo. A escrita boa remove justamente o sinal que você usava pra desconfiar: aquele desconforto de ler algo mal amarrado.
Quem trabalha com IA todo dia precisa trocar o critério “passou batido na leitura” por outra coisa.
O que a IA erra, na ordem
Nem todo erro tem a mesma probabilidade. Vale saber onde olhar primeiro.
Número e data. É o campeão. Valor de mercado, percentual, prazo legal, ano de uma mudança de regra. A IA produz números que parecem plausíveis para o contexto e frequentemente não são reais.
Fonte e citação. Nome de estudo, autor, link. Às vezes a fonte existe e não diz aquilo. Às vezes a fonte não existe.
Regra específica do seu setor. Ela conhece a regra genérica e não conhece a exceção que vale pro seu caso. E vai afirmar a genérica com a mesma segurança.
O que foi omitido. O erro mais difícil de pegar, porque não tem nada errado na tela. A proposta cobriu quatro pontos e o quinto, que era o que o cliente mais se importava, não está lá.
Tom fora do lugar. Mais fácil de perceber, mas escapa quando você está com pressa.
Uma revisão em três passos
Nada disso exige processo pesado. O que exige é ordem, porque revisar tudo ao mesmo tempo é como não revisar.
Passo 1: bater o que é verificável. Passe só nos números, nomes, datas e fontes. Ignore o texto. Cada item desses ou você confirma numa fonte que você confia, ou apaga. Não existe meio termo aqui. Esse passo leva três minutos e pega a maioria dos erros caros.
Passo 2: ler procurando o que falta. Agora leia o conteúdo com uma pergunta na cabeça: o que eu esperava ver aqui e não vi. Compare com o pedido original, não com o que está na tela. É o único jeito de pegar omissão, porque a omissão não se anuncia.
Passo 3: ler como quem vai receber. Última passada, no lugar do cliente, do chefe, do paciente. É aqui que aparece a promessa que você não consegue cumprir, o jargão que a pessoa não entende, o tom errado pra situação.
Três passadas rápidas com objetivo declarado funcionam muito melhor que uma passada longa tentando avaliar tudo junto.
Defina o pronto antes de pedir
O maior ganho de qualidade não está na revisão. Está em ter escrito, antes de pedir, o que faria aquele resultado estar bom.
Duas ou três linhas resolvem: qual o objetivo da peça, quem vai ler, e o que não pode aparecer nela. Se você não consegue escrever isso, a revisão vai ser você olhando um texto e sentindo que está ok, o que é exatamente a armadilha do começo.
Com o critério escrito, a revisão vira conferência contra uma régua. Sem ele, vira gosto pessoal no fim de um dia cansativo.
Use a IA pra revisar, com cuidado
Pedir pra IA revisar o próprio trabalho funciona melhor do que parece, desde que você dê um alvo específico.
“Revisa esse texto” produz elogio e ajuste de vírgula. “Liste toda afirmação factual deste texto que precisaria de fonte” produz uma lista útil de verdade. “Aponte o que foi prometido aqui que a gente talvez não consiga entregar” também.
Melhor ainda em conversa separada, sem o histórico de quem escreveu. A revisão fica mais dura quando o modelo não está olhando pro próprio raciocínio.
O que isso não substitui: a conferência de fato contra fonte real. Perguntar pra IA se o número dela está certo é perguntar pra mesma cabeça que inventou o número.
Onde revisar menos
Revisar tudo com o mesmo rigor é caro e ninguém sustenta por muito tempo.
Calibre pelo custo do erro. Rascunho interno, brainstorm, resumo de reunião que você mesmo vai usar: leitura rápida basta. Qualquer coisa que sai da empresa, vira número em decisão, ou tem consequência legal: os três passos, sem exceção.
O critério não é o quanto você confia na ferramenta. É o quanto custa estar errado naquele item específico.
O ponto final
Trabalhar bem com IA é menos sobre escrever prompt melhor e mais sobre ter critério de aceite. É a mesma habilidade que você usaria pra receber trabalho de um freelancer competente e rápido que não conhece o seu negócio.
Você não leria a entrega dele e diria “parece bom”. Você conferiria os números, veria o que faltou, e leria no lugar do cliente. Faça a mesma coisa aqui.
Se você quer entender por que a IA inventa coisa com tanta confiança, escrevi sobre isso aqui. E se a preocupação é depender de algo que você não controla, o artigo sobre vibe coding trata do mesmo problema no lado técnico.



COMENTÁRIOS
Nenhum comentário ainda.