Um agente escreve, outro confere: revisão de IA por outra IA
Por Pedro Mafra Mendes · 4 min de leitura
Em tarefa importante, um agente de IA faz o trabalho e outro, com regras próprias, confere antes de sair. A IA falha menos do que a gente acha, mas falha e diz que está tudo lindo. Quando outra IA olha o mesmo trabalho, aparece um monte de buraco. Modelos diferentes pensam um pouco diferente, e essa diferença é o que pega o erro.
Por que a IA não pega o próprio erro?
Porque, para ela, o que escreveu fazia sentido. A IA monta a resposta palavra por palavra, escolhendo a continuação mais provável. Quando você pede para ela revisar o próprio texto na mesma conversa, ela lê a sequência que ela mesma considerou provável e tende a achar que está certa.
Pedir "revise antes de entregar" ajuda um pouco. Mas o ganho grande vem quando a revisão é feita por outro agente, em outro contexto, com outra instrução. Ele não carrega as premissas do primeiro e olha o resultado como alguém de fora.
Como montar um fluxo com agente revisor?
O desenho que uso é curto:
- o primeiro agente faz o trabalho (o plano, a análise, o texto, o código);
- a saída dele entra como variável no pedido do segundo, um auditor com regras próprias;
- sai o documento com o plano e a auditoria, e o e-mail para quem precisa receber.
As regras do auditor são o coração do fluxo. Elas dizem o que ele precisa checar, uma por uma: a política que não pode ser violada, o formato obrigatório, o tipo de erro que já aconteceu antes. Um auditor com regra vaga ("veja se está bom") devolve elogio. Um auditor com regra concreta devolve problema.
Um exemplo de exercício que uso nas turmas: um plano de compra de 1.500 pares de tênis para o verão. O primeiro agente montou o plano. O auditor apontou a violação da regra 1 (a curva de tamanhos estava muito padrão, sem olhar a venda real) e o e-mail chegou com os links para a política de grade. Quem recebeu já tinha o problema e o caminho para resolver.
Vale usar modelos diferentes para escrever e revisar?
Vale, e é o que faço no meu trabalho. Uso um modelo para pensar, outro para executar e outro para revisar, porque cada um pensa um pouco diferente. Em tarefa importante, o Claude só termina quando o Codex revisa e aprova. Se o revisor reprova, volta para correção.
A vantagem é que os erros de um modelo nem sempre são os erros do outro. O que um deixa passar por hábito, o outro estranha. Isso pega até erro em código que eu não entendo. Não preciso saber programar para ver que o revisor apontou uma falha, que o primeiro agente corrigiu e que o revisor aprovou na segunda rodada.
O revisor não fica implicando à toa?
No começo, fica. O meu implicava com palavra, com estilo, com detalhe que não mudava nada. Isso gasta tempo e faz o primeiro agente refazer o que estava bom.
A solução foi ajustar a instrução do revisor, do mesmo jeito que se ajusta qualquer agente:
- dizer o que é erro de verdade (dado errado, regra violada, coisa que quebra);
- dizer o que não é para apontar (preferência de estilo, sinônimo, ordem de parágrafo);
- separar o que bloqueia a entrega do que é só sugestão;
- pedir que cada apontamento venha com o trecho e o motivo.
Depois de ajustado, ele passou a pegar erro real. A conversa entre os dois agentes ficou curta: ou aprova, ou aponta o problema concreto, que o primeiro corrige.
Quando vale o custo de um segundo agente?
Quando o erro custa mais do que a revisão. Um segundo agente dobra parte do gasto e do tempo de cada tarefa. Para resumo de reunião interna, não compensa. Para plano de compra, análise que vai para decisão, texto que vai para cliente, código que mexe em sistema de produção, compensa com folga.
O critério que uso é perguntar o que acontece se o erro passar. Se a resposta é "alguém percebe e corrige amanhã", um agente basta. Se a resposta é "compramos errado", "o cliente recebe" ou "o sistema cai", entra o revisor.
Perguntas frequentes
Pedir para a mesma IA revisar o próprio trabalho funciona?
Ajuda pouco, porque ela tende a achar que a sequência que escreveu está certa. A revisão rende mais com outro agente, em outro contexto e com regras próprias.
Preciso de dois modelos diferentes ou posso usar o mesmo?
O mesmo modelo com instrução de auditor já pega bastante coisa. Modelos diferentes pegam mais, porque cada um erra de um jeito.
Como evitar que o revisor reprove por detalhe?
Escreva na instrução dele o que é erro de verdade e o que não deve ser apontado, e separe bloqueio de sugestão.