P. Mafra MendesConversar

Erro da IA se corrige na instrução, nunca no resultado à mão

Por Pedro Mafra Mendes · 3 min de leitura

Quando a IA erra, corrigir o resultado à mão ou pedir o conserto no próprio chat não resolve: a conversa é uma instância separada, e o mesmo erro volta amanhã. A cada falha, eu paro, pergunto ao agente por que ele fez daquele jeito e mando registrar a correção na instrução permanente dele.

Por que consertar o resultado à mão não resolve?

O caminho mais tentador quando a IA erra é arrumar você mesmo. O e-mail saiu com o tom errado, você reescreve. A planilha veio com uma coluna trocada, você troca. Leva dois minutos e o trabalho está pronto.

O problema é que nada mudou para a próxima vez. A IA não aprendeu nada com o seu conserto. Amanhã, quando você pedir de novo, o e-mail vai sair com o mesmo tom e a planilha vai vir com a mesma coluna trocada.

Corrigir no chat tem um efeito parecido. Você diz "não, faça assim", ela acerta naquela conversa, e você fica com a impressão de que ensinou. Mas cada conversa é uma instância separada. Quando você abre uma nova, a correção ficou para trás.

Como transformar o erro em ajuste de instrução?

A instrução é o texto permanente que a IA lê toda vez: o perfil, as regras de um projeto, a skill de uma tarefa. Mudar ali é o único jeito de a correção valer para as próximas vezes.

O roteiro que sigo a cada falha:

  • paro antes de consertar o resultado;
  • pergunto ao agente por que ele fez daquele jeito;
  • peço que ele mesmo diga o que mudar na instrução para o erro não voltar;
  • mando registrar essa correção na instrução;
  • testo de novo o mesmo pedido para ver se ficou certo.

O terceiro passo é o que mais economiza tempo. A IA costuma saber muito bem por que errou quando você pergunta, e propõe a mudança certa na instrução. Você só precisa aprovar.

Por que tanta gente desiste da IA?

Quem não faz esse ajuste vai acumulando irritação. A IA erra, a pessoa conserta, a IA erra de novo do mesmo jeito, a pessoa conserta de novo. Depois de algumas semanas, a conclusão é que a IA não consegue fazer aquilo.

Na maior parte das vezes, o problema era a instrução. A IA estava fazendo exatamente o que o texto dela mandava, ou o que ela supôs na ausência de uma regra. Ninguém disse a ela que estava errado de um jeito que ficasse guardado.

Tem um ponto que ajuda quem está começando: se preocupe menos em escrever exatamente a coisa certa na primeira vez e mais em dar retorno para a IA sobre o que você sente que está ruim. A instrução boa não nasce pronta. Ela é o acúmulo de dezenas de correções feitas no momento em que o erro apareceu.

Qual é o tom certo para corrigir a IA?

Eu trato a correção como uma relação de líder com liderado. Na primeira vez que o erro aparece, explico com calma o que está ruim e por quê. A instrução é ajustada.

Se o mesmo erro volta no outro dia, subo o tom. Deixo claro que aquilo já tinha sido corrigido e que não pode voltar. E peço de novo a causa, porque se o erro voltou, a correção não ficou registrada no lugar certo, ou ficou escrita de um jeito fraco demais.

O que não funciona é ameaçar. Dizer que vai trocar de IA, que ela é inútil, que vai cancelar a assinatura, não muda nada no comportamento. O que muda é dizer com precisão o que está ruim. Quanto mais específica a reclamação, melhor a correção.

E não deixe passar nada do que dá para melhorar. Cada detalhe que incomoda e fica sem correção vai incomodar de novo amanhã.

Perguntas frequentes

Por que a IA repete o mesmo erro em conversas diferentes?

Porque cada conversa é uma instância separada e a correção feita no chat não fica guardada. Para valer nas próximas vezes, ela precisa entrar na instrução permanente, como o perfil ou a skill da tarefa.

Quem deve escrever a correção da instrução, eu ou a IA?

Pode ser a própria IA. Pergunte por que ela errou e peça que diga o que mudar na instrução para o erro não voltar; você revisa e aprova.

Ser duro com a IA melhora o resultado?

Subir o tom quando o erro volta ajuda a marcar a regra, mas ameaçar trocar de ferramenta não muda nada. O que funciona é dizer com precisão o que está ruim.

Leia também