Como usar os erros do agente para melhorar ele
Um agente que ninguém corrige fica igual para sempre, e o negócio muda em volta dele. A boa notícia é que corrigir não exige entender de tecnologia: exige ler o que deu errado e escrever a informação ou a regra que faltava. Toda conversa ruim é um item de configuração esperando alguém escrever.
Monte o seu agente e veja ele respondendo com as informações do seu negócio.
Criar meu agente de graça Montar é livre, sem cadastro e sem cartão.O que você vai encontrar neste artigo
Em resumo
- Todo erro cai em duas categorias: faltou informação ou faltou regra. As duas você escreve.
- Erro é sistemático: o que apareceu em duas de dez conversas está em duzentas de mil.
- Quinze minutos por semana lendo conversas ruins vale mais que qualquer troca de modelo.
As duas categorias de erro
| Sintoma | Categoria | O que escrever |
|---|---|---|
| Não soube responder | Faltou informação | Cadastre o dado |
| Respondeu valor antigo | Informação duplicada | Apague a versão velha |
| Inventou algo | Faltou regra | "Se não souber, me chame" |
| Prometeu prazo | Faltou regra | "Nunca prometa prazo" |
| Respondeu longo demais | Faltou regra | "Até três frases" |
| Ignorou parte da pergunta | Faltou regra | "Responda todas as perguntas" |
Nenhuma das seis linhas exige suporte, troca de plataforma ou modelo melhor. Todas são texto que alguém precisa escrever, e todas levam menos de dois minutos depois que você identifica.
A pergunta que classifica qualquer erro: faltou o dado, ou faltou a ordem? Uma delas sempre responde.
A rotina de quinze minutos
- Uma vez por semana, abra dez conversas ao acaso da semana. Sorteie, não escolha.
- Leia só procurando pelo que você responderia diferente.
- Para cada caso, classifique: faltou informação ou faltou regra.
- Escreva a correção no mesmo momento, sem deixar para depois.
- Anote a data. Isso vira o seu histórico de melhorias.
O passo 1 tem uma armadilha: escolher conversas em vez de sortear traz só as que você lembra, que são as extremas. O sorteio traz o comum, e é no comum que está o padrão que se repete centenas de vezes.
Quinze minutos por semana é o teto do que essa rotina precisa. Quem lê tudo cansa em duas semanas e para de ler.
Os sinais que valem mais que a leitura
Além da amostra, três indicadores apontam onde olhar sem você precisar procurar:
- Conversas em que o agente disse que não sabia. Cada uma é uma informação faltando, já identificada.
- Conversas passadas para humano. Se muitas são pelo mesmo assunto, esse assunto vira cadastro.
- Conversas que morreram sem resposta do cliente. Leia a última mensagem do agente.
O primeiro é o mais eficiente que existe: o próprio agente já marcou onde falta conteúdo, e você só precisa preencher. Se a sua plataforma lista isso, comece por aí toda semana.
Agente que nunca diz "não sei" não te dá esse sinal, e é por isso que essa regra vale mais do que parece: ela transforma erro em relatório.
O que fazer com o erro grave
Erro que já chegou no cliente pede um passo a mais, porque ele é sistemático por natureza:
- Corrija a configuração antes de responder ao cliente afetado.
- Procure quantas outras conversas receberam a mesma informação errada.
- Decida se vale avisar quem recebeu, com base no tamanho do erro.
- Escreva a regra que impede a repetição, e não só o dado que faltava.
O passo 2 é o mais esquecido e o mais importante. Se o agente disse errado uma vez, ele disse errado todas as vezes em que aquela pergunta apareceu, e você provavelmente só ficou sabendo de uma.
Erro de agente nunca é isolado. Trate cada um como amostra de um número maior, e procure o número antes de considerar resolvido.
Leia também
Perguntas frequentes
- Como melhorar um agente de IA que responde mal?
- Classificando cada erro em duas categorias: faltou informação, que se resolve cadastrando o dado, ou faltou regra, que se resolve escrevendo a instrução. Nenhuma das duas exige suporte, troca de plataforma ou modelo melhor, e ambas levam minutos.
- Preciso ler todas as conversas para corrigir?
- Não. Sorteie dez por semana e leia procurando o que você responderia diferente. Sortear é importante: escolher traz só os casos extremos que você lembra, e o padrão que se repete centenas de vezes está nas conversas comuns.
- Existe um jeito de saber onde falta informação sem ler tudo?
- Sim, três sinais apontam sozinhos: conversas em que o agente disse que não sabia, conversas passadas para humano pelo mesmo assunto, e conversas que morreram sem resposta do cliente. O primeiro é o mais eficiente, porque o agente já marcou onde falta conteúdo.
- O que fazer quando o erro já chegou no cliente?
- Corrigir a configuração antes de responder ao cliente afetado, e depois procurar quantas outras conversas receberam a mesma informação errada. Erro de agente é sistemático: se aconteceu uma vez, aconteceu em todas as conversas com aquele gatilho.
