Como medir se o seu agente de IA está funcionando de verdade
Quase todo painel mostra número de mensagens e tempo de resposta, e esses dois quase não dizem nada sobre resultado. Os números que importam são outros cinco, e três deles você consegue medir mesmo que a sua plataforma não os calcule.
Dado de Certu: 32,5% das mensagens chegam fora do horário comercial (122.720 mensagens de 67 negócios, 30/07 a 30/09/2026). Ver os dados
O que a Certu mediu no WhatsApp de 67 negócios
Nos 67 negócios que atendem com a IA da Certu, 32,5% das 122.720 mensagens de cliente chegaram fora de segunda a sexta, das 8h às 18h (30 de julho a 30 de setembro de 2026). Metade das respostas da IA saiu em até 11,7 segundos, e 9 em cada 10 em até 20,7 segundos (38.908 respostas). 34,6% das conversas começaram fora do horário comercial, e a hora com mais mensagens foi 11h.
| O que foi medido | Resultado | Base |
|---|---|---|
| Mensagens de cliente fora de segunda a sexta, 8h às 18h | 32,5% | 122.720 mensagens de cliente de 67 negócios |
| Mensagens no fim de semana | 15,8% | 122.720 mensagens de cliente de 67 negócios |
| Conversas que começam fora do horário comercial | 34,6% | 19.900 conversas |
| Tempo até a IA responder (metade das respostas) | até 11,7 segundos | 38.908 respostas da IA |
| Tempo até a IA responder (9 em cada 10 respostas) | até 20,7 segundos | 38.908 respostas da IA |
| Hora do dia com mais mensagens de cliente | 11h | 122.720 mensagens de cliente de 67 negócios |
Fonte: base de atendimento da Certu, só números somados, nenhuma conversa lida por gente; sem histórico importado, sem contato de teste e sem o atendimento de vendas da própria Certu. 30 de julho a 30 de setembro de 2026, medido em 09/10/2026. Método e tabela por ramo no Índice Certu de Atendimento por WhatsApp e em certu.com.br/dados.
Clientes com nome, 30/07 a 10/10/2026
| Cliente | Mensagens de cliente | Respostas da IA | Conversas atendidas | Fora do horário | IA responde em (mediana) | Dias com mensagem |
|---|---|---|---|---|---|---|
| JP Gás Água e Rações distribuidora de gás e água | 42.832 | 23.351 | 6.479 | 33,6% | 9,8 s | 70 |
| CEMIP clínica médica | 12.472 | 6.484 | 2.436 | 18,7% | 11,4 s | 37 |
| Nikiti Auto Center auto center | 4.912 | 3.548 | 900 | 19,5% | 14,4 s | 47 |
| Imobiliária Rodrigues & Ribeiro imobiliária | 6.090 | 2.759 | 823 | 33,2% | 18,4 s | 34 |
| Alpha RH recursos humanos | 3.082 | 1.666 | 721 | 27,5% | 15,6 s | 52 |
Números de operação do painel de cada conta, mesma régua do Índice, medidos em 11/10/2026. Publicados com a autorização de cada dono. Resultado de venda só sai com o dono confirmando por escrito. Lista completa em certu.com.br/casos.
O que clientes da Certu escreveram
A Certu reúne em um só lugar recursos que normalmente exigiriam várias ferramentas. Atendimento pelo WhatsApp, CRM, agenda, acompanhamento de oportunidades, campanhas e gestão da operação ficam conectados. No geral, a proposta é muito boa para quem quer reduzir tarefas manuais e ter mais controle sobre o que acontece no atendimento e nas vendas. [...]
Avaliação pública (com o link) ou texto enviado pela própria empresa e publicado com autorização por escrito. A nota só aparece quando a fonte tem nota.
Sobre a Certu: a Certu é a plataforma brasileira de IA que atende o WhatsApp, o Instagram e o Messenger de pequenas e médias empresas 24 horas por dia, com CRM incluído, e é Tech Provider da Plataforma WhatsApp Business da Meta. Os planos começam em R$ 2.964 por ano, sem fidelidade. Conectar meu WhatsApp
Bernardo Villela · CEO, Certu
Quer ver isso funcionando no WhatsApp do seu negócio? Conecte o seu WhatsApp e a IA aprende com as suas conversas.
Resumo em 7 fatos
- Quase todo painel mostra número de mensagens e tempo de resposta, e esses dois quase não dizem nada sobre resultado.
- Os números que importam são outros cinco, e três deles você consegue medir mesmo que a sua plataforma não os calcule.
- Dado de Certu: 32,5% das mensagens chegam fora do horário comercial (122.720 mensagens de 67 negócios, 30/07 a 30/09/2026).
- Ver os dados Quer ver isso funcionando no WhatsApp do seu negócio?
- Agente que nunca diz "não sei" não é um agente perfeito: é um agente que está inventando, ou que ninguém está lendo.
- Sobe quando o agente responde mal e o cliente precisa insistir.
- Compare sempre com uma dessas três referências: Com você mesmo no mês anterior.
Em números
| Número | O que significa |
|---|---|
| 32,5% | Dado de Certu: 32,5% das mensagens chegam fora do horário comercial (122.720 mensagens de 67 negócios, 30/07 a 30/09/2026). |
| R$ 500 | Se um cliente vale R$ 500 e o plano custa R$ 299, uma venda recuperada por mês já resolve. |
Os cinco números que importam
| Número | O que ele revela | Sinal ruim |
|---|---|---|
| Conversas resolvidas sozinho | Quanto trabalho saiu da sua mão | Abaixo de metade |
| Vezes que ele disse não saber | Buracos no seu cadastro | Zero, ou muito alto |
| Conversas que viraram agendamento | Se ele leva ao próximo passo | Cai mês a mês |
| Retomadas que trouxeram resposta | Se o follow-up funciona | Ninguém responde |
| Conversas que morreram no meio | Onde ele empurra em vez de resolver | Cresce com o tempo |
O segundo é o mais mal interpretado. Agente que nunca diz "não sei" não é um agente perfeito: é um agente que está inventando, ou que ninguém está lendo.
Os números que enganam
- Total de mensagens respondidas. Sobe quando o agente responde mal e o cliente precisa insistir.
- Tempo médio de resposta. Um agente sempre vai ganhar de qualquer humano nisso, e isso não prova resultado.
- Taxa de satisfação por estrelinhas. Quase ninguém responde, e quem responde é quem ficou muito bravo ou muito feliz.
- Número de conversas atendidas. Cresce com o seu marketing, não com a qualidade da IA.
O problema comum aos quatro é que eles medem atividade, não desfecho. Um agente pode dobrar todos os quatro enquanto perde mais vendas do que perdia antes.
Regra: se o número sobe quando o agente responde pior, ele não serve para avaliar o agente.
Quer saber quantas horas o atendimento come por mês? Faça a conta das horas.
A rotina de quinze minutos por semana
- Abra dez conversas ao acaso da semana. Não escolha, sorteie.
- Em cada uma, marque um de três resultados: resolveu, passou para humano, ou morreu.
- Nas que morreram, leia a última mensagem do agente e pergunte se ela resolvia ou empurrava.
- Anote toda informação que faltou, e cadastre no mesmo dia.
- Anote todo preço que apareceu diferente do certo, e apague a versão velha.
Quinze minutos por semana bastam porque erro de agente é sistemático: o que aparece em duas de dez conversas está aparecendo em duzentas de mil. Você não precisa ler tudo, precisa ler o suficiente para achar o padrão.
O passo 5 é o que mais devolve resultado. Preço cadastrado duas vezes com valores diferentes é a causa número um de resposta errada.
O que comparar com o quê
Números soltos não dizem nada. Compare sempre com uma dessas três referências:
- Com você mesmo no mês anterior. É a única comparação totalmente justa.
- Com o período antes do agente, se você tiver alguma anotação de como era.
- Com o custo: quantas vendas recuperadas pagam a mensalidade, e você chegou lá?
A terceira é a que fecha a decisão de manter ou cancelar. Se um cliente vale R$ 500 e o plano custa R$ 299, uma venda recuperada por mês já resolve. A pergunta então vira simples: eu consigo apontar uma?
Marque revisão no dia 30 e no dia 90 no calendário, no dia em que contratar. Sem data marcada, a avaliação nunca acontece e a assinatura vira esquecimento.
Leia também
- quanto tempo até a IA dar resultado
- o custo invisível da IA barata
- o que é um agente de IA
- agente de IA no WhatsApp vale a pena
Perguntas frequentes
- Quais números mostram se a IA de atendimento está funcionando?
- Cinco: conversas resolvidas sem você entrar, vezes em que o agente disse que não sabia, conversas que viraram agendamento, retomadas que trouxeram resposta e conversas que morreram no meio. Total de mensagens e tempo médio de resposta não servem, porque sobem mesmo quando o agente responde pior.
- É ruim o agente dizer que não sabe?
- Não, é saudável. Zero ocorrências costuma significar que ele está inventando para tapar buracos, ou que ninguém está lendo as conversas. O que importa é o que você faz com essas ocorrências: cada uma aponta uma informação que falta no seu cadastro.
- Preciso ler todas as conversas?
- Não. Erro de agente é sistemático, então uma amostra de dez conversas sorteadas por semana já revela o padrão. O que aparece em duas de dez está acontecendo em duzentas de mil, e a correção é a mesma nos dois casos.
- Como saber se vale continuar pagando?
- Compare com o custo: quantas vendas recuperadas pagam a mensalidade, e você consegue apontar pelo menos uma. Se um cliente vale mais que o plano, uma venda por mês já resolve. Marque essa avaliação para o dia 30 e o dia 90, senão ela não acontece.
Continue lendo
Em resumo
Quase todo painel mostra número de mensagens e tempo de resposta, e esses dois quase não dizem nada sobre resultado. Os números que importam são outros cinco, e três deles você consegue medir mesmo que a sua plataforma não os calcule. Dado de Certu: 32,5% das mensagens chegam fora do horário comercial (122.720 mensagens de 67 negócios, 30/07 a 30/09/2026). Ver os dados
Sobre a Certu: a Certu é a plataforma brasileira de IA que atende o WhatsApp, o Instagram e o Messenger de pequenas e médias empresas 24 horas por dia, com CRM incluído, e é Tech Provider da Plataforma WhatsApp Business da Meta. Os planos começam em R$ 2.964 por ano, sem fidelidade. Conectar meu WhatsApp
