Como testar um agente de IA antes de ligar para os clientes

Na demonstração, a IA acertou as cinco perguntas que você fez. O primeiro cliente de verdade pergunta outra coisa, com erro de digitação, às 23h, por áudio. Com um roteiro de teste, você coloca a IA diante desses casos antes de divulgar o número.

O que testar antes de abrir o número?

Monte o roteiro com nove situações. Para cada uma, escreva a mensagem de teste e o que a IA deve fazer:

Situação	Mensagem de teste	O que a IA deve fazer
Pergunta que a base cobre	”Qual o valor da matrícula?”	Responder com o valor cadastrado, sem arredondar
A mesma pergunta, escrita de outro jeito	”qnto ta pra entrar no curso”	Dar a mesma resposta
Pergunta que a base não cobre	”Vocês aceitam vale-cultura?”	Dizer que vai verificar ou chamar alguém, sem palpite
Pedido de exceção	”Faz um desconto se eu pagar hoje?”	Passar a decisão para quem tem autonomia
Cliente irritado	”Terceira vez que pergunto e ninguém resolve”	Reconhecer o problema e chamar uma pessoa
Pedido de pessoa	”Quero falar com um atendente”	Avisar o cliente e passar a conversa
Pedido para parar	”Não quero mais receber mensagem de vocês”	Confirmar e parar os envios para esse contato
Áudio	Pergunta gravada com barulho de rua	Responder ao que o cliente disse
Imagem ou PDF	Foto do comprovante de pagamento	Ler o comprovante e responder sobre ele

Teste também conversas longas. O cliente muda de assunto, volta à pergunta anterior e manda três mensagens seguidas antes de a IA responder. Confira se a IA mantém o contexto e se evita repetir o que já disse.

O pedido para parar tem peso de regra. A Política de Mensagens do WhatsApp Business manda a empresa respeitar todo pedido de quem quer bloquear ou deixar de receber as mensagens, feito dentro ou fora do WhatsApp, e isso inclui tirar a pessoa da lista de contatos.

Áudio e imagem entram no roteiro se a ferramenta aceitar esses formatos. Se ela não aceitar, confira a resposta que a IA dá a um áudio e decida se ela pede para o cliente escrever ou chama alguém da equipe.

Teste a passagem para a equipe à parte, com alerta, resumo e devolução da conversa. O passo a passo está em Quando a IA deve passar o atendimento do WhatsApp para uma pessoa.

Onde rodar os testes sem falar com clientes?

Use o ambiente de teste da ferramenta, se ela tiver um, ou um número de WhatsApp separado do que os clientes conhecem. Assim ninguém de fora recebe uma resposta errada enquanto você ajusta a base.

Na Venzor, o Playground roda a mesma lógica do WhatsApp sem enviar nada pela Meta. Ele transcreve o áudio como no atendimento real e lê imagens e PDFs. A conversa no Playground não dispara alerta para a equipe, então teste o alerta e a devolução numa conversa real, com alguém da equipe fazendo papel de cliente.

Quem da equipe deve testar?

• Quem atende hoje. Conhece as perguntas reais, as abreviações e os clientes difíceis.
• Quem decide as exceções. Confere se a IA passa adiante o que ela não pode decidir, como desconto e reembolso.
• Alguém que não montou a base. Escreve como o cliente escreve e encontra as perguntas que ninguém cadastrou. Pode ser alguém do financeiro ou da recepção.

Divida as nove situações entre as três pessoas e peça que cada uma escreva a mesma situação de dois ou três jeitos diferentes.

Como registrar as falhas do teste?

Anote cada falha numa linha de planilha, com a correção ao lado:

Mensagem de teste	Resposta da IA	Resposta esperada	Tipo de falha	Correção
”Vocês abrem no feriado de 12 de outubro?"	"Sim, no horário de sempre"	"Fechado no feriado”	Inventou	Cadastrar o feriado com data de validade
”Faz um desconto se eu pagar hoje?"	"Consigo R$ 50 de desconto à vista”	Chamar o gestor	Exceção sem passagem	Escrever a regra de desconto e quando chamar alguém
Áudio pedindo a segunda via	”Pode escrever sua dúvida?”	Enviar a segunda via	Mídia	Conferir se a ferramenta transcreve áudio

Agrupe as falhas em cinco tipos: inventou, não passou para uma pessoa, passou sem necessidade, tom errado e não entendeu a mídia. Depois de cada correção, rode de novo o mesmo teste e marque a linha como resolvida.

Quando liberar a IA para os clientes?

Libere quando a última rodada completa cumprir estas condições:

1. Nenhuma resposta inventada sobre preço, prazo, política ou disponibilidade.
2. Toda pergunta fora da base terminou em “vou verificar” ou numa passagem para a equipe.
3. Todo pedido de pessoa, de exceção e de cliente irritado chegou a alguém da equipe.
4. O pedido para parar de receber mensagens funcionou.
5. A equipe sabe receber a conversa e devolver para a IA.

Ajustes de tom, como uma resposta formal demais, podem entrar depois da liberação.

Como acompanhar as primeiras semanas?

• Na primeira semana, leia as conversas da IA no fim de cada dia. Anote as falhas na mesma tabela do teste.
• Da segunda semana em diante, leia por amostra. Inclua as conversas que passaram para a equipe e as que citam preço, prazo ou política.
• Confira o status do número. No Gerenciador do WhatsApp (WhatsApp Manager), no painel de números de telefone, a Meta mostra o status do número, que reflete a classificação de qualidade e o limite de mensagens.
• Revise a base toda semana. Cadastre o que faltou e rode de novo os testes que falharam. Explicamos como montar a base em Por que a IA inventa resposta no atendimento e como impedir.

Na Venzor, a fila de Conversas pinta de vermelho a conversa que espera alguém da equipe. A plataforma também lê a classificação de qualidade do número a cada 30 minutos e, se ela ficar vermelha, pausa a conta para proteger o número.