Qual mensagem vende mais? Como montar um teste A/B de campanha no WhatsApp

Quem dispara campanha pelo WhatsApp costuma discutir mensagem na base da opinião: o gerente prefere a versão curta, a vendedora prefere a que tem pergunta no final, e ninguém sabe quem está certo. O teste A/B troca a opinião por um número. A ideia é simples: duas versões, dois grupos parecidos, o mesmo dia e horário, e uma pergunta clara no fim. Qual das duas vendeu mais?

O que as regras da Meta mudam no seu teste?

Três coisas: cada versão é um template que precisa ser aprovado antes, a entrega de marketing tem um limite por pessoa e só pode receber quem aceitou ser contatado. Planejar em volta delas evita um teste que termina com metade das mensagens sem sair.

• Duas versões, dois templates: na API oficial, a mensagem de campanha é um template com revisão da Meta. Aprove A e B antes de marcar a data. Se uma for recusada, veja template reprovado no WhatsApp.
• Limite por pessoa: segundo a documentação da Meta, existe um limite de templates de marketing por pessoa, que se ajusta a fatores como a taxa recente de leitura dela. Quando a mensagem não é entregue por esse motivo, o erro é o 131049, e a Meta recomenda esperar pelo menos 24 horas antes de reenviar.
• Permissão: só entra no teste quem aceitou receber mensagens da empresa. Veja opt-in no WhatsApp.
• Resposta abre janela: quando a pessoa responde a uma mensagem de marketing, começa uma janela de atendimento de 24 horas, e a conversa segue sem novo template.

Na leitura do resultado, trate a falha de entrega como uma coluna à parte. Ela não é derrota da versão, é ruído, e não deve ser reenviada dentro do mesmo teste.

Como montar o teste A/B no WhatsApp, passo a passo?

Em sete passos, que cabem numa tarde de preparação. O que decide o teste é a disciplina de mudar uma coisa só e de medir a venda, e não a ferramenta.

1. 1
   Escreva a pergunta do teste

   Por exemplo: “a versão que termina com pergunta de escolha gera mais agendamentos que a versão que termina com pergunta aberta?”. Sem pergunta, qualquer resultado vira desculpa.

2. 2
   Mude uma variável só

   Se A e B diferem no começo, no tamanho e na oferta, você não vai saber qual diferença funcionou. A única diferença entre elas deve ser a que está na pergunta.

3. 3
   Separe a base e sorteie

   Pegue só quem tem permissão, tire quem comprou há poucos dias, crie uma coluna com número aleatório na planilha, ordene por ela e divida ao meio. Nunca divida por ordem alfabética, cidade ou data de cadastro.

4. 4
   Defina a métrica antes de enviar

   A principal é a venda (ou o agendamento, se a venda demora). A de apoio é a resposta. Escreva as duas no documento do teste antes do primeiro envio.

5. 5
   Envie as duas no mesmo dia e horário

   Se A sai de manhã e B à noite, você está testando horário e não mensagem. Para testar horário, use o método de melhor horário para enviar mensagem no WhatsApp.

6. 6
   Fixe a janela de leitura

   Decida antes quantos dias vale a venda atribuída à campanha (por exemplo, sete). Quem compra no oitavo dia fica fora dos dois grupos do mesmo jeito.

7. 7
   Leia, decida e registre

   Compare venda, depois resposta, depois descadastro. Anote o que aprendeu em uma frase e use a versão vencedora como base do próximo teste.

Quantos contatos preciso em cada grupo?

Mais do que parece, e quanto menor a diferença que você espera enxergar, mais contatos. Sem estatística pesada, a lógica é esta: com poucos contatos, a sorte decide o resultado, e com muitos, a diferença aparece de verdade.

• Grupos pequenos enganam: com 50 contatos em cada lado, 6 respostas contra 9 são 3 pessoas de diferença. Isso pode ser puro acaso.
• Grupos maiores revelam: com 400 em cada lado, 48 respostas contra 72 são 24 pessoas. É muito mais difícil ser coincidência.
• Regra prática da implementação (não é norma): use grupos de pelo menos algumas centenas e só declare vencedor quando a diferença for de dezenas de pessoas, não de um punhado.
• Base pequena não impede o teste: alterne A e B em três campanhas seguidas, para públicos parecidos, e some os resultados antes de decidir.
• Repita o vencedor: antes de virar padrão, rode o vencedor contra uma nova variação. Se ele ganhar de novo, vira regra.

O que testar primeiro numa mensagem de campanha?

Comece pelo que mais aproxima a mensagem da venda: a chamada para ação, no fim do texto. Depois, a abertura. A tabela traz variáveis fáceis de isolar, uma de cada vez.

Cada linha vale um teste. Se você quer mudar a chamada para ação e o tipo de incentivo, são dois testes, em dois envios, e cada um com o seu par de grupos.

Exemplo resolvido: o estúdio de pilates

O Estúdio Aurora (empresa fictícia, assim como os números abaixo) tem 1.200 contatos que pediram aviso de aula experimental. A pergunta do teste foi: o final com escolha de horário agenda mais gente do que o final aberto? A base foi sorteada em dois grupos de 600, e as duas versões saíram numa terça, no mesmo horário.

A leitura: B venceu em resposta e em agendamento, com 9 aulas agendadas a mais. Em matrícula, a diferença é de 1 pessoa, o que é empate. A decisão do estúdio foi adotar o final com escolha como padrão, repetir o teste na próxima campanha e investigar por que os agendamentos extras não viraram matrícula. Essa última parte é a mais valiosa: o problema pode estar no atendimento da aula experimental e não na mensagem.

Como ler o resultado sem se enganar?

Olhando a venda antes da resposta e comparando só o que é comparável. Resposta alta com venda igual significa que a mensagem chamou atenção, mas a conversa depois dela não converteu.

• Venda primeiro: se B responde mais e A vende mais, a campanha vencedora é A.
• Compare entregues, não enviadas: falha de entrega é outra coluna. Compare as taxas sobre quem recebeu.
• Cuide do descadastro: versão que gera mais pedidos para parar de receber pode estar incomodando a base, mesmo vendendo.
• Tamanhos iguais: grupos de tamanhos diferentes distorcem a comparação de números absolutos.
• Uma frase de aprendizado: “nesta base, final com escolha agenda mais”. Sem essa frase, o teste não deixa nada para o próximo.

Pergunta do teste: ______________________________________
Variável testada (só uma): _______________________________
Data e horário do envio (iguais para A e B): ______________
Janela de leitura (dias): ____    Métrica principal: ________

Linha | Versão A | Versão B
Contatos sorteados no grupo | ___ | ___
Enviadas | ___ | ___
Entregues | ___ | ___
Falhas de entrega (anote o motivo) | ___ | ___
Respostas | ___ | ___
Respostas por 100 entregues (respostas / entregues x 100) | ___ | ___
Oportunidades criadas no CRM | ___ | ___
Vendas ou agendamentos | ___ | ___
Pedidos para parar de receber | ___ | ___

Decisão: ( ) A  ( ) B  ( ) empate, repetir
Aprendizado em uma frase: ________________________________

Quais erros comuns derrubam um teste A/B, e como corrigir?

São erros de método, e não de ferramenta. Todos têm correção barata, desde que descobertos antes do envio.

• Mudar duas coisas na mesma versão: corrija deixando A e B iguais em tudo, menos uma linha.
• Grupos desiguais, como clientes antigos em A e leads novos em B: sorteie a base inteira de uma vez.
• Decidir cedo demais: olhar uma hora depois do envio mede quem lê rápido. Espere a janela de leitura que você fixou.
• Medir só leitura: leitura mostra curiosidade. Meça venda ou agendamento.
• Testar com base sem permissão: além de violar a política, estraga a taxa de resposta. Teste só com opt-in.
• Declarar vencedor uma vez só: repita o vencedor contra uma nova variação antes de torná-lo padrão.

Com o método fechado, o passo seguinte é saber o que medir em cada campanha, do envio à venda. Isso está em métricas de campanha de WhatsApp, e o plano geral da campanha está em campanha de WhatsApp marketing.