A raspadinha é melhor do que a roleta? Um prêmio maior traz mais cadastros ou só mais caçadores de prêmios? Vale a pena pedir o número de telefone ou não? Fazer testes A/B nas suas campanhas é a forma mais confiável de descobrir. Em vez de adivinhar, você mostra duas versões para grupos comparáveis de pessoas e deixa os resultados decidirem.
Este guia explica o que testar primeiro, de quantas pessoas você precisa, como configurar testes de prêmios, formatos e formulários, e como interpretar os resultados sem se enganar.
Testes A/B em campanhas: o básico
Um teste A/B compara duas versões de algo que diferem em um único aspecto. A versão A é a sua campanha atual (o controle). A versão B muda uma coisa, como o prêmio. Todo o resto continua igual: o público, o momento, o canal e o design.
Três regras fazem um teste valer a pena:
- Mude uma coisa de cada vez. Se você mudar o prêmio e o formato, não vai saber qual deles fez a diferença.
- Divida o público de forma aleatória. Os dois grupos precisam ser comparáveis. Desktop vs. celular, ou segunda vs. sexta, não é uma divisão aleatória.
- Defina a métrica antes de começar. Escolha o número que vai decidir o vencedor, por exemplo a taxa de cadastro (cadastros ÷ visitas).
Como dividir o tráfego de uma campanha gamificada
O Scratcher não tem uma divisão A/B integrada, então você faz o teste criando duas cópias da campanha e dividindo o tráfego no canal que leva as pessoas até elas. Na prática, essa costuma ser a configuração mais limpa:
- Newsletter. A maioria das ferramentas de e-mail consegue dividir um envio de forma aleatória. Coloque o link da campanha A em uma versão e o da campanha B na outra.
- Mídia paga em redes sociais e buscadores. Crie dois anúncios ou conjuntos de anúncios com a mesma segmentação e o mesmo orçamento, cada um levando à sua própria campanha. Muitas plataformas de anúncios têm um recurso próprio de teste dividido para isso.
- QR codes e materiais impressos. Use dois QR codes alternados em cartazes, folhetos ou cupons fiscais nas mesmas lojas.
- Pop-ups no site. Você pode segmentar pop-ups por página, domínio e dispositivo, então o teste mais limpo é entre páginas ou seções comparáveis. Encare o resultado com um pouco mais de cautela do que uma divisão aleatória.
Se nada disso for possível, você pode rodar A e B em períodos consecutivos. É a opção mais fraca, porque sazonalidade, dias da semana e outras campanhas em andamento afetam o resultado, então use-a apenas para diferenças grandes.
O que testar primeiro
Dá para testar quase tudo, mas algumas mudanças importam muito mais do que outras. Comece pelas decisões que afetam mais pessoas e custam mais dinheiro:
- O prêmio. O que as pessoas podem ganhar costuma ser o maior motor de participação.
- O formulário. O número de campos define quantos jogadores viram cadastros.
- O formato. Um jogo rápido de sorte vs. um quiz ou um jogo de habilidade.
- O convite. O título, o texto do botão ou o assunto do e-mail que faz as pessoas começarem.
- Momento e posicionamento dos pop-ups: após um tempo, ao rolar a página, na intenção de saída ou ao clicar.
Deixe cores e pequenos ajustes de texto para depois. Raramente eles mudam o resultado o suficiente para serem medidos com o público típico de uma campanha.
Noções de tamanho de amostra
O erro mais comum em testes é declarar um vencedor cedo demais. Com números pequenos, o acaso pode facilmente fazer uma versão parecer melhor.
A quantidade de pessoas necessária depende de três fatores:
- Sua taxa de conversão atual. Quanto mais rara a ação, mais pessoas você precisa.
- A menor diferença que importa para você. Detectar um ganho pequeno exige muito mais visitantes do que detectar um grande.
- O nível de certeza que você quer. A maioria dos testes usa 95% de confiança.
Você não precisa fazer as contas à mão. Uma ferramenta gratuita como a calculadora de tamanho de amostra de Evan Miller informa quantos visitantes você precisa por versão. Basta inserir sua taxa de conversão de referência e o menor ganho que justificaria uma mudança.
Se a resposta for mais tráfego do que você terá, não faça um teste inconclusivo. Teste uma mudança maior ou combine o teste em várias campanhas.
A calculadora de teste A/B gratuita calcula o tamanho de amostra necessário e, ao final do teste, mostra se a diferença é real.
Testando prêmio vs. sem prêmio
Antes de testar qual prêmio funciona melhor, pode valer a pena testar se o prêmio realmente importa para o seu público. Por exemplo:
- A: Uma roleta em que todos ganham um pequeno código de desconto
- B: A mesma roleta com um sorteio de grande prêmio entre todos os participantes, sem código de desconto
Olhe além dos cadastros. Um prêmio que atrai muita gente interessada só no prêmio pode gerar uma lista longa com pouco engajamento depois. Acompanhe os dois grupos por algumas semanas após a campanha e compare:
- Taxas de abertura e de cliques nos e-mails
- Descadastros
- Compras ou resgates de códigos
No Scratcher, você controla os prêmios em detalhes: ganhos instantâneos, sorteios, códigos de desconto únicos e códigos de barras, quantos de cada podem ser ganhos e quando. Isso facilita manter todo o resto idêntico entre A e B.
Ideias de prêmios que vale a pena testar entre si:
- Seu próprio produto vs. um vale-presente
- Um grande prêmio vs. vários pequenos
- Um código de desconto para todos vs. um sorteio para poucos
- Um prêmio de consolação vs. nenhum prêmio de consolação
Testando o formato
O formato influencia quanto tempo as pessoas passam com a sua marca e o que você aprende sobre elas. Comparações típicas:
- Raspadinha vs. Gire a roleta. Ambos são jogos rápidos de sorte. Um bom primeiro teste se você quer mais cadastros.
- Jogo de sorte vs. quiz. Um quiz leva mais tempo, mas ensina as pessoas sobre seus produtos, e as respostas mostram do que elas gostam.
- Jogo único vs. calendário. Um calendário faz as pessoas voltarem várias vezes. Compare o total de cadastros e as visitas recorrentes, não só os números do primeiro dia.
Ao testar formatos, mantenha o prêmio, o formulário e o convite idênticos. Escolha entre mais de 40 formatos e use o mesmo estilo de modelo nas duas versões para que o design não distorça o resultado.
Testando o tamanho do formulário
Cada campo adicionado custa alguns participantes. Mas alguns campos, como telefone ou data de aniversário, podem compensar a queda. O teste mostra se compensam.
Exemplo de teste:
- A: Nome e e-mail
- B: Nome, e-mail e telefone
Meça os dois:
- Taxa de cadastro (cadastros ÷ jogadores)
- Valor por cadastro. Se o telefone permite vender por SMS, B pode vencer em valor mesmo perdendo em volume.
Mantenha o texto de consentimento igual nas duas versões, para que a única diferença seja o campo extra.
Interpretando os resultados
Quando o teste atingir o tamanho de amostra planejado, compare as duas versões na métrica que você definiu no início.
- Verifique a significância. Use a mesma calculadora ou uma calculadora de significância para ver se a diferença provavelmente é real.
- Olhe o funil completo. Visitas → jogadores → cadastros → ações posteriores. Uma versão pode vencer em uma etapa e perder na seguinte.
- Fique atento a surpresas. Um anúncio recebeu mais orçamento? Um e-mail caiu mais na caixa de spam? Se a divisão não foi justa, o resultado também não é.
- Registre o que você aprendeu, mesmo quando não há vencedor. “O prêmio não fez diferença” é um resultado útil.
As estatísticas do Scratcher mostram visitas, jogadores, cadastros e ganhadores de cada campanha quase em tempo real, além da origem das pessoas. Como A e B são campanhas separadas, você pode compará-las lado a lado. Também é possível acompanhar as duas no Google Analytics ou na sua plataforma de anúncios. Para a lista completa de métricas que vale a pena acompanhar, veja nosso post sobre KPIs de marketing com gamificação.
Modelo de registro de testes
Mantenha um registro simples de cada teste, para que a equipe acumule conhecimento ao longo do tempo em vez de repetir os mesmos testes. Copie esta estrutura para uma planilha:
| Campo | Exemplo |
|---|---|
| Nome do teste | Prêmio: código de desconto vs. sorteio de grande prêmio |
| Hipótese | Um código de desconto para todos gera mais cadastros do que um sorteio de grande prêmio |
| Versão A | Roleta, código de 10% para todos |
| Versão B | Roleta, sorteio de um vale-presente de €500 |
| Métrica principal | Taxa de cadastro (cadastros ÷ visitas) |
| Métricas secundárias | Resgates de códigos, cliques em e-mails após 30 dias |
| Divisão de tráfego | Newsletter, divisão aleatória 50/50 |
| Tamanho de amostra necessário | Pela calculadora |
| Datas de início e término | [datas] |
| Resultado | [A / B / sem diferença clara] |
| Próximos passos | [decisão] |
Comece com um teste
Você não precisa de um programa de testes para começar. Pegue sua próxima campanha, escolha a decisão sobre a qual tem menos certeza, geralmente o prêmio, e divida o tráfego na sua newsletter ou nos seus anúncios. Um bom teste ensina mais do que dez palpites.
Quer mais ideias para converter visitantes do site? Leia nosso guia sobre pop-ups de alta conversão, veja como funcionam os pop-ups com jogos ou experimente o Scratcher grátis por 14 dias e crie as versões A e B hoje mesmo.
