Teste A/B com pouco tráfego: dá para fazer?

Dá, mas não do jeito que aparece em blog de empresa grande. Com algumas centenas ou poucos milhares de visitas por mês, um teste A/B clássico que compara duas cores de botão pode levar meses e ainda terminar sem resposta. Com pouco tráfego, o que funciona é testar mudanças grandes, usar os canais onde você tem mais volume (e-mail e anúncio) e completar com observação direta de gente usando o site.

Em outras palavras: troque a pergunta "qual botão converte 5% mais?" por "qual dessas duas ofertas bem diferentes vende mais?". A primeira exige um mar de visitas. A segunda cabe no seu site.

Por que pouco tráfego complica o teste A/B

No teste A/B, metade das visitas vê a versão A e metade vê a B. Se a B vender mais, você precisa saber se foi mérito dela ou sorte. Com poucas vendas, a sorte explica quase qualquer diferença.

A conta usual (95% de confiança e 80% de poder estatístico, os padrões das calculadoras de teste A/B) dá estes números aproximados de visitas em cada versão:

Conversão da A	Conversão da B	Visitas por versão
2%	4%	cerca de 1.100
2%	3%	cerca de 3.800
2%	2,4%	cerca de 21.000

Qualquer calculadora de tamanho de amostra para teste A/B refaz essas contas. Repare no padrão: quanto menor a diferença que você quer enxergar, mais visitas precisa. Uma melhora de 20% (de 2% para 2,4%) é ótima para o caixa, mas exige mais de 40 mil visitas no total para ser comprovada.

Exemplo: um site com 1.500 visitas por mês que quer comparar 2% contra 3% precisa de umas 7.600 visitas no total. Isso é mais de 5 meses de teste, com o site parado esperando.

E um erro clássico: olhar o resultado cedo. Imagine 500 visitas em cada versão, 12 vendas na B e 9 na A. Parece vitória, mas é uma diferença que o acaso explica com facilidade. Se você parar o teste aí, está escolhendo no cara ou coroa.

O que testar quando o tráfego é pequeno

1. Mudanças grandes, não detalhes

Cor de botão e troca de uma palavra no título quase nunca mexem o suficiente para aparecer num site pequeno. Teste coisas que podem mudar muito o resultado:

• Oferta diferente: kit contra produto avulso, plano anual contra mensal.
• Página curta contra página longa com respostas às objeções.
• Pedido de orçamento contra preço visível.
• Garantia em destaque contra garantia escondida no rodapé.
• Um título que promete outra coisa, não o mesmo título com outras palavras.

Se não souber por onde começar, reveja como montar uma oferta que se entende em 5 segundos: mexer na oferta tende a mudar mais o resultado do que mexer no layout.

2. Uma métrica com mais eventos, mas que importe

Se você faz 10 vendas por mês, esperar vendas suficientes para decidir demora demais. Use um sinal que acontece mais vezes e que está perto da venda: clique no botão de WhatsApp, início do checkout, pedido de orçamento. Depois confira se as vendas acompanharam.

3. Teste onde você tem volume

• E-mail: mande dois assuntos diferentes para duas metades da sua lista e veja qual tem mais cliques. Muitas ferramentas de e-mail fazem essa divisão sozinhas. O post sobre e-mail marketing para pequena empresa ajuda a montar a lista.
• Anúncio: duas versões de título ou imagem com a mesma verba. A plataforma entrega para muito mais gente do que o seu site recebe, e o vencedor vira o título da página.
• Conversa: se você vende pelo WhatsApp, alterne duas formas de apresentar o preço por duas semanas e anote quantas conversas viram pedido.

4. Antes e depois, com cuidado

Mudou a página inteira? Compare as mesmas semanas antes e depois. Não é tão confiável quanto um A/B, porque muita coisa muda junto (feriado, dia de pagamento, uma campanha que você esqueceu). Para reduzir o erro:

• Compare períodos com os mesmos dias da semana, de preferência 4 semanas contra 4 semanas.
• Evite comparar com datas especiais, como Black Friday ou Dia das Mães.
• Anote numa planilha tudo o que mudou no período, inclusive anúncio e post que bombou.

5. Observe gente de verdade

Com pouco tráfego, olhar vale mais do que contar. Três jeitos baratos:

1. Teste com 5 pessoas. Peça para alguém que não conhece o site comprar um produto ou pedir um orçamento, falando em voz alta o que pensa. Você só observa. Os problemas grandes aparecem rápido.
2. Gravações de sessão. Ferramentas gratuitas como o Microsoft Clarity mostram mapas de clique e gravações das visitas. Veja onde as pessoas travam, e cite a ferramenta na sua política de privacidade.
3. Pergunte a quem comprou: "o que quase te fez desistir?". A resposta vira a próxima hipótese.

Se for rodar um A/B de verdade

Quando tiver volume para um teste com mudança grande, siga estas regras:

1. Decida tudo antes: o que muda, qual métrica decide, quantas visitas vai esperar e por quantos dias.
2. Rode semanas inteiras. No mínimo duas. Segunda-feira e sábado têm públicos diferentes.
3. Não pare quando a B estiver na frente. Pare quando atingir o número de visitas que você definiu.
4. Junte mudanças. Com pouco tráfego, a versão B pode trazer várias mudanças de uma vez. Você aprende menos sobre o porquê, mas recebe uma resposta em tempo útil.
5. Aceite o empate. Se não deu diferença clara, fique com a versão mais simples e siga para a próxima hipótese.

Sobre ferramentas: o Google Optimize, que era uma opção gratuita bem conhecida, foi descontinuado em 2023. Hoje muitos construtores de página e plataformas de loja têm teste A/B embutido, e também dá para mandar metade de uma campanha para cada URL.

O que não precisa de teste

Erro não se testa, se conserta. Botão que não funciona no celular, frete escondido, página lenta, formulário que apaga o que a pessoa digitou. Arrume logo. O post sobre abandono de carrinho tem uma lista desses problemas.

Um plano de 30 dias para um site pequeno:

1. Semana 1: assista a 20 gravações de sessão e faça o teste com 5 pessoas.
2. Semana 2: conserte os erros óbvios que apareceram.
3. Semana 3: teste dois títulos em anúncio ou em e-mail.
4. Semana 4: leve o vencedor para a página e compare com o período anterior, olhando a taxa de conversão com as anotações na mão.

Resumo rápido

• Teste A/B com pouco tráfego só funciona para mudanças grandes, como oferta, preço e formato da página.
• Para ver a diferença entre 2% e 3% de conversão, a conta usual pede cerca de 3.800 visitas em cada versão.
• Use e-mail e anúncio como laboratório: eles têm mais volume do que o seu site.
• Com poucas visitas, observar 5 pessoas usando o site ensina mais do que um teste inconclusivo.
• Erro técnico não se testa: conserte primeiro e teste depois.