Testes A/B em e-commerce: como planejar sem se enganar

Um teste A/B compara duas versões de uma página ou elemento mostrando cada uma a metade dos visitantes, para descobrir qual converte mais. A ideia é simples; o difícil é não se enganar com o resultado. Testar com pouco tráfego, parar cedo demais ou mudar cinco coisas de uma vez produz conclusões que parecem certas e estão erradas. Este guia mostra como planejar testes que ensinam alguma coisa.

Quando vale testar e quando não vale

Situação	O que fazer
Erro óbvio (imagem quebrada, botão invisível no celular)	Corrija direto, sem teste
Dúvida real sobre qual versão converte mais	Teste
Página com pouquíssimo tráfego	Não teste; melhore com base em boas práticas e dados de comportamento
Mudança estrutural (novo checkout, nova plataforma)	Compare períodos com cuidado e acompanhe métricas-chave

Como planejar um teste

1. Comece por uma hipótese: “Se mostrarmos o prazo de entrega perto do botão, mais gente vai comprar, porque a dúvida sobre prazo é a mais frequente”.
2. Escolha uma métrica principal: taxa de conversão, adições ao carrinho ou receita por visita.
3. Mude um elemento (ou um conjunto coerente) por vez.
4. Estime o tamanho da amostra: quantas visitas e conversões são necessárias para detectar a diferença esperada.
5. Rode por ciclos completos: ao menos uma ou duas semanas, para cobrir os dias da semana, e sem coincidir com datas atípicas.
6. Decida o critério antes, e não depois de ver os números.
7. Registre hipótese, versões, resultado e aprendizado.

O tamanho da amostra importa

Para detectar uma melhora pequena em uma taxa baixa, é preciso muita gente. Um exemplo hipotético: uma página converte 2%. Para saber, com segurança razoável, se uma versão chega a 2,4% (20% a mais), é preciso, em ordem de grandeza, dezenas de milhares de visitas por versão. Uma loja que tem 5.000 visitas por mês nessa página levaria muitos meses, e nesse tempo o contexto muda. A conclusão prática: com pouco tráfego, testes só detectam diferenças grandes, e é mais produtivo corrigir problemas conhecidos. Use uma calculadora de tamanho de amostra e confira as premissas.

Armadilhas comuns

• Parar quando “ganhou”: olhar o resultado todo dia e encerrar no primeiro momento em que uma versão está na frente leva a falsas vitórias.
• Mudar muita coisa: se mudou título, imagem e preço, não sabe qual fez diferença.
• Misturar públicos: tráfego pago e orgânico se comportam diferente.
• Ignorar a sazonalidade: testar durante uma promoção e generalizar.
• Olhar só a taxa de clique e ignorar a venda e a margem.
• Testar demais ao mesmo tempo na mesma página, com interferência entre testes.

Exemplo ilustrativo: lendo um resultado com cuidado

Uma loja hipotética testa duas versões de uma página: A (original) teve 6.000 visitas e 120 pedidos (2,0%); B (com prazo de entrega destacado) teve 6.000 visitas e 138 pedidos (2,3%). A diferença parece boa (15% a mais), mas é de 18 pedidos. Com esses números, a diferença pode ser um acaso. A decisão sensata: prolongar o teste até ter volume maior, ou tratar o resultado como sinal e não como prova, e checar se outras métricas (adições ao carrinho, receita) apontam na mesma direção. Os números são inventados; o cuidado de não confundir sinal com prova é geral.

Alternativas quando o tráfego é pequeno

• Gravações de sessão e mapas de calor para ver onde as pessoas travam.
• Pesquisa rápida com clientes e com quem abandonou.
• Análise de perguntas ao atendimento. Veja atendimento ao cliente.
• Comparação antes e depois em períodos parecidos, com cautela.
• Aplicar boas práticas conhecidas, como as de página de produto que vende.

Erros comuns

• Testar por testar, sem hipótese.
• Decidir por opinião de quem fala mais alto.
• Não registrar o que foi aprendido.
• Esquecer de checar o efeito na margem.
• Tratar o teste como substituto de entender o cliente.

Os números da loja ficam mais fáceis de ler com um painel: veja painel semanal de e-commerce. O cálculo da conversão está em taxa de conversão. O processo contínuo de melhoria faz parte de otimização de e-commerce.

Perguntas frequentes

Quanto tempo deve durar um teste? O suficiente para atingir a amostra planejada e cobrir ciclos completos de semana. Para a maioria das lojas, de duas a quatro semanas, ou mais com pouco tráfego.

Posso testar duas coisas ao mesmo tempo? Em páginas diferentes, sim. Na mesma página, evite, a não ser que use um desenho de teste próprio para isso.

O que é significância estatística? Uma medida de quão improvável seria ver essa diferença por acaso. Ela não diz se a diferença importa para o negócio, só se é provável que seja real.

Preciso de ferramenta paga? Há opções gratuitas e pagas. O mais importante é o desenho do teste e o registro; a ferramenta é secundária.

Quer aplicar isso na sua operação?

Este artigo mostra o método. Se você prefere ter alguém priorizando e conduzindo os testes com você, veja otimização de e-commerce, ou fale com a gente e conte em duas linhas o que mais incomoda hoje na sua operação.

Exemplos numéricos deste artigo são ilustrativos e arredondados. Regras fiscais, tarifas e ferramentas mudam: confira as condições vigentes (e, em temas tributários, consulte seu contador) antes de decidir. Artigo atualizado em outubro de 2026.