Teste A/B: um guia para iniciantes
Como executar testes A/B corretamente, calcular significância estatística e evitar erros comuns. Com exemplos de comércio eletrônico.
O que é um teste A/B?
Teste A/B é um experimento em que você mostra a dois grupos idênticos de usuários versões diferentes da página (A - controle, B - experimental) e mede qual delas oferece o melhor resultado.
Como funciona a significância estatística?
O teste A/B usa o teste Z (ou qui-quadrado). Queremos ter certeza de que a diferença na conversão não seja um acaso.
Regra: O intervalo de confiança deve ser ≥ 95% para tomar uma decisão.
CR(A) = Conversões_A / Visitantes_A
CR(B) = Conversões_B / Visitantes_B
Elevação = (CR(B) - CR(A)) / CR(A) × 100% Exemplo de cálculo
- Opção A: 1.000 visitantes, 80 conversões → CR = 8%
- Opção B: 1.000 visitantes, 104 conversões → CR = 10,4%
- Aumento: +30%
- Confiança: 97% ✅ Aceita B
Erros comuns
1. Interromper o teste muito cedo – aguardar significância estatística
2. Teste em feriados – tráfego anormal distorce os resultados
3. Altere muitos elementos de uma só vez
Quanto tempo esperar?
Use calculadora de tamanho de amostra para calcular o número de usuários necessários ANTES de executar o teste.
Teste seu teste A/B gratuitamente com nossa calculadora estatística.