Preferências de cookies
Usamos cookies para análises. Política de Privacidade Você pode aceitar ou recusar rastreamento não essencial.
Guia prático sobre "Teste multivariado versus teste A/B: uma estrutura de decisão": etapas principais, erros comuns e implementação com Calculadora A/B.
Vá para a ferramenta
Significância estatística (Z-test) e intervalos de confiança.
Um teste A/B altera um elemento e compara duas versões: A (controle) vs B (variante). Um teste multivariado (MVT) altera vários elementos simultaneamente e testa todas as combinações.
Exemplo: você deseja testar 2 títulos e 2 imagens de herói.
Aqui é onde o MVT fica caro. O tamanho da amostra escala com o número de combinações:
| Elementos testados | Variações cada | Combinações totais | Multiplicador de tráfego vs A/B |
|---|---|---|---|
| 1 (A/B) | 2 | 2 | 1x |
| 2 (título + imagem) | 2 cada | 4 | 2x |
| 3 (título + imagem + CTA) | 2 cada | 8 | 4x |
| 3 elementos | 3 cada | 27 | 13,5x |
Se um teste A/B precisar de 3.000 por variante (6.000 no total), o mesmo MDE com 8 combinações MVT precisa de 24.000 no total — e isso é por célula, então a detecção de interação precisa ainda mais.
O MVT é exclusivamente valioso quando os elementos interagem — o que significa que o efeito de uma mudança depende de outra.
Exemplo: um título formal funciona bem com uma imagem de herói corporativa, mas mal com uma foto casual. Um teste A/B no título sozinho promedia em ambas as tipos de imagem e pode não mostrar efeito. O MVT detecta que o título B + imagem A converte 15% melhor do que qualquer outra combinação.
Se sua hipótese envolve uma combinação ("este título funciona *com* esta imagem"), o MVT é a ferramenta certa.
Use Calculadora de Teste A/B para estimar o tamanho de amostra necessário para cada abordagem e comparar durações.
A maioria das equipes de produto deve padronizar em testes A/B e reservar MVT para páginas de alto tráfego (página inicial, checkout) onde efeitos de interação são plausíveis e o tráfego excede 100K/mês. Execute testes A/B sequenciais para tudo o mais — você aprenderá mais rápido mesmo se perder algumas interações.
Estime quantas combinações seu teste precisa, então insira os números na Calculadora de Teste A/B para ver se seu tráfego suporta MVT ou se o sequencial A/B é a escolha prática.
Este artigo é revisado pela equipe editorial da Tools Hub para garantir precisão, utilidade prática e consistência com os fluxos atuais do produto.
Última revisão:
Guia prático sobre "Quando interromper um teste A/B com tráfego baixo": etapas principais, erros comuns e implementação com Calculadora A/B.
Guia prático sobre "Incompatibilidade de proporção de amostra: detecção e causas raízes": etapas principais, erros comuns e implementação com Calculadora A/B.
Guia prático sobre "Teste A/B Bayesiano vs Frequentista para Equipes de Produto": etapas principais, erros comuns e implementação com Calculadora A/B.
Guia prático sobre "Teste sequencial e a armadilha da espiada": etapas principais, erros comuns e implementação com Calculadora A/B.