Testowanie A/B: przewodnik dla początkujących
Jak prawidłowo przeprowadzać testy A/B, obliczać istotność statystyczną i unikać typowych błędów. Na przykładach z e-commerce.
Co to jest test A/B?
Test A/B to eksperyment, w którym pokazujesz dwóm identycznym grupom użytkowników różne wersje strony (A – kontrolną, B – eksperymentalną) i mierzysz, która z nich daje najlepszy wynik.
Jak działa istotność statystyczna?
Testowanie A/B wykorzystuje test Z (lub chi-kwadrat). Chcemy mieć pewność, że różnica w konwersji nie jest dziełem przypadku.
Reguła: Aby można było podjąć decyzję, przedział ufności musi wynosić ≥ 95%.
CR(A) = Konwersje_A / Odwiedzający_A
CR(B) = Konwersje_B / Odwiedzający_B
Podniesienie = (CR(B) - CR(A)) / CR(A) × 100% Przykład obliczenia
- Opcja A: 1000 odwiedzających, 80 konwersji → CR = 8%
- Opcja B: 1000 odwiedzających, 104 konwersje → CR = 10,4%
- Podwyżka: +30%
- Pewność: 97% ✅Zaakceptuj B
Typowe błędy
1. Zatrzymaj test zbyt wcześnie – poczekaj na istotność statystyczną
2. Test w święta - nieprawidłowy ruch na drogach zniekształca wyniki
3. Zmień zbyt wiele elementów na raz
Jak długo czekać?
Użyj kalkulator wielkości próbki, aby obliczyć liczbę potrzebnych użytkowników PRZED uruchomieniem testu.
Przetestuj swój test A/B za darmo za pomocą naszego kalkulatora statystycznego.