Ustawienia cookies
Używamy cookies do analityki. Polityka prywatności Możesz zaakceptować lub odrzucić nieobowiązkowe śledzenie.
Praktyczny przewodnik po „MDE w testach A/B: jak wybrać realistyczną wielkość efektu”: kluczowe kroki, typowe błędy i wdrożenie z użyciem Rozmiar próbki Oblicz.
Przejdź do narzędzia
Kalkulator próby dla testów A/B (formuła Evana Millera).
Minimalny Wykrywalny Efekt (MDE) to najmniejsza poprawa, którą test A/B ma na celu wiarygodnie wykryć. Jeśli twój MDE wynosi 5%, test wykryje rzeczywistą 5% poprawę większość czasu — ale może przegapić 2% poprawę.
MDE nie chodzi o to, czego *nadziejesz* się zobaczyć. Chodzi o to, co twój ruch może *sobie pozwolić* na pomiar.
Dla testu proporcji dwóch prób przy 80% mocy i alfa = 0,05, wymagana wielkość próby na wariant wynosi w przybliżeniu:
n = 16 * p * (1 - p) / delta^2
Gdzie p jest podstawową stawką konwersji, a delta jest bezwzględnym MDE. Stała 16 pochodzi z (Z_alpha/2 + Z_beta)^2 ze standardowymi wartościami (1,96 + 0,84)^2 = 7,84, podwojoną dla dwóch wariantów i zaokrągloną.
Wielkość próby rośnie z *kwadratem* redukcji MDE. Podział MDE z 5% do 2,5% czterokrotnie zwiększa wymaganą ilość ruchu. Oto konkretna tabela dla 10% podstawowej stawki konwersji:
| MDE (bezwzględny) | Próba na wariant | Całkowity ruch (2 warianty) |
|---|---|---|
| 5 pp | ~1,150 | ~2,300 |
| 3 pp | ~3,200 | ~6,400 |
| 2 pp | ~7,200 | ~14,400 |
| 1 pp | ~28,800 | ~57,600 |
| 0,5 pp | ~115,200 | ~230,400 |
Przetłumacz poprawę na pieniądze. Jeśli Twoja strona konwertuje przy 3% i otrzymuje 100K odwiedzających/miesiąc:
Zapytaj: czy $50K/miesiąc jest wart 5 tygodni testowania? Zwykle tak. Ale jeśli 0,5 pp poprawa = $25K i wymaga 20 tygodni, prawdopodobnie nie.
Otwórz Kalkulator wielkości próby, wprowadź swoją podstawową stawkę i docelowy MDE i sprawdź, czy twój ruch może wesprzeć czas trwania testu.
Ten artykuł jest weryfikowany przez zespół redakcyjny Tools Hub pod kątem dokładności, użyteczności praktycznej i zgodności z aktualnymi procesami produktu.
Ostatnia weryfikacja:
Praktyczny przewodnik po „Rozmiar próbki na potrzeby eksperymentów dotyczących przepływu rejestracji”: kluczowe kroki, typowe błędy i wdrożenie z użyciem Rozmiar próbki Oblicz.
Praktyczny przewodnik po „Kiedy przerwać test A/B przy małym natężeniu ruchu”: kluczowe kroki, typowe błędy i wdrożenie z użyciem Kalkulator A/B.
Praktyczny przewodnik po „Testowanie wielowymiarowe a testowanie A/B: ramy decyzyjne”: kluczowe kroki, typowe błędy i wdrożenie z użyciem Kalkulator A/B.
Praktyczny przewodnik po „Jak uniknąć fałszywych wyników pozytywnych w testach A/B”: kluczowe kroki, typowe błędy i wdrożenie z użyciem Kalkulator A/B.