Çerez tercihleri
Analitik için çerez kullanıyoruz. Gizlilik Politikası Zorunlu olmayan takibi kabul edebilir veya reddedebilirsiniz.
"Örnek Oranı Uyuşmazlığı: Tespit ve Kök Nedenler" için pratik rehber: temel adımlar, yaygın hatalar ve A/B Hesaplayıcı ile uygulama.
Araca git
İstatistiksel anlamlılık (Z-testi) ve güven aralıkları.
Örnek Oran Uyuşmazlığı (SRM), test grupları arasındaki fiili ayrımın amaçlanan ayrıma uymaması anlamına gelir. 50/50 yapılandırdınız ancak %51.2 kontrol ve %48.8 tedavi elde ettiniz. O 1.2 puanlık fark küçük görünüyor, ancak 100K kullanıcı için şans eseri istatistiksel olarak imkansızdır.
SRM, testinizi geçersiz kılar. Gruplar boyutu sistematik bir nedenle eşit değilse, bileşim bakımından da farklılık göstermeleri muhtemeldir. Gözlenen dönüşüm farkı, değişikliğinizden değil, önyargıdan kaynaklanabilir.
Ki-kare uyum iyiliği testi kullanın:
chi2 = sum((observed_i - expected_i)^2 / expected_i)
Örnek: 100.000 kullanıcı, beklenen 50/50. Gözlenen: 51.200 kontrol, 48.800 tedavi.
chi2 = (51200 - 50000)^2 / 50000 + (48800 - 50000)^2 / 50000
chi2 = 1440000/50000 + 1440000/50000 = 28.8 + 28.8 = 57.6
1 serbestlik derecesi ile, p = 0.001'de kritik değer 10.83'dür. 57.6'mız bunun çok üzerindedir — SRM onaylandı. A/B Test Calculator içinde örnek boyutlarını girerek oranı doğrulayabilirsiniz.
Senaryo: testiniz 100K kullanıcı için 50/50 bölünmüş olarak 52.100'e 47.900 gösterir.
chi2 = (2100^2 + 2100^2) / 50000 = 176.4 — SRM onaylandı.A/B Test Calculator açın ve kontrol/tedavi örnek boyutlarınızı karşılaştırın. Oran %1'den fazla saparsa, sonuçları güvenmeden önce araştırın.
Bu içerik, doğruluk, pratik uygulanabilirlik ve güncel ürün akışlarıyla tutarlılık açısından Tools Hub editoryal ekibi tarafından gözden geçirilir.
Son gözden geçirme:
"Düşük Trafikte A/B Testi Ne Zaman Durdurulmalı?" için pratik rehber: temel adımlar, yaygın hatalar ve A/B Hesaplayıcı ile uygulama.
"Ürün Ekipleri için Bayesian ve Frequentist A/B Testi" için pratik rehber: temel adımlar, yaygın hatalar ve A/B Hesaplayıcı ile uygulama.
"Sıralı Test ve Gözetleme Tuzağı" için pratik rehber: temel adımlar, yaygın hatalar ve A/B Hesaplayıcı ile uygulama.
"Çok Değişkenli ve A/B Testi: Bir Karar Çerçevesi" için pratik rehber: temel adımlar, yaygın hatalar ve A/B Hesaplayıcı ile uygulama.