Статистическая значимость в A/B тестировании
Статистическая значимость показывает, насколько вероятно, что результаты A/B теста не случайны. Традиционный порог — p < 0.05 (95% доверия). Например, если контроль конвертирует 3.2%, а вариант 4.1%, разница +0.9pp может быть шумом без достаточного трафика. P-value (z-тест или хи-квадрат) определяет, достаточно ли данных для объявления победителя.