Generator planu testu A/B
Próba, czas i MDE dla wiarygodnego testu
-
1Wprowadź dane
Wpisz treść, wklej tekst lub załaduj plik z dysku. -
2Kliknij przycisk
Narzędzie natychmiast przetworzy Twoje dane w przeglądarce. -
3Pobierz wynik
Skopiuj gotowy tekst lub zapisz plik na urządzeniu.
return "Wynik gotowy w 0.1s";
}
| MDE | Zmiana (p.p.) | Próba / wariant | Czas |
|---|---|---|---|
| 5% | 0.15 | 202 795 | 203 dni |
| 10% | 0.3 | 50 699 | 51 dni |
| 20% | 0.6 | 12 675 | 13 dni |
| 30% | 0.9 | 5 634 | 6 dni |
| 50% | 1.5 | 2 028 | 3 dni |
Wielkość próby liczona jest dla poziomu istotności i mocy 80%. Mniejszy efekt (MDE) wymaga znacznie większej próby — zmniejszenie MDE o połowę zwykle czterokrotnie wydłuża test. Nie zatrzymuj testu przed osiągnięciem zaplanowanej próby (peeking zaniża wiarygodność).
Oceń to narzędzie:
Powiązane narzędzia
Inne narzędzia, które mogą Ci się przydaćGenerator planu testu A/B
Test A/B bez wcześniejszego wyliczenia próby to zgadywanie. Ten planer mówi, ilu użytkowników i ile czasu potrzebujesz, aby wynik był wiarygodny.
Wzór (uproszczony)
n = 16 × p(1−p) ÷ Δ²
gdzie p to konwersja bazowa, a Δ to wykrywana różnica bezwzględna. Stała 16 odpowiada ufności 95% i mocy 80%.
Interpretacja
| Parametr | Znaczenie |
|---|---|
| MDE | najmniejszy efekt, jaki test wykryje |
| Ufność | 95% = 5% szansy na fałszywy alarm |
| Moc 80% | 80% szansy wykrycia realnego efektu |
Jak nie zepsuć testu
- nie podglądaj wyników i nie zatrzymuj testu przed czasem (peeking),
- testuj jedną zmianę naraz,
- ustal metrykę sukcesu przed startem,
- uwzględnij pełne cykle tygodniowe (weekend vs dni robocze).
Najczęstsze pytania
Dlaczego mały MDE wymaga takiej próby?
Próba rośnie odwrotnie proporcjonalnie do kwadratu efektu — zmniejszenie MDE o połowę czterokrotnie zwiększa potrzebną próbę.
Czy mogę zmienić wariant w trakcie?
Nie — unieważnia to wyniki. Zakończ test i zacznij nowy.
Co jeśli ruchu nie wystarczy?
Testuj większy efekt (np. przeprojektowanie zamiast zmiany koloru) lub zbieraj dane dłużej.