Testy A/B: dwie wersje sekcji, rozstrzyga statystyka
Jak uruchomić test A/B na stronie, ile ruchu potrzeba na wiarygodny wynik i jak wdrożyć zwycięski wariant jednym przyciskiem.
Co to jest
Test A/B pokazuje dwie wersje wybranej sekcji różnym odwiedzającym i liczy, która daje więcej zapytań. Zamiast wybierać nagłówek „na czuja", pozwalasz rozstrzygnąć liczbom. Raport porównuje pełne lejki obu wariantów, nie tylko końcową konwersję, więc widzisz też, gdzie dany wariant traci ludzi.
W którym planie
Plany Pro i wyżej.
Jak to zrobić
- W panelu strony otwórz zakładkę Testy i utwórz test: wskaż podstronę i sekcję, podaj treść wariantu B.
- Ruch dzieli się automatycznie. Podział robi serwer, więc test obejmuje cały ruch, a nie tylko osoby, które kliknęły „akceptuję" na banerze cookies.
- Poczekaj na minimum 100 wejść na każdy wariant. Poniżej tej próbki panel nie ogłasza wyniku, bo różnica mieści się w szumie.
- Wynik jest rozstrzygany na poziomie 95% pewności. Zwycięzcę wdrażasz jednym przyciskiem: jego treść staje się treścią strony, a test się kończy.
Naraz może działać jeden test na podstronę, żeby wyniki się nie mieszały.
Najczęstsze pytania
Ile trwa test? Tyle, ile zbieranie próbki. Przy 50 odwiedzających dziennie to kilka dni, przy kampanii mailowej często jeden dzień.
Czy odwiedzający zawsze widzi ten sam wariant? W ramach dnia tak. Przydział jest liczony z pseudonimu odwiedzającego bez zapisywania czegokolwiek na jego urządzeniu, więc osoba wracająca po kilku dniach może trafić na drugi wariant. Przy landingach, gdzie większość ruchu to jedna wizyta z kampanii, nie zaburza to wyniku.
Co najlepiej testować? Jedną rzecz naraz i możliwie blisko decyzji: nagłówek pierwszego ekranu, treść oferty, formularz. Test dwóch zmian jednocześnie nie powie Ci, która zadziałała.
Czy test spowalnia stronę? Nie, wariant jest wybierany po stronie serwera przed oddaniem strony, bez migotania treści w przeglądarce.