A/B test, który faktycznie poprawia wyniki
Cold Email 10 min
0/18
Problem biznesowy
Większość 'testów' to zmiana wszystkiego naraz (nowy subject + nowy CTA + nowa oferta) i wniosek 'coś działa lepiej' — ale nie wiesz co. Albo test na 20 mailach (statystycznie bez znaczenia). Albo testowanie na otwarciach, które nie przekładają się na odpowiedzi.
Sprawdzona metoda
A/B test w 5 krokach:
- WYBIERZ JEDNĄ ZMIENNĄ: subject / otwieracz / CTA / oferta (nigdy 2 naraz),
- PRZYGOTUJ 2-3 WARIANITY (różnią się tylko tą zmienną),
- WYŚLIJ do podobnych grup (ta sama lista, losowy podział — inaczej porównujesz jabłka z gruszkami),
- CZEKAJ na odpowiedzi (wysyłka do 30-50 unikalnych na wariant daje pierwszy sygnał; pełny obraz po 100+),
- WYBIERZ zwycięzcę po REPLY RATE (nie po open) i wdróż. Co testować w kolejności: otwieracz (największy wpływ na odpowiedzi), subject, CTA, oferta (na końcu — bo oferta zmienia wartość kampanii). Zasady: jeden test naraz, wystarczająca próbka (min 50 unikalnych na wariant), decyzje na bazie odpowiedzi nie otwarć, zmiana WYGRYWĄ jest wdrożeniem, nie powtórką testu. AI: generuje warianty zmiennej (3 subjecty, 3 otwieracze), pilnuje, by różniły się tylko tą zmienną, proponuje, którą zmienną testować następną.
Przykład z rynku
- ZŁY
- Schematyczne, ogólne podejście bez weryfikacji danych i bez personalizacji.
- DOBRY
- Testujesz OTwieracz (tylko otwieracz, reszta identyczna): A: 'Zatrudniacie 3 handlowców — zwykle wtedy leady gubią się w arkuszach' B: 'Widziałem o Waszym nowym oddziale w Gdańsku' C: 'Piszę, bo widzę, że rośniecie w szybkim tempie'. Po 50 wysłanych na wariant: A 8% reply, B 6%, C 3%. Wdrażasz A. Następny test: subject przy otwieraczu A (A1: 'Pomysł na odzyskanie leadów' vs A2: '[Firma] + nowy oddział'). Każdy test odpowiada na jedno pytanie.
Gotowy prompt do skopiowania
Jesteś ekspertem A/B testowania. Kontekst: Moja kampania: [PRODUKT + AKTUALNY MAIL]. Chcę poprawić reply rate. Poprzednie testy: [JEŚLI SĄ]. Zadanie: Zaprojektuj następny A/B test: 1. Którą zmienną testować teraz (otwieracz/subject/CTA/oferta) + dlaczego 2. 3 warianty (różnią się TYLKO tą zmienną) 3. Wielkość próbki (min unikalne na wariant) + czas trwania 4. Metryka decyzji (reply rate) + próg wdrożenia 5. Następny test po tym (co będę sprawdzał) Format: 5 sekcji.
Model rekomendowany: Claude 3.5 Sonnet / GPT-4o Skopiuj i wklej do ChatGPT, Claude lub Perplexity
ALTERNATYWNE SCENARIUSZE
Warianty i alternatywne scenariusze
Wersja dla niskiego wolumenu: 2 warianty, dłuższy czas testu, jasny próg.
Wersja dla skali: testy sekwencyjne, warianty per segment.
Ćwiczenie praktyczne
Wybierz 1 zmienną do testu w swojej kampanii. Napisz 2-3 warianty. Ustal próbkę (min 50 unikalnych na wariant) i metrykę (reply rate). Zapisz, co wdrażasz, jeśli wygra wariant A/B.
Zapisano w przeglądarce