Jak przeprowadzić test A/B e-maila w sekwencji

Czego się dowiesz?

Dowiedz się, jak korzystać z funkcji Testów A/B w Klaviyo, aby testować pojedyncze wiadomości e-mail w sekwencji, w tym m.in. temat wiadomości, rabaty i treść wiadomości e-mail itp. Możesz nawet używać Testów A/B, aby ustalić, czy wiadomości e-mail w formacie zwykłego tekstu działają lepiej niż wiadomości e-mail HTML z dużą liczbą obrazów.

Informacje o sekwencjach i testach A/B

Testy A/B e-maili w sekwencji obejmują następujące procesy:

1. Tworzenie pojedynczego e-maila w sekwencji i zaplanowanie jego wysyłki po określonej liczbie godzin lub dni — tak jak zwykle.
2. Konfigurowanie co najmniej 2 wariantów e-maila dla tej pojedynczej wiadomości e-mail w sekwencji — z dostosowaniem tematu wiadomości lub głównej treści e-maila dla każdego wariantu.
3. Wybór wagi każdego wariantu w celu ustalenia odsetka odbiorców, którzy otrzymają każdą wiadomość e-mail.
4. Automatyczne wybranie zwycięskiego wariantu po osiągnięciu istotności statystycznej lub ręczne wybranie zwycięzcy na podstawie najwyższego wskaźnika wyświetleń wiadomości lub najwyższego wskaźnika kliknięć wśród wariantów.

Wykonaj test A/B e-maila w sekwencji

Tworzenie testu A/B można łatwo wykonać w kreatorze sekwencji. Pamiętaj, że po zakończeniu testu dla wiadomości email w przyszłości możesz utworzyć kolejny test dla tej samej wiadomości email, jeśli będzie to potrzebne.

Utwórz nowy test

1. Aby skonfigurować Testy A/B dla pojedynczej wiadomości e-mail w dowolnej sekwencji, kliknij wiadomość e-mail w kreatorze sekwencji.
2. Skonfiguruj zawartość e-maila, jeśli jeszcze tego nie zrobiono.
3. Kliknij Utwórz test A/B w panelu Szczegóły wiadomości e-mail.

Gdy utworzysz test A/B dla istniejącego e-maila w sekwencji, tworzone są dwie nowe kopie e-maila. Jeśli e-mail w sekwencji jest aktywny i był już wysyłany, po opublikowaniu testu A/B analityka dla każdej z tych kopii jest śledzona osobno. Nie kontynuujemy śledzenia analityki dla oryginalnego e-maila po dodaniu wariantu.

Edytuj warianty

Po utworzeniu nowego testu nastąpi bezpośrednie przejście do karty Test A/B w oknie Zarządzaj Zawartością . Każdy test będzie automatycznie zawierać 2 warianty. Po kliknięciu wariantu można edytować nazwę wariantu, temat wiadomości, tekst podglądu, nazwę nadawcy i adres e-mail nadawcy.

1. Aby edytować treść e-maila, kliknij przycisk Edytuj e-mail nad podglądem e-maila po prawej stronie.

Dodaj nowy wariant

Jeśli chcesz dodać kolejny wariant, musisz sklonować 1 z 2 istniejących wariantów.

1. Kliknij ikonę klonowania po prawej stronie wariantu, na którym chcesz oprzeć nowy wariant.
   
2. Spowoduje to utworzenie nowego wariantu, który można zmodyfikować tak, aby różnił się od 2 oryginalnych wariantów.

Usuń wariant

Test A/B musi mieć co najmniej 2 warianty, więc wariant można usunąć tylko wtedy, gdy są 3 lub więcej. Dodatkowo warianty można usuwać tylko wtedy, gdy test ma status Szkic. Usunięcie wariantu jest wyłączone dla aktywnych testów A/B.

1. Aby usunąć wariant, kliknij ikonę kosza po prawej stronie wariantu, który chcesz usunąć.

Wybierz wagę każdego wariantu

Na dole karty Test A/B zobaczysz sekcję Ustawienia testu, w której możesz edytować wagę każdego wariantu – to określi procent odbiorców, którzy otrzymają każdy wariant.

Zazwyczaj zaleca się nadanie każdemu wariantowi równej wagi, ale możesz zmienić wartości procentowe na dowolne.

Możesz też wybrać opcję automatycznego wyboru dystrybucji. Spowoduje to początkowo ustawienie równej dystrybucji dla każdego wariantu. Z czasem, jeśli jeden z wariantów będzie działać lepiej niż pozostałe, Klaviyo automatycznie dostosuje dystrybucję, aby kierować więcej odbiorców do wariantu o lepszych wynikach, gdy test nadal trwa.

Skonfiguruj wybór zwycięzcy

Testy domyślnie automatycznie wybiorą zwycięzcę na podstawie wskaźnika kliknięć, ale można to zmienić.

1. W sekcji Ustawienia testu na dole karty Test A/B można też skonfigurować wybór zwycięzcy, klikając link Konfiguruj w obszarze Wybór zwycięzcy.
   
2. Pojawi się okno modalne, w którym zamiast tego można zmienić metrykę zwycięstwa na wskaźnik wyświetleń wiadomości.
   

   W przypadku e-maili w sekwencji jako zwycięskie metryki są dostępne tylko wskaźnik wyświetleń wiadomości i wskaźnik kliknięć. Zalecamy używanie wskaźnika kliknięć, ponieważ wiele czynników, takich jak Apple Mail Privacy Protection (MPP), może zawyżać wskaźnik wyświetleń wiadomości. Aby uzyskać pełne informacje na temat wyświetleń MPP, przejdź do przewodnika iOS 15: Jak przygotować się na zmiany Apple.

3. W sekcji Automatyczny wybór zwycięzcy dostępne są 2 opcje:
   1. Zakończ test, jeśli zwycięska metryka zostanie uznana za wygrywającą z wysoką pewnością statystyczną (istotność statystyczna): ta opcja jest domyślnie zaznaczona. Odznacz pole obok tej opcji, jeśli chcesz zamiast tego ręcznie zakończyć test lub wybierz opcję zakończenia testu po określonej dacie.
   2. Ustaw limit daty: ta opcja pozwala wybrać konkretną datę, aby automatycznie zakończyć test.
4. Jeśli wybierzesz obie opcje, test zakończy się po osiągnięciu istotności statystycznej lub po osiągnięciu określonej daty — w zależności od tego, co nastąpi najpierw.
5. Kliknij przycisk Zapisz ustawienia, aby potwierdzić konfigurację.

Opublikuj test

1. Po skonfigurowaniu wariantów można opublikować test. Na karcie Test A/B kliknij przycisk Opublikuj test w prawym górnym rogu.
   
2. Pojawi się okno dialogowe z prośbą o potwierdzenie publikacji. Kliknij przycisk Opublikuj test, aby potwierdzić.

Usuń test

1. Jeśli chcesz usunąć test, na karcie Test A/B kliknij strzałkę obok przycisku Opublikuj test i wybierz Usuń.

Wyświetl wyniki testu A/B

1. Wyniki testu możesz wyświetlić w trakcie jego trwania lub po zakończeniu, klikając e-mail w kreatorze sekwencji i klikając przycisk Wyświetl test .

Spowoduje to przejście do strony wyników testu A/B, na której można wyświetlić następujące metryki:

• Odbiorcy Ile osób otrzymało e-maila
• Otwarcia Jaki odsetek/liczba osób otworzyła e-maila
• Kliknięcia Jaki procent/liczba osób kliknęła w e-mail
• Metryka konwersji Łączna liczba odbiorców, którzy wywołali metrykę konwersji, wybraną metrykę konwersji dla e-maila, np. Złożono zamówienie.

Aby uzyskać bardziej szczegółowe informacje o stronie wyników testu A/B, zapoznaj się z naszym artykułem jak sprawdzić wyniki testu A/B e-maili dla sekwencji.

Ręcznie wybierz zwycięzcę

W większości przypadków warto poczekać, aż test A/B automatycznie wybierze zwycięzcę, ale może zdarzyć się sytuacja, w której chcesz zakończyć test A/B wcześniej. W takim przypadku wykonaj poniższe kroki.

1. Na stronie A/B Test Results możesz ręcznie wybrać zwycięski wariant testu, klikając przycisk Wybierz zwycięzcę w prawym górnym rogu strony.
   
2. Pojawi się okno dialogowe z prośbą o wybranie zwycięzcy spośród istniejących wariantów. Wybierz z listy rozwijanej wariant, który ma wygrać, a następnie kliknij przycisk Wybierz zwycięzcę.

Zmiana statusu wiadomości z aktywnego na wersję roboczą zakończy test i automatycznie wybierze zwycięzcę na podstawie metryki zwycięstwa — w przypadku remisu zostanie wybrany pierwszy wariant.