Czego się dowiesz?
Dowiedz się, jak korzystać z Testów A/B, aby ocenić skuteczność różnych elementów formularza rejestracyjnego. Skutecznie analizując wyniki, możesz mieć pewność, że formularze przemówią do odwiedzających witrynę i przyczynią się do rozwoju listy.
Przygotowanie do testu A/B
Zanim zaczniesz tworzyć test A/B, weź pod uwagę te ogólne wskazówki:
- Testuj 1 zmienną na raz (np. ofertę kuponu)
- Skup się na zmianie jednej zmiennej (elementu) naraz, na przykład kuponu, aby jasno ocenić jej wpływ.
- Zacznij od małej liczby wariantów testowych
- Podczas testowania zmiennej (np. oferty kuponu) zacznij od 1 lub 2 wariantów, aby zmierzyć skuteczność. Z czasem możesz zwiększyć złożoność w kolejnych testach, gdy zbierzesz więcej danych, ale nie używaj więcej niż 4.
- Unikaj zmian w trakcie testu
- Nie zmieniaj ustawień testu, gdy jest aktywny. Pamiętaj, że nie możesz edytować samych wariantów formularza, gdy test jest aktywny; musisz zakończyć test, aby wprowadzić tego typu zmiany, więc wcześniej potwierdź wszystkie konfiguracje.
- Zadbaj o odpowiednio długi czas testów
- Poczekaj na statystycznie istotne wyniki lub do momentu, gdy masz wystarczającą wielkość próby odbiorców, aby zakończyć test. Pamiętaj, że większa liczba wariantów wymaga większego ruchu, aby uzyskać wiarygodne wyniki.
- Zrozum istotność statystyczną
- Zapoznaj się z tym, jak istotność statystyczna wpływa na wyniki testu A/B.
Co testować w ramach testu A/B
| Przypadek użycia | Cel | Konfiguracja |
| Przetestuj wyskakujące okienko z teaserem | Zmierz skuteczność teasera w formularzu pop-up. | Utwórz 2 identyczne warianty formularza: 1 z teaserem i 1 bez, a następnie porównaj wyniki. Dowiedz się więcej o teaserach. |
| Testuj pory wyświetlania | Określ optymalny moment wyświetlania formularza na swojej stronie internetowej. | Testuj warianty z różnymi ustawieniami Czasu (np. 1 pojawia się po przewinięciu przez odwiedzającego określonej części strony, a drugi przy zamiarze wyjścia). Czas konfiguruje się na karcie Kierowanie i zachowania w edytorze formularzy. Dowiedz się więcej o czasie wyświetlania. |
| Przetestuj swój formularz z kuponem | Oceń, czy oferowanie rabatu promocyjnego w formularzu zwiększa liczbę przesłań. | Utwórz 2 warianty: 1 z kuponem i 1 bez. Gdy zwycięzca zostanie wyłoniony, dalej testuj rodzaje ofert kuponów (np. 10% zniżki vs. darmowa wysyłka). Dowiedz się więcej o kuponach w formularzach. |
| Przetestuj zawartość formularza | Przetestuj, aby dowiedzieć się, jaka treść formularza, grafika lub układ trafia do odwiedzających witrynę i zwiększa współczynnik przesłań. |
Testuj 1 element treści naraz w wielu wariantach, np.:
|
Dowiedz się więcej: przykłady przypadków użycia i konfiguracji od klientów Klaviyo, którzy wykorzystują Testy A/B, aby aktywnie zwiększać wskaźnik konwersji formularzy.
Tworzenie testu A/B
Tworzenie testu
Istnieją 2 różne sposoby tworzenia testu A/B dla formularza rejestracyjnego:
- Na karcie formularz rejestracyjny kliknij menu rozwijane z 3 kropkami obok formularza, który chcesz przetestować, i wybierz Utwórz test A/B.
- Otwórz edytor formularza dla formularza rejestracyjnego, który chcesz przetestować, i wybierz Utwórz test A/B w górnym rogu.
- Domyślnie będzie mieć nazwę Kopia nr nazwy formularza. W przypadku przykładu z innym kolorem przycisku przesyłania z wcześniejszej części formularze mogą mieć nazwy Newsletter – niebieski i Newsletter – szary.
- Tutaj możesz też dodać więcej wariantów, wybierając przycisk kopiowania. Do testu A/B można dodać maksymalnie 7 wariantów. Pamiętaj, że im więcej wariantów dodasz, tym dłużej trzeba będzie przeprowadzać test. Idealny test A/B powinien mieć od dwóch do czterech wariantów. W poniższym przykładzie są trzy warianty: oryginalny formularz i 2 dodatkowe testy.
Niezależnie od tego, skąd wejdziesz:
- Wybierz Utwórz test A/B, aby rozpocząć.
- Następnie nadaj testowi opisową nazwę. Jeśli testujesz kolory przycisków w wyskakującym okienku zapisu do newslettera, możesz nazwać test Newsletter — kolor przycisku Prześlij.
- Po nadaniu nazwy testowi A/B nadaj różne nazwy wariantom formularza rejestracyjnego, aby móc je rozróżniać.
- Po skonfigurowaniu testu wybierz Utwórz test.
Konfigurowanie wariantów
Po utworzeniu testu nastąpi przekierowanie z powrotem do edytora formularza rejestracyjnego. Będzie można przełączać się między różnymi wariantami formularza, wybierając nazwę formularza. W tym menu można też zmienić nazwę wariantu, utworzyć dodatkowy wariant lub usunąć wariant.
Aby znaleźć inspiracje, zobacz sekcję Co testować A/B.
Po zakończeniu konfigurowania formularza wybierz Kontynuuj do Ustawień testu.
Konfigurowanie ustawień testu A/B
Na stronie ustawień testu pojawią się tutaj konfigurowalne ustawienia testu. Rozważ dostosowanie:
- Nazwy wariantów
- Wybór ruchu (waga)
- Wybór zwycięzcy
- Uwagi
Pamiętaj, że do strony ustawień testu możesz też przejść, wybierając formularz rejestracyjny na stronie widoku listy formularzy rejestracyjnych, a następnie przechodząc do Wyniki testu A/B > Edytuj test.
Wybór ruchu
W tej sekcji można określić, jaka część ruchu trafia do wariantów formularza. Domyślnie każdy formularz będzie wyświetlany równej liczbie odbiorców. W trakcie trwania testu, jeśli jeden z wariantów przewyższa pozostałe, Klaviyo skieruje ruch do lepiej działającego formularza, podczas gdy test nadal trwa.
Jeśli przełączysz się na Waga – ręczna, możesz określić, ile ruchu ma trafiać do każdego wariantu formularza. Wartości muszą sumować się do 100%.
Wybór zwycięzcy
Podobnie jak w sekcji wyboru ruchu, masz 2 opcje określenia sposobu wyboru zwycięzcy testu. Test możesz zakończyć automatycznie lub ręcznie.
-
Automatycznie
Jeśli zakończysz test automatycznie, zakończy się on, gdy 1 wariant przewyższy pozostałe na statystycznie istotnym poziomie lub gdy osiągnie określoną datę. Można też zaznaczyć oba pola, a test zakończy się, gdy zostanie spełniony 1 z warunków. Na przykład, jeśli zaznaczone są oba warunki, a formularz ma działać tylko przez miesiąc, jeśli formularz będzie mieć statystycznie istotne wyniki po tygodniu, test się zakończy.
- Jeśli zakończysz test w momencie, gdy same wyniki będą statystycznie istotne, model data science Klaviyo wykona obliczenia i wybierze zwycięzcę.
- Jeśli zdecydujesz się wysłać test w określonym dniu, test zakończy się o północy czasu uniwersalnego koordynowanego (UTC).
- Ręcznie Jeśli zdecydujesz się zakończyć test ręcznie (odznacz oba pola), wybierzesz zarówno zwycięzcę, jak i datę zakończenia testu.
Niezależnie od wybranego automatycznego wyboru, po zakończeniu testu formularz, który wygra, będzie aktywny w Twojej witrynie.
Wybierz Opublikuj test A/B , gdy skończysz edytować ustawienia testu. Zanim test się rozpocznie, Klaviyo sprawdzi, czy występuje problem z publikowaniem formularzy w Twojej witrynie oraz czy formularz ma całą potrzebną zawartość (np. treść zgody, CTA, pola przesyłania itp.).
Sprawdź wyniki testu A/B
Gdy test jest uruchomiony lub po jego zakończeniu, możesz monitorować dane na swoim koncie. Przejdź do Formularze rejestracyjne, a następnie wybierz formularz. Na karcie Przegląd możesz sprawdzić, jak ogólnie działa formularz. Wybierz kartę Wyniki testu A/B, aby przejść do analiz dotyczących testu A/B.
Stąd możesz też edytować ustawienia testu A/B. Aby to zrobić, wybierz Edytuj test A/B w prawym górnym rogu karty wyników testu A/B. Tutaj możesz edytować ustawienia testu (np. nazwę, wagę wariantu, ustawienia wyboru zwycięzcy).
Nie będzie można zmienić treści formularzy testowych w trakcie trwania testu. Aby edytować treść, kliknij Edytuj treść, aby zakończyć test, sklonuj nowy test do edycji i uruchom go ponownie.
Przegląd testu
W sekcji Overview zobaczysz podsumowanie tego, jak działa Twój test. W lewym górnym rogu możesz użyć menu rozwijanego, aby przełączać różne warianty w teście A/B. Metryki wyświetlane w sekcji Overview obejmują:
- Prawdopodobieństwo wygranej Prawdopodobieństwo wygranej jest wyświetlane na karcie w lewym górnym rogu. Ten procent oznacza prawdopodobieństwo, że bieżący wariant, który wygrywa, będzie zwycięzcą istotnym statystycznie. Gdy test ma więcej odbiorców i jest aktywny przez dłuższy czas, ta wartość powinna wzrastać. O tym, że wyniki testu stały się istotne statystycznie, informuje etykieta poniżej prawdopodobieństwa wygranej. Podczas wyświetlania ukończonego testu będzie też podany powód zakończenia testu (np. zakończono ręcznie przez wybranie zwycięzcy).
-
Data rozpoczęcia i Data zakończenia
Data rozpoczęcia i zakończenia testu są podane w prawym górnym obszarze karty. Jeśli nie ustawiono daty zakończenia, to pole pozostanie puste. Jeśli test został zakończony, zobaczysz datę wybrania zwycięzcy.
Aby w dowolnym momencie ręcznie zatrzymać test i wybrać zwycięzcę, wybierz Wybierz zwycięzcę.Jeśli wybierzesz ten przycisk w dowolnym momencie, pojawi się opcja zakończenia testu i ustawienia zwycięskiego wariantu formularza jako aktywnego lub w trybie roboczym.
Pod tymi kartami wyświetlane są nieprzetworzone dane z każdego wariantu formularza w Twoim teście. Obok każdego wariantu możesz zobaczyć zestawienie następujących metryk według wariantu:
- Bieżąca waga Ta metryka odzwierciedla bieżącą wagę ruchu kierowanego do każdego formularza. Jeśli ręcznie wybrano, jaki ruch trafia do każdego formularza, liczby te będą zgodne z ustawieniami wybranymi na początku testu. Jeśli używasz modelu data science Klaviyo, zobaczysz, że udział ruchu zmienia się w czasie — więcej ruchu trafia do formularza, który wygrywa, co pozwala pozyskać więcej subskrybentów podczas trwania testu.
- Zamówienia Liczba złożonych zamówień przypisanych do tego formularza.
- Średnia wartość zamówienia (średnia wartość zamówienia) Przychody ze sklepu powiązane z tym formularzem podzielone przez liczbę zamówień powiązanych z formularzem.
-
Przychód
Suma złożonych zamówień ($), które wystąpiły po przesłaniu formularza w oknie wstecznego podglądu.
Aby dowiedzieć się więcej o tym, jak przychody są powiązane z formularzami rejestracyjnymi, zobacz Zrozumienie metryk przychodów dla formularzy.
- Unikalne wyświetlenia Liczba unikalnych użytkowników, którzy wyświetlili wariant formularza rejestracyjnego (np. jeśli 1 odwiedzający witrynę wyświetli formularz dwa razy, liczy się to jako 1 wyświetlenie).
- Unikatowe wysłania Liczba unikatowych użytkowników, którzy wysyłają wariant formularza rejestracyjnego lub klikają przycisk "Przejdź do URL" (np. jeśli 1 odwiedzający witrynę wyśle formularz 2 razy, liczy się to jako 1 wysłanie). Jeżeli formularz ma zarówno przycisk przesyłania, jak i przycisk „Przejdź do adresu URL”, zdarzenie zostanie zliczone tylko wtedy, gdy ktoś prześle formularz.
- Współczynnik przesłań Wartość Unikalne przesłania formularza podzielona przez liczbę Unikalnych wyświetleń. Ponieważ ten współczynnik korzysta z unikalnych metryk, będzie się różnić od Współczynnika przesłań na karcie Przegląd, która wykorzystuje sumy.
Pamiętaj, że jeśli w teście A/B testujesz różne czasy wyświetlania (np. Pokaż natychmiast po załadowaniu strony i Pokaż 30 sekund po załadowaniu strony), zamiast tego zobaczysz Kwalifikujące się unikalne wyświetlenia i Kwalifikujący się współczynnik przesłania. Kwalifikujące się wyświetlenia są oparte na liczbie odwiedzających witrynę, którzy mogli zobaczyć ten formularz, aby można było dokładnie porównać warianty formularza. Przewiń w dół do sekcji FAQ, aby dowiedzieć się więcej.
Wykres wskaźnika wypełnień formularza
Pod surowymi danymi znajduje się wykres wariantów, pokazujący wskaźnik wypełnień formularza według wariantu w trakcie trwania testu A/B. Jeśli interesuje Cię konkretna data, najedź kursorem na punkty danych, aby uzyskać więcej informacji.
Wskaźniki zaangażowania
Jeśli prowadzisz test A/B w formularzu wieloetapowym, dostępne jest zestawienie wskaźników zaangażowania dla każdego kroku formularza według wariantu, dzięki czemu można zrozumieć, na którym etapie odwiedzający witrynę mogą porzucać formularz. Tutaj możesz przeanalizować:
- Wskaźnik zaangażowania w kroku 1 Ta metryka odzwierciedla odsetek użytkowników, którzy zaangażowali się w pierwszy krok wariantu formularza rejestracyjnego.
- Użytkownicy, którzy ukończyli wszystkie kroki Ta metryka odzwierciedla odsetek użytkowników, którzy zaangażowali się w każdy krok wariantu formularza rejestracyjnego.
Pod tymi danymi znajduje się wykres Wskaźnik ukończenia kroku według wariantu, dzięki czemu można wizualizować wskaźniki zaangażowania na każdym etapie i porównywać wskaźniki między wariantami formularza w teście A/B.
Często zadawane pytania
Mam powiadomienie, że mój formularz z testem A/B z opóźnieniem czasowym inaczej oblicza wskaźnik wypełnień formularza. Dlaczego tak się dzieje?
Jeśli testujesz opóźnienie czasowe w formularzu, wskaźnik wypełnień formularza będzie obliczany na podstawie konwersji unikalnych użytkowników, którzy kwalifikują się do wyświetlenia formularza (Kwalifikujące się unikalne wyświetlenia), a nie na podstawie łącznej liczby wyświetleń formularza.
Załóżmy na przykład, że test A/B ma równą wagę i zawiera komunikat „Potrzebujesz pomocy w przeglądaniu?”. W teście 1 formularz wyświetla się od razu po wejściu na witrynę, a drugi formularz ładuje się po minucie. Chociaż taka sama liczba osób zostanie ustawiona w kolejce, aby zobaczyć oba formularze, więcej osób zobaczy formularz, który wyświetla się od razu. Chociaż nie będzie tak wielu osób, które zobaczą formularz z opóźnieniem, oferuje on pomoc zdezorientowanym kupującym, a więc nadal może mieć wyższy wskaźnik wypełnień formularza. Aby sprawdzić, czy opóźnienie formularza prowadzi do wyższego czy niższego wskaźnika przesłań, wskaźnik wypełnień formularza nie będzie liczbą przesłań jako procentem liczby wyświetleń, ale raczej liczbą przesłań jako procentem liczby osób, które mogły zobaczyć formularz.
Zaznaczyłem(-am) oba pola w części wyboru zwycięzcy mojego testu A/B. Czy test zakończy się, gdy zostaną spełnione oba warunki czy którykolwiek z nich?
Te pola wyboru działają jako warunek OR, co oznacza, że można spełnić jeden z warunków, a test zostanie zatrzymany. Nie trzeba spełnić obu warunków, aby test został zatrzymany.
Czy mogę edytować ustawienia testu dla mojego testu A/B formularza po jego uruchomieniu?
Tak, przejdź do testu A/B w formularzu i wybierz Edytuj test A/B, aby zmienić ustawienia. Nie będzie jednak można zmienić treści formularzy bez zakończenia bieżącego testu i rozpoczęcia nowego.
Jeśli ktoś nie wejdzie w interakcję z formularzem, który jest częścią testu A/B, to gdy formularz wyświetli mu się po raz drugi, czy zobaczy inną wersję formularza?
Nie, plik cookie zostanie zapisany podczas pierwszego wyświetlenia formularza i będzie on widzieć tylko ten wariant, chyba że wyczyści pliki cookie lub będzie przeglądać w trybie anonimowym.
Gdy tworzę test A/B dla formularza, czy formularz przejdzie w tryb wersji roboczej?
Formularz pozostanie w takim stanie, w jakim był przed utworzeniem testu. Jeśli był w trybie na żywo i utworzysz test A/B, bieżąca wersja będzie na żywo. Jeśli był w wersji roboczej, formularz będzie w trybie wersji roboczej.
W moim teście A/B formularza był błąd literowy, więc opublikowałem(-am) nowy. Jak mogę trwale usunąć test z błędem literowym?
Przejdź do wyników testu, którego chcesz się pozbyć, wybierając formularz i przechodząc do Ustawień testu A/B, a następnie wybierz Usuń test.
Włączyłem(-am) test A/B formularza, a potem zauważyłem(-am) literówkę. Nie chcę zatrzymywać testu, tworzyć go od nowa i ponownie go włączać. Co należy zrobić?
Przejdź do strony Ustawienia testu A/B, gdy test jest uruchomiony, klikając Edytuj test A/B w analityce formularza, a następnie kliknij Edytuj treść. Spowoduje to utworzenie nowego roboczego testu A/B, który można edytować w razie potrzeby, a następnie opublikować, klikając Opublikuj test A/B.
Jeden z moich wariant formularza wypada bardzo słabo i chcę zaktualizować ilość ruchu kierowanego do formularza. Czy mogę to zrobić?
Tak. Kliknij formularz i przejdź do ustawień testu A/B dla danego formularza. Wybierz Edytuj test A/B i zmień wagę lub przełącz na automatyczne ważenie, gdzie model uwzględni wyniki skuteczności.
Chcę przetestować, czy różne oferty mają większą szansę na konwersję. Jak mieć pewność, że do każdego formularza zostanie przypisana inna sekwencja powitalna?
W każdym wariancie można dostosować listę, do której dana osoba zapisuje się. Aby każdy wariant zapisywał do innych list, kliknij przycisk CTA w formularzu i zmień opcję Lista do zapisu w sekcji Działanie po kliknięciu przycisku. Następnie uruchom sekwencję powitalną na podstawie dołączenia do listy każdego wariantu i wyślij kolejną wiadomość z powiązaną ofertą.
Chcę śledzić, kto widzi każdy wariant formularza w teście A/B. Jak mogę to zrobić?
Są 2 sposoby, aby to zrobić. Możesz dostosować listę, do której dana osoba się zapisuje albo dodać ukryte pole, które zostanie przesłane, gdy ktoś kliknie link w formularzu. Jeśli chcesz, aby różne warianty trafiały do różnych list, wybierz przycisk i zmień ustawienie Lista do przesłania w sekcji Działanie po kliknięciu przycisku. Jeśli chcesz przesłać dane za pomocą ukrytego pola, dodaj właściwość w sekcji Prześlij ukryte pola. Następnie utwórz segment na podstawie każdej właściwości.