Proces publikowania i tworzenia daje twórcom deweloperom możliwość wykonania testu A/B miniatur wyspy w celu porównania dwóch różnych obrazów. Dzięki temu można sprawdzić, który z nich uzyskuje więcej kliknięć i zapewnia wyższy współczynnik klikalności (CTR). Wszystko to dzieje się w oparciu o rzeczywiste dane gracza, aby można było łatwiej optymalizować zainteresowanie, ograniczać podejmowanie decyzji „na wyczucie” i przyspieszać iterację.
Tylko członek zespołu z uprawnieniami do publikowania może utworzyć test A/B i wybrać miniaturę, która będzie używana po ukończeniu testu.
Rozpoczynanie testu A/B
Testy A/B są częścią procesu publikowania, ale nie są obowiązkowe. Aby dowiedzieć się więcej na temat przesyłania pojedynczej miniatury, można zapoznać się z poniższą sekcją Anulowanie testu.
Na karcie Materiały promocyjne należy przesłać dwie miniatury. Aby rozpocząć test A/B:
Upewnij się, że masz dwie różne miniatury.
Dodaj inne zasoby multimedialne.
Kliknij Dalej, aby kontynuować.
Materiały promocyjne – Wykonywanie testów A/B miniatur.
Dodatkowa miniatura nie zostanie oznaczona jako duplikat.
Moderacja miniatur
Jeśli moderacja jednego obrazu miniatury zakończy się niepomyślnie, to samo stanie się w przypadku całej wyspy. Po poprawieniu tego obrazu konieczne będzie ponowne przejście przez proces publikowania i weryfikacji.
Nowa wersja
Podczas testu A/B wyspy nie można utworzyć nowej wersji. Należy poczekać, aż test A/B zostanie ukończony i zostanie wybrany obraz. Następnie dostępny stanie się przycisk Stwórz nową wersję.
Anulowanie testu
Test można anulować w dowolnym momencie. Wystarczy wybrać dowolny testowany obraz.
Jeśli jesteś w trakcie tworzenia nowej wersji i nie chcesz wykonywać testu A/B, możesz użyć pojedynczej miniatury, aby przejść dalej.
Wybierz Anuluj test A/B.
Kliknij Dalej. Pojawi się komunikat.
Anuluj test A/B Wybierz Użyj pojedynczej miniatury.
Potwierdź, że chcesz kontynuować z pojedynczą miniaturą.
Kontynuuj proces publikowania z pojedynczą miniaturą.
Wskaźniki testu miniatur
Po opublikowaniu wyspy każda miniatura gromadzi dane. Wśród potencjalnych graczy warianty miniatury są rozpowszechniane po równo (podział 50/50). Miniatury poddawane testowi A/B są stosowane na stronie Odkrycia w trakcie gry oraz podczas przeglądania i wyszukiwania. Gdy gracz zobaczy konkretną miniaturę wyspy, od tej pory będzie mu pokazywana tylko ona.
Test trwa maksymalnie 90 dni. Wyniki można sprawdzić na stronie Publikowanie wyspy w module wersji. Dostępne będą następujące dane z testu A/B:
Wyświetlenia
Kliknięcia
Współczynnik klikalności (CTR)
Wyniki testu
Aby zakończyć test, można wybrać miniaturę w dowolnym momencie po jego rozpoczęciu. Jeśli po 90 dniach nie zakończysz testu samodzielnie, system sam wybierze miniaturę domyślną na podstawie najlepszych wyników.
Aby wybrać miniaturę:
Kliknij komunikat o wyborze obrazu w wierszu miniatury. Otworzy się okienko wyskakujące.
Wybierz obraz. Kliknij Wybierz.
Kliknij Wybierz.
Wybrana miniatura jest oznaczana jako wybrana i pozostaje podświetlona na karcie Wersja, podczas gdy miniatury, które nie zostały wybrane, stają się niemożliwe do wybrania. Zwiń widok Test A/B, aby poniżej wersji wyświetlić status ukończenia testu z datą. Jest to data wskazująca, kiedy wybrana miniatura pojawi się jako obraz wyspy dla wszystkich graczy.
Jeśli nie wybierzesz miniatury w ciągu 90-dniowego okresu testowego, system wybierze ją automatycznie. Jeśli zostanie osiągnięty znaczący wynik, jako wybraną miniaturę uzna obraz z wyższym współczynnikiem CTR. Jeśli nie zostanie osiągnięty znaczący wynik, przypisze miniaturę A, czyli pierwszą przesłaną miniaturę.
Niewystarczające wyniki
Istnieje możliwość, że po zakończeniu okresu testowego nie zostanie wyłoniony zdecydowany zwycięzca. W takim przypadku wynik testu A/B jest oznaczany etykietą Niewystarczające wyniki.
Na tym etapie nadal można wybrać miniaturę. Spowoduje to wyświetlenie okienka wyskakującego z komunikatem o tym, że nie wyłoniono zdecydowanego zwycięzcy.
Aby zakończyć test A/B:
Kliknij Wybierz obraz, aby kontynuować korzystanie z wybranej miniatury. Otworzy się okienko wyskakujące.
Kliknij Wybierz, aby ukończyć fazę testowania.
Aby utworzyć nowy test A/B, należy ponownie przejść przez proces publikowania i moderowania.
Często zadawane pytania dotyczące testu A/B
Poniżej znajduje się ogólny przegląd pytań dotyczących procesu wykonywania testu A/B.
Co to jest test A/B miniatur?
Test A/B miniatur umożliwia porównywanie różnych miniatur w celu ustalenia, która z nich uzyskuje najlepsze wyniki pod względem współczynnika klikalności (CTR). Ta funkcja pozwala uzyskać oparte na danych wnioski, które dzięki użyciu najskuteczniejszej miniatury pomagają zoptymalizować zainteresowanie graczy wyspą.
Dla kogo jest przeznaczona ta funkcja?
Ta funkcja została opracowana po to, aby można było ulepszać miniatury w celu zwiększenia współczynnika klikalności.
Jak działa test A/B?
Po przesłaniu dwóch wariantów miniatury system rozpowszechni je po równo (podział 50/50) wśród graczy. Następnie na podstawie uzyskanego współczynnika klikalności (CTR) jest zalecana najskuteczniejsza miniatura.
Jak można skonfigurować test A/B miniatur podczas publikowania?
W ramach kroku Prześlij materiał promocyjny podczas procesu publikowania możesz dodać kolejną miniaturę do przetestowania.
Ważne:
Test A/B zostanie utworzony dopiero wtedy, gdy moderacja wyspa zakończy się pomyślnie.
Jeśli moderacja któregoś z wariantów miniatury zakończy się niepomyślnie, wszystkie przesłane treści (w tym wyspa) zostaną odrzucone.
E-mail o odrzuceniu będzie zawierać jasne informacje o tym, który wariant miniatury został odrzucony, lub informacje o odrzuceniu ich obu.
W przypadku zgłoszenia jednego wariantu obrazu oba obrazy są usuwane.
Ile miniatur można testować jednocześnie?
Na potrzeby testu można przesłać dwa warianty miniatury. Dozwolony jest jeden test na wersję.
Czy można wykonywać wiele testów A/B jednocześnie?
Przy publikowaniu można jednocześnie mieć tylko jeden aktywny test dla wersji. Jeśli zostanie podjęta próba utworzenia nowej wersji, pojawi się prośba o zakończenie testu.
Jak długo trwa test A/B?
Czas trwania testu zależy od szybkości gromadzenia danych i zwykle jest to od kilku dni do kilku tygodni, w zależności od wielkości grupy odbiorców i poziomu zainteresowania. Maksymalny czas trwania testu A/B to 90 dni. Jeśli miniatura nie zostanie wybrana podczas testu, po 90 dniach system automatycznie wybierze miniaturę domyślną. Wcześniej można zakończyć test ręcznie.
Na podstawie których wskaźników jest wybierana zwycięska miniatura?
Aby wskazać najskuteczniejszą miniaturę, system analizuje współczynnik klikalności (CTR).
Jak system zaleca zwycięską miniaturę?
System analizuje współczynnik klikalności (CTR) i wskaźniki wyświetleń, aby wskazać najskuteczniejszy wariant. Nie ogłasza wizualnie zwycięzcy, ale pokazuje, że osiągnięto znaczący poziom ufności. Następnie można wybrać miniaturę na podstawie własnego osądu.
Czy można ręcznie wybrać zwycięską miniaturę?
Tak. Można odrzucić zalecenie systemu i ręcznie wybrać miniaturę.
Co to jest znaczący poziom ufności w przypadku testu A/B?
W przypadku testu A/B znaczący poziom ufności oznacza istnienie statystycznego prawdopodobieństwa (ustawionego na wartość 90%), że różnica w skuteczności (ocenianej na podstawie współczynnika CTR) dwóch miniatur nie jest przypadkowa.
Do jego pomiaru wykorzystywana jest „wartość p” (na przykład p < 0,1 oznacza poziom ufności 90%).
Wymaga wystarczającej ilości danych (wyświetleń/kliknięć) w celu wykluczenia przypadków.
Po jego osiągnięciu zwycięska miniatura jest uznawana za skuteczniejszą.
Jeśli nie zostanie osiągnięty, test pozostaje nierozstrzygnięty (nie ma zdecydowanego zwycięzcy).
Przykład:
Jeśli współczynnik CTR miniatury B jest o 5% wyższy niż w przypadku miniatury A i poziom ufności wynosi 90%, można ufać, że miniatura B rzeczywiście jest skuteczniejsza. Zapobiega to podejmowaniu decyzji w oparciu o wprowadzające w błąd lub niedokładne dane.
Jak po 90 dniach jest automatycznie wybierana miniatura domyślna?
Jeśli miniatura nie zostanie samodzielnie wybrana w ciągu 90 dni testu, system w oparciu o poniższe reguły określi, którą miniaturę należy ustawić domyślnie:
Jeśli osiągnięto znaczący wynik, przypisuje skuteczniejszy obraz jako miniaturę wyspy.
Jeśli nie osiągnięto znaczącego wyniku, przypisuje miniaturę A (pierwszą przesłaną miniaturę) jako miniaturę wyspy.
Gdzie można zobaczyć wyniki testu?
Wyniki są wyświetlane w module wersji na stronie Wersja projektu w Portalu Twórcy. Przedstawiają wyświetlenia, kliknięcia i współczynnik CTR w odniesieniu do skuteczności poszczególnych wariantów. Widać tam też, czy test osiągnął wystarczające wyniki – innymi słowy, czy wynik jest wiarygodny pod względem statystycznym.
Czy gracze zauważą, że miniatury się zmieniają?
Nie. Wariant jest przypisywany graczom, gdy po raz pierwszy widzą miniaturę wyspy w Fortnite. To przypisanie odbywa się na poziomie konta gracza. W celu uniknięcia niejasności gracze będą mogli zobaczyć tylko jeden wariant miniatury.