O processo de publicação e desenvolvimento oferece ao público desenvolvedor a oportunidade de executar um teste A/B nas miniaturas das ilhas para comparar duas imagens diferentes e ver qual delas gera mais cliques e cliques por interação (CpI) mais altos — tudo isso com base em dados reais de jogadores, para ajudar você a otimizar o engajamento, reduzir suposições e iterar mais rapidamente.
Somente um membro da equipe com permissão de publicação pode criar um teste A/B e selecionar qual miniatura usar após a conclusão do teste.
Iniciar Teste A/B
O teste A/B faz parte do processo de publicação, mas não é obrigatório. Para saber mais sobre como enviar uma única miniatura, consulte a seção Cancelar teste abaixo.
Na aba Materiais promocionais, envie suas duas miniaturas. Para começar o teste A/B:
Certifique-se de que as duas miniaturas sejam diferentes.
Adicione quaisquer outros recursos de mídia.
Clique em Avançar para continuar.
Mídia promocional - Teste A/B de miniaturas.
A miniatura adicional não será sinalizada como duplicada.
Moderação de miniaturas
Se uma imagem em miniatura for reprovada na moderação, toda a ilha também será e precisará passar pelo processo de publicação e revisão novamente depois que você corrigir a imagem reprovada.
Nova versão
Enquanto a ilha estiver em meio ao teste A/B, você não poderá criar uma nova versão, mas deverá esperar até que o teste A/B seja concluído e você tenha selecionado uma imagem. Depois de fazer isso, o botão Criar nova versão fica disponível.
Cancelar teste
Você pode cancelar o teste a qualquer momento selecionando uma das imagens que estão sendo testadas.
Se estiver no meio da criação de uma nova versão e não quiser fazer o teste A/B, você tem a opção de usar uma única miniatura para continuar.
Selecione Cancelar teste A/B.
Clique em Avançar. Você receberá uma notificação.
Cancelar teste A/B Selecione Usar miniatura única.
Confirme se você continua com uma única miniatura.
Continue no processo de publicação com uma única miniatura.
Métricas de teste de miniaturas
Cada miniatura coleta dados após a publicação da ilha. Uma distribuição igual de cada miniatura é enviada para jogadores em potencial. As miniaturas que passam pelo teste A/B são aplicadas à página Descobrir do jogo, navegar e pesquisar. Quando um jogador vir uma miniatura específica de uma ilha, ele só verá essa miniatura ao continuar.
Os testes são executados por um máximo de 90 dias. Os resultados são encontrados na página de Publicação da ilha, no Módulo de versão. Os seguintes dados do teste A/B estarão disponíveis:
Impressões
Cliques
Taxa de cliques (CTR)
Resultados do teste
Você pode encerrar o teste selecionando uma miniatura a qualquer momento após o início do teste. Após 90 dias, se você não encerrar o teste por conta própria, o sistema selecionará uma miniatura padrão em seu nome com base nos melhores resultados.
Para selecionar uma miniatura:
Clique no prompt de seleção de imagem na linha de miniaturas. Uma janela pop-up será aberta.
Selecione uma imagem. Clique em Selecionar.
Clique em Selecionar.
A miniatura selecionada é marcada como Selecionada e permanece em destaque na aba Versão, enquanto a miniatura não escolhida torna-se não selecionável. Recolha a exibição do teste A/B para ver um status de teste concluído com data na versão. Isso marca a data em que a miniatura selecionada aparecerá como a imagem da ilha para todos os jogadores.
Se você não escolher uma miniatura após o período de teste de 90 dias, o sistema escolherá automaticamente a miniatura. Se um resultado significativo for alcançado, a imagem com maior CTR será atribuída como a miniatura escolhida. Se nenhum resultado significativo for alcançado, ele atribuirá a miniatura A — a primeira miniatura carregada.
Resultados insuficientes
É possível que não haja um vencedor claro após o término do período de teste. Nesse caso, o resultado do seu teste A/B é marcado como Resultados insuficientes.
Você ainda pode selecionar uma miniatura neste ponto. Fazer isso abre uma mensagem pop-up informando que não houve vencedor claro.
Para concluir o teste A/B:
Clique em Selecionar imagem para continuar usando a miniatura selecionada. Um pop-up será aberto.
Clique em Selecionar para concluir a fase de teste.
Caso você decida criar um novo teste A/B, você deverá passar pelo processo de publicação e moderação novamente.
Perguntas frequentes sobre testes A/B
A seguir, é apresentada uma visão geral das perguntas sobre o processo de teste A/B.
O que é o teste A/B de miniaturas?
O teste A/B de miniaturas fornece uma maneira de comparar diferentes miniaturas para determinar qual delas tem o melhor desempenho em termos de taxas de cliques (CTR). A funcionalidade fornece informações baseadas em dados para ajudar você a otimizar o engajamento da sua ilha usando a miniatura mais eficaz.
Para quem é essa funcionalidade?
Ela foi projetada para você refinar suas miniaturas para melhorar as taxas de cliques.
Como funciona o teste A/B?
Quando você carrega duas variantes de miniatura, o sistema distribui uniformemente cada variante uniformemente entre os visualizadores (uma divisão de 50/50). A miniatura de melhor desempenho é recomendada com base na métrica de taxa de cliques (CTR).
Como posso configurar um teste A/B de miniaturas durante a publicação?
Durante a etapa Carregar mídia promocional no fluxo de publicação, você pode adicionar mais uma miniatura para teste.
Importante:
O teste A/B só é criado com sucesso depois que a ilha passa pela moderação.
Se qualquer uma das variantes de miniatura for reprovada na moderação, todo o envio (incluindo a ilha) será recusado.
No e-mail de recusa, é fornecida uma explicação clara sobre qual variante de miniatura foi recusada ou se ambas foram recusadas.
Se uma variante de imagem for denunciada, ambas as imagens serão removidas.
Quantas miniaturas posso testar ao mesmo tempo?
Você pode carregar duas variantes de miniatura por teste. É permitido um teste por versão.
Posso executar vários testes A/B simultaneamente?
No lançamento, você só pode executar um teste ativo por lançamento por vez. Você será solicitado a encerrar o teste se quiser criar uma nova versão.
Por quanto tempo um teste A/B é executado?
A duração do teste depende da velocidade da coleta de dados, geralmente variando de alguns dias a algumas semanas, com base no tamanho do público e nos níveis de engajamento. A duração máxima de um teste A/B é de 90 dias. Se você não selecionar uma miniatura intencionalmente, uma miniatura padrão será selecionada em seu nome após 90 dias. Antes disso, você precisará encerrar o teste manualmente.
Quais métricas determinam a miniatura vencedora?
O sistema considera a taxa de cliques (CTR) para determinar a miniatura de melhor desempenho.
Como o sistema recomenda uma miniatura vencedora?
O sistema analisa a taxa de cliques (CTR) e as métricas de impressões para determinar a variante de melhor desempenho. Embora não declaremos visualmente um vencedor, mostramos visualmente que uma confiança significativa foi alcançada. Você pode então selecionar a miniatura com base em seu próprio julgamento.
Posso selecionar manualmente uma miniatura vencedora?
Sim, você pode substituir a recomendação do sistema e selecionar uma miniatura manualmente.
O que é confiança significativa em testes A/B?
Em testes A/B, uma confiança significativa significa que há uma certeza estatística (definida em 90% de confiança) de que a diferença de desempenho de (CTR) entre duas miniaturas não se deve ao acaso.
Medido com um "valor de p" (por exemplo, p < 0,1 para 90% de certeza).
Requer dados suficientes (impressões/cliques) para descartar erros de programação.
Se alcançada, a miniatura vencedora é declarada mais confiável.
Se não for alcançada, o teste será inconclusivo (sem vencedor claro).
Exemplo:
Se a CTR da miniatura B for 5% maior que a de A, com 90% de certeza, você pode confiar que B realmente tem um desempenho melhor. Isso impede que você tome decisões com base em dados enganosos ou ruidosos.
Como uma miniatura padrão é selecionada para mim após 90 dias?
Após 90 dias, se você mesmo não selecionar uma miniatura, o sistema determinará qual miniatura usar como padrão com base nas regras abaixo:
Se um resultado significativo for alcançado, atribua a imagem de melhor desempenho para ser a miniatura da ilha.
Se nenhum resultado significativo for alcançado, atribua a miniatura A (a primeira miniatura carregada) para ser a miniatura da ilha.
Onde posso ver os resultados do teste?
Os resultados são exibidos dentro do módulo de versão na página de versão do projeto do Portal de Criadores, mostrando impressões, cliques e CTR no desempenho de cada variante. Também é mostrado se o teste atingiu resultados suficientes, ou seja, se o resultado mostrado é estaticamente confiável.
Os jogadores notarão que as miniaturas estão mudando?
Não, uma variante será atribuída aos jogadores na primeira vez que visualizarem a miniatura da ilha no Fortnite. Essa atribuição acontece no nível da conta do jogador. Os jogadores verão apenas uma versão em miniatura, evitando qualquer confusão.