Enquanto um teste A/B decorre, a WEMASY conta, para cada versão, quantos visitantes a viram e quantos atingiram o objetivo. Compara cada versão com o original e diz-te quando a diferença é fiável. Quando souberes qual versão funciona melhor, escolhe-a como vencedora e todos os visitantes passam a recebê-la.
Abrir os resultados
- Abre Testes A/B no seletor de produtos.
- Clica no teste na lista da página Visão geral.
- Vê em Resultados.
O que mostram os resultados
- Para cada versão: quantos visitantes atingiram o objetivo, por exemplo "12 de 240 visitantes atingiram o objetivo".
- A diferença em relação ao original, marcada com vs. original.
- Quão segura está a WEMASY de que a diferença é real, em percentagem.
- A liderar na versão que está a ir melhor até agora.
Enquanto as duas versões não tiverem visitantes, vês "Ainda sem comparação: são precisos visitantes nas duas versões."
Quando é que um resultado é fiável?
Uma versão vence quando a WEMASY tem 95% de certeza e cada versão tem pelo menos cerca de 30 visitantes. O veredito no topo diz-te em que ponto estás:
- "Cerca de ... visitantes a mais por versão antes de o resultado ser fiável": deixa o teste a correr.
- "Ainda sem vencedora clara: as versões têm um desempenho parecido": a alteração faz pouca diferença.
- "... vence, com 95% de certeza": já podes escolher a vencedora.
Ao longo do tempo mostra como cada versão se comporta dia a dia, como Taxa de conversão ou Visitantes.
O aviso de divisão
Se os visitantes não se dividirem entre as versões como definiste, vês "Os visitantes não se dividem como definido." Isto costuma querer dizer que uma versão estraga a página, redireciona, ou que uma cache continua a mostrar uma só versão. Verifica as versões no teu site antes de confiares nos resultados.
Escolher a vencedora
- Clica em Escolher como vencedora na melhor versão.
- Confirma. O teste pára e todos os visitantes recebem esta versão.
O teste mostra então "Terminado: todos os visitantes recebem a vencedora." Já nada é contado.
Parar, reiniciar ou apagar
- Parar: o teste pára e nada muda no teu site.
- Começar de novo: um teste parado começa uma nova ronda e conta a partir de zero.
- Apagar este teste: remove o teste e os seus resultados.
Perguntas frequentes
Quanto tempo deve durar um teste?
Até o veredito dizer que uma versão vence, ou que as versões têm um desempenho parecido. Deixa-o a correr pelo menos uma semana inteira, para que contem os dias úteis e os fins de semana.
Posso escolher uma vencedora antes de o resultado ser fiável?
Sim, mas a diferença pode ser acaso. Sempre que puderes, espera pelo veredito de 95%.
Volta a Criar um teste A/B ou a Primeiros passos com os Testes A/B.