O que é teste A/B?

Teste A/B é o ato de executar um teste entre duas ou mais páginas para ver qual converte melhor. Apesar do nome (teste A/B), o experimento pode ser conduzido com quantas páginas forem necessárias.

Uma vez que tenha decidido o que testar em sua landing page (por exemplo, título, chamada para ação, fotografia, adição de um vídeo, etc. – você pode criar novas versões (ou variantes) de sua página para fazer o teste.

An example of landing page A/B testing

Convenções de Nomenclatura

Página campeã
Após finalizar o teste, você decide qual é a página vencedora (a que teve melhor desempenho de conversão). Esta é a página campeã ( ou em inglês: champion page)

Página(s) desafiante(s)
Ao começar seu teste, você cria novas versões (variantes) para desafiar a página campeã/ existente. Estas páginas são chamadas de desafiantes (challengers page).

Variante de página
Este é o termo para qualquer nova versão da página incluída no teste. A página campeã e qualquer página desafiante são consideradas variantes (variants page).

Determinando o peso do tráfego em um teste A/B

O tráfego é direcionado aleatoriamente para cada variante da página de acordo com um peso predeterminado – por exemplo, caso esteja executando um teste com 2 variantes da página, você pode dividir o tráfego em 50/50 ou 60/40. Os visitantes normalmente recebem um cookie, de maneira que sempre verão a mesma versão da página (para manter a integridade do teste). O principal fator para decidir qual peso você deve atribuir a suas variantes de página durante o teste é o momento – se você está iniciando o teste com diversas variantes ao mesmo tempo ou testando novas ideias contra uma página estabelecida.

Começando com diversas variantes de página

Caso esteja começando uma campanha a partir do zero e tenha diversas ideias sobre qual direção tomar, você pode criar uma variante de landing page para cada ideia. Neste caso, é mais provável que você coloque um peso (tráfego) igual para cada página. A razão para isso é tratar todas igualmente e escolher a vencedora (campeã) o mais rápido possível. Você precisa direcionar uma certa quantidade de tráfego pelas páginas de teste, antes dos dados se tornarem estatisticamente significantes ou válidos, e como não tem dados de conversão de nenhuma das páginas, é mais lógico, portanto, que comece seu experimento de uma posição de igualdade.

Testando contra uma página pré-existente

Caso tenha uma página estabelecida na qual gostaria de experimentar novas ideias, você pode colocar em suas novas variantes da página uma porcentagem menor do tráfego do que a campeã existente, evitando o risco inerente a introduzir novas ideias (que podem não funcionar muito bem).