Teste A/B

Um teste A/B fica ativo quando uma URL padrão ou um link UTM tem pelo menos dois destinos nomeados. Cada destino tem um peso (número inteiro positivo). O tráfego é distribuído na proporção desses pesos. Você pode definir até oito variações.

Como configurar

1. Crie ou edite uma URL padrão ou um link com UTM.
2. Abra Destinos do teste A/B.
3. Adicione pelo menos duas linhas: um nome curto (por exemplo control e hero-b), uma URL https e um peso.
4. Salve. A primeira URL continua sendo o destino principal exibido nas listas; os cliques continuam indo para a variação sorteada.

Como uma variação é escolhida

A cada visita, o Letlink faz um sorteio de acordo com os pesos. O nome escolhido é armazenado no clique como variation (campo de webhook visitor_variation). Análises, exportação em CSV, a API e todas as integrações de notificação o exibem.

Como leio os resultados?

O painel Teste A/B na página de estatísticas do link mostra a *participação real de tráfego de cada destino em comparação com a participação alocada*. Essa diferença — chamada de desvio — é o número que vale a pena ler. As contagens brutas de cliques em uma divisão ponderada basicamente repetem os pesos que você definiu: um destino com 50% do tráfego vai receber cerca de 50% dos cliques, seja ele bom ou não. É o desvio que mostra que algo mudou.

• Alocado — a participação implícita nos pesos que você definiu.
• Recebido — a parcela de cliques que de fato chegou a esse destino.
• Desvio — a diferença entre os dois, em pontos percentuais. Alguns pontos para mais ou para menos são aleatoriedade normal.
• Visitantes — dispositivos únicos que chegaram a esse destino, para você distinguir um alcance amplo de uma única pessoa atualizando a página várias vezes.

Abaixo de aproximadamente 100 cliques no total, o painel avisa e mostra o progresso até essa marca em vez de apontar um vencedor. Duas variações separadas por um punhado de cliques em uma amostra pequena não são distinguíveis, e um painel que sugere o contrário é pior do que um que admite isso.

Forçar uma variação

Adicione ?vr=NAME à URL curta para pular o sorteio e enviar esse visitante ao destino com esse nome. Útil para QA e para mandar um criativo específico a um colega. Um nome desconhecido é ignorado e a escolha ponderada acontece normalmente — e como a variação registrada no clique é sempre o destino realmente exibido, um valor ?vr= perdido nunca contamina seus detalhamentos.

https://letl.ink/summer?vr=hero-b