Experimentos A/B

Tela: Gatilhos, seção Teste A/B · Endereço: /gatilhos · Menu: Agente → Gatilhos

Duas variantes da mesma abordagem, divididas por tráfego — o vencedor só aparece com amostra suficiente.

O teste A/B compara duas versões da mesma abordagem e mostra qual delas converte mais leads. Há um experimento por site por vez.

O que dá para testar

Testar a chamada é o experimento mais barato e o de retorno mais rápido: muda uma frase e mede a abertura. Testar o playbook muda a conversa inteira e exige mais tráfego para concluir alguma coisa.

Criar o experimento

1. Vá em Gatilhos e role até Teste A/B.
2. Clique em Criar experimento.
3. Preencha:

4. Clique em Salvar.

O padrão de split é 50 — metade do tráfego em cada variante. Comece por aí, a menos que queira limitar a exposição de uma ideia arriscada (por exemplo, 80/20).

Como o visitante é sorteado

A variante é decidida por visitante, não por visita: o mesmo visitante cai sempre na mesma variante, em qualquer página e em qualquer servidor. Quem já consentiu é reconhecido pelo identificador persistente; quem não consentiu é sorteado pelo identificador da sessão.

Duas consequências práticas:

• A experiência é coerente: ninguém vê a chamada A numa página e a B na seguinte.
• Um experimento em que nenhuma variante traz texto ou playbook não é aplicado — não faria sentido carimbar variantes sem tratamento.

Ler os resultados

O cartão do experimento mostra as duas variantes com o seu percentual e, abaixo, a tabela de métricas do período escolhido (7 dias, 30 dias ou 90 dias, no seletor ao lado do título):

Um gráfico de barras compara as duas taxas.

Quando há um vencedor

O Data Lead só aponta um Vencedor provisório quando as duas variantes têm pelo menos 30 aberturas no período e as taxas são diferentes. Antes disso, o rodapé é honesto:

Amostra pequena — ainda sem conclusão (mínimo de 30 aberturas por variante).

Com amostra suficiente, ele diz "Variante A está à frente na conversão." ou "Empate técnico até agora."

Trinta aberturas por variante é o piso para o número deixar de ser ruído — não é uma promessa de significância estatística. Para uma decisão que custa caro, espere um volume bem maior e uma diferença que se mantenha ao longo do tempo.

Encerrar ou editar

• Editar experimento abre o mesmo formulário. Mudar as variantes no meio do teste invalida a comparação: prefira encerrar e criar um novo.
• Encerrar experimento desliga o teste. O cartão passa a exibir o selo Encerrado e os números do período continuam visíveis para consulta.

Encerrado o teste, aplique o vencedor onde ele vale de verdade: o texto da chamada vencedora vai para a regra de exibição correspondente, em Gatilhos; o playbook vencedor é ativado em Agente → Playbooks.

Boas práticas

1. Uma variável por vez. Se A e B mudam o texto e o playbook, você não saberá o que funcionou.
2. Deixe rodar. Encerrar no terceiro dia porque "A está ganhando" é o erro mais comum.
3. Olhe leads, não aberturas. Uma chamada sensacionalista abre mais chats e entrega menos leads.
4. Escreva o nome como uma hipótese. Chamada direta x consultiva diz mais do que Teste 3.

Veja também

• Playbooks e slots
• Critérios de qualificação e limites
• Como funciona uma conversa
• Conversas

Precisa de ajuda?

Fale com o suporte da Data Stone pelo canal combinado no seu contrato. Para dúvidas sobre um resultado, informe o nome do experimento e o período consultado.