Todos os artigos

Teste A/B nas suas automações de DM

Por , fundador do Chat334 min de leitura
Um caminho luminoso se dividindo em dois balões de conversa, com um gráfico de barras acima

A maioria das automações de DM é escrita uma vez e nunca mais é mexida. Isso é um desperdício, porque pequenas mudanças de texto na primeira mensagem podem mudar quantas pessoas clicam, respondem ou compram. O teste A/B é como você descobre qual versão funciona em vez de adivinhar.

Como uma divisão funciona em uma automação

No Chat33, uma etapa Dividir tráfego A/B fica entre o gatilho e suas mensagens. A cada execução da automação, ela envia a pessoa pelo caminho A ou pelo caminho B ao acaso, conforme uma proporção que você define (a porcentagem do caminho A, de 1 a 99). Em 50, mais ou menos metade vai para cada lado.

Uma etapa Escolher um caminho aleatório faz o mesmo com dois a cinco caminhos iguais, o que é útil quando você quer comparar três versões ao mesmo tempo.

Uma divisão A/B em uma automação de DM: o gatilho leva a uma etapa de divisão, que envia cada pessoa à versão A ou à versão B; cada caminho marca o contato com uma tag e leva a uma URL com o próprio marcador da variante.

A divisão é por execução, não por pessoa para sempre. Se a mesma pessoa dispara a automação duas vezes, ela pode ver uma versão diferente na segunda vez. Para a maioria dos testes isso não importa, já que as pessoas raramente disparam a mesma automação duas vezes.

O que vale testar

Teste coisas que têm chance real de mudar o comportamento. Em ordem aproximada de impacto:

  1. Onde o link fica. Link na primeira linha ou depois de uma frase de contexto.
  2. O pedido. "Responda SIM para receber o checklist" ou "Quer o checklist também? Responda SIM."
  3. Tipo de mensagem (fora das automações de comentário): texto simples com um link ou um botão.
  4. Tamanho. Uma linha ou três.
  5. Personalização. "Oi {{name}}" ou sem saudação.
  6. A própria oferta. Um guia em PDF ou um vídeo curto.

Lembre-se das regras da plataforma ao criar as variantes. Depois de um comentário, os botões de verdade dependem da conexão e podem recorrer a texto simples, então uma variante com botão só é um teste justo em automações de DM, de resposta a story ou de acompanhamento. O guia de comentário para DM explica por quê.

Medindo o vencedor

Uma divisão só é útil se você consegue dizer qual lado ganhou. Decida a métrica antes de começar e garanta que cada caminho possa ser contado separadamente.

Cliques. Dê ao link de cada versão um marcador que o analytics do seu site consiga ler, por exemplo ?utm_content=a e ?utm_content=b na URL de destino. O analytics passa a mostrar as visitas por versão.

Respostas. Se o objetivo é uma resposta, peça a cada versão uma palavra diferente ("Responda SIM" ou "Responda ENVIAR"). Gatilhos de palavra-chave separados dizem exatamente quantas pessoas responderam a cada uma.

Tags. Adicione uma etapa Adicionar tag no início de cada caminho, como teste-gancho-a e teste-gancho-b. Você sempre sabe quem viu o quê e pode comparar esses grupos depois.

Use pelo menos um destes. Sem um marcador por caminho, você sabe que a automação rodou, mas não qual versão fez o trabalho.

Por quanto tempo rodar um teste

O suficiente para a diferença não ser sorte. Uma regra prática para contas pequenas:

  • Espere até que cada versão tenha pelo menos 100 pessoas passando por ela.
  • Se uma versão vence por uma margem pequena, continue; vantagens pequenas costumam sumir.
  • Só declare um vencedor quando a diferença for clara e estável ao longo de vários dias.

Para contas muito pequenas, testar diferenças grandes funciona melhor do que testar pequenas. Uma oferta diferente aparece em 50 pessoas; um emoji diferente, não.

Erros que arruínam testes

  • Mudar duas coisas ao mesmo tempo. Se a versão B tem um gancho novo e uma oferta nova, você não sabe qual importou.
  • Mudar a automação no meio do teste. Editar um caminho reinicia a comparação.
  • Fontes de tráfego desiguais. Um teste que começa em um reel viral e termina em uma publicação parada compara públicos, não mensagens. Rode as duas versões ao mesmo tempo, que é exatamente o que uma divisão faz.
  • Parar no primeiro dia bom. Os resultados iniciais oscilam muito.
  • Nenhuma métrica clara. "Parece melhor" não é um resultado.

Depois do teste

Faça da versão vencedora o único caminho e anote o que você aprendeu. As anotações importam mais do que um teste isolado: depois de algumas rodadas você saberá a que seu público responde, e as novas automações começam de um primeiro rascunho melhor.

Depois, teste a próxima coisa.

Automação de DMs do Instagram no Chat33

Divisões A/B, caminhos aleatórios, tags e gatilhos de palavra-chave em um só editor visual de automações.