Skip to content
← voltar ao painel

Testar uma mensagem direito ou cinco mal?

2026-10-30 · 4 min de leitura

O painel e o formulário de lances estão em inglês. Esta página não está, e dizer isso aqui é mais honesto do que deixar você descobrir ao clicar.

Perguntar se convem testar uma mensagem ou varias parece questao de gosto, e nao e — e divisao. Um orcamento compra um numero fixo de cliques, dividi-lo divide os cliques, e abaixo de certa quantidade por variante nada do que voce observa se distingue do acaso. O numero de mensagens que um orcamento consegue separar de verdade costuma ser uma, as vezes duas, e quase nunca as cinco que o instinto de testar tudo busca. (Transparencia: publicado por BidSurvivor, que vende espacos que voce pode usar para testar mensagens, inclusive de graca.)

A divisao que decide

Pegue $300 e um canal a $1 por clique. Sao 300 cliques.

  • Uma mensagem: 300 cliques em uma linha so.
  • Tres mensagens: 100 cada.
  • Cinco mensagens: 60 cada.

Agora aplique a regra geral: uma taxa precisa de aproximadamente 15 eventos antes de valer a pena cita-la, e bem mais antes de valer compara-la com outra taxa. Com uma taxa de conversao de 3%, 60 cliques produzem 1.8 conversoes em media. Duas das suas cinco variantes vao mostrar zero e uma vai mostrar quatro, e nada disso tem a ver com o texto.

Com 300 cliques em uma linha so voce obtem 9 conversoes. Ainda nao sao muitas — mas sao suficientes para distinguir uma pagina convertendo a 1% de uma convertendo a 5%, que e a diferenca que realmente muda o que voce faz em seguida.

Entao o teste de cinco variantes nao te da cinco respostas. Te da cinco numeros, nenhum dos quais e uma resposta, e uma forte sensacao de que o de cima e o vencedor. Essa sensacao e a parte cara.

O que o teste de cinco variantes realmente mede

Vale nomear a falha com precisao: com 60 cliques por variante voce esta medindo qual variante deu sorte, e sorte nao se repete. Rode as mesmas cinco linhas na semana seguinte e outra vai liderar. Quem faz isso regularmente descobre que o "vencedor" nao se replica, e geralmente conclui que algo mudou no mercado.

Nada mudou no mercado. O primeiro resultado foi ruido e o segundo tambem.

E o mesmo mecanismo de ler uma taxa de conversao com cliques de menos, so que pior, porque comparar dois numeros ruidosos exige muito mais dados do que medir um — a calculadora de tamanho de amostra do Evan Miller vai precificar essa diferenca com seus proprios numeros em cerca de um minuto.

Quando testar varios faz sentido

Existe um caso real para testar varios ao mesmo tempo, e nao e o que as pessoas pensam.

Quando os efeitos sao enormes. Se uma linha consegue 40 cliques por mil impressoes e outra consegue 3, voce nao precisa de calculadora. Orcamentos pequenos deveriam buscar diferencas desse tamanho — outro publico, outra oferta, outro enquadramento — nao melhorias de 15% na redacao.

Quando voce esta testando mais acima no funil. A taxa de cliques tem aproximadamente trinta vezes o volume de eventos de uma taxa de conversao de 3%, entao alcanca uma amostra util trinta vezes mais rapido. Voce pode comparar honestamente quatro criativos por taxa de cliques com algumas centenas de impressoes cada. Nao pode compara-los por cadastros. Teste o que voce tem dados para medir, e rotule como o proxy que e.

Quando nao custa nada. Esse e o caso que vale construir, e e onde nosso proprio painel esta. BidSurvivor roda dois espacos de doze horas por dia; a primeira marca num espaco vazio paga $0, e cada visitante comeca com $100 de credito da casa, entao espacos disputados (a partir de um piso de $1.00) nao custam nada do bolso nos precos atuais. Espacos diferentes em dias diferentes podem levar linhas diferentes, e as aberturas de cartao e cliques de cada espaco sao publicados separadamente.

O limite honesto: os volumes sao pequenos, entao isso elimina em vez de coroar. Uma linha que nao consegue nada a frio, duas vezes, nao e uma linha que mereca orcamento — isso e um achado real e e de graca. Uma linha que vai um pouco melhor que outra nao e distinguivel com esses numeros, e o painel nao vai fingir o contrario.

A ordem que desperdiica menos

  1. Escreva mais linhas do que vai testar. Oito, de proposito. A oitava costuma ser a boa, porque a essa altura os enquadramentos obvios ja foram usados. Exemplos de pitch de uma linha tem os padroes.
  2. Elimine de graca. Testes de cinco segundos com desconhecidos, depois espacos gratuitos. Espere perder a maioria, e deixe os fracassos serem unanimes em vez de marginais.
  3. Chegue a duas. Nao uma — duas, para que o teste pago tenha algo com que comparar.
  4. Gaste todo o orcamento nessas duas, um canal, cliques suficientes para que cada lado supere a barra de amostra. Se o orcamento nao cobre duas, cobre uma, e o honesto e testar uma direito em vez de duas mal.
  5. Mude uma coisa so entre rodadas. Senao uma diferenca te diz que algo mudou sem dizer o que.

A versao desconfortavel

A maioria dos pequenos anunciantes aprenderia mais gastando todo o orcamento numa unica mensagem do que com qualquer split que provavelmente projetariam. E uma recomendacao insatisfatoria porque parece menos teste, e na verdade e mais: um resultado legivel ganha de cinco ilegiveis, e cinco ilegiveis e o que um orcamento dividido compra nessa escala.

Se o orcamento e tao pequeno que nem uma mensagem consegue superar a barra — e $200 normalmente nao conseguem — entao a resposta nao e dividi-lo mais. E parar de comprar cliques e ir buscar a resposta num lugar mais barato primeiro.