Teste A/B com verba curta: como chegar a uma conclusão
Resposta rápida
Teste A/B com verba curta só conclui com uma hipótese por vez, volume mínimo de conversões por versão e janela de dias úteis parecidos. Rodar três variações com o tráfego de uma não ensina nada. No leilão de Curitiba o clique é caro: abaixo do piso, não teste — corrija o óbvio.
Teste A/B com verba curta é o experimento que a capital mais tenta e o que menos conclui. O clique em Curitiba é caro. A conta pequena não tem margem para três variações, lances mexidos no meio e um “vencedor” declarado na quarta-feira. Sem uma hipótese, sem volume de conversão — não de clique — e sem janela de dias úteis parecidos, o que parece ciência é gosto com gráfico.
O pilar de landing pages trata a página como engenharia. Este artigo é o protocolo do teste, não a anatomia dos blocos. O blog liga o experimento ao termo que come verba e à conversão que o navegador já não registra. A unidade no Água Verde é nova; o método não.
Antes de testar, a continuidade entre criativo e H1 precisa estar cumprida. Testar slogan contra slogan enquanto o H1 trai o criativo é medir o bounce, não a oferta.
O piso que a interface não mostra
A plataforma aceita campanha com poucos reais por dia. Aceitar não é o mesmo que aprender. O algoritmo e o teste de página precisam de conversões suficientes em duas ou três semanas. Conversão é formulário ou WhatsApp com origem, não clique. Se a quinzena não compra dezenas de eventos por versão, não há A/B. Há preferência.
Nesse piso, o trabalho é outro: corrigir o óbvio. H1 que não repete a oferta. Botão abaixo da dobra no celular. Formulário com campo que a equipe não usa. Evento que não dispara. Relatório de termos que queima clique inflando visita inútil. Geografia aberta no estado inteiro. Tudo isso move o número mais do que a cor do botão.
| Hipótese | Cabe no orçamento pequeno | Por quê |
|---|---|---|
| H1 repetindo o prazo do anúncio | Sim | Uma variável, efeito grande |
| Um campo a menos no formulário | Sim | Menos fricção, fácil de ler |
| Prova acima versus abaixo da dobra | Às vezes | Precisa de volume um pouco maior |
| Três layouts ao mesmo tempo | Não | Tráfego insuficiente por versão |
| Cor do botão isolada | Quase nunca | Efeito pequeno demais para o CPC da capital |
Uma hipótese, o resto congelado
Escreva a frase antes de publicar a variante: “Se repetirmos o prazo de 48 horas no H1, a taxa de contato sobe.” O restante da página, do anúncio e do lance permanece igual. Qualquer segunda mudança no meio do teste contamina o resultado. Agrupar alteração é disciplina; “otimizar” toda segunda é ansiedade que devolve a campanha ao dia um.
Duas URLs ou um parâmetro que troca só o bloco testado. Tráfego dividido, não “a versão nova para o público de qualidade”. O algoritmo de “qualidade” enviesa a amostra. Na Grande Curitiba, inverno e chuva já enviesam sozinhos — não acrescente um terceiro viés.
Empate é dado, não fracasso
A variante não ganhar é informação. Aquela alavanca, naquele volume, não paga o custo do teste. Arquive e passe para a próxima hipótese de maior impacto. Esticar o experimento até aparecer uma diferença de 0,3 ponto é gastar o aprendizado da quinzena seguinte.
Janela, clima e dia útil
Não compare segunda de temporal na Linha Verde com sexta de sol no Batel e chame isso de ciência. Varejo, serviço com deslocamento e delivery mudam de ritmo quando chove. Clínica e escritório mudam menos, mas o tráfego pago da conta inteira pode misturar os dois.
Defina a janela no calendário: duas semanas de dias úteis, ou o número de conversões-alvo, o que vier depois. Encerrar porque “já deu para ver” é o viés de quem quer ir embora. Encerrar porque o orçamento acabou no meio da primeira semana é o viés de quem não calculou o piso.
Medição: se o evento mente, o teste mente
Pixel só no navegador perde iPhone, bloqueador e consentimento. O vencedor do A/B pode ser a versão que mais dispara o evento furado, não a que mais gera reunião. Envio server-side da conversão é pré-requisito, não fase dois. Sem debug verde no formulário e no WhatsApp, não rode experimento de página.
Três variantes com o tráfego de uma
Ferramenta de A/B deixa criar C, D e E. A verba da capital não deixa. Cada versão adicional divide a amostra e alonga o calendário. Com conta pequena, A contra B. O resto espera. Curiosidade de layout não é hipótese.
Depois do resultado
Se A ganha com folga, A vira controle. A próxima hipótese parte dela. Se empatam, o controle permanece e você não “escolhe a mais bonita”. Se B ganha por um fio com volume no limite, trate como empate. O CPC da capital não perdoa declaração precoce.
Documente em uma linha: hipótese, período, conversões por versão, decisão. Sem essa linha, daqui a dois meses alguém testa o H1 de novo.
Quando a página ainda não existe e a campanha já tem criativo, o trabalho não é testar: é publicar a landing com uma oferta. O pilar e o blog continuam o mapa.
Como calcular o piso com os números da própria conta
Pegue o CPC médio das últimas duas semanas, a taxa de contato atual e a verba da quinzena. Divida a verba pelo CPC: são as visitas. Aplique a taxa: são os contatos. Divida por dois se houver A e B. Se cada versão fica com uma dúzia de eventos, o teste não existe. A aritmética cabe num recado. A recusa de fazer a conta é o que alimenta o teatro de painel.
Taxa de 2% com CPC de capital e verba de poucos mil reais na quinzena quase nunca compra dezenas de conversões por versão. Nesse regime, a alavanca é a correção óbvia, não o experimento. H1, botão, evento, termo negativo, geografia. Só depois, quando a taxa ou a verba crescerem, o A/B passa a pagar o próprio custo.
Não use calculadora de significância com 11 contra 9 conversões. O intervalo de confiança atravessa o zero e a decisão “B ganhou” é ruído. Empate declarado é mais honesto e mais barato.
O que a equipe interna costuma testar errado
Cor do botão, porque é fácil de trocar. Ordem de depoimentos inventados, porque alguém viu um vídeo. Headline poética contra headline poética, nenhuma das duas repetindo o anúncio. Três ferramentas de teste ligadas ao mesmo tempo, cada uma injetando script e piorando o INP da primeira tela.
O teste certo, com verba curta, é o de maior efeito esperado: continuidade da promessa, um campo a menos, prova verificável acima da dobra. Tudo o mais espera. Curiosidade de layout não é hipótese. Hipótese tem a forma “se X, então o contato sobe porque Y”. Sem o porque, é gosto.
No CIC e no Água Verde o decisor formal pede essa frase. Se o fornecedor de mídia não consegue escrevê-la, não há teste. Há alteração. Alteração sem recorte reinicia aprendizado e queima a quinzena.
Registro de uma linha e sucessão
Hipótese, datas, conversões A, conversões B, decisão. Sem isso, daqui a um trimestre o mesmo H1 volta a ser “ideia nova”. A conta da capital não tem orçamento para redescobrir o óbvio. O registro cabe no mesmo lugar em que mora a lista negativa — um documento operacional, não um slide.
Se a pessoa que opera a conta sai, o registro é o que impede o sucessor de testar de novo a cor do botão. Processo, não herói. O comprador curitibano já cobra processo no site; deve cobrar na mídia também.
Quando o piso não fecha, escreva isso na proposta: “com esta verba não há A/B de página; há correção e higiene de termo”. A frase perde projeto fácil e ganha cliente que permanece. Na densidade de agência da capital, essa honestidade é o que diferencia método de pacote.
Calcule agora, com a verba da quinzena e o CPC que você já paga, quantas conversões cada versão receberia. Se o número for pequeno demais para olhar sem corar, não teste. Corrija o H1, o botão e o evento. O experimento começa quando a conta fecha. Antes disso, é teatro de painel.
