Testes A/B: o que 173 mil experimentos ensinam a founders

Todo founder já ouviu que deveria “testar tudo”. Trocar a cor do botão, mudar o título, encurtar o formulário e deixar os dados decidirem. O conselho é bom em teoria. Na prática, a maior parte dos testes não leva a lugar nenhum, e ninguém conta isso no post sobre o teste que deu certo.

A Optimizely publicou em setembro de 2026 um relatório com 173 mil experimentos rodados em mais de 1.200 empresas, entre 2018 e 2026. Os dados não são sobre landing pages de startup especificamente, mas as lições valem para qualquer página que precisa converter.

Como a Optimizely contou os 173 mil testes

Antes dos números, vale entender o critério, porque ele já é uma lição. A Optimizely só contou como “experimento de verdade” o teste com:

• uma versão de controle e pelo menos uma alternativa;
• mais de 1.000 visitantes por variação;
• configuração correta em produção, sem sinais de erro.

E só contou como vitória o teste em que a métrica principal se moveu na direção certa com pelo menos 90% de significância estatística. Ou seja: um teste com 200 visitantes, decidido no olho, não entraria na conta.

Planejamento vence volume

A conclusão central do relatório cabe numa frase: “Setup quality is the single biggest predictor of win rate.” A qualidade do planejamento é o maior preditor de vitória.

Os números: testes bem montados vencem 58% das vezes. Os mal montados, 35%. Rodar mais testes ruins não compensa a diferença.

Para uma landing page, planejamento bem feito significa ter uma hipótese clara antes de mexer em qualquer coisa. Não “vamos testar um título novo”, mas “o visitante não entende o que o produto faz nos primeiros segundos, e um título mais concreto vai aumentar os cadastros”.

Que tipo de mudança ganha com mais frequência

O relatório agrupa os testes pelo tipo de hipótese. Três números chamam atenção:

1. Encontrabilidade vence 60% das vezes. São mudanças que ajudam o visitante a achar o que procura.
2. Urgência vence 56% das vezes. Mudanças que dão ao visitante um motivo real para agir agora.
3. Deixar claro o valor vence 41% das vezes. É o tipo mais comum, mais de um quarto de todos os testes.

O detalhe: os dois tipos que mais vencem, encontrabilidade e urgência, somam só 14% dos testes. A maioria das empresas está testando o que menos ganha.

As métricas mais valiosas são as menos testadas

Outro achado útil para founders. Mais de 90% dos experimentos miram cinco métricas comuns: cliques no CTA, visualizações de página, checkout, cadastro e adição ao carrinho. 43% dos testes miram o fundo do funil.

Enquanto isso, testes com métricas de rolagem e engajamento são só 1,4% do total, mas têm impacto médio por teste de 2,1%. A Optimizely mede esse impacto com uma conta simples: taxa de vitória vezes o ganho médio das vitórias.

Na prática: todo mundo disputa o mesmo botão. Pouca gente olha se o visitante está lendo a página até chegar nele.

Testes mais complexos rendem mais

Cerca de 3 em cada 4 experimentos são testes A/B simples, com uma alternativa. Os testes com várias variações entregam até 1,7 vez mais impacto. E públicos segmentados mostram impacto 17,4% maior.

O relatório também mostra que empresas usando a IA da própria Optimizely tiveram mais velocidade e impacto. Mas a própria Optimizely avisa: os resultados são observacionais, a adoção foi voluntária e as comparações não provam causa. Vale guardar a ressalva.

O que isso significa para a landing page de um founder

Pouca landing page de startup tem tráfego para rodar testes com mais de 1.000 visitantes por variação toda semana. Isso não torna o relatório inútil. Torna as lições gerais mais valiosas do que os seus próprios testes no início.

Um roteiro prático, com base nos dados:

• Comece pela hipótese, não pela ferramenta. Escreva o que você acha que está travando a conversão e por quê.
• Facilite encontrar. O visitante acha em segundos o que o produto faz, quanto custa e como começar?
• Dê um motivo real para agir agora. Urgência inventada queima confiança. Urgência real, como vagas limitadas ou uma condição com prazo, funciona.
• Meça antes do botão. Acompanhe até onde as pessoas rolam e onde abandonam.
• Só declare vencedor com amostra. Sem volume suficiente, você está tomando decisão com base em sorte.

Como fazemos no Studio

[Confirmar: quando entregamos um site, a página nasce com hipóteses claras sobre o que precisa ficar evidente para o visitante: o que o produto faz, para quem e qual é o próximo passo.] [Como o Studio define e mede as hipóteses de conversão de uma landing page, e quais ferramentas de teste usa: Leonel completar.]

Usamos Claude Code e Figma no design e no build, o que deixa mais barato montar variações quando há tráfego para testar. E todo sistema sai com um agente de IA que roda todo dia, aponta falhas, sugere melhorias e confere se os dados fazem sentido.

Testar muito não garante nada. Testar com hipótese boa vence quase seis em cada dez vezes. Se você quer uma landing page pensada desde o início para converter, e não para ser remendada depois, esse é o ponto de partida dos sites do Studio.