Calculadora de teste AB
Veja se a diferença entre duas versões é significativa, com valor-p, intervalo de confiança e amostra mínima, de graça
Use a ferramenta abaixo
GratuitaTeste A
Teste B
Resultados do seu teste A/B
O Teste B converteu 100% mais do que o Teste A. Recomendo que você use as metodologias do Teste B para ter mais conversões no seu site.
A calculadora de teste A/B diz se a diferença entre duas versões de uma página é real ou fruto do acaso. Você informa os visitantes e as conversões de cada variante, e a ferramenta calcula a significância estatística por teste z, o intervalo de confiança e a amostra mínima, com um veredito de significativo ou ainda inconclusivo, de graça e no navegador.
Resumo com IA
- A calculadora de teste A/B calcula a significância por teste z, o valor-p, o intervalo de confiança e a amostra mínima;
- Significância é a chance de a diferença não ter surgido por acaso; adota-se 95% de confiança, com valor-p abaixo de 0,05;
- Parar o teste assim que uma versão fica na frente é o erro mais comum e infla a chance de um falso vencedor;
- A decisão só é confiável com a amostra mínima atingida, significância acima de 95% e semanas cheias de teste;
- O cálculo roda no navegador e nada do que você digita é enviado ou salvo.
- Informe os visitantes e as conversões da variante A;
- Informe os visitantes e as conversões da variante B;
- Leia a taxa de conversão de cada uma e o veredito de significância;
- Confira a amostra mínima e o aviso de amostra insuficiente antes de encerrar;
- Rode o teste até a amostra mínima e ao menos uma ou duas semanas cheias antes de decidir.
A calculadora de teste A/B compara, de graça, as taxas de conversão de duas versões de uma página e diz qual converteu mais e em quantos por cento. Você informa os visitantes e as conversões de cada variante, e a ferramenta mostra a taxa de cada uma e a diferença entre elas, no seu navegador e na hora.
Nas análises de conversão, o erro que mais vejo é declarar vencedora a versão que estava na frente depois de poucos dias. Sem significância e sem amostra mínima, essa diferença some na semana seguinte, e a decisão foi tomada no ruído.
O que a calculadora de teste A/B responde?
A calculadora de teste A/B responde qual das duas versões converteu mais e em quantos por cento. Ela calcula a taxa de conversão de cada variante, a partir dos visitantes e das conversões que você informa, e aponta a que teve o melhor desempenho. O que ela não faz sozinha é decidir se essa diferença é confiável, o que depende de quantos visitantes o teste teve e de quanto tempo rodou.
Para o dono de um negócio, isso muda uma decisão prática. Trocar a página inteira por causa de uma diferença que não é significativa pode piorar a geração de contato, enquanto esperar a significância protege de decidir no ruído e de refazer o teste depois.
Como usar a calculadora de teste A/B?
A calculadora de teste A/B compara duas versões de uma página com quatro números, e o resultado sai na hora. Você informa os visitantes e as conversões da variante A e da variante B e recebe a taxa de conversão de cada uma, qual converteu mais e a diferença em porcentagem. A confiança nessa diferença depende do volume de visitantes e do tempo de teste, que você confere antes de decidir.
- Informe os visitantes e as conversões da variante A;
- Informe os visitantes e as conversões da variante B;
- Leia a taxa de conversão de cada uma e qual converteu mais;
- Veja em quantos por cento a vencedora superou a outra;
- Antes de decidir, confira se o teste teve visitantes e tempo suficientes.
Tudo que a calculadora de teste A/B entrega
A calculadora entrega a comparação direta entre as duas versões. Cada recurso serve a uma decisão sobre qual versão manter.
- Taxa de conversão de cada variante, calculada a partir dos visitantes e das conversões;
- Comparação direta que aponta qual das duas versões converteu mais;
- Diferença em porcentagem entre a versão vencedora e a outra;
- Aviso quando as duas taxas são iguais, sem diferença a destacar;
- Cálculo no navegador, sem enviar os seus números para servidor.
Como a calculadora compara as duas versões por dentro
A calculadora roda no seu navegador. Para cada variante, ela divide as conversões pelos visitantes e chega à taxa de conversão daquela versão. Depois compara as duas taxas, aponta a maior como vencedora e calcula em quantos por cento ela superou a outra. Quando as duas dão o mesmo resultado, avisa que não há diferença.
É uma comparação de desempenho, não um teste de significância. Ela não calcula valor-p, intervalo de confiança nem amostra mínima, então esses cuidados ficam com você antes de decidir. A tabela separa o que a ferramenta entrega do que você confere à parte.
| A calculadora faz | Você confere à parte |
|---|---|
| Taxa de conversão de cada versão | Se o teste teve visitantes suficientes |
| Qual versão converteu mais | Se rodou tempo suficiente, ao menos uma ou duas semanas |
| A diferença em porcentagem | Se a diferença se mantém e não é fruto do acaso |
Por isso a diferença que a calculadora mostra é o ponto de partida, não a decisão pronta. Uma vantagem grande com poucos visitantes pede mais teste, enquanto uma vantagem pequena com muitos visitantes já tende a ser confiável.
Posso parar o teste assim que uma versão fica na frente?
Parar assim que uma versão fica na frente é o erro mais comum em teste A/B. Nos primeiros dias, a liderança troca de lado com facilidade, e olhar o resultado toda hora para encerrar no melhor momento infla a chance de um falso vencedor. O certo é definir a amostra mínima antes de começar e só decidir quando ela é atingida e o resultado é significativo.
A calculadora mostra a diferença entre as versões, mas quem protege dessa armadilha é você, ao definir a amostra e o tempo do teste antes de começar. O teste em si melhora a página que gera contato, e uma página feita para converter desde a estrutura é o que a criação de sites profissionais entrega, com espaço para testar o que de fato traz mais pedido de orçamento.
A versão que está na frente no terceiro dia raramente é a vencedora do mês. Sem amostra mínima e significância, um teste A/B decide no ruído, e o ganho aparente some quando o tráfego normaliza.
Perguntas frequentes sobre a calculadora de teste A/B
Estas são as dúvidas mais comuns de quem vai avaliar o resultado de um teste entre duas versões de página.
A calculadora de teste A/B entrega a taxa de conversão de cada variante, aponta qual das duas converteu mais e mostra em quantos por cento a vencedora superou a outra. Quando as duas taxas são iguais, ela avisa que não há diferença a destacar. O cálculo roda no navegador, sem enviar os seus números a servidor.
Significância estatística é a medida de quanto a diferença entre as versões é improvável de ter surgido por acaso. Costuma-se adotar 95% de confiança, o que corresponde a um valor-p abaixo de 0,05. Acima desse limite, a diferença pode ser só sorte da amostra, e não uma vantagem real de uma versão sobre a outra.
Depende da taxa de conversão atual e do tamanho da diferença que você quer detectar. Diferenças pequenas exigem amostras grandes, e páginas com conversão baixa também. Essa calculadora compara o resultado que você já tem, não estima a amostra mínima, então defina esse número antes de começar, sabendo que ele costuma ser maior do que a intuição sugere.
Rode até atingir a amostra mínima e, como referência, ao menos uma ou duas semanas cheias, para cobrir a variação entre dias úteis e fim de semana. Encerrar em poucos dias captura só um pedaço do comportamento e distorce o resultado. O prazo real é o maior entre a amostra mínima e o ciclo semanal do seu público.
Não. O cálculo roda no seu navegador e nada do que você digita é enviado ou armazenado. Os resultados aparecem na hora, na sua tela, e somem quando você fecha a página, com total controle da informação do seu lado e sem cadastro para usar a ferramenta.
O que decide quando você pode confiar no resultado do teste
O que decide é a soma de três coisas, a amostra mínima atingida, a significância acima de 95% e o teste rodado por semanas cheias, e não a versão que estava na frente ontem. Um dono de clínica, por exemplo, testa dois textos do botão de agendamento, vê pela calculadora que a diferença entre eles é pequena e que o teste teve poucos visitantes, e mantém o teste rodando mais uma semana em vez de trocar a página com base em uma liderança que pode ser só do acaso.
Seus dados estão seguros
O processamento da ferramenta acontece diretamente no navegador sempre que possível. Nenhum dado sensível precisa ser enviado para solicitar um orçamento ou acessar o conteúdo da página.