Calculadora de Teste A/B
Calcule a significância estatística dos seus testes A/B instantaneamente
Controle (A)
Variante (B)
Resultados
Digite visitantes e conversões para ver os resultados
Como funciona
Esta calculadora usa um teste z de duas proporções para determinar se a diferença entre duas taxas de conversão é estatisticamente significante. Um p-valor abaixo do limiar de significância escolhido (α) significa que o resultado provavelmente não é fruto do acaso. Tente coletar pelo menos 100 visitantes por grupo para resultados confiáveis.
Perguntas frequentes
Qual p-valor significa estatisticamente significativo?
Com 95% de confiança (padrão), p < 0,05 é significativo. Isso significa menos de 5% de probabilidade de a diferença observada ser por acaso. Use 99% de confiança (p < 0,01) para decisões de alto impacto.
Quantos visitantes preciso para um teste A/B?
Depende da taxa de conversão base, efeito mínimo detectável e poder desejado. Como guia: taxa base de 5% com melhoria relativa de 10% requer ~7.000 visitantes por grupo com 95% de confiança.
Qual a diferença entre uplift relativo e mudança absoluta?
Uplift relativo é a melhoria percentual sobre a taxa do controle. Se controle converte em 5% e variante em 5,5%, a mudança absoluta é +0,5 pp e uplift relativo é +10%. O uplift relativo é mais relevante para o impacto de negócio.
O que significa o intervalo de confiança?
O intervalo de confiança mostra o intervalo de valores plausíveis para a diferença real. Se não incluir 0, o resultado é estatisticamente significativo. Um intervalo amplo significa que você precisa de mais dados.