Significância A/B Test (Qui-quadrado)
Calcula qui-quadrado para 2x2: variante A (visitas, conversões) vs B. χ²>3.84 = significante p<0.05.
χ² + p<0.05
—
Significância de teste A/B com qui-quadrado
Monte seus dados numa tabela 2×2 (variante A/B contra converteu/não converteu) e o qui-quadrado de Pearson responde a uma pergunta só: as taxas de conversão realmente diferem? A estatística é χ² = Σ (O − E)² / E com 1 grau de liberdade, e os valores esperados saem de E = (total linha × total coluna) / total geral. Você rejeita H₀ (sem diferença) quando p < 0,05, o que bate com χ² > 3,84. Pegue A = 80/1000 (8%) contra B = 110/1000 (11%): dá χ² ≈ 5,0 e p ≈ 0,025, então o ganho é real. Calcule o tamanho da amostra antes, pela fórmula de Casagrande-Pike, para o teste não ficar sem poder. E cuidado com a tentação de espiar resultados parciais — isso infla o erro tipo I. Fixe o n de antemão, ou parta para um A/B bayesiano com intervalos de credibilidade.
Aplicações
Otimização de conversão (CRO), ajustes de UI como cor de botão ou layout, testes de copy e subject line de email, experimentos de preço, criativos de mídia paga e decisões de produto guiadas por dados em plataformas como Optimizely e VWO (o Google Optimize foi encerrado em 2023).
Perguntas frequentes
Qui-quadrado ou teste z de duas proporções? Numa tabela 2×2 dá no mesmo, matematicamente: z² = χ². Use o que a sua stack já reporta.
E se os esperados forem menores que 5? Recorra ao teste exato de Fisher. A aproximação qui-quadrado deixa de ser confiável em amostras pequenas.
Posso parar o teste assim que dá significativo? Não faça isso. Ficar espiando os dados joga a taxa de falsos positivos bem acima de 5%. Se precisa olhar enquanto os dados chegam, use métodos sequenciais (mSPRT, fronteiras group-sequential) ou regras de decisão bayesianas.
Ferramentas Relacionadas
IC para a Variância e o Desvio-Padrão
Calcula o intervalo de confiança para a variância e o desvio-padrão de uma população normal, a partir de uma amostra. Enquanto a maioria das ferramentas estima a média, esta estima a dispersão — útil em controle de qualidade, onde a consistência importa tanto quanto o valor central. O cálculo usa a distribuição qui-quadrado, que é assimétrica, por isso o intervalo não fica centrado na variância amostral. Informe a amostra e o nível de confiança.
Teste de Variância de Uma Amostra (Qui-Quadrado)
Calcula o teste qui-quadrado para a variância de uma única amostra, que verifica se a variância populacional é igual a um valor de referência. É a contraparte, para a dispersão, do teste t de uma amostra para a média. Aparece muito em controle de qualidade: a variabilidade de um processo está dentro do limite especificado, ou aumentou? A estatística compara a variância amostral com a hipotética e segue uma distribuição qui-quadrado. Informe a amostra e a variância hipotética (σ₀²).
Calculadora de teste qui quadrado de frequência
Calcula a estatística qui quadrado de aderência a partir das frequências observadas e esperadas de cada categoria.
Teste de McNemar (Pareado)
Calcula o teste de McNemar, usado para comparar duas proporções pareadas — quando os mesmos indivíduos são medidos duas vezes (antes e depois, ou por dois métodos). Diferente do teste de duas proporções, que trata os grupos como independentes, o McNemar olha apenas para os casos que mudaram de classificação (as discordâncias b e c da tabela 2×2), ignorando os que ficaram iguais. A versão com correção de continuidade segue uma qui-quadrado com 1 grau de liberdade. Informe as duas contagens discordantes.
Qui-Quadrado (Goodness-of-Fit)
Calcule a estatística qui-quadrado (χ²) de aderência a partir das frequências observadas e esperadas. Teste se seus dados seguem a distribuição esperada.
Teste da Mediana de Mood
Calcula o teste da mediana de Mood, um teste não paramétrico que verifica se vários grupos têm a mesma mediana. A ideia é simples e robusta: calcula-se a mediana geral de todos os dados juntos e conta-se, em cada grupo, quantos valores ficam acima dela. Se os grupos tivessem a mesma mediana, essas contagens seriam proporcionais aos tamanhos; um desequilíbrio gera uma estatística qui-quadrado grande. É bem resistente a outliers, por trabalhar só com contagens. Informe os grupos separados por ponto e vírgula.
Os resultados desta ferramenta têm caráter apenas informativo e educativo e não constituem aconselhamento profissional, financeiro, médico, jurídico, tributário ou contábil. Confirme decisões importantes com um profissional qualificado e fontes oficiais.