Calcolatrice per test A/B
A/B Test Calculator
Esegue un test z su due proporzioni e un test chi quadrato su due tassi di conversione con intervalli di confidenza di Wilson, e calcola la dimensione campionaria per un effetto e una potenza obiettivo.
Due tassi di conversione dentro e un verdetto su quanto la differenza sia reale: uno z-test su due proporzioni, un test chi quadrato e intervalli di confidenza di Wilson per ciascun tasso. Calcola anche la dimensione campionaria necessaria prima di cominciare, che è il conto che avrebbe salvato la maggior parte dei test interrotti troppo presto.
Che cosa vuoi fare
Osservato
A (controllo)
B (variante)
Esito del test
Significativo (p = 0,0074 < 0,05)
Tasso di conversione di A
20,00%
intervallo al 95% 17,64% – 22,59% (Wilson)
Tasso di conversione di B
25,00%
intervallo al 95% 22,42% – 27,78% (Wilson)
Differenza (B − A)
+5,00% pp
intervallo 1,35% – 8,65% pp
Aumento relativo
+25,0%
Test z per due proporzioni (bilaterale)
p̄ = 0,225 · SE = 0,01867 · z = 2,677 · p = 0,0074
Test chi quadro (1 gdl)
χ² = 7,168 · p = 0,0074
χ² con correzione di Yates = 6,885 · p = 0,0087
Come si usa
Inserire i due gruppi
Visitatori e conversioni per ciascuno. Conteggi grezzi, non tassi: sono i conteggi a portare l’incertezza.
Leggere l’intervallo prima del valore p
L’intervallo di Wilson dice dove sta plausibilmente ciascun tasso vero. Due intervalli che si sovrappongono ampiamente sono due tassi che non si riesce ancora a distinguere, qualunque cosa dica il valore p.
Pianificare il test successivo con il pannello della dimensione campionaria
Si danno il tasso di partenza e il più piccolo miglioramento che valga la pena rilevare, e il pannello dice quanti visitatori servono per gruppo. Andare avanti finché non sembra significativo non è un test.
Domande frequenti
Che cosa significa davvero p < 0.05?
Che, se una differenza davvero non ci fosse, uno scarto grande così o di più si presenterebbe meno di una volta su venti. Non è la probabilità che B sia migliore, e non dice nulla su quanto sia migliore.
Posso fermarmi appena diventa significativo?
No. Sbirciare ripetutamente e fermarsi al primo momento significativo gonfia il tasso di falsi positivi ben oltre il 5%: con controlli quotidiani nell’arco di due settimane si arriva vicini al 20%. Prima si fissa la dimensione campionaria, poi si va avanti fino a quella.
Perché la dimensione campionaria richiesta è così grande?
Perché l’effetto che si è chiesto di rilevare è piccolo. Dimezzare il miglioramento rilevabile quadruplica all’incirca il campione necessario. Se il numero è impossibile, la conclusione onesta è che questo test non può rispondere a quella domanda, non che il numero sia sbagliato.
Un’altra calcolatrice dà metà di questa dimensione campionaria
Sta facendo un test a una coda, oppure usa un α diverso, oppure omette la correzione di continuità. Questa è a due code con α = 0.05 e con la correzione di Fleiss, Levin e Paik, e stampa la formula così si vede quale ipotesi è diversa.
Può ricevere da
Statistica descrittiva
Descriptive Statistics
Calcola media, mediana, moda, varianza, deviazione standard, quartili e valori anomali da una serie di numeri incollata.
Convertitore di unità di misura
Unit Converter
Converte lunghezza, peso, area, volume, temperatura, velocità, pressione e unità di dati, comprese le unità tradizionali coreane.
Convertitore di base numerica
Number Base Converter
Converte fra binario, ottale, decimale, esadecimale e qualsiasi base fino a 36, con la vista bit per bit.
Calcolatrice delle percentuali
Percentage Calculator
Calcola in un unico posto la percentuale di un valore, la variazione percentuale, lo sconto, il ricarico e la percentuale inversa.
Dopo
Questi accettano ciò che produce questo strumento, così il risultato può passare direttamente.
Grafici veloci
Quick Chart
Disegna da una tabella un grafico a barre, a linee, ad area, a torta o a dispersione, con assi a numeri tondi e legenda, ed esporta in SVG o PNG.
Regressione e correlazione
Regression & Correlation
Adatta a dati appaiati un modello lineare, polinomiale, esponenziale, logaritmico o di potenza e riporta R², r di Pearson, ρ di Spearman e i residui.
Statistica descrittiva
Descriptive Statistics
Calcola media, mediana, moda, varianza, deviazione standard, quartili e valori anomali da una serie di numeri incollata.
Convertitore di valuta
Currency Converter
Converte fra una trentina di valute ai tassi di riferimento giornalieri della BCE, passando per l’euro, oppure a un tasso che indichi tu.
Differenza fra due date
Date Difference
Conta i giorni, le settimane, i mesi e gli anni fra due date, con la vista del conto alla rovescia e l’opzione dei soli giorni lavorativi.
Calcolatrice delle percentuali
Percentage Calculator
Calcola in un unico posto la percentuale di un valore, la variazione percentuale, lo sconto, il ricarico e la percentuale inversa.