Convalidare decisioni

Calcolatore di significatività A/B

Ottieni entrambi i tassi, la differenza, il valore p quando il campione lo consente e una conclusione significativa o inconcludente.

Gratis · senza registrazione Tempo stimato: 3 minuti Il calcolo avviene su questo dispositivo. Non salviamo i valori inseriti.
Risposta diretta

La differenza tra A e B è statisticamente significativa?

Il calcolatore applica un test Z bilaterale a due proporzioni indipendenti, usando un tasso combinato sotto l’ipotesi che A e B siano uguali. Il valore p indica quanto una differenza almeno così estrema sarebbe incompatibile con tale ipotesi. Mostra una conclusione solo quando i conteggi attesi di successi e insuccessi in entrambi i gruppi sono almeno 5.

Esempio di test A/B

A converte 100 partecipanti su 1.000 e B ne converte 130: 10% contro 13%, +3 punti e +30% relativo. Il test produce z≈2,10 e p≈0,0355; con α=0,05, la differenza è significativa e favorisce B.

I tuoi dati

Compila i campi o inizia con un esempio.

Il 95% è la scelta più comune
Il calcolo avviene su questo dispositivo. Non salviamo i valori inseriti.

Il tuo risultato

Compila i campi per vedere qui il risultato e la sua interpretazione.

Laboratorio pratico

Comprendi in pochi minuti

  1. 01

    La significatività statistica non dice se il guadagno conta per il business.

  2. 02

    Un test a due code è più sicuro se la variante può anche peggiorare il risultato.

  3. 03

    Pochi dati possono nascondere un effetto reale o produrre una conclusione instabile.

Come otteniamo questo risultato

Calcoliamo z = (tasso B − tasso A) ÷ errore standard combinato e ricaviamo il valore p dalla distribuzione normale.

Cosa non mostra questo calcolo

Il test presume gruppi indipendenti e un esperimento stabile; confronti multipli richiedono più cautela.

Risposta diretta

Domande frequenti

Quale test statistico usa il calcolatore?

Usa un test Z bilaterale per due proporzioni indipendenti, con errore standard basato sulla proporzione combinata sotto l’ipotesi nulla di tassi uguali.

Perché ogni conteggio atteso deve essere almeno 5?

Il test dipende da un’approssimazione normale. Conteggi inferiori la rendono instabile, quindi lo strumento chiede più dati invece di indicare un vincitore.

Un valore p inferiore a 0,05 prova che B è migliore?

No. Indica incompatibilità con tassi uguali date le ipotesi. Vanno ancora valutati randomizzazione, qualità, dimensione dell’effetto e impatto sul business.

Posso fermarmi al primo risultato significativo?

Evita controlli ripetuti e arresti non pianificati, perché aumentano i falsi positivi. Definisci campione, durata, metrica e regola decisionale prima di iniziare.

Metodologia

Fonti, ipotesi e revisione

Le fonti sostengono definizioni e ipotesi. La formula applicata è mostrata in questa pagina ed è coperta da test automatizzati.

Strumenti e apprendimento

Se il risultato è inconcludente, continua fino al campione previsto invece di fermarti al primo segnale positivo.

Porta ciò che hai imparato in un vero sondaggio e segui ogni risposta in NPSLab.

Crea un sondaggio gratis