Data Analytics

AB Testing e statistica applicata

Ipotesi, dimensione del campione, significatività statistica, p-value, test t di Student, chi-quadrato, interpretazione

20 domande da colloquio·
Mid-Level
1

Cos'è un'ipotesi nulla (H0) in un AB test?

Risposta

L'ipotesi nulla (H0) afferma che non c'è differenza significativa tra le due varianti testate. Nell'AB testing, H0 sostiene che qualsiasi differenza osservata tra il gruppo di controllo (A) e il gruppo di trattamento (B) è dovuta al caso e non all'effetto del cambiamento testato. Lo scopo del test statistico è determinare se i dati consentono di rifiutare H0.

2

Cos'è un'ipotesi alternativa (H1) in un AB test?

Risposta

L'ipotesi alternativa (H1) è l'opposto dell'ipotesi nulla e afferma che esiste una differenza reale tra le varianti. Nell'AB testing, H1 afferma che il cambiamento testato ha un effetto misurabile sulla metrica osservata. Se il test statistico consente di rifiutare H0 con un livello di confidenza sufficiente, accettiamo H1 come vera.

3

Cos'è il p-value in un AB test?

Risposta

Il p-value rappresenta la probabilità di osservare i risultati ottenuti (o più estremi) se l'ipotesi nulla fosse vera. Più basso è il p-value, più improbabile è che i risultati siano dovuti al caso. Per convenzione, se il p-value è inferiore alla soglia di significatività (spesso 0,05), rifiutiamo H0 e consideriamo il risultato statisticamente significativo.

4

Cos'è la significatività statistica in un AB test?

5

Cos'è un errore di Tipo I (falso positivo) in un AB test?

+17 domande da colloquio

Padroneggia Data Analytics per il tuo prossimo colloquio

Accedi a tutte le domande, flashcards, test tecnici, esercizi di code review e simulatori di colloquio.

Inizia gratis