Quale test t scegliere?
Il test per campioni indipendenti confronta due gruppi di persone diverse, per esempio rispondenti esposti e non esposti a un annuncio. Il test per dati appaiati analizza le differenze tra due misure delle stesse persone (prima e dopo la prova di un prodotto); elimina le differenze tra individui e di solito ha più potenza. Il test a un campione confronta una media con un obiettivo, un benchmark o il punto medio della scala.
Il test di Student combina le varianze ed è esatto solo se le varianze delle popolazioni sono uguali; il test di Welch le stima separatamente e corregge i gradi di libertà. Con varianze uguali i due quasi coincidono; con varianze e numerosità diverse Student può sbagliare di molto. Per questo il calcolatore mette in evidenza Welch e mostra Student per confronto.
- Welch: t = (x̄₁ − x̄₂) ÷ √(s₁²/n₁ + s₂²/n₂), gradi di libertà di Welch–Satterthwaite.
- Appaiato: t = media delle differenze ÷ (DS delle differenze ÷ √n), gl = n − 1.
- d di Cohen = differenza ÷ DS combinata (appaiato: d_z); g di Hedges corregge la distorsione nei piccoli campioni; intervalli dalla distribuzione t non centrale.
Esempio: gradimento del marchio in un test pubblicitario
Dati sintetici: 42 rispondenti che hanno visto l’annuncio e 40 del gruppo di controllo valutano il marchio (0–100). Le medie sono 63,14 (DS 13,69) e 55,52 (DS 18,54).
Test t di Welch: t(71,6) = 2,11, p = 0,038; il gruppo esposto dà 7,62 punti in più, IC al 95% [0,42; 14,82]. Il test di Student è simile (t(80) = 2,12, p = 0,037), Brown–Forsythe p = 0,174. g di Hedges = 0,46, IC al 95% [0,03; 0,90]: l’intervallo ampio mostra che, con una quarantina di persone per gruppo, la dimensione dell’effetto è ancora stimata in modo impreciso.
Nell’esempio appaiato 30 rispondenti valutano il prodotto prima e dopo la prova; il punteggio cresce in media di 3,67 punti: t(29) = −3,10, p = 0,004, d_z = −0,57.
Quando usarlo e quando no
Il test t è pensato per variabili continue (o quasi), con osservazioni indipendenti e valori approssimativamente normali in ogni gruppo, oppure gruppi abbastanza grandi (circa 30 o più).
- Confrontare valutazioni, importi o tempi tra due gruppi indipendenti.
- Due misure delle stesse persone o disegni appaiati.
- Non per tre o più gruppi: usa l’ANOVA a una via invece di tanti test t.
- Non per esiti sì/no: confronta proporzioni (test z, chi-quadrato o McNemar).
- Non per dati ponderati o disegni campionari complessi: le formule presuppongono un campione casuale semplice.
Interpretare e riportare
p < 0,05 significa che, se le medie della popolazione fossero uguali, una differenza così sarebbe improbabile; non che sia grande o importante. Valuta l’ampiezza plausibile con l’intervallo di confidenza e descrivi l’effetto con il d di Cohen (circa 0,2 piccolo, 0,5 medio, 0,8 grande, convenzioni indicative di Cohen). Con meno di una ventina di persone per gruppo, meglio il g di Hedges.
Esempio di report: Welch t(71,6) = 2,11, p = 0,038, differenza = 7,62, IC al 95% [0,42; 14,82], g di Hedges = 0,46.