Che cos'è l'attendibilità?
L'attendibilità (reliability) è la coerenza di una misurazione: se lo stesso metodo, usato nelle stesse condizioni, dà gli stessi risultati. Un questionario attendibile dà a un partecipante un punteggio simile questa settimana e la prossima; uno schema di codifica attendibile porta due ricercatori a codificare la stessa intervista nello stesso modo.
È importante perché le misurazioni incoerenti aggiungono rumore casuale ai dati, che nasconde gli effetti reali e rende gli studi difficili da replicare.
Tipi di attendibilità
- Attendibilità test-retest: lo stesso test, somministrato alle stesse persone in due momenti diversi, dà risultati simili. Si riporta come correlazione tra i due punteggi.
- Attendibilità tra valutatori (inter-rater): osservatori o codificatori diversi danno valutazioni simili della stessa cosa. Spesso si riporta con il kappa di Cohen o con una correlazione intraclasse.
- Attendibilità delle forme parallele: due versioni di un test progettate per essere equivalenti danno risultati simili.
- Coerenza interna: gli item che dovrebbero misurare lo stesso costrutto concordano tra loro. Di solito si riporta con l'alfa di Cronbach, per cui valori di circa 0,70 o superiori sono comunemente considerati accettabili.
Attendibilità e validità
L'attendibilità chiede se una misura è coerente; la validità chiede se misura ciò che dichiara di misurare. Pensa a un bersaglio: colpi raggruppati strettamente lontano dal centro sono attendibili ma non validi; colpi raggruppati sul centro sono entrambe le cose. Una misura può essere attendibile senza essere valida, ma una misura non attendibile non può essere valida, perché i suoi punteggi sono in parte casuali.
Minacce all'attendibilità
- Domande vaghe che i partecipanti interpretano in modi diversi.
- Condizioni che cambiano: ora del giorno, ambiente o persona che somministra il test.
- Valutatori non formati o incoerenti.
- Affaticamento dei partecipanti, effetti di apprendimento o umore.
- Troppo pochi item in una scala.
Buone pratiche per l'attendibilità
- Definisci operativamente ogni variabile, così che tutti la misurino nello stesso modo.
- Fai un test pilota degli strumenti prima della raccolta dei dati principale.
- Forma i valutatori con una guida di codifica condivisa e verifica il loro accordo su un campione.
- Standardizza la procedura e riporta le statistiche di attendibilità nella sezione sui metodi.
L'attendibilità nella ricerca qualitativa
Nella ricerca qualitativa, la coerenza si discute di solito come dependability: una chiara traccia di audit di come i dati sono stati raccolti e analizzati, così che un altro ricercatore possa seguire gli stessi passaggi. La doppia codifica di un campione di trascrizioni e la triangolazione servono allo stesso scopo.
Domande frequenti sull'attendibilità
Una misura può essere attendibile ma non valida?
Sì. Una bilancia che segna sempre 2 kg in più dà risultati coerenti, quindi è attendibile, ma ogni lettura è sbagliata, quindi non è valida.
L'attendibilità basta da sola?
No. L'attendibilità è necessaria per la validità ma non la garantisce. Per essere utile, una misurazione deve essere sia coerente sia accurata.
Caso d'uso: IA per scrivere articoli scientifici