Cos'è la psicometria?
La disciplina che stabilisce se una misurazione psicologica è valida — e il motivo per cui due test che pongono domande simili possono differire enormemente nel valore dei loro risultati.
La psicometria è il ramo della psicologia che si occupa della misurazione in sé. Non di cosa significhi l'estroversione, ma se un dato insieme di domande la misuri davvero, quant'è l'errore nel numero risultante e cosa quel numero è legittimato a prevedere.
La distinzione conta più di quanto sembri. Chiunque può scrivere venti domande su quanto una persona sia socievole e sommare le risposte. La psicometria è il lavoro che viene dopo: dimostrare che le venti domande sono coerenti tra loro, che misurano una cosa sola e non tre, che la stessa persona ottiene un punteggio simile il mese successivo, che il punteggio è correlato al comportamento reale di quella persona, e che l'intero apparato funziona allo stesso modo per un ventenne a Lisbona come per un cinquantacinquenne a Monaco.
Perché era necessaria una disciplina
La misurazione fisica ha un vantaggio che la psicologia non possiede: si può accostare un righello alla cosa che si sta misurando. Non esiste un righello per la coscienziosità. Il tratto non è direttamente osservabile — viene inferito dal comportamento, e le risposte ai questionari sono un ulteriore livello di inferenza su questa base.
È quello che gli psicometristi chiamano variabile latente: qualcosa di abbastanza reale da avere conseguenze, ma raggiungibile solo attraverso indicatori indiretti. L'intero apparato metodologico esiste proprio a causa di questa indirizzabilità. Ogni tecnica che incontrerete — analisi fattoriale, coefficienti di affidabilità, teoria della risposta all'item, campioni normativi — è un tentativo di dire qualcosa di difendibile su una quantità che nessuno può osservare.
Le tre domande
Togliendo il vocabolario tecnico, la psicometria pone tre domande a qualsiasi strumento.
È coerente? Se la misurazione è per lo più rumore, nient'altro ha importanza. La coerenza viene verificata tra gli item (le domande concordano tra loro?), nel tempo (la stessa persona ottiene lo stesso punteggio il mese successivo?) e tra valutatori, dove rilevante. Questa è l'affidabilità.
Sta misurando ciò che dichiara? Un questionario può essere perfettamente coerente e misurare comunque la cosa sbagliata. Una scala che pretende di misurare il potenziale di leadership ma correla 0,8 con la semplice autostima sta misurando l'autostima. Questa è la validità, e non è una proprietà che uno strumento o possiede o non possiede — è un argomento costruito a partire da prove accumulate.
Rispetto a chi? Un punteggio grezzo di 34 non significa nulla di per sé. Diventa interpretabile solo rispetto a un gruppo di riferimento: 34 è alto rispetto a quale popolazione, misurata quando e dove? Questo è il lavoro delle norme, ed è il passaggio che la maggior parte dei test per il grande pubblico salta completamente.
Come si presenta una buona pratica
Uno strumento ben costruito ha una documentazione tracciabile. Qualcuno ha pubblicato come sono stati scritti gli item e quali sono stati scartati. Qualcuno ha riportato i coefficienti di affidabilità, in campioni nominati, con le dimensioni del campione. Qualcuno ha verificato se la struttura fattoriale reggeva in un secondo campione indipendente rispetto a quello usato per costruirlo. Qualcuno ha controllato se gli item si comportano allo stesso modo tra lingue e fasce d'età. Qualcun altro — idealmente senza alcun interesse nello strumento — ha tentato di replicare i risultati e ha riportato quanto accaduto.
Nulla di tutto ciò rende un test infallibile. Rende conoscibili i suoi limiti, che è una proprietà diversa e più utile. Uno strumento il cui errore di misurazione è documentato indica quanto fidarsi di una piccola differenza tra due punteggi. Uno strumento privo di una stima dell'errore pubblicata non è più accurato; è semplicemente meno trasparente sulla propria imprecisione.
Dove lascia il lettore
La psicometria non vi dirà che un test è veritiero. Vi dirà fin dove un punteggio può essere spinto prima di smettere di significare qualcosa — quali domande può rispondere, su quali popolazioni è stato calibrato e quanto grande deve essere una differenza prima che valga la pena considerarla.
È una promessa più limitata di quella che fanno la maggior parte dei prodotti sulla personalità. È anche l'unica promessa che sopravvive al confronto con le prove.
Mettilo alla prova
Leggere di misura è una cosa. Vedere il proprio punteggio con la fonte, il campione normativo e i limiti dichiarati è un'altra. Gratis, senza registrazione.
Continua a leggere
- Cos'è l'attendibilità nei test psicologici?L'attendibilità è la coerenza della misurazione, non la sua correttezza. Un test può essere altamente attendibile e misurare comunque la cosa sbagliata — ecco perché è la prima domanda da porsi, ma mai l'ultima.
- Cos'è la validità nei test psicologici?La validità non è una proprietà che un test possiede. È un argomento riguardo al fatto che una particolare interpretazione di un particolare punteggio, per uno scopo particolare, sia difendibile — e deve essere ricostruita per ogni nuovo utilizzo.
- Cos'è la validità di costrutto?La domanda più difficile nella misurazione: se ciò che si sta misurando esiste così come lo si è definito, e se lo strumento lo raggiunge anziché qualcosa di adiacente.
- Validità convergente e discriminanteDue requisiti speculari: una misura deve concordare con ciò con cui dovrebbe concordare, e deve restare distinta da ciò da cui afferma di differire. La maggior parte degli strumenti deboli fallisce il secondo.
- Cos'è l'alpha di Cronbach — e cosa non èLa statistica più riportata nei test psicologici, e la più fraintesa. L'alpha non indica che una scala è unidimensionale, e un valore elevato è spesso un sintomo anziché un pregio.
- Errore standard di misurazione: di quanto potrebbe sbagliarsi il tuo punteggioOgni punteggio porta con sé un margine di errore, e per la maggior parte dei test psicologici è più ampio di quanto le persone suppongano. Questo è il numero che ti dice quando una differenza è reale e quando è solo rumore.
- Norme e percentili: con cosa viene confrontato il tuo punteggioUn punteggio grezzo è di per sé ininterpretabile. Diventa significativo solo in relazione a un gruppo di riferimento — e quale gruppo sia stato utilizzato è uno dei fatti più rilevanti e meno pubblicizzati di qualsiasi test.
- Come viene costruito davvero un test psicometricoDalla definizione del costrutto alle norme pubblicate, il processo richiede anni e scarta la maggior parte di ciò che vi viene immesso. Conoscere le fasi rende evidente quali siano quelle che un rapido quiz online ha saltato.
- Cosa significa quando un test viene definito validato?Il termine non è regolamentato e viene usato liberamente da prodotti che non hanno fatto nessuno dei lavori necessari. Ecco cosa significa quando ha un senso concreto, e le quattro domande che separano i due casi.
- Perché la maggior parte dei test di personalità su internet non sono affidabiliNon perché siano disonesti, ma perché i passaggi che rendono una misurazione attendibile sono invisibili, costosi e facili da saltare — e saltarli non cambia nulla all'aspetto del risultato.
- Cosa può e non può misurare l'autovalutazioneI questionari ti chiedono di osservare te stesso, il che funziona meglio per alcune cose che per altre. Sapere dove il metodo è solido e dove invece fallisce cambia il modo in cui interpreti qualsiasi risultato.
- Cosa significa quando un test prevede qualcosaUna correlazione di 0,30 è un risultato solido nella ricerca sulla personalità e una base debole per una decisione su una singola persona. Entrambe le affermazioni sono vere, e il divario tra di esse è la causa principale dell'uso improprio dei risultati dei test.
- Lo screening non è una diagnosiUn questionario di screening è concepito per intercettare il maggior numero possibile di casi, accettando un alto tasso di falsi positivi come prezzo da pagare. Interpretare un punteggio di screening come una diagnosi inverte lo scopo per cui è stato progettato.