Co je psychometrie?

Psychometrie je odvětví psychologie, které se zabývá samotným měřením. Ne tím, co znamená extraverze, ale tím, zda daný soubor otázek extraverzi skutečně měří, kolik chyby obsahuje výsledné číslo a co lze na jeho základě oprávněně předvídat.

Na tomto rozdílu záleží víc, než se může zdát. Kdokoli může napsat dvacet otázek o tom, jak je člověk společenský, a sečíst odpovědi. Psychometrie se zabývá tím, co následuje: prokázat, že těch dvacet otázek tvoří soudržný celek, že měří jednu věc, a ne tři, že stejný člověk dosáhne příští měsíc přibližně stejného skóre, že skóre souvisí s tím, jak se skutečně chová, a že celý postup funguje stejně u 22letého člověka v Lisabonu jako u 55letého člověka v Mnichově.

Proč byla potřeba samostatná disciplína

Fyzikální měření má oproti psychologii jednu výhodu: k tomu, co měříš, můžeš přiložit metr. Pro svědomitost žádný metr neexistuje. Tento rys nelze přímo pozorovat. Vyvozujeme ho z chování a odpovědi v dotazníku představují další vrstvu nepřímého usuzování.

Tomu psychometrici říkají latentní proměnná: něco, co je dostatečně skutečné na to, aby to mělo důsledky, ale k čemu se lze dostat jen prostřednictvím nepřímých ukazatelů. Právě kvůli této nepřímosti existuje celý soubor metodických postupů. Každá metoda, se kterou se setkáš, ať už jde o faktorovou analýzu, koeficienty reliability, teorii odpovědi na položku nebo normativní vzorky, je pokusem říct něco obhajitelného o veličině, kterou nikdo nemůže přímo pozorovat.

Tři otázky

Když odhlédneme od odborných pojmů, psychometrie klade každému nástroji tři otázky.

Je měření konzistentní? Pokud výsledek tvoří převážně šum, na ničem dalším nezáleží. Konzistence se ověřuje mezi položkami (odpovídají si otázky navzájem?), v čase (dosáhne stejný člověk příští měsíc stejného skóre?) a tam, kde je to relevantní, mezi hodnotiteli. To je reliabilita.

Měří to, co tvrdí? Dotazník může být dokonale konzistentní, a přesto měřit něco jiného. Škála, která tvrdí, že měří vůdčí potenciál, ale koreluje hodnotou 0,8 s obyčejnou sebeúctou, měří sebeúctu. To je otázka validity. Nejde o vlastnost, kterou nástroj buď má, nebo nemá. Jde o závěr podložený nahromaděnými důkazy.

Ve srovnání s kým? Hrubé skóre 34 samo o sobě nic neznamená. Interpretovat ho lze pouze ve vztahu k referenční skupině: ve srovnání s jakou populací je 34 vysoké, kdy a kde byla měřena? Tím se zabývají normy a právě tento krok většina spotřebitelských testů zcela vynechává.

Jak vypadá dobrá praxe

Kvalitně vytvořený nástroj má zdokumentovaný vývoj. Někdo zveřejnil, jak byly položky formulovány a které byly vyřazeny. Někdo uvedl koeficienty reliability u konkrétně popsaných vzorků včetně jejich velikosti. Někdo ověřil, zda faktorová struktura obstojí i v druhém, nezávislém vzorku, nikoli jen v tom, na němž byl nástroj vytvořen. Někdo zkontroloval, zda se položky chovají stejně v různých jazycích a věkových skupinách. A někdo další, ideálně bez vlastního zájmu na nástroji, se pokusil zjištění zopakovat a zveřejnil, jak to dopadlo.

Nic z toho neznamená, že je test neomylný. Znamená to, že jeho omezení lze poznat, což je jiná a užitečnější vlastnost. Nástroj s doloženou chybou měření ti říká, nakolik můžeš důvěřovat malému rozdílu mezi dvěma skóre. Nástroj bez zveřejněného odhadu chyby není přesnější. Jen o své nepřesnosti méně mluví.

Co si z toho můžeš odnést

Psychometrie ti neřekne, že je test pravdivý. Řekne ti, kam až lze zajít při interpretaci skóre, než přestane cokoli znamenat: na které otázky může odpovědět, na jakých populacích byl kalibrován a jak velký musí být rozdíl, aby stálo za to si ho všimnout.

To je skromnější příslib, než jaký dává většina produktů zaměřených na osobnost. Je to ale také jediný příslib, který obstojí ve světle důkazů.