Što je psihometrija?
Disciplina koja utvrđuje je li neko psihološko mjerenje uopće dobro. Ujedno i razlog zašto se dva testa sa sličnim pitanjima mogu golemo razlikovati u tome koliko njihovi rezultati vrijede.
Psihometrija je grana psihologije koja se bavi samim mjerenjem. Ne time što znači ekstraverzija, nego time mjeri li određeni skup pitanja doista ekstraverziju, koliko je pogreške u dobivenom broju i što taj broj smije predviđati.
Ta je razlika važnija nego što zvuči. Svatko može napisati dvadeset pitanja o tome koliko je netko društven i zbrojiti odgovore. Psihometrija je posao koji dolazi nakon toga: pokazati da tih dvadeset pitanja čini cjelinu, da mjere jednu stvar, a ne tri, da ista osoba sljedeći mjesec postiže otprilike isti rezultat, da je rezultat povezan s time kako se ta osoba stvarno ponaša te da cijeli aparat jednako funkcionira za 22-godišnjaka u Lisabonu kao i za 55-godišnjaka u Münchenu.
Zašto je bila potrebna disciplina
Fizičko mjerenje ima prednost koju psihologija nema: uz ono što mjeriš možeš prisloniti metar. Za savjesnost metar ne postoji. Crta nije izravno vidljiva: zaključuje se iz ponašanja, a odgovori u upitniku još su jedan sloj zaključivanja povrh toga.
To psihometričari nazivaju latentnom varijablom: nečim dovoljno stvarnim da ima posljedice, ali dostupnim uvijek samo preko neizravnih pokazatelja. Cijeli metodološki aparat postoji upravo zbog te neizravnosti. Svaka tehnika na koju ćeš naići, bilo faktorska analiza, koeficijenti pouzdanosti, teorija odgovora na čestice ili normativni uzorci, pokušaj je da se kaže nešto obranjivo o veličini koju nitko ne može opažati.
Tri pitanja
Kad se ukloni stručni rječnik, psihometrija od svakog instrumenta traži odgovor na tri pitanja.
Je li dosljedan? Ako je mjerenje uglavnom šum, ništa drugo nije važno. Dosljednost se provjerava između čestica (slažu li se pitanja međusobno?), kroz vrijeme (postiže li ista osoba isti rezultat sljedeći mjesec?) i, gdje je to relevantno, između procjenjivača. To je pouzdanost.
Mjeri li ono što tvrdi da mjeri? Upitnik može biti savršeno dosljedan i ipak mjeriti pogrešnu stvar. Ljestvica koja tvrdi da mjeri potencijal za vodstvo, a s običnim samopoštovanjem korelira 0,8, mjeri samopoštovanje. To je valjanost i ona nije svojstvo koje instrument ili ima ili nema: ona je argument izgrađen od nagomilanih dokaza.
U usporedbi s kim? Sirovi rezultat od 34 sam po sebi ne znači ništa. Postaje protumačiv tek u odnosu na referentnu skupinu: 34 je visoko u odnosu na koju populaciju, izmjerenu kada i gdje? To je posao normi i to je korak koji većina komercijalnih testova potpuno preskače.
Kako izgleda dobra praksa
Dobro izgrađen instrument ostavlja pisani trag. Netko je objavio kako su čestice napisane i koje su odbačene. Netko je izvijestio o koeficijentima pouzdanosti, na imenovanim uzorcima, s veličinama uzoraka. Netko je provjerio drži li se faktorska struktura na drugom, neovisnom uzorku, a ne na onom korištenom za izradu. Netko je provjerio ponašaju li se čestice jednako u različitim jezicima i dobnim skupinama. Netko drugi, idealno bez ikakvog interesa u instrumentu, pokušao je ponoviti nalaze i izvijestio što se dogodilo.
Ništa od toga ne čini test nepogrešivim. Čini njegova ograničenja spoznatljivima, a to je drukčije i korisnije svojstvo. Instrument čija je pogreška mjerenja dokumentirana govori ti koliko vjerovati maloj razlici između dvaju rezultata. Instrument bez objavljene procjene pogreške nije točniji; samo šuti o tome da je netočan.
Gdje to ostavlja čitatelja
Psihometrija ti neće reći da je test istinit. Reći će ti koliko daleko se rezultat može razvlačiti prije nego što prestane išta značiti: na koja pitanja može odgovoriti, na kojim je populacijama kalibriran i koliko velika razlika mora biti da bi je vrijedilo primijetiti.
To je uže obećanje od onoga koje daje većina proizvoda za procjenu osobnosti. Ujedno je i jedino obećanje koje preživi susret s dokazima.
Provjeri na testu
Čitati o mjerenju jedno je. Vidjeti vlastiti rezultat prikazan s izvorom, normativnim uzorkom i ograničenjima nešto je drugo. Besplatno, bez registracije.
Nastavi čitati
- Što je pouzdanost u psihološkom testiranju?Pouzdanost je dosljednost mjerenja, a ne točnost. Test može biti vrlo pouzdan, a ipak mjeriti pogrešnu stvar. Zato je to prvo pitanje koje se postavlja, a nikad posljednje.
- Što je valjanost u psihološkom testiranju?Valjanost nije svojstvo koje test posjeduje. To je argument o tome je li određena interpretacija određenog rezultata, za određenu svrhu, opravdana; i taj argument treba iznova izgraditi za svaku novu primjenu.
- Što je konstruktna valjanost?Najteže pitanje u mjerenju: postoji li ono što mjeriš onako kako si ga definirao i dopire li tvoj instrument upravo do toga, a ne do nečega susjednog.
- Konvergentna i diskriminativna valjanostDva zrcalna zahtjeva: mjera se mora slagati s onim s čim bi se trebala slagati i mora ostati različita od onoga što tvrdi da nije. Većina slabih instrumenata ne zadovoljava drugi.
- Što je Cronbachov alfa, a što on nijeNajčešće navođena statistika u psihološkom testiranju i ona koja se najčešće pogrešno tumači. Alfa ti ne govori je li ljestvica jednodimenzionalna, a visoka vrijednost često je simptom, a ne vrlina.
- Standardna pogreška mjerenja: koliko bi tvoj rezultat mogao odstupatiSvaki rezultat nosi određenu pogrešku mjerenja, a kod većine psiholoških testova ona je veća nego što ljudi pretpostavljaju. To je broj koji ti govori kada je razlika stvarna, a kada je samo šum.
- Norme i percentili: s čime se uspoređuje tvoj rezultatSirovi rezultat sam po sebi nije moguće interpretirati. Smisao dobiva tek u usporedbi s referentnom skupinom, a to koja je skupina korištena jedna je od najvažnijih i najmanje isticanih činjenica o bilo kojem testu.
- Kako se psihometrijski test zapravo izrađujeOd definicije konstrukta do objavljenih normi, taj slijed traje godinama i odbacuje većinu onoga što u njega uđe. Kad poznaješ korake, odmah ti je jasno koje je brzi internetski kviz preskočio.
- Što znači kada se za test kaže da je validiran?Ta riječ nije zaštićena i slobodno je koriste proizvodi koji nisu obavili nimalo tog posla. Evo što znači kad doista nešto znači, i četiri pitanja koja razlikuju ta dva slučaja.
- Zašto većina internetskih testova osobnosti nije pouzdanaNe zato što su nepošteni, nego zato što su koraci koji mjerenje čine pouzdanim nevidljivi, skupi i lako ih je preskočiti; a njihovo preskakanje ne mijenja ništa u tome kako rezultat izgleda.
- Što samoprocjena može, a što ne može mjeritiUpitnici traže da budeš promatrač samog sebe, što za neke stvari funkcionira bolje nego za druge. Kad znaš gdje je metoda snažna, a gdje zakazuje, drukčije čitaš svaki rezultat.
- Što znači kada test nešto predviđaKorelacija od 0,30 snažan je nalaz u istraživanjima osobnosti, ali slaba osnova za odluku o jednoj osobi. Obje su tvrdnje točne, a jaz između njih uzrok je većine zlouporaba rezultata testova.
- Probir nije dijagnozaUpitnik za probir osmišljen je tako da otkrije što više mogućih slučajeva, pri čemu je visoka stopa lažno pozitivnih nalaza cijena koja se prihvaća. Čitati rezultat probira kao dijagnozu znači izokrenuti ono za što je osmišljen.