Ce este validitatea în testarea psihologică?
Validitatea nu este o proprietate pe care o are un test. Este un argument privind dacă o anumită interpretare a unui anumit scor, pentru un anumit scop, este defendabilă, și trebuie reconstruită pentru fiecare utilizare nouă.
Validitatea pune întrebarea dacă un test măsoară ceea ce pretinde că măsoară și dacă concluziile pe care oamenii le trag din scorurile sale sunt justificate. Este întrebarea centrală în psihometrie și cea la care se răspunde cel mai frecvent cu o afirmație de marketing, nu cu dovezi.
Înțelegerea modernă, valabilă de la lucrările lui Messick din anii 1980, este că validitatea nu este un atribut fix al unui instrument. Este o proprietate a unei interpretări a scorurilor pentru o utilizare specifică. Același chestionar poate fi bine validat pentru a descrie percepția de sine a unei persoane și complet nevalidat pentru a decide dacă aceasta este angajată. A spune "acest test este valid" fără a preciza valid pentru ce nu este o afirmație; este un slogan.
Tipurile de dovezi
Validitatea se construiește din dovezi acumulate de mai multe tipuri. Textele mai vechi le prezintă ca specii separate de validitate; viziunea actuală le tratează ca argumente diferite care susțin un singur caz.
Dovezile de conținut întreabă dacă itemii acoperă corect constructul. O scală a depresiei care întreabă doar despre somn și apetit acoperă simptomele somatice și le omite pe cele legate de dispoziție și cogniție. Acoperirea conținutului este, de regulă, evaluată de experți în domeniu și este motivul pentru care scalele foarte scurte reprezintă mereu un compromis.
Dovezile de structură internă întreabă dacă itemii se grupează așa cum spune teoria că ar trebui. Dacă un model afirmă patru fațete distincte, analiza factorială ar trebui să recupereze patru factori, și, esențial, într-un eșantion independent, nu doar în cel pe baza căruia a fost construită scala. Foarte multe instrumente își recuperează structura intenționată în eșantionul de dezvoltare și nu reușesc acest lucru în niciun alt eșantion.
Relațiile cu alte variabile este locul unde se desfășoară cea mai mare parte a muncii. Dovezile convergente arată că scala se corelează cu lucruri cu care ar trebui să se coreleze. Dovezile discriminante arată că nu se corelează prea puternic cu lucruri de care ar trebui să fie distinctă, o cerință cronic neglijată și cea care scufundă multe constructe proaspăt lansate sub un nume nou. Dovezile de criteriu arată că scorul se relaționează cu un rezultat relevant, măsurat fie în același timp, fie prezis în avans.
Dovezile consecvenționale întreabă ce se întâmplă atunci când testul este utilizat. Dacă un instrument dezavantajează sistematic un grup pentru motive nelegate de construct, aceasta este o problemă de validitate, nu doar una etică.
Întrebarea care demască majoritatea afirmațiilor
Cel mai riguros test al unei afirmații de validitate este validitatea incrementală: acest instrument adaugă ceva față de ce îți spune deja o măsură mai ieftină, mai veche, consacrată?
Un număr remarcabil de constructe lansate sub un nume nou nu trec acest test. Se corelează cu 0,7 sau mai mult cu un domeniu deja existent din Big Five, prezic aceleași rezultate la aceeași magnitudine și nu adaugă nimic odată ce măsura mai veche este controlată statistic. Constructul este nou; măsurarea nu este. De aceea secțiunile de critici din documentația serioasă a instrumentelor se concentrează atât de des pe redundanță, nu pe inexactitate.
Ce trebuie urmărit
Când cineva afirmă că un test este validat, întrebările utile sunt concrete. Validat în raport cu ce criteriu? În ce populație, de ce dimensiune? Structura factorială a fost confirmată într-un eșantion independent? Există dovezi publicate din partea unor cercetători fără interes comercial în răspuns? Adaugă ceva față de o alternativă consacrată?
Un instrument cu răspunsuri oneste la aceste întrebări merită luat în serios, limitări incluse. Un instrument a cărui validare constă într-o pagină de testimoniale și afirmația că milioane de oameni l-au completat a răspuns, de fapt, la o întrebare complet diferită, popularitatea nu este dovadă, iar numărul de persoane care au susținut un test nu spune nimic despre dacă scorurile sale au vreun sens.
Testează-te
A citi despre măsurare este un lucru. A-ți vedea propriul scor raportat împreună cu sursa lui, eșantionul de normare și limitele sale este altceva. Gratuit, fără înregistrare.
Continuă lectura
- Ce este psihometria?Disciplina care stabilește dacă o măsurare psihologică este de valoare, și motivul pentru care două teste care pun întrebări similare pot diferi enorm în privința valorii rezultatelor lor.
- Ce este fidelitatea în testarea psihologică?Fidelitatea este consecvența măsurării, nu corectitudinea ei. Un test poate avea o fidelitate ridicată și totuși să măsoare lucrul greșit, motiv pentru care este prima întrebare care se pune și niciodată ultima.
- Ce este validitatea de construct?Cea mai grea întrebare din măsurare: dacă lucrul pe care îl măsori există așa cum l-ai definit și dacă instrumentul tău îl atinge cu adevărat, și nu ceva adiacent.
- Validitate convergentă și discriminantăDouă cerințe în oglindă: o măsură trebuie să corespundă cu ceea ce ar trebui să corespundă și trebuie să rămână distinctă de ceea ce afirmă că nu este. Majoritatea instrumentelor slabe eșuează la a doua cerință.
- Ce este alfa Cronbach și ce nu esteCea mai raportată statistică în testarea psihologică, și cea mai greșit interpretată. Alpha nu îți spune că o scală este unidimensională, iar o valoare ridicată este adesea un simptom, nu o virtute.
- Eroarea standard de măsurare: cu cât poate varia scorul tăuFiecare scor are o marjă de eroare, iar pentru majoritatea testelor psihologice aceasta este mai largă decât își imaginează oamenii. Acesta este numărul care îți spune când o diferență este reală și când este doar zgomot.
- Norme și percentile: cu ce este comparat scorul tăuUn scor brut este neinterpretabil de la sine. Devine relevant doar în raport cu un grup de referință, și care grup a fost folosit este unul dintre cele mai importante și mai puțin cunoscute aspecte ale oricărui test.
- Cum este construit de fapt un test psihometricDe la definirea construct-ului până la normele publicate, procesul durează ani și elimină cea mai mare parte din ceea ce intră în el. Cunoașterea etapelor face evident care dintre ele au fost sărite de un chestionar online rapid.
- Ce înseamnă atunci când un test este numit validat?Cuvântul nu este reglementat și este folosit liber de produse care nu au făcut nimic din munca necesară. Iată ce înseamnă atunci când înseamnă ceva, și cele patru întrebări care separă cele două cazuri.
- De ce majoritatea testelor de personalitate de pe internet nu sunt fideleNu pentru că sunt necinstite, ci pentru că pașii care fac o măsurare demnă de încredere sunt invizibili, costisitori și ușor de omis, iar omiterea lor nu schimbă cu nimic modul în care apare rezultatul.
- Ce poate și ce nu poate să măsoare autoevaluareaChestionarele îți cer să fii propriul observator, ceea ce funcționează mai bine pentru unele lucruri decât pentru altele. Să știi unde metoda este puternică și unde eșuează schimbă modul în care citești orice rezultat.
- Ce înseamnă atunci când un test prezice cevaO corelație de 0,30 este o constatare solidă în cercetarea personalității și o bază șubredă pentru o decizie despre o singură persoană. Ambele afirmații sunt adevărate, iar diferența dintre ele cauzează cea mai mare parte a utilizării greșite a rezultatelor testelor.
- Screeningul nu este diagnosticUn chestionar de screening este construit să identifice cât mai multe cazuri posibile, acceptând o rată ridicată de fals-pozitive ca preț. Interpretarea unui scor de screening ca diagnostic răstoarnă exact scopul pentru care a fost conceput.