Validitate convergentă și discriminantă
Două cerințe în oglindă: o măsură trebuie să corespundă cu ceea ce ar trebui să corespundă și trebuie să rămână distinctă de ceea ce afirmă că nu este. Majoritatea instrumentelor slabe eșuează la a doua cerință.
Validitatea convergentă și cea discriminantă sunt cele două jumătăți ale unei singure cerințe. O măsură trebuie să coreleze cu lucruri cu care, teoretic, ar trebui să coreleze, și nu trebuie să coreleze prea puternic cu lucruri de care ar trebui să fie distinctă. Îndeplinirea uneia fără cealaltă nu este un succes parțial; este, de regulă, un semn că respectivul construct nu este ceea ce pretinde a fi.
Validitatea convergentă
Dovezile convergente arată că o măsură se aliniază cu alți indicatori ai aceluiași lucru. O nouă scală de anxietate ar trebui să coreleze substanțial cu scale de anxietate deja consacrate, cu evaluări ale clinicienilor și, ideal, cu ceva ce nu este un alt chestionar, cum ar fi măsurători fiziologice sau comportamente de evitare observate.
Corelațiile așteptate în acest caz sunt de obicei peste 0,50, adesea peste 0,70 atunci când măsura de comparație este un instrument bine consacrat pentru același construct. Sub acest prag, fie noua scală, fie măsura de comparație evaluează altceva.
Există o capcană. O corelație de 0,95 cu o scală existentă nu este un triumf; înseamnă că noul instrument este o reambalare, iar întrebarea onestă devine ce anume aduce în plus. Validitatea convergentă este un prag minim, nu un obiectiv de maximizat.
Validitatea discriminantă
Dovezile discriminante arată că măsura rămâne separată de constructe de care pretinde că diferă. Aici se află eșecurile interesante.
Modelul se repetă în literatura de specialitate. Perseverența (grit) corelează în jur de 0,84 cu conștiinciozitatea, suficient de aproape încât o meta-analiză a constatat că nu mai adaugă aproape nimic la predicția academică odată ce se controlează pentru conștiinciozitate. Inteligența emoțională evaluată prin autoevaluare se suprapune puternic cu stabilitatea emoțională, extraversia și conștiinciozitatea combinate. Varianța comună dintre componentele Triadei Întunecate dispare în mare parte odată ce se ia în considerare dimensiunea Onestitate-Umilință din modelul HEXACO. În fiecare caz, constructul a fost prezentat ca un teritoriu nou, iar în realitate s-a dovedit a fi o regiune redenumită a unei hărți deja existente.
Validitatea discriminantă este, de asemenea, locul unde ies la iveală efectele de metodă. Dacă fiecare construct autoevaluat dintr-un studiu corelează 0,4 cu fiecare alt construct, factorul comun este probabil stilul de răspuns al respondentului, și nu vreo psihologie comună.
Testul care tranșează problema
Procedura decisivă este validitatea incrementală: se introduce mai întâi în regresie măsura consacrată, apoi cea nouă, și se verifică dacă noua măsură explică vreo varianță suplimentară în rezultat. Dacă nu o face, constructul poate fi în continuare interesant din punct de vedere teoretic, dar instrumentul nu măsoară nimic ce domeniul nu avea deja.
Acesta este un standard exigent, iar foarte multe scale publicate nu au fost niciodată supuse lui. Când sunt supuse acestui test, rezultatul este frecvent constatarea de redundanță descrisă mai sus. Aceasta nu este un scandal, ci o formă normală de selecție științifică, dar înseamnă că popularitatea unui construct nu spune nimic despre dacă acesta rezistă la acest test.
Ce schimbă acest lucru pentru un cititor
Atunci când un test raportează mai multe scoruri, întrebarea utilă este dacă acele scoruri sunt cu adevărat distincte. Patru dimensiuni care corelează 0,8 între ele reprezintă de fapt o singură dimensiune cu patru etichete, iar un profil construit pe baza lor va părea diferențiat, deși nu conține aproape nicio informație independentă.
Instrumentele care raportează corelațiile dintre scalele lor îți permit să verifici acest lucru singur. Instrumentele care prezintă un tip cu patru cadrane fără a arăta vreodată cum se relaționează cadranele între ele au făcut ca această verificare să fie imposibilă, ceea ce este de obicei chiar scopul urmărit.
Testează-te
A citi despre măsurare este un lucru. A-ți vedea propriul scor raportat împreună cu sursa lui, eșantionul de normare și limitele sale este altceva. Gratuit, fără înregistrare.
Continuă lectura
- Ce este psihometria?Disciplina care stabilește dacă o măsurare psihologică este de valoare, și motivul pentru care două teste care pun întrebări similare pot diferi enorm în privința valorii rezultatelor lor.
- Ce este fidelitatea în testarea psihologică?Fidelitatea este consecvența măsurării, nu corectitudinea ei. Un test poate avea o fidelitate ridicată și totuși să măsoare lucrul greșit, motiv pentru care este prima întrebare care se pune și niciodată ultima.
- Ce este validitatea în testarea psihologică?Validitatea nu este o proprietate pe care o are un test. Este un argument privind dacă o anumită interpretare a unui anumit scor, pentru un anumit scop, este defendabilă, și trebuie reconstruită pentru fiecare utilizare nouă.
- Ce este validitatea de construct?Cea mai grea întrebare din măsurare: dacă lucrul pe care îl măsori există așa cum l-ai definit și dacă instrumentul tău îl atinge cu adevărat, și nu ceva adiacent.
- Ce este alfa Cronbach și ce nu esteCea mai raportată statistică în testarea psihologică, și cea mai greșit interpretată. Alpha nu îți spune că o scală este unidimensională, iar o valoare ridicată este adesea un simptom, nu o virtute.
- Eroarea standard de măsurare: cu cât poate varia scorul tăuFiecare scor are o marjă de eroare, iar pentru majoritatea testelor psihologice aceasta este mai largă decât își imaginează oamenii. Acesta este numărul care îți spune când o diferență este reală și când este doar zgomot.
- Norme și percentile: cu ce este comparat scorul tăuUn scor brut este neinterpretabil de la sine. Devine relevant doar în raport cu un grup de referință, și care grup a fost folosit este unul dintre cele mai importante și mai puțin cunoscute aspecte ale oricărui test.
- Cum este construit de fapt un test psihometricDe la definirea construct-ului până la normele publicate, procesul durează ani și elimină cea mai mare parte din ceea ce intră în el. Cunoașterea etapelor face evident care dintre ele au fost sărite de un chestionar online rapid.
- Ce înseamnă atunci când un test este numit validat?Cuvântul nu este reglementat și este folosit liber de produse care nu au făcut nimic din munca necesară. Iată ce înseamnă atunci când înseamnă ceva, și cele patru întrebări care separă cele două cazuri.
- De ce majoritatea testelor de personalitate de pe internet nu sunt fideleNu pentru că sunt necinstite, ci pentru că pașii care fac o măsurare demnă de încredere sunt invizibili, costisitori și ușor de omis, iar omiterea lor nu schimbă cu nimic modul în care apare rezultatul.
- Ce poate și ce nu poate să măsoare autoevaluareaChestionarele îți cer să fii propriul observator, ceea ce funcționează mai bine pentru unele lucruri decât pentru altele. Să știi unde metoda este puternică și unde eșuează schimbă modul în care citești orice rezultat.
- Ce înseamnă atunci când un test prezice cevaO corelație de 0,30 este o constatare solidă în cercetarea personalității și o bază șubredă pentru o decizie despre o singură persoană. Ambele afirmații sunt adevărate, iar diferența dintre ele cauzează cea mai mare parte a utilizării greșite a rezultatelor testelor.
- Screeningul nu este diagnosticUn chestionar de screening este construit să identifice cât mai multe cazuri posibile, acceptând o rată ridicată de fals-pozitive ca preț. Interpretarea unui scor de screening ca diagnostic răstoarnă exact scopul pentru care a fost conceput.