Какво е психометрия?
Дисциплината, която установява дали дадено психологическо измерване е добро, и причината два теста, задаващи подобни въпроси, да се различават изключително много по стойността на своите резултати.
Психометрията е клонът на психологията, който се занимава със самото измерване. Не с това какво означава екстраверсията, а с това дали даден набор от въпроси действително измерва екстраверсията, колко грешка се съдържа в получения резултат и какво това число има право да прогнозира.
Разликата е по-важна, отколкото звучи. Всеки може да напише двадесет въпроса за това колко общителен е някой и да сумира отговорите. Психометрията е работата, която следва след това: да покаже, че двадесетте въпроса са свързани, че те измерват едно нещо, а не три, че същият човек ще постигне приблизително същия резултат следващия месец, че резултатът е свързан с това как този човек действително се държи и че целият апарат работи по същия начин за 22-годишен в Лисабон и за 55-годишен в Мюнхен.
Защо е била необходима тази дисциплина
Физическото измерване има предимство, което психологията няма: можеш да сложиш метър до нещото, което измерваш. Няма метър за добросъвестността. Чертата не е пряко наблюдаема, за нея се съди по поведението, а отговорите на въпросника са още едно ниво на умозаключение към това.
Това е нещото, което психометриците наричат латентна променлива: нещо достатъчно реално, за да има последствия, но винаги достижимо само чрез косвени индикатори. Целият методологичен апарат съществува заради тази косвеност. Всяка техника, с която ще се сблъскаш (факторен анализ, коефициенти на надеждност, теория за отговор на твърденията, нормативни извадки), е опит да се каже нещо защитимо за величина, която никой не може да наблюдава.
Трите въпроса
Ако премахнем терминологията, психометрията изисква три неща от всеки инструмент.
Последователен ли е? Ако измерването е предимно шум, нищо друго няма значение. Последователността се проверява между твърденията (съгласувани ли са въпросите един с друг?), във времето (постига ли същият човек същия резултат следващия месец?) и между оценителите, когато е приложимо. Това е надеждност.
Измерва ли това, което твърди? Един въпросник може да бъде напълно последователен и въпреки това да измерва грешното нещо. Скала, която твърди, че измерва лидерски потенциал, но корелира 0,8 с обикновено самочувствие, измерва самочувствие. Това е валидност и тя не е свойство, което инструментът или притежава, или не, а е аргумент, изграден от натрупани доказателства.
В сравнение с кого? Суров резултат от 34 сам по себе си не означава нищо. Той става интерпретируем само спрямо референтна група: 34 е високо спрямо коя популация, измерена кога и къде? Това е работата на нормите и е стъпката, която повечето потребителски тестове напълно пропускат.
Как изглежда добрата практика
Добре изграденият инструмент има документална следа. Някой е публикувал как са написани твърденията и кои от тях са отхвърлени. Някой е отчел коефициентите на надеждност в назовани извадки с размери на извадките. Някой е тествал дали факторната структура се запазва във втора, независима извадка, а не в тази, използвана за създаването му. Някой е проверил дали твърденията се държат по същия начин в различните езици и възрастови групи. Някой друг (в идеалния случай без личен интерес към инструмента) се е опитал да възпроизведе откритията и е отчел какво се е случило.
Нищо от това не прави теста безгрешен. То прави неговите граници познаваеми, което е различно и по-полезно свойство. Инструмент, чиято грешка на измерване е документирана, ти казва до каква степен да се довериш на малка разлика между два резултата. Инструмент без публикувана оценка на грешката не е по-точен; той просто е по-тих относно това, че е неточен.
Къде оставя това читателя
Психометрията няма да ти каже, че даден тест е истина. Тя ще ти каже докъде може да се разтегне един резултат, преди да спре да означава каквото и да било: на кои въпроси може да отговори, върху кои популации е калибриран и колко голяма трябва да бъде разликата, преди да си струва да ѝ се обърне внимание.
Това е по-тясно обещание от това, което правят повечето продукти за оценка на личността. То също така е единственото обещание, което оцелява при контакт с доказателствата.
Подложи го на тест
Четенето за измерванията е едно. Да видиш собствения си резултат с неговия източник, извадка за норма и ограничения е съвсем друго. Безплатен за попълване, не се изисква регистрация.
Продължи да четеш
- Какво е надеждност в психологическото тестване?Надеждността е съгласуваност на измерването, а не точност. Един тест може да бъде много надежден и въпреки това да измерва грешното нещо, поради което това е първият зададен въпрос, но никога последният.
- Какво е валидност в психологическото тестване?Валидността не е свойство, което един тест притежава. Тя е аргумент за това дали определена интерпретация на даден резултат за определена цел е защитима и трябва да се изгражда наново за всяка нова употреба.
- Какво е конструктна валидност?Най-трудният въпрос при измерването: дали нещото, което измерваш, съществува така, както си го дефинирал, и дали твоят инструмент достига до него, а не до нещо сходно.
- Конвергентна и дискриминантна валидностДве огледални изисквания: един измерител трябва да съответства на това, на което трябва да съответства, и трябва да остане разграничим от това, което твърди, че не е. Повечето слаби инструменти се провалят на второто.
- Какво е алфа на Кронбах и какво не еНай-често отчитаната статистика в психологическото тестване и най-погрешно тълкуваната. Алфа не ти казва, че дадена скала е едноизмерна, а високата стойност често е по-скоро симптом, отколкото предимство.
- Стандартна грешка на измерването: с колко може да се отклонява твоят резултатВсеки резултат съдържа допустима грешка, а при повечето психологически тестове тя е по-голяма, отколкото хората предполагат. Това е числото, което ти показва кога една разлика е реална и кога е шум.
- Норми и перцентили: с какво се сравнява твоят резултатСуровият резултат не може да се интерпретира сам по себе си. Той придобива смисъл само спрямо референтна група, а коя група е използвана, е един от най-важните и най-слабо огласявани факти за всеки тест.
- Как всъщност се създава един психометричен тестОт дефинирането на конструкта до публикуваните норми, процесът отнема години и отхвърля по-голямата част от това, което е вложено в него. Ако познаваш стъпките, става очевидно кои от тях са пропуснати при един бърз онлайн тест.
- Какво означава, когато един тест се нарича валидиран?Думата е нерегулирана и се използва свободно от продукти, които не са положили нужните усилия. Ето какво означава тя, когато наистина има смисъл, и четирите въпроса, които разграничават двата случая.
- Защо повечето интернет тестове за личността не са надеждниНе защото са нечестни, а защото стъпките, които правят едно измерване надеждно, са невидими, скъпи и лесни за пропускане, а пропускането им не променя с нищо начина, по който изглежда резултатът.
- Какво може и какво не може да измери една самооценкаВъпросниците изискват от теб да бъдеш наблюдател на самия себе си, което работи по-добре за някои неща, отколкото за други. Да знаеш къде методът е силен и къде се проваля, променя начина, по който четеш всеки резултат.
- Какво означава, когато един тест предсказва нещоКорелация от 0,30 е силно откритие в изследванията на личността и слаба основа за решение за един човек. И двете твърдения са верни, а разминаването между тях причинява повечето злоупотреби с резултатите от тестовете.
- Скринингът не е диагнозаСкрининговият въпросник е създаден, за да улови възможно най-много потенциални случаи, приемайки висок процент на фалшиво положителни резултати като цена за това. Интерпретирането на скринингов резултат като диагноза противоречи на целта, за която е създаден.