Какво означава, когато един тест предсказва нещо
Корелация от 0,30 е силно откритие в изследванията на личността и слаба основа за решение за един човек. И двете твърдения са верни, а разминаването между тях причинява повечето злоупотреби с резултатите от тестовете.
Изследванията на личността съобщават, че добросъвестността прогнозира работното представяне. Четейки това изречение, повечето хора си представят нещо много по-силно от това, което показват данните. Разминаването между статистическото твърдение и ежедневното значение на "прогнозира" е мястото, откъдето започва по-голямата част от злоупотребите с психологическото тестване.
Числата
Размерите на ефекта в изследванията на личността обикновено се отчитат като корелации. Мета-аналитичните стойности за добре установените взаимовръзки обикновено са между 0,20 и 0,35. Добросъвестността и работното представяне са около 0,20 до 0,25. Удовлетвореността от работата и работното представяне са около 0,30. Общата умствена способност, най-силният единичен предиктор в тази област, достига приблизително 0,50 за сложна работа.
Повдигни на квадрат дадена корелация и ще получиш дела на обяснената дисперсия. Корелация от 0,25 обяснява около шест процента от разликите между хората. Деветдесет и четири процента са нещо друго: способности, възможности, обучение, управление, здраве, късмет.
Защо 0,25 въпреки това е реално откритие
В мащабите на популацията малките корелации произвеждат значителни съвкупни ефекти. Ако избираш хиляда души, предиктор от 0,25 подобрява средния ти резултат измеримо и многократно. Застрахователите и епидемиолозите изграждат цели практики върху ефекти от такъв размер.
Уловката е, че съвкупната полза и индивидуалната прогноза са различни величини. Корелация от 0,25 означава, че сред хората, които имат висок резултат, повече ще се справят добре, отколкото сред хората, които имат нисък резултат; както и че много хора с висок резултат ще се представят слабо, а много хора с нисък резултат ще се отличат. И двете твърдения произтичат от едно и също число.
Индивидуалният случай
Това е стъпката, която бива пропусната. Корелацията описва връзката между две разпределения. Тя не дава основание за твърдение относно който и да е конкретен човек.
Ако добросъвестността корелира 0,25 с представянето, тогава познаването на нечий резултат за добросъвестност стеснява възможния диапазон на представянето му съвсем малко. Прогнозният интервал за един индивид остава достатъчно широк, за да включи почти целия диапазон от резултати. Да ти кажат, че си на 80-ия перцентил по добросъвестност, ти казва много малко за това как ще се справиш на конкретна работа.
Ето защо използването на резултати за личността като първичен филтър за подбор е слабо подкрепено, дори когато основополагащите изследвания са солидни. Изследванията подкрепят твърдението, че дадената черта има значение. Те не подкрепят твърдението, че даден резултат ти казва какво ще направи един кандидат.
Две допълнителни предупреждения
Прогнозирането и причиняването са различни неща. Почти цялата тази литература е корелационна. Фактът, че добросъвестността прогнозира здравни резултати, е съвместим с това, че добросъвестността причинява по-добро здравословно поведение, с това, че трети фактор причинява и двете, както и с обратната причинно-следствена връзка. Лонгитюдните дизайни стесняват възможностите, но рядко ги изключват напълно.
Критериите за самооценка завишават числата. Когато както предикторът, така и резултатът са базирани на самооценка от един и същи човек в един и същи следобед, дисперсията на общия метод изтласква корелацията нагоре. Проучванията, използващи обективни резултати или оценки от информатори, обикновено отчитат по-малки ефекти и именно на тях трябва да се придаде тежест.
За какво всъщност е полезен един резултат
Разглеждан като описание, а не като пророчество, даден резултат от тест е наистина полезен. Той ти казва къде стоиш спрямо дадена референтна популация по отношение на черта, която има документирани последствия, и ти дава речник за модел на поведение, който може би си забелязал, без да можеш да назовеш.
Това си заслужава да се притежава. То е нещо различно от прогноза и разликата е такава, каквато един честен отчет трябва да направи за теб, а не да те остави да я извлечеш сам.
Подложи го на тест
Четенето за измерванията е едно. Да видиш собствения си резултат с неговия източник, извадка за норма и ограничения е съвсем друго. Безплатен за попълване, не се изисква регистрация.
Продължи да четеш
- Какво е психометрия?Дисциплината, която установява дали дадено психологическо измерване е добро, и причината два теста, задаващи подобни въпроси, да се различават изключително много по стойността на своите резултати.
- Какво е надеждност в психологическото тестване?Надеждността е съгласуваност на измерването, а не точност. Един тест може да бъде много надежден и въпреки това да измерва грешното нещо, поради което това е първият зададен въпрос, но никога последният.
- Какво е валидност в психологическото тестване?Валидността не е свойство, което един тест притежава. Тя е аргумент за това дали определена интерпретация на даден резултат за определена цел е защитима и трябва да се изгражда наново за всяка нова употреба.
- Какво е конструктна валидност?Най-трудният въпрос при измерването: дали нещото, което измерваш, съществува така, както си го дефинирал, и дали твоят инструмент достига до него, а не до нещо сходно.
- Конвергентна и дискриминантна валидностДве огледални изисквания: един измерител трябва да съответства на това, на което трябва да съответства, и трябва да остане разграничим от това, което твърди, че не е. Повечето слаби инструменти се провалят на второто.
- Какво е алфа на Кронбах и какво не еНай-често отчитаната статистика в психологическото тестване и най-погрешно тълкуваната. Алфа не ти казва, че дадена скала е едноизмерна, а високата стойност често е по-скоро симптом, отколкото предимство.
- Стандартна грешка на измерването: с колко може да се отклонява твоят резултатВсеки резултат съдържа допустима грешка, а при повечето психологически тестове тя е по-голяма, отколкото хората предполагат. Това е числото, което ти показва кога една разлика е реална и кога е шум.
- Норми и перцентили: с какво се сравнява твоят резултатСуровият резултат не може да се интерпретира сам по себе си. Той придобива смисъл само спрямо референтна група, а коя група е използвана, е един от най-важните и най-слабо огласявани факти за всеки тест.
- Как всъщност се създава един психометричен тестОт дефинирането на конструкта до публикуваните норми, процесът отнема години и отхвърля по-голямата част от това, което е вложено в него. Ако познаваш стъпките, става очевидно кои от тях са пропуснати при един бърз онлайн тест.
- Какво означава, когато един тест се нарича валидиран?Думата е нерегулирана и се използва свободно от продукти, които не са положили нужните усилия. Ето какво означава тя, когато наистина има смисъл, и четирите въпроса, които разграничават двата случая.
- Защо повечето интернет тестове за личността не са надеждниНе защото са нечестни, а защото стъпките, които правят едно измерване надеждно, са невидими, скъпи и лесни за пропускане, а пропускането им не променя с нищо начина, по който изглежда резултатът.
- Какво може и какво не може да измери една самооценкаВъпросниците изискват от теб да бъдеш наблюдател на самия себе си, което работи по-добре за някои неща, отколкото за други. Да знаеш къде методът е силен и къде се проваля, променя начина, по който четеш всеки резултат.
- Скринингът не е диагнозаСкрининговият въпросник е създаден, за да улови възможно най-много потенциални случаи, приемайки висок процент на фалшиво положителни резултати като цена за това. Интерпретирането на скринингов резултат като диагноза противоречи на целта, за която е създаден.