Что может и не может измерить самоотчёт
Опросники просят вас быть наблюдателем самого себя, а это работает лучше для одних вещей и хуже для других. Понимание того, где метод силён, а где даёт сбои, меняет то, как вы читаете любой результат.
Почти каждый широко используемый инструмент оценки личности и благополучия представляет собой опросник самоотчёта. Вы читаете утверждение, оцениваете, насколько оно вам подходит, и оценки суммируются. Это дёшево, быстро, масштабируемо, и у этого метода есть подлинные сильные стороны, но есть и слабые места, о которых стоит знать, прежде чем читать собственные результаты.
Где метод работает хорошо
Внутренние состояния, которые никто другой не может наблюдать. Удовлетворённость жизнью, воспринимаемый стресс, ощущение смысла, переживаемая тревога. Для них человек является не просто удобным источником информации, а единственным достоверным. Наблюдатель, оценивающий ваше субъективное благополучие, лишь строит предположения.
Типичное поведение, усреднённое во времени. Люди довольно хорошо умеют сообщать о том, что они обычно делают, даже если плохо предсказывают, как поведут себя в конкретном случае. Измерения черт работают, потому что усредняют данные по множеству случаев.
Самовосприятие как самостоятельный предмет интереса. То, насколько способным вы себя считаете, определяет то, за что вы беретесь, независимо от того, насколько вы способны на самом деле. Самоэффективность является полноценным конструктом именно потому, что это убеждение имеет последствия.
Где метод даёт сбой
Социально желательные ответы. Люди сообщают о себе как о более добросовестных, более эмпатичных и менее враждебных, чем они есть на самом деле, и этот эффект усиливается со ставками. В контексте самопознания с низкими ставками искажение умеренное. При приёме на работу оно серьёзное: прозрачная формулировка большинства пунктов личностных тестов делает их лёгкими для фальсификации, а кандидаты, наиболее мотивированные фальсифицировать ответы, это именно те, кого работодатель больше всего хочет выявить.
Ограниченное самопонимание. Самоотчёты лишь умеренно коррелируют с отчётами информантов, хорошо знающих человека, и этот разрыв наибольший именно там, где его и следовало бы ожидать: для черт с оценочной нагрузкой и у людей, чьё представление о себе наименее точно. Тот, кто не замечает собственной невнимательности, не в лучшем положении, чтобы сообщать о ней.
Способность против убеждения. Самоотчёт не может измерить способность. Самоотчёт об эмоциональном интеллекте измеряет то, насколько эмоционально способным вы себя считаете, что лишь умеренно коррелирует с реальной результативностью в задачах, требующих эмоционального суждения. Оба конструкта реальны, но это не один и тот же конструкт, а их смешение является одной из самых распространённых ошибок на коммерческом рынке тестирования.
Эффекты группы сравнения. «Я усердно работаю» оценивается относительно неявной группы сравнения, которая варьируется в зависимости от человека и культуры. Из-за этого сравнение средних значений сырых самоотчётов между культурами ненадёжно, причём это легко упустить из виду и трудно исправить.
Настроение в момент ответа. Текущее эмоциональное состояние систематически окрашивает ретроспективные суждения. Балл, полученный в один момент времени по конструкту, который должен быть стабильным, содержит больше ситуативной изменчивости, чем предполагает трактовка его как черты.
Стили ответов. Согласие с утверждением независимо от его содержания и склонность к крайним ответам различаются между людьми и между культурами. Хорошо построенные шкалы смягчают это с помощью пунктов с обратной формулировкой, что вносит собственный артефакт: шкалы со смешанными формулировками регулярно порождают ложный второй фактор, отражающий формулировку, а не содержание.
Как читать собственные результаты с учётом этого
Относитесь к баллу самоотчёта как к хорошо структурированному описанию того, как вы видите себя: это действительно информативно, но не то же самое, что описание того, каковы вы на самом деле.
Разрыв между этими двумя картинами часто оказывается самой интересной частью. Если балл вас удивляет, стоит задуматься не о том, ошибается ли тест, а о том, какую из двух картин, вашу или ту, что даёт инструмент, узнали бы окружающие вас люди.
В этом же заключается честный предел того, что может дать опросник, и веская причина относиться к любому отдельному баллу как к одному из вводных данных, а не как к вердикту.
Проверьте это на практике
Читать об измерении, это одно. Увидеть собственный балл с указанием источника, нормативной выборки и ограничений, это другое. Прохождение бесплатно, регистрация не требуется.
Продолжить чтение
- Что такое психометрика?Дисциплина, которая определяет, насколько хорошо психологическое измерение выполняет свою задачу, и причина того, что два теста, задающих похожие вопросы, могут сильно различаться по ценности своих результатов.
- Что такое надёжность в психологическом тестировании?Надёжность, это постоянство измерения, а не его правильность. Тест может быть высоко надёжным и при этом измерять не то, что нужно, поэтому это первый вопрос, который задают, и никогда не последний.
- Что такое валидность в психологическом тестировании?Валидность, это не свойство, которым обладает тест. Это аргументация о том, можно ли считать обоснованной конкретную интерпретацию конкретного балла для конкретной цели, и её нужно выстраивать заново для каждого нового применения.
- Что такое конструктная валидность?Самый сложный вопрос в измерении: существует ли то, что вы измеряете, в том виде, в каком вы это определили, и достигает ли ваша методика именно этого, а не чего-то смежного.
- Конвергентная и дискриминантная валидностьДва взаимно противоположных требования: методика должна согласовываться с тем, с чем должна согласовываться, и оставаться отличимой от того, чем она заявляет, что не является. Большинство слабых методик не справляются со вторым.
- Что такое альфа Кронбаха и чем она не являетсяСамая часто упоминаемая статистика в психологическом тестировании и самая неправильно понимаемая. Альфа не говорит о том, что шкала одномерна, а высокое значение часто является симптомом, а не достоинством.
- Стандартная ошибка измерения: насколько ваш балл может отличаться от истинного значенияКаждый балл несёт погрешность измерения, и для большинства психологических тестов она шире, чем принято считать. Именно эта величина подсказывает, когда различие реально, а когда это просто шум.
- Нормы и процентили: с чем сравнивается ваш баллНеобработанный балл сам по себе неинтерпретируем. Он приобретает смысл только в сравнении с референтной группой, и то, какая группа использовалась, один из самых значимых и наименее освещаемых фактов о любом тесте.
- Как на самом деле создаётся психометрический тестОт определения конструкта до опубликованных норм этот путь занимает годы и отбрасывает большую часть того, что в него вложено. Знание этих этапов делает очевидным, какие из них были пропущены быстрым онлайн-квизом.
- Что значит, что тест является валидированным?Это слово никем не регулируется и свободно используется продуктами, которые не проделали никакой соответствующей работы. Вот что оно означает, когда действительно что-то значит, и четыре вопроса, которые отличают один случай от другого.
- Почему большинство интернет-тестов личности не являются надёжнымиНе потому, что они нечестны, а потому, что шаги, делающие измерение надёжным, невидимы, дороги и легко пропускаются, а их пропуск никак не меняет внешний вид результата.
- Что значит, когда тест что-то предсказываетКорреляция 0,30, это весомый результат в исследованиях личности и слабое основание для решения об одном конкретном человеке. Оба утверждения верны, и разрыв между ними является причиной большинства случаев неправильного использования результатов теста.
- Скрининг не является диагностикойСкрининговый опросник создан для того, чтобы выявить как можно больше возможных случаев, принимая высокую долю ложноположительных результатов как цену за это. Восприятие скринингового балла как диагноза искажает саму цель, ради которой он был создан.