Що таке психометрика?

Психометрія це галузь психології, яка займається самим вимірюванням. Не тим, що означає екстраверсія, а тим, чи певний набір запитань справді вимірює екстраверсію, яка похибка міститься в отриманому числі та що це число має право прогнозувати.

Ця відмінність важливіша, ніж здається. Будь-хто може скласти двадцять запитань про те, наскільки товариською є людина, і підсумувати відповіді. Психометрія це робота, яка починається після цього: показати, що ці двадцять запитань узгоджуються між собою, що вони вимірюють одну річ, а не три, що та сама людина отримає приблизно той самий результат наступного місяця, що бал пов'язаний з тим, як ця людина поводиться насправді, і що весь інструмент працює однаково як для 22-річної людини в Лісабоні, так і для 55-річної людини в Мюнхені.

Чому виникла потреба в дисципліні

Фізичне вимірювання має перевагу, якої психологія не має: ви можете прикласти метрову лінійку до того, що вимірюєте. Для сумлінності метрової лінійки не існує. Ця риса безпосередньо не спостерігається, вона виводиться з поведінки, а відповіді на опитувальник це ще один рівень виведення поверх неї.

Саме це психометрики називають латентною змінною: чимось достатньо реальним, щоб мати наслідки, але досяжним лише через непрямі індикатори. Весь методологічний апарат існує саме через цю непрямість. Кожна методика, з якою ви зустрінетеся, факторний аналіз, коефіцієнти надійності, теорія тестових завдань, нормові вибірки, є спробою обґрунтовано висловитися про величину, яку ніхто не може спостерігати.

Три запитання

Якщо відкинути термінологію, психометрія ставить три вимоги до будь-якого інструмента.

Чи є він узгодженим? Якщо вимірювання складається переважно з шуму, решта не має значення. Узгодженість перевіряють між пунктами (чи узгоджуються запитання між собою?), у часі (чи отримає та сама людина той самий бал наступного місяця?) та, за потреби, між оцінювачами. Це надійність.

Чи вимірює він те, що заявляє? Опитувальник може бути цілком узгодженим і все одно вимірювати не те. Шкала, яка заявляє, що вимірює лідерський потенціал, але корелює на рівні 0.8 зі звичайною самооцінкою, вимірює самооцінку. Це валідність, і це не властивість, яку інструмент має або не має, це аргумент, побудований на накопичених доказах.

У порівнянні з ким? Сирий бал 34 сам по собі нічого не означає. Він стає інтерпретованим лише на тлі референтної групи: 34 є високим відносно якої популяції, виміряної коли і де? Це робота норм, і саме цей крок більшість масових тестів повністю пропускають.

Як виглядає належна практика

Добре сконструйований інструмент має документальний слід. Хтось опублікував, як були написані пункти і які з них були відхилені. Хтось повідомив коефіцієнти надійності в названих вибірках із зазначенням обсягу вибірок. Хтось перевірив, чи відтворюється факторна структура на другій, незалежній вибірці, а не на тій, на якій інструмент будували. Хтось перевірив, чи пункти поводяться однаково в різних мовах і вікових групах. Хтось інший, бажано не зацікавлений в цьому інструменті, спробував відтворити результати і повідомив, що вийшло.

Ніщо з цього не робить тест безпомилковим. Воно робить його обмеження пізнаваними, а це інша і корисніша властивість. Інструмент із задокументованою похибкою вимірювання показує вам, наскільки довіряти невеликій різниці між двома балами. Інструмент без опублікованої оцінки похибки не є точнішим, він лише мовчить про свою неточність.

Що це означає для читача

Психометрія не скаже вам, що тест є істинним. Вона скаже вам, як далеко можна зайти з балом, перш ніж він перестане щось означати: на які запитання він може відповісти, на яких популяціях він був калібрований і наскільки великою має бути різниця, щоб на неї варто було звернути увагу.

Це вужча обіцянка, ніж дає більшість продуктів, пов'язаних з особистістю. Водночас це єдина обіцянка, яка витримує зіткнення з доказами.