noesisnoesis
測定の仕組み

インターネット上の性格テストの多くが信頼できない理由

不誠実だからではなく、測定を信頼できるものにする手順が目に見えず、費用がかかり、省略しやすいからです。省略しても、結果の見た目は何も変わりません。

無料のオンライン性格テストと検証された心理測定器具は、見た目がまったく同じ出力を生みます。得点、パーセンタイル、あなたを記述する段落。違いは、結果画面からは見えない作業に完全にあります。

これは正確に理解する価値があります。通常の枠組みでは、インターネットのテストは詐欺だとされますが、それはほぼ間違っており、あまり役に立ちません。ほとんどは騙す意図のない人々によって作られています。構造的な理由で信頼できないのです。

通常省略されるもの

項目分析。 適切に構築された尺度では、ほとんどの草案項目はパイロット後に廃棄されます。誰も変動しない項目、合計との相関が低い項目、複数の因子に負荷する項目、年齢や言語グループ間で異なる振る舞いをする項目です。パイロットなしで書かれ公開されたテストは、機能しない項目も含めてすべてを残しています。

独立した構造確認。 尺度を構築したデータに対する因子分析は、設計した構造を回復させます。新鮮な標本でそれを確認することは別の研究であり、大部分の尺度が失敗する段階です。

基準値。 パーセンタイルはどこかから来なければなりません。サイトが参照集団を明示していなければ、その数値は以前の訪問者(構成が不明な自己選択グループ)から導出されたか、特に何からも導出されていません。

再テストデータ。 人々が来月も同じ得点を取ることを確認するには、彼らを再び見つける必要があります。これを行う人はほとんどいません。つまり、「特性」という言葉が暗示する安定性は実証されていないのです。

設計のインセンティブは反対方向に働く

エンゲージメントのために構築されたテストは、正確さのために構築されたテストとは異なる成果に最適化されており、両者は予測可能な方法で乖離します。

好ましい結果のほうがパフォーマンスが良いです。歓迎されない内容を伝える結果は共有されにくいため、結果は誰もが自分自身の中に認識する記述へと流れていきます。これがバーナム効果であり、1940年代に実証され、それ以来確実に再現されています。人々は一般的な性格の記述を、自分自身について非常に正確だと評価します。

タイプは次元よりもパフォーマンスが良いです。「あなたはアーキテクトです」は、「あなたは開放性の68パーセンタイルにあり、信頼区間は広いです」よりも共有しやすいです。タイプはまた測定誤差を隠します。カテゴリー境界の前後1点の人がまったく異なるラベルを受け取るからです。

短いほうが適切な長さよりパフォーマンスが良いです。質問が追加されるたびに回答者を失うため、テストは構成概念をカバーする長さではなく、完了率を最大化する長さに切り詰められます。

これらのいずれも嘘ではありません。正確さ以外の指標に対する最適化です。

約30秒で見分ける方法

著者と年を持つ名前付きのソース測定器具を探してください。基準値がどの集団から来ているかの記述を探してください。限界や測定誤差のいかなる承認も探してください。結果が連続得点かカテゴリーかを確認してください。同じページが20の質問からあなたの理想的なキャリア、パートナー、人生の目的を特定すると約束していないか確認してください。

測定器具の名前を挙げ、出典を引用し、基準値を明示し、何が分からないかを述べているテストは、その作業を行っています。それらのいずれも行っていないテストは、5分間の心地よい過ごし方であるかもしれませんが、生み出す数値は装飾です。

NOESISカタログのすべての測定器具は、どの公開テストを実装しているか、誰が書いたか、いつ書かれたか、どのようにスコアリングされるか、そしてその結果が何を確立しないかを明示しています。その最後の部分が、他と比較する価値のあるものです。

実践で確かめる

測定について読むことと、自分のスコアがその出典、ノルムサンプル、限界とともに報告されるのを見ることは別物です。

続きを読む

インターネット上の性格テストの多くが信頼できない理由 | NOESIS — 心理測定テスト