テストが何かを予測するとはどういう意味か

性格研究は、誠実性が職務遂行能力を予測すると報告しています。この文を読むと、ほとんどの人はデータが示すよりもはるかに強いものを想像します。統計的主張と日常語の「予測する」の間のギャップが、心理テストの誤用の大部分が始まる場所です。

関係する数値

性格研究における効果量は、通常相関として報告されます。よく確立された関係のメタ分析値は、通常0.20から0.35の間に位置します。誠実性と職務遂行能力は約0.20から0.25です。仕事の満足度と職務遂行能力は約0.30です。一般的知的能力は、この分野で最も強い単一の予測因子であり、複雑な仕事に対しておおよそ0.50に達します。

相関を二乗すると、説明される分散の割合が得られます。0.25の相関は、人々の間の違いの約6%を説明します。94%は別のものです。能力、機会、訓練、マネジメント、健康、運。

なぜ0.25がそれでも真の知見なのか

集団レベルでは、小さな相関が実質的な集約的効果を生みます。1,000人を選抜する場合、0.25の予測因子は平均的な成果を測定可能かつ繰り返し改善します。保険会社や疫学者は、この規模の効果の上にまるごとの実務を構築しています。

問題は、集約的な利益と個人の予測は異なる量であることです。0.25の相関は、高得点の人々の間では低得点の人々の間よりも多くの人がうまく遂行することを意味します。そして同時に、高得点者の非常に多くがうまく遂行せず、低得点者の非常に多くが優れた成果を上げることも意味します。両方の記述は同じ数値から来ています。

個人のケース

ここが省略される段階です。相関は2つの分布間の関係を記述します。特定の個人についての記述を正当化するものではありません。

誠実性と遂行能力の相関が0.25であれば、ある人の誠実性得点を知ることは、その遂行能力のもっともらしい範囲をわずかにしか狭めません。1人の個人に対する予測区間は、ほぼ全結果範囲を含むほど広いままです。あなたが誠実性の80パーセンタイルにいると伝えられても、特定の仕事でどのように遂行するかについてはほとんど分かりません。

これが、基礎研究が健全であっても、性格得点を主要な選抜フィルターとして使用することが十分に支持されない理由です。研究は、特性が重要であるという主張を支持します。得点が応募者が何をするかを伝えるという主張は支持しません。

さらに2つの注意点

予測と因果は異なります。 この文献のほぼすべては相関的です。誠実性が健康結果を予測するという知見は、誠実性がより良い健康行動を引き起こしていること、第三の要因が両方を引き起こしていること、逆因果と整合的です。縦断的デザインは可能性を狭めますが、それらを閉じることはまれです。

自己報告基準は数値を膨張させます。 予測因子と結果の両方が同じ午後に同じ人物によって自己報告される場合、共通方法分散が相関を押し上げます。客観的結果や他者評定を使用する研究は通常より小さな効果を報告し、それらが重み付けすべきものです。

得点が実際に何に役立つか

予言ではなく記述として読むとき、テスト得点は真に有用です。それは、文書化された結果を持つ特性について参照集団に対してどこに位置するかを伝え、名前を付けることなく気づいていたかもしれないパターンに語彙を与えます。

それは持つ価値があります。予測とは異なるものであり、その区別は正直なレポートがあなたに推測させるのではなく、あなたのために行うべきものです。