자기보고가 측정할 수 있는 것과 측정할 수 없는 것
설문지는 귀하에게 자기 자신을 관찰하는 역할을 요구하는데, 이 방식은 어떤 대상에는 더 잘 작동하고 어떤 대상에는 그렇지 않습니다. 이 방법이 어디에서 강력하고 어디에서 실패하는지 아는 것은 결과를 읽는 방식을 바꿉니다.
널리 사용되는 성격 및 웰빙 검사 도구는 거의 모두 자기보고 설문지입니다. 진술문을 읽고, 그것이 자신을 얼마나 잘 설명하는지 평가하며, 그 평가치들을 합산하는 방식입니다. 이 방식은 저렴하고 빠르며 확장성이 있고 실질적인 장점도 있지만, 자신의 결과를 읽기 전에 알아두어야 할 실패 양상도 존재합니다.
잘 작동하는 경우
타인이 관찰할 수 없는 내적 상태. 삶의 만족도, 지각된 스트레스, 삶의 의미, 느껴지는 불안 등이 그러합니다. 이러한 것들에 대해서는 본인이 단지 편리한 정보원인 것이 아니라 유일하게 타당한 정보원입니다. 관찰자가 귀하의 주관적 웰빙을 평가한다면 그것은 추측일 뿐입니다.
시간에 걸쳐 집계된 전형적 행동. 사람들은 매번의 개별 사례를 예측하는 데는 서툴러도, 자신이 평소에 무엇을 하는지 보고하는 데는 상당히 능숙합니다. 특성 측정치는 여러 경우에 걸쳐 평균을 내기 때문에 효과가 있습니다.
그 자체로 관심의 대상이 되는 자기지각. 자신이 얼마나 유능하다고 믿는지는, 실제로 얼마나 유능한지와 별개로 무엇을 시도할지를 결정짓습니다. 자기효능감이 정당한 구성개념인 이유는 바로 그 믿음 자체가 결과를 만들어내기 때문입니다.
실패하는 경우
사회적으로 바람직하게 응답하는 경향. 사람들은 실제보다 더 성실하고 더 공감적이며 덜 적대적으로 자신을 보고하며, 그 영향은 이해관계가 클수록 커집니다. 이해관계가 낮은 자기이해 맥락에서는 왜곡이 완만하지만, 채용 상황에서는 심각합니다. 대부분의 성격 문항은 문구가 투명해 쉽게 조작될 수 있고, 조작하려는 동기가 가장 큰 지원자가 바로 고용주가 가장 파악하고 싶어 하는 사람인 경우가 많습니다.
제한된 자기통찰. 자기보고는 그 사람을 잘 아는 정보제공자의 보고와 중간 정도로만 상관을 보이며, 그 격차는 예측 가능한 지점에서 가장 크게 나타납니다. 즉 평가적 성격이 강한 특성일수록, 그리고 자기상이 가장 부정확한 사람일수록 격차가 큽니다. 자신의 부주의함을 자각하지 못하는 사람은 그것을 제대로 보고할 위치에 있지 않습니다.
능력과 신념의 차이. 자기보고는 능력을 측정할 수 없습니다. 자기보고식 감성지능은 자신이 얼마나 감성적으로 유능하다고 믿는지를 측정하며, 이는 감성적 판단을 요구하는 과업에서의 실제 수행과는 중간 정도의 상관밖에 보이지 않습니다. 둘 다 실재하는 구성개념이지만 같은 것이 아니며, 이 둘을 혼동하는 것은 상업용 검사 시장에서 가장 흔한 오류 중 하나입니다.
참조집단 효과. "나는 열심히 일한다"는 문항은 사람마다 문화마다 다른 암묵적 비교집단을 기준으로 평가됩니다. 이 때문에 원점수 형태의 자기보고 평균을 문화 간에 비교하는 것은 놓치기 쉽고 교정하기도 어려운 방식으로 신뢰할 수 없게 됩니다.
응답 시점의 기분. 현재의 정서 상태는 회고적 판단에 체계적으로 색을 입힙니다. 안정적이어야 할 구성개념에 대한 단일 시점의 점수는 특성이라는 틀이 암시하는 것보다 더 많은 상태 변동성을 담고 있습니다.
응답 양식. 내용과 무관하게 동의하는 경향인 순응 반응과 극단적 응답 경향은 개인 간, 문화 간에 차이가 있습니다. 잘 설계된 척도는 역방향 문항을 사용해 이를 완화하지만, 이는 그 자체로 인공적 산물을 낳습니다. 즉 문구가 혼합된 척도는 내용이 아닌 문구 자체를 반영하는 허구적인 두 번째 요인을 빈번하게 만들어냅니다.
이를 감안하여 자신의 결과 읽는 법
자기보고 점수는 귀하가 자신을 어떻게 보는지에 대한 잘 구조화된 설명으로 받아들이십시오. 이는 진정으로 유익한 정보이지만, 귀하가 실제로 어떠한가에 대한 설명과는 다릅니다.
이 둘 사이의 간극이 종종 가장 흥미로운 부분입니다. 어떤 점수가 귀하를 놀라게 한다면, 곱씹어볼 만한 질문은 검사가 틀렸는지가 아니라, 두 가지 해석, 즉 귀하 자신의 해석과 검사 도구의 해석 중 어느 쪽을 주변 사람들이 더 알아볼 것인가입니다.
이것이 또한 설문지가 제공할 수 있는 것의 정직한 한계이며, 단일 점수를 판정이 아니라 하나의 정보로 취급해야 할 좋은 이유입니다.
직접 검사해 보기
측정에 관한 글을 읽는 것과, 자신의 점수가 그 출처, 규준 표본, 한계와 함께 보고되는 것을 직접 확인하는 것은 다른 경험입니다. 무료로 응시할 수 있으며 가입도 필요하지 않습니다.
계속 읽기
- 심리측정학이란 무엇입니까?심리 측정이 좋은지 아닌지를 판단하는 학문 분야이며, 비슷한 질문을 하는 두 검사가 그 결과의 가치에서 크게 차이가 날 수 있는 이유입니다.
- 심리검사에서 신뢰도란 무엇입니까?신뢰도는 측정의 일관성이며, 정확성이 아닙니다. 검사는 신뢰도가 매우 높으면서도 여전히 잘못된 대상을 측정할 수 있습니다. 이것이 신뢰도가 가장 먼저 묻는 질문이지 결코 마지막 질문이 아닌 이유입니다.
- 심리검사에서 타당도란 무엇입니까?타당도는 검사가 지니고 있는 속성이 아닙니다. 특정 목적을 위한 특정 점수의 특정 해석이 정당화될 수 있는지에 관한 논증이며, 새로운 용도마다 다시 구축되어야 합니다.
- 구성 타당도란 무엇입니까?측정에서 가장 어려운 질문입니다. 귀하가 측정하는 대상이 귀하가 정의한 대로 실제로 존재하는지, 그리고 귀하의 도구가 그 대상에 도달하는지, 아니면 그와 유사한 다른 무언가에 도달하는지에 관한 질문입니다.
- 수렴 타당도와 판별 타당도거울처럼 대칭을 이루는 두 가지 요건이 있습니다. 측정치는 그것이 일치해야 하는 것과 일치해야 하며, 그것이 아니라고 주장하는 것과는 구별되어야 합니다. 대부분의 부실한 도구는 두 번째 요건을 충족하지 못합니다.
- 크론바흐 알파(Cronbach's alpha)란 무엇인가, 그리고 무엇이 아닌가심리 검사에서 가장 많이 보고되는 통계량이면서 가장 잘못 이해되는 통계량입니다. 알파 값은 척도가 단일 차원임을 알려주지 않으며, 높은 값은 흔히 장점이 아니라 증상입니다.
- 측정표준오차: 귀하의 점수가 어느 정도 오차를 가질 수 있는지모든 점수는 오차 범위를 지니며, 대부분의 심리 검사에서 이 범위는 사람들이 생각하는 것보다 넓습니다. 이 수치는 어떤 차이가 실제이고 어떤 차이가 잡음인지를 알려줍니다.
- 규준 및 백분위: 귀하의 점수를 비교하는 대상원점수는 그 자체로는 해석할 수 없습니다. 오직 준거 집단과 비교할 때에만 의미를 갖게 되며, 어떤 집단이 사용되었는지는 어떤 검사에서든 가장 중요하면서도 가장 잘 알려지지 않은 사실 중 하나입니다.
- 심리검사가 실제로 만들어지는 과정구성개념 정의부터 발표된 규준까지, 이 과정은 여러 해가 걸리며 그 안에 투입된 것의 대부분을 버립니다. 이 단계들을 알면 어떤 온라인 간이 퀴즈가 어떤 단계를 건너뛰었는지가 분명해집니다.
- 검사가 '타당화되었다'고 불리는 것은 무엇을 의미합니까?이 단어는 규제되지 않으며, 아무런 작업도 하지 않은 제품들이 자유롭게 사용합니다. 이 용어가 실제로 의미를 가질 때 무엇을 뜻하는지, 그리고 두 경우를 구분하는 네 가지 질문을 소개합니다.
- 인터넷상의 대부분의 성격 검사가 신뢰할 수 없는 이유이는 그들이 부정직해서가 아니라, 측정을 신뢰할 수 있게 만드는 단계들이 보이지 않고 비용이 많이 들며 건너뛰기 쉽기 때문입니다. 그리고 그 단계를 건너뛰어도 결과가 보이는 방식은 전혀 달라지지 않습니다.
- 검사가 무엇인가를 예측한다는 것의 의미0.30의 상관관계는 성격 연구에서는 강력한 결과이지만, 한 개인에 대한 의사결정의 근거로는 약합니다. 두 진술 모두 참이며, 이 둘 사이의 간극이 검사 결과 오용의 대부분을 유발합니다.
- 선별검사는 진단이 아닙니다선별용 설문지는 가능한 많은 사례를 포착하도록 설계되며, 그 대가로 높은 위양성률을 받아들입니다. 선별 점수를 진단으로 해석하는 것은 그것이 설계된 목적을 정반대로 뒤집는 일입니다.