크론바흐 알파(Cronbach's alpha)란 무엇인가, 그리고 무엇이 아닌가
심리 검사에서 가장 많이 보고되는 통계량이면서 가장 잘못 이해되는 통계량입니다. 알파 값은 척도가 단일 차원임을 알려주지 않으며, 높은 값은 흔히 장점이 아니라 증상입니다.
크론바흐 알파(Cronbach's alpha)는 내적 일치도의 계수입니다. 즉, 척도상의 문항들이 서로 얼마나 상관되어 있는지를 나타내는 정도입니다. 1951년에 발표된 이 지표는 가장 많이 보고되는 단일 심리측정 통계치이며, 그 편재성은 실제 유용성을 넘어섰습니다.
알파는 0에서 1 사이의 값을 가지며, 두 가지 요인에 의해 결정됩니다. 문항 간 평균 상관과 문항의 개수입니다. 두 번째 의존성이 대부분의 오해를 낳는 원인입니다.
높은 알파가 의미하지 않는 것
척도가 하나의 것을 측정한다는 것을 의미하지 않습니다. 이것이 가장 흔한 오류입니다. 전체적으로 문항 간 상관이 충분히 높다면, 두세 개의 서로 다른 요인을 가진 척도에서도 알파는 높게 나올 수 있습니다. 단일차원성은 요인분석을 통해 입증되어야 하며, 알파로는 이를 입증할 수 없고 원래 그런 목적으로 만들어진 것도 아닙니다.
척도가 타당하다는 것을 의미하지 않습니다. 알파는 문항이 무엇을 측정하는지에 대해 아무것도 말해주지 않습니다. 신발 크기에 관한 스무 개의 질문은 뛰어난 내적 일치도를 보이겠지만, 심리적인 어떤 것을 측정하는 도구로서의 타당도는 전혀 없을 것입니다.
척도가 좋다는 것을 의미하지 않습니다. 알파는 문항 수가 늘어날수록 상승하기 때문에, 평범한 문항으로 구성된 긴 척도가 우수한 문항으로 구성된 짧은 척도보다 더 높은 점수를 받을 수 있습니다. 문항 간 평균 상관이 0.2인 40개 문항 척도는 0.90을 넘어설 수 있습니다.
매우 높은 알파는 종종 경고 신호입니다. 대략 0.95를 넘으면, 문항들은 대체로 거의 같은 말을 바꿔 표현한 것에 불과합니다. 이는 구성개념의 포괄성을 대가로 일치도를 얻는 것입니다. 즉, 척도가 구성개념의 한 좁은 측면만을 매우 정밀하게 측정하고 나머지는 놓치게 됩니다. 이를 감쇠 역설(attenuation paradox)이라고 하며, 이 때문에 일치도가 높을수록 항상 더 좋은 것은 아닙니다.
전제하는 것
알파는 특정한 가정, 즉 타우동등성(tau-equivalence) 아래에서의 신뢰도 하한값입니다. 이는 모든 문항이 기저 특성에 동등하게 기여한다는 가정을 의미합니다. 실제 척도는 이 조건을 거의 만족시키지 못합니다. 문항들은 요인에 대한 부하량이 서로 다르며, 그런 경우 알파는 신뢰도를 과소추정합니다.
맥도널드의 오메가(McDonald's omega)는 동등 기여 가정을 배제하고 실제 요인부하량으로부터 신뢰도를 추정합니다. 방법론 연구자들은 20년 동안 알파보다 오메가를 권장해왔습니다. 하지만 보고 관행은 이를 더디게 따라가고 있는데, 이는 주로 알파가 모든 통계 소프트웨어에서 한 줄로 얻어지는 반면 오메가는 그렇지 않기 때문입니다.
실제로 해석하기
대략적인 관행으로는, 집단을 비교하는 연구에는 0.70 이상이 적절하고, 실무 적용에는 0.80 이상, 점수가 개인의 의사결정에 영향을 미치는 경우에는 0.90 이상이 요구됩니다. 이는 방향을 제시하는 기준일 뿐 절대적인 임계값은 아닙니다. 요구되는 수준은 그 점수가 좌우하는 결정의 중대성에 따라 달라집니다.
더 유용한 정보는 대개 같은 논문의 다른 부분에 있습니다. 문항 간 평균 상관(0.15에서 0.50이 건전한 범위)은 높은 알파가 문항의 질에서 나온 것인지 문항의 양에서 나온 것인지를 알려줍니다. 문항 수는 반대 방향에서 같은 것을 알려줍니다. 검사-재검사 신뢰도는 알파가 구조적으로 알려줄 수 없는 것, 즉 시간이 지나도 같은 사람에게서 점수가 안정적인지를 알려줍니다.
알파만을 보고하는 척도는 신뢰도 지표 가운데 가장 얻기 쉽고, 가장 통과하기 쉬운 것만을 보고한 것입니다.
직접 검사해 보기
측정에 관한 글을 읽는 것과, 자신의 점수가 그 출처, 규준 표본, 한계와 함께 보고되는 것을 직접 확인하는 것은 다른 경험입니다. 무료로 응시할 수 있으며 가입도 필요하지 않습니다.
계속 읽기
- 심리측정학이란 무엇입니까?심리 측정이 좋은지 아닌지를 판단하는 학문 분야이며, 비슷한 질문을 하는 두 검사가 그 결과의 가치에서 크게 차이가 날 수 있는 이유입니다.
- 심리검사에서 신뢰도란 무엇입니까?신뢰도는 측정의 일관성이며, 정확성이 아닙니다. 검사는 신뢰도가 매우 높으면서도 여전히 잘못된 대상을 측정할 수 있습니다. 이것이 신뢰도가 가장 먼저 묻는 질문이지 결코 마지막 질문이 아닌 이유입니다.
- 심리검사에서 타당도란 무엇입니까?타당도는 검사가 지니고 있는 속성이 아닙니다. 특정 목적을 위한 특정 점수의 특정 해석이 정당화될 수 있는지에 관한 논증이며, 새로운 용도마다 다시 구축되어야 합니다.
- 구성 타당도란 무엇입니까?측정에서 가장 어려운 질문입니다. 귀하가 측정하는 대상이 귀하가 정의한 대로 실제로 존재하는지, 그리고 귀하의 도구가 그 대상에 도달하는지, 아니면 그와 유사한 다른 무언가에 도달하는지에 관한 질문입니다.
- 수렴 타당도와 판별 타당도거울처럼 대칭을 이루는 두 가지 요건이 있습니다. 측정치는 그것이 일치해야 하는 것과 일치해야 하며, 그것이 아니라고 주장하는 것과는 구별되어야 합니다. 대부분의 부실한 도구는 두 번째 요건을 충족하지 못합니다.
- 측정표준오차: 귀하의 점수가 어느 정도 오차를 가질 수 있는지모든 점수는 오차 범위를 지니며, 대부분의 심리 검사에서 이 범위는 사람들이 생각하는 것보다 넓습니다. 이 수치는 어떤 차이가 실제이고 어떤 차이가 잡음인지를 알려줍니다.
- 규준 및 백분위: 귀하의 점수를 비교하는 대상원점수는 그 자체로는 해석할 수 없습니다. 오직 준거 집단과 비교할 때에만 의미를 갖게 되며, 어떤 집단이 사용되었는지는 어떤 검사에서든 가장 중요하면서도 가장 잘 알려지지 않은 사실 중 하나입니다.
- 심리검사가 실제로 만들어지는 과정구성개념 정의부터 발표된 규준까지, 이 과정은 여러 해가 걸리며 그 안에 투입된 것의 대부분을 버립니다. 이 단계들을 알면 어떤 온라인 간이 퀴즈가 어떤 단계를 건너뛰었는지가 분명해집니다.
- 검사가 '타당화되었다'고 불리는 것은 무엇을 의미합니까?이 단어는 규제되지 않으며, 아무런 작업도 하지 않은 제품들이 자유롭게 사용합니다. 이 용어가 실제로 의미를 가질 때 무엇을 뜻하는지, 그리고 두 경우를 구분하는 네 가지 질문을 소개합니다.
- 인터넷상의 대부분의 성격 검사가 신뢰할 수 없는 이유이는 그들이 부정직해서가 아니라, 측정을 신뢰할 수 있게 만드는 단계들이 보이지 않고 비용이 많이 들며 건너뛰기 쉽기 때문입니다. 그리고 그 단계를 건너뛰어도 결과가 보이는 방식은 전혀 달라지지 않습니다.
- 자기보고가 측정할 수 있는 것과 측정할 수 없는 것설문지는 귀하에게 자기 자신을 관찰하는 역할을 요구하는데, 이 방식은 어떤 대상에는 더 잘 작동하고 어떤 대상에는 그렇지 않습니다. 이 방법이 어디에서 강력하고 어디에서 실패하는지 아는 것은 결과를 읽는 방식을 바꿉니다.
- 검사가 무엇인가를 예측한다는 것의 의미0.30의 상관관계는 성격 연구에서는 강력한 결과이지만, 한 개인에 대한 의사결정의 근거로는 약합니다. 두 진술 모두 참이며, 이 둘 사이의 간극이 검사 결과 오용의 대부분을 유발합니다.
- 선별검사는 진단이 아닙니다선별용 설문지는 가능한 많은 사례를 포착하도록 설계되며, 그 대가로 높은 위양성률을 받아들입니다. 선별 점수를 진단으로 해석하는 것은 그것이 설계된 목적을 정반대로 뒤집는 일입니다.