타당도(Validity)

타당도(Validity)

 

1. 개요

(1) 개념

① 타당도는 그 검사가 측정하고자 의도하는 속성을 얼마나 정확하게 측정하고 있는가를 말한다. 즉, 검사가 측정하고자 하는 심리적 구인(구성개념)을 정확하게 측정하는 것이 타당도의 개념이다.

② 검사의 타당도는 검사 점수를 이용하여 그 검사가 측정하려는 속성에 관해 추론하는 것이 타당한 일인가를 결정해 주는 것이다.

 

(2) 측정의 신뢰도와 타당도

① 타당도는 신뢰도와 밀접한 관계가 있다. 어떤 검사의 신뢰도 크기는 이론적으로 그 검사의 타당도의 최댓값이다.

② 타당도는 신뢰도의 충분조건인 반면, 신뢰도는 타당도의 필요조건에 해당한다. 즉 신뢰도가 높다고 하여 반드시 타당도가 높은 것은 아니며, 타당도가 낮다고 하여 반드시 신뢰도가 낮은 것은 아니다. 따라서 어떤 검사의 신뢰도 계수만으로 해당 검사의 타당도 계수를 알 수는 없다.

③ 만약 어떤 직업상담사가 내담자의 지능을 알아보기 위해 정확도가 보장된 체중계로 내담자의 몸무게를 측정했다면, 이는 타당도는 낮지만 신뢰도는 높은 측정에 해당한다.

 

2. 내용타당도(Content Validity)

(1) 의의 및 특징

① 본질적으로 해당 분야 전문가의 판단에 의존한다.

② 논리적 사고에 입각한 논리적인 분석과정으로 판단하는 주관적인 타당도로서, 객관적인 자료에 근거하지 않으므로 타당도 계수를 산출하기 어렵다.

③ 흔히 성취도 검사의 타당도를 평가하는 방법으로 많이 사용된다.

④ 검사의 문항들이 그 검사가 측정하고자 하는 내용영역을 얼마나 잘 반영하고 있는지를 나타낸다. 즉, 내용타당도는 내용영역을 얼마나 정확하고 자세하게 기술하는가에 달려 있다.

⑤ 만약 고용주가 직무수행에 필요한 지식, 기술, 능력 등을 평가하는 검사들을 개발한다고 가정할 때, 이러한 검사의 내용이 실제 직무와 얼마나 관련되어 있는지를 살펴보기 위해서는 내용타당도를 살펴보아야한다.

 

(2) 안면타당도 또는 액면타당도(Face Validity)와의 차이점

① 안면타당도는 내용타당도와 마찬가지로 측정항목이 연구자가 의도한 내용대로 실제로 측정하고 있는가하는 것으로서, 내용타당도가 전문가의 평가 및 판단에 근거한 반면, 안면타당도는 전문가가 아닌 일반인의 일반적인 상식에 준하여 분석한다.

② 실제로 무엇을 재는가의 문제가 아니라 검사가 잰다고 말하는 것을 재는 것처럼 보이는가의 문제이다. 즉, 검사를 받는 사람들에게 그 검사가 타당한 것처럼 보이는가를 뜻한다.

③ 만약 심리검사를 받은 수검자들이 자신들이 받은 심리검사가 측정하고자 하는 것을 제대로 측정하는 것이라고 판단한다면, 이 검사는 안면타당도가 높다고 할 수 있다.

 

COMMENT

안면타당도는 "타당한 것처럼 보이는가'와 관련된 것일 뿐이므로, 일부에서는 이를 진정한 의미의 타당도로 인정하지 않는 경우도 있습니다.

 

3. 준거타당도(Criterion Validity)

(1) 의의 및 특징

① '기준타당도' 또는 '준거관련 타당도(Criterion-related Validity)'라고도 하며, 경험적 근거에 의해 타당도를 확인하는 방법이다.

② 일반적으로 이미 전문가가 만들어놓은 신뢰도와 타당도가 검증된 측정도구에 의한 측정결과를 준거로 활용한다.

③  어떤 심리검사가 특정 준거와 어느 정도 연관성이 있는지를 나타내는 것이다. 즉, 검사와 준거 간의 상관관계를 분석해서 검사의 타당도를 평가하는 방법이다.

④ 준거타당도의 분석방법으로 기대표(Expectancy Table)가 활용된다. 기대표는 세로에 연구도구 점수의 범주를, 가로에 준거 점수의 범주를 분류한 이원분류표이다.

 

(2) 준거타당도의 분류

준거타당도는 현재에 초점을 맞춘 '동시타당도 또는 공인타당도(Concurrent Validity)'와 미래에 초점을 맞춘 ‘예언타당도 또는 예측타당도(Predictive Validity)'로 구분할 수 있다.

동시타당도(공인타당도)	· 새로운 검사를 제작했을 때 새로 제작한 검사의 타당도를 위해 기존에 타당도를 보장받고 있는 검사와의유사성 혹은 연관성에 의해 타당도를 검증하는 방법이다. 즉, 동시타당도는 동일 시점에서 새로운 검사와준거를 동시에 측정해서 두 결과 간의 상관계수를 추정한다.
예언타당도(예측타당도)	· 어떠한 행위가 일어날 것이라고 예측한 것과 실제 대상자 또는 집단이 나타낸 행위 간의 관계를 측정하는 것이다. 즉, 예언타당도는 검사 점수를 가지고 다른 준거 점수들을 어느 정도 예측할 수 있는가 하는 정도이다. · 특히 타당도 중에서 수치(타당도 계수)로 나타낼 수 있다. · 한 검사에서의 점수와 나중에 그 사람이 실제로 직무를 수행할 때의 수행수준 간 관련성이 높을 때 그 검사는 예언타당도가 높다.

 

4. 구성타당도(Construct Validity)

(1) 의의 및 특징

① '구인타당도' 또는 '개념타당도'라고도 하며, 검사가 해당 이론적 개념의 구성인자들을 제대로 측정하고 있는 정도를 나타낸다.

② 심리검사는 추상적 구성개념들을 실제적인 수준에서 관찰 가능한 행동 표본들로 구성한 것이다. 따라서 심리검사가 포함하고 있는 행동 표본들이 실제 그 검사로 측정하고자 하는 구성개념을 잘 반영하는가 하는 것이 구성타당도이다.

③ 객관적인 관찰이 어려운 추상적인 개념, 즉 적성, 지능, 흥미, 직무만족, 동기, 내향성과 같은 성격특성 등을 얼마나 잘 측정하는지를 나타낸다.

④ 응답 자료가 계량적 방법에 의해 검증되므로, 과학적이고 객관적이라 할 수 있다.

 

(2) 구성타당도의 분석(검증) 방법

구성타당도를 분석하는 방법으로 '수렴타당도 또는 집중타당도(Convergent Validity)', '변별타당도 또는 판별타당도(Discriminant Validity)’, ‘요인분석(Factor Analysis)' 등이 있다.

수렴타당도 (집중타당도)	· 검사 결과가 이론적으로 해당 속성과 관련 있는 변수들과 어느 정도 높은 상관관계를 가지고 있는지를 측정한다. 따라서 상관계수가 높을수록 타당도가 높다.
변별타당도 (판별타당도)	· 검사 결과가 이론적으로 해당 속성과 관련 없는 변수들과 어느 정도 낮은 상관관계를 가지고 있는지를 측정한다. 따라서 상관계수가 낮을수록 타당도가 높다.
요인분석	· 검사를 구성하는 문항들의 상관관계를 분석하여 상관이 높은 문항들을 묶어주는 통계적 방법이다.

 

(3) 다속성. 다측정방법(다특성. 다방법) 또는 중다특성 · 중다방법 행렬표(MTMM ; Multitrait-Multimethod Matrix)

① 한 번에 수렴타당도와 변별타당도를 동시에 확인할 수 있는 방법이다.

② 둘 이상의 속성에 대해 둘 이상의 방법으로 측정하여 그 결과를 분석하는 방법으로서, 동일한 속성에 대해서로 다른 방법으로 측정하여 그 결과가 어느 정도 상관관계를 나타내는지 확인하는 것이다.

③ 다속성 · 다측정방법 행렬표로 확인하는 절차는 다음과 같다.

제1단계	동일한 속성들을 이질적인 방법으로 측정한 결과 해당 점수들 간의 상관계수가 높은지 확인한다.
제2단계	앞선 1단계에서의 상관계수가 이질적인 속성들을 동일한 방법으로 측정한 결과 나타난 점수들 간의 상관계수와 비교하여 보다 높은 수준을 나타내는지 확인한다.
제3단계	앞선 2단계에서의 상관계수가 이질적인 속성들을 이질적인 방법으로 측정한 결과 나타난 점수들 간의 상관계수와 비교하여 보다 월등히 높은 수준을 나타내는지 확인한다.

 

5. 직업상담에서의 준거타당도

(1) 직업상담에서 준거타당도가 중요한 이유

① 검사도구가 미래의 행위를 예언하므로 선발이나 배치, 훈련 등의 인사관리에 관한 의사결정의 설득력을 제공한다.

② 경험적 근거에 따른 비교적 명확한 준거를 토대로 내담자의 직업선택을 위한 효과적인 정보를 제공한다.

 

(2) 직업상담이나 산업장면에서 준거타당도가 낮은 검사를 사용해서는 안 되는 이유

① 선발이나 평가과정의 효율성을 떨어뜨린다.

검사가 유용한 것이기 위해서는 그 검사를 사용하지 않았을 때에 비해 직무성과나 생산성이 더 높을 가능성이 있는 사람을 선발할 수 있어야 하는데, 준거타당도가 낮다면 이를 기대할 수 없다.

② 인사관리에 관한 의사결정의 공정성을 저해한다.

준거타당도는 선발이나 배치, 훈련 등 인사관리에 관한 의사결정이 얼마나 공정하게 이루어졌는가를 결정하는데, 준거타당도가 낮다면 공정성을 기대하기 어려우므로 부적절한 의사결정에 의해 차별이 발생할 수 있다.