판별타당도

지난 시간에는 타당도와 신뢰도에 대해서 알아봤습니다. 이번 시간에는 판별타당도에 대해서 알아보도록 하겠습니다.

판별타당도는 측정 도구가 서로 다른 개념을 얼마나 정확하게 구분할 수 있는지를 나타내는 지표입니다. 쉽게 말해, 같은 도구로 측정해도 서로 다른 개념은 서로 다른 결과를 나타내야 한다는 것을 의미합니다. 예를 들어 우리가 독립변수 4개(A, B, C, D)와 종속변수가 1개인 연구모형을 가설을 세우고 연구모형을 만들었습니다. 그런데 측정문항(설문)의 내용이 잘못되었거나 설문자가 대충 답변을 하였을 경우 독립변수 A와 B는 서로 다르지만 거의 같게 나오게 된다면 도구(통계 프로그램)는 독립변수 A와 B를 같은 변수로 인식을 할 수도 있습니다. 이럴 때 판별타당도가 낮다고 합니다. 즉, 두 개념의 측정 결과가 매우 유사하거나 동일하다면, 해당 도구는 두 개념을 제대로 구분하지 못한다고 판단할 수 있습니다. 즉, 판별타당도가 낮다고 할 수 있습니다.

1. 판별타당도가 높다는 의미

연구자가 사용하는 측정 도구가 정말로 측정하려는 개념을 측정하고 있고, 연구 결과의 타당성을 높여줍니다. 그리고 연구 결과를 다른 연구 결과와 비교하기 쉽게 해줍니다.

 

2. 판별타당도를 검증하는 방법

판별타당도를 검증하는 방법은 여러 가지가 있지만, 가장 일반적으로 사용되는 방법은 다음과 같습니다.

1) 상관관계 분석

서로 다른 개념을 측정하는 두 도구의 상관관계를 계산하여 상관계수가 얼마나 낮은지를 확인합니다. 상관관계수가 낮을수록 판별타당도가 높다고 판단할 수 있습니다.

2) AVE(Average Variance Extracted) 계산

각 개념의 측정 지표들의 분산을 평균하여 계산한 값을 AVE라고 합니다. AVE 값이 0.5 이상이면 판별타당도가 높다고 판단할 수 있습니다.

3) 구조방정식모형 분석

구조방정식모형 분석을 통해 측정 지표들과 개념들 간의 관계를 확인하고, 판별타당도가 확보되었는지를 평가합니다.

판별타당도가 낮은 경우

 

3. 판별타당도가 낮은 경우 조치 방법

측정 도구를 수정하거나 변경합니다.
연구 설계를 수정합니다.
분석 방법을 변경합니다.

 

4. 판별타당도와 신뢰도의 차이

판별타당도는 측정 도구가 서로 다른 개념을 얼마나 정확하게 구분할 수 있는지를 나타내는 지표입니다. 반면에 신뢰도는 측정 도구가 얼마나 일관되게 측정할 수 있는지를 나타내는 지표입니다. 즉, 판별타당도는 측정의 정확성을, 신뢰도는 측정의 일관성을 나타냅니다. 따라서 판별타당도가 높더라도 신뢰도가 낮다면, 측정 결과가 일관되지 않아 신뢰할 수 없다는 것을 의미합니다.