[임상심리학] 면접의 신뢰도와 타당도

 

 

 

면접의 신뢰도와 타당도

 

목표

1. 면접에서 신뢰도를 설명할 수 있다.

2. 면접에서 타당도를 설명할 수 있다.

 

내용

1. 면접에서의 신뢰도

2. 면접에서의 타당도

 

1. 면접에서의 신뢰도

1) 평가자 간 신뢰도

2명 이상의 평가자가 같은 내담자를 독립적으로 평가했을 때의 동의 수준

카파 계수 (Kappa Coefficient) § 동의 수준을 하향 조정

평가자 간 신뢰도를 나타내는 통계 지수

2) 검사-재검사 신뢰도(test-retest reliability)

동일한 시험을 동일한 대상에게 일정한 시간 간격을 두고 두 번 실시했을 때, 두 번 실시한 시험　점수가 일치되는 정도를 의미

동일한 시험 또는 검사를 두 번 실시한 점수가 일치되는 정도를 뜻하기 때문에 흔히 안정성　계수(coefficient of stability)라고 부르기도 함

3) 동형 검사 신뢰도(equivalent form reliability)

검사-재검사의 신뢰도의 한계를 해결하기 위한 방법은 그 검사의 동형을 이용하는 것임

즉, 동일한 사람에게 첫 번째 시행한 종류의 검사와 동등한 유형의 검사로 두 번째 검사를 시행해서 그　두 검사의 점수들 간의 상관 정도를 알아보는 것임

4) 반분 신뢰도(split-half reliability)

반분신뢰도는 한 검사 또는 시험을 한 개의 집단에 실시한 다음 그 검사의 문항을 동형이 되도록 두개의 검사로 나눈 다음 두 부분에서 얻은 점수들이 어느 정도 일치하는가를 상관 계수를 통해 추정하는　방법임　

가장 일반적으로 사용되고 있는 방법에는 전․후절반법, 기․우절반법, 그리고 짝진 임의 배치법이 있음

5) 문항 내적 합치도(inter-item consistency)

문항 내적 합치도는 한 검사 내(within test)에 있는 문항 하나하나를 각각 독립된 별개의 검사로　간주하여 문항 간 일관성 또는 합치성을 신뢰도로 규정한 것임

한 검사에 포함된 문항 간 반응의 일관성은 문항의 동질성 여부에 의해 결정됨

그러므로 문항내적 합치도를 흔히 동질성 계수(coefficient of homogeneity)라고 하기도 함

 

2. 면접에서의 타당도

1) 타당도의 종류

(1) 내용 타당도(Content related validity)

한 심리 검사를 구성하고 있는 검사 문항들이 그 검사가 측정하고자 하는 내용을 측정하기 위해　만들어질 수 있는 문항 모집단(item universe)을 대표할 수 있도록 문항들이 표집되어 있는 정도임

예) 불안이나 공격성과 같은 심리적 특성

가능한 문항들의 모집단을 얻기가 실제로 불가능함

문항마다 주어진 심리적 특성을 측정할 수 있는 측정력이 다를 수 있기 때문에 여러 문항 중 그　특성을 가장 잘 반영하는 문항을 검사개발자의 주관적이고 의도적인 판단을 통해 선택할 수밖에 없음

검사개발자의 주관적 판단에 따라 선택된 문항이 다른 전문가가 적합한 것으로 판단할 경우 객관적　절차에 따라 주어진 검사가 내용타당도의 증거가 있다고 봄

동일한 문항에 대한 전문가들의 판단이 다를 수 있음. 이럴 경우 전문가들의 판단정도를 합리적으로　종합할 수 있어야 함

이를 위해 검사개발자는 주어진 심리적 특성의 각 영역을 구체적으로 설명해 주는 설명문과 함께 각　영역별로 개발된 문항들을 전문가들에게 제시한 다음, 각 문항이 제시된 영역에 대한 설명과　부합되는 정도를 판단토록 하여 검사의 내용타당도에 대한 증거를 확인할 수 있음

(2) 안면 타당도

검사 사용자나 수검자가 검사문항을 보고 그 문항이 무엇을 재고 있는 것 같다는 주관적인 관점을　중심으로 기술한 것이고, 검사자나 수검자의 수준이나 관점에서 검사내용을 외형적으로 보고 말하는　타당도라고 해서 외형에 의한 타당도라고 말하기도 함

검사의 구성내용이 무엇을 어느 정도 재고 있는지를 말한다는 점에서 내용타당도와 거의 같은 의미를　갖고 있음

내용타당도는 전문가의 입장에서 그 검사와 관련된 정의, 전제, 가설 등을 기초로 하여 검사내용의　타당성을 논리적으로 설명하고 있다는 점에서 안면타당도와는 다름

일반인의 입장에서 보면 검사의 안면타당도가 높다는 것은 대단히 중요할 수 있지만, 수검자의　입장에서 보면 검사에 대해 불만을 가지고 의도적으로 반응을 왜곡시켜 검사의 타당도를 위협할 수도　있음

안면타당도가 높아서 오히려 성격특성을 측정하는 검사의 타당도를 위협하는 요인이 될 수 있음

(3) 준거 관련 타당도(criterion-related validity)

심리 검사 개발의 주요 목적 중의 하나는 심리 검사를 실시하여 얻어진 정보를 이용하여 한 개인의

다른 어떤 특정한 행동을 예언하는 정도를 말함

① 예언 타당도(predictive validity) 얻어진 점수로부터 피험자의 현재 행동이 아닌 장차 어느 시점에서 관찰될 수 있는 행동을 예측하기위한 목적으로 개발된 심리 검사를 사용하여 얻어진 점수로부터 장차 관찰될 수 있는 어떤 행동을　예측할 수 있는 정도를 말함　

② 공인 타당도(concurrent validity) 심리 검사 득점과 외적 준거 측정치간의 상관 계수를 공인 타당도 계수로 하고 있다는 점에서 공인 타당도는 예언 타당도와 유사함 그러나 예언 타당도는 심리 검사 득점을 통하여 장차 어떤 행동의 수준을 예언하려는 반면에 공인 타당도는 예언에는 관심이 없고 어떤 심리 검사 점수가 '현재' 시점에서 다른 검사 점수와 어느 정도 일치되느냐를 따짐

(4) 구인 타당도(construct validity)

구인(構因: construct)이란 지능, 동기, 태도, 학력 등과 같이 직접 관찰하거나 측정할 수 없는 특성 또는 현상을 이론적으로 개념화한 일종의 구성 개념

구인 타당도란 특정 심리 검사가 조작적으로 정의된 구인을 실제로 측정하고 있는지를 검증

 

정리

1. 일반적으로 사용되는 심리학적 평가 (면접포함)에 대한 신뢰도는 평가자간 신뢰도와 검사-재검사, 신뢰도, 동형 검사 신뢰도, 반분신뢰도, 문항 내적 합치도가 있다.

2. 면접에서의 타당도는 내용 타당도, 안면 타당도, 준거 관련 타당도, 구인 타당도로 나눌 수 있다.

3. 면접 점수의 신뢰도와 타당도를 높이기 위해서는 구조화된 절차를 사용하고 면접 기술을 쌓아야 한다.

 

참고

- 임상심리학 (8판). 권정혜 등 역. Cengage Learning. 2014

- 임상심리학 입문,린다 A. 헤이든, 마잉클 허슨, 학지사, 1995

- Clinical Psychology, 8th Edition. Trull and Prinstein. 2013