20. 검사 도구에 대한 설명으로 옳은 것만을 모두 고르면?
| ㄱ. 반분검사 신뢰도는 두 부분 검사로 양분하는 방법에 따라 신뢰도가 다르게 추정된다는 단점이 있다. ㄴ. 내용 타당도는 내용 전문가에게 측정하려는 속성을 제대로 측정하였는지 판단하게 하여 검증한다. ㄷ. 각각의 문항을 하나의 검사로 간주하여 문항 간 측정의 일치성을 추정하는 방법을 검사－재검사 신뢰도라고 한다. ㄹ. 동형검사 신뢰도는 두 집단이 하나의 검사를 치르고 점수 간 상관계수를 통해 검사의 신뢰도를 추정한다. |
① ㄱ, ㄴ ② ㄱ, ㄷ ③ ㄴ, ㄹ ④ ㄷ, ㄹ
정답① ㄱ, ㄴ
※신뢰도※
개념
1) 어제 측정했을 때의 값과 오늘 측정했을 때의 값이 다르면 신뢰도가 떨어진다.
2) 신뢰도는 타당도의 필요조건이다.
연구자가 학습 성취도를 측정하기 위한 새로운 시험지를 개발한다고 가정하며 이 시험지가 학습자의 실제 학습 수준을 정확하게 반영하기 위해서는 높은 타당도를 가져야 한다. 그러나 이 측정 도구의 타당성을 평가하기 위해서는 먼저 그 신뢰도를 확인해야 한다.
(1) 신뢰도 확인:
새로운 시험지를 여러 명의 학습자에게 여러 번 반복하여 시행하고, 그 결과가 일관되게 나타나는지 확인한다. 만약 시험지의 문항들이 학습자들 사이에서 일관된 방식으로 측정되고, 시간이 지나도 결과가 안정적이라면, 이는 시험지의 신뢰도가 높다는 것을 시사한다.
(2) 타당도 평가:
이제 시험지의 신뢰도가 확인되었으므로, 이 시험지가 학습자의 실제 학습 수준을 얼마나 잘 반영하는지를 평가할 차례이다. 이를 위해 다른 학습 측정 도구나 외부 지표와의 상관 관계를 조사하거나, 이 시험지가 다른 학습 환경에서도 유사한 결과를 보이는지를 확인할 수 있다.
이처럼, 측정 도구의 타당성을 평가하려면 먼저 그 신뢰도를 확인해야 한다. 따라서 "신뢰도는 타당도의 필요조건"이라는 주장은 이와 같은 맥락에서 설명될 수 있다.
2. 신뢰도 종류
1) 재검사 신뢰도(=안정성 계수)
(1) 정의
한 검사를 같은 집단에 일정한 시간적 간격을 두고 두 번 실시해서 전후 두 검사 결과의 상관계수를 산출하는 방법
(2) 특징
①신뢰도는 측정의 정확성, 안정성, 일관성을 나타내는 것으로 어떻게(How)재었은가에 대 한 문제이다. ‘무엇’(what)이라는 개념과 관련이 있는 것은 타당도이다.
②검사점수의 변산이 크면 신뢰도는 낮은 것이고, 검사점수의 변산이 작으면 신뢰도는 높 다.
③신뢰도는 문항의 표본수, 채점의 일관성, 문항의 동질성 등에 영향을 받으며, 타당도를 확보하기 위한 필요조건이다.
④문항의 길이가 짧은 것보다 긴 것이 신뢰도가 높다.
⑤타당도가 없어도 신뢰도는 정확할 수 있으나 신뢰도 없이 타당도란 있을 수 없다.
2) 동형검사 신뢰도(=동형성 계수)
(1) 정의
검사의 문항이 동질적인 내용으로 구성된 두 개의 동형검사를 제작하여 그것을 같은 대상 에게 실시하여 두 동형검사에서 얻은 점수 사이의 상관을 산출하는 방법
(2) 특징
기억효과, 연습효과로 인해 오차가 발생. 따라서 동형검사 한 것처럼 하는 방법이 반분신 뢰도
3) 반분 신뢰도
(1) 정의
한 검사를 두 부분으로, 그 두 부분을 따로 채점해서 그 점수간의 상관계수를 산출하는 방법
(2) 특징
재검사 신뢰도가 부적당하거나 동형검사를 제작하기 난해할 때 사용할 수 있는 편리한 방법
4) 문항내적 합치도
(1) 정의
검사 속의 각각의 문항을 독립한 한 개의 검사 단위로 생각하고 합치성, 동질성, 일치성을 종합하려는 방법
(2) 종류
①쿠더-리차드슨 공식
아주 어려운 문항이나 아주 쉬운 문항이 별로 없을 때 적절
②Hoyt신뢰도, 크론바(Cronbach)의 α계수
변량분석(분산분석)에 기초를 두고 개발된 방법으로 한 검사 속의 문항들 사이의 신뢰도 계수는 급내 상관계수로 나타낼 수 있음(부분점수 경우 사용가능).