평가도구와 문항의 양호도,표준화 검사

1. 평가도구의 양호도

1) 타당도

타당도란 측정하고자 하는 것을 측정하고 있는가의 정도를 말하는 것이다. 타당도는 검사의 가장 중요한 양 호도에 관한 측정치이고 한 검사가 검사목적을 성취할 수 있는 정도를 의미한다.
- 내용타당도
- 예언 타당도
- 공인 타당도
- 구인 타당도

2) 신뢰도

평가도구의 적절성을 확인하는 두 번째 개념은 신뢰도이다. 타당도는 측정하고자 하는 것을 어느 정도로 측정하고 있는가의 문제인 반면에 신뢰도란 오차 없이 정확하게 측정하는 정도를 의미한다. 즉 같은 평가도구로 여러 번 측정하였을 때 얼마나 일관된 측정치가 나오는가의 문제이다. 예를 들면 동일인의 몸무게를 반복하여 측정할 때마다 다른 측정치가 나온다면 이 저울은 신뢰도에 문제가 있다. 마찬가지로 교육학이나 심리학에서 사용하는 여러 심리검사도 이러한 오차를 최소화해야 한다. 오차의 원인에 따라 신뢰도를 추정하는 방법에는 여러 가지가 있다.
-동형 검사 신뢰도
- 재검사 신뢰도
- 반분 신뢰도
- 문항 내적 합치도

3) 객관도

신뢰도가 평가도구 혹은 검사 결과의 일관성에 대한 문제라면 객관도 는 평정자 혹은 채점자의 채점에 대한 일관성 정도를 말한다. 하나의 반응 결과에 대해 여러 사람의 채점 및 평가가 일치하는 정도를 평가자 간 객관 도하 하며 시간적 간격이나 상황의 차이와 관계없이 한 사람의 평가자가 나타내는 일관성을 평가자 내게 관조라고 한다. 논술형과 같이 기계적으로 채점하는 것이 어려운 상황에서는 객관 도가 중요한 문제가 된다. 이러한 객관도 늘 높이기 위해서는 평가자가 평가 목표에 대해 충분히 인지하고 있어야 하며 평가 방법에 대한 전문성을 가지고 있어야 한다.

4) 실용도

검사의 타당도 좋은 심리측정 도구의 이론적 지표라면 실용성은 실제적 지표이다. 심리측정 도구의 이론적 지표가 아무리 완벽하다 할지라도 검사의 실제적 가치가 적다면 그 검사는 실제 현장에는 거의 사용되지 못할 것이다. 실용성이란 시간, 용이성, 비용의 정도를 말한다. 아무리 훌륭한 검사라도 시간이 너무 많이 소요되거나 실시 방법, 채점 방법 너무 복잡하고 어렵거나 필요한 비용이 너무 비싸다면 실제 현장에서 활용하기 어려울 것이다.

2. 문항의 양호도

문항이 좋고 나쁨은 어떤 준거에 비추어 보느냐에 따라 달라질 수 있다. 이 기준은 합리성과 실용적 목적이 될 수 있다. 이와 같은 문항의 양호고를 알기 위해서는 문항의 분포, 문항 난이도, 문항 변별도, 문항 반응 분포의 분석이 필요하다.

1) 분포의 분석
한 검사의 결과는 최하점과 최고점을 설명하는 일정한 분포를 만든다.
- 분포의 집중 경향
- 분포의 변산도
- 분포의 정상성

2) 문항 난이도
한 검사의 난이도는 그 검사를 구성하고 있는 문항의 질에 있다. 그 속에 담긴 문항의 질이 좋지 못하면 검사 전체의 양호도 줄어들게 된다. 이와 같은 양호고를 알아보는 방법을 문항 분석이라고 하며 대게 문항 곤란도와 문항 변별력, 문항 분포 등으로 나눈다. 문항 곤란도란 각 문항의 어려운 정도이다. 한 문항에 반응한 사람 수에 대한 정답판 사람 수의 비율로 나타내는 방법이다. 

3) 문항 변별력
문항 변별력이란 문항이 능력의 상하를 변별하는 능력이 있느냐를 보는 것이다. 이때 준거와 종류에 따라 문항 내적 합치도와 문항 타당도의 두 가지 변별도 지수로 나누어진다. 내적 합치도는 내적 준거에 비추어 본 변별도이고 문항 타당도는 외적 준거에 비추어 본 변별도이다.

 

3. 표준화 검사

1) 표준화 검사의 특징
표준화 검사란 측정 전문가에 의하여 만들어진 검사로서 행동의 표집을 객관화하고 표준화된 절차에 의하여 행동 특성을 측정함으로써 행동을 전집에 미루어 짐작하며 그것을 기초로 두 사람 이상의 행동을 비교하는 체계적인 절차를 말한다. 

2) 표준화 검사의 제작 과정
표준화 검사가 어떤 절차에 따라 만들어졌는가를 알고 있다면 표준화 검사에 대해 보다 쉽게 이해할 수 있을 것이다. 여기서는 검사 제작 전문가의 입장에서가 아니라 검사 활용자의 이해를 돕기 위한 것이다.

3) 표준화 검사의 분류
표준화 검사는 검사의 내용, 목적 등에 따라 여러 가지로 분류된다.

4) 표준화 검사의 이용 및 활용