2003~2008년 국가수준 학업성취도 평가의 조건적 측정오차와 분류일관성

• 영문명: Conditional Standard Errors of Measurement and Classification Consistencies for 2003~2008 National Assessment of Educational Achievement in Korea
• 발행기관: 한국교육평가학회
• 저자명: 반재천(Jae-Chun Ban) 송미영(Mi-Young Song)
• 간행물 정보: 『교육평가연구』제23권 제2호, 323~345쪽, 전체 23쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2010.06.30

국문 초록

이 연구의 목적은 국가수준 학업성취도 평가(이하 학업성취도 평가)의 연도별, 학교급별, 교과별 점수의 조건적 측정오차, 신뢰도, 분류일관성을 파악하는 데 있다. 이 연구의 분석 대상은 학업성취도 평가가 2003～2008년까지 표집평가 형태로 이루어진 기간 동안의 검사자료이다. 연구결과의 이해를 위해 학업성취도 평가 척도의 특징, 검사동등화 방법, 검사형간 연계 현황을 함께 제시하였다. 학업성취도 평가의 점수 척도는 아크사인 방법을 활용하여 개발하였고, 주로 공통문항 비동등집단 설계로 평가 자료를 수집하여 문항반응이론에 의한 진점수 동등화를 적용하였다. 학업성취도 평가의 동등화된 척도점수의 조건적 측정오차를 산출한 결과, 전반적으로 기준 검사형(base form)과 유사한 형태를 보였지만 일부 교과, 특히 초등학교 6학년 수학에서는 다소 다른 형태를 보였다. 성취수준 분할점수대별 조건적 측정오차의 연도간 차이는 .19～1.68 정도였다. 신뢰도는 전반적으로 높은 편이었으며, 연도와 교과에 따라 .01～.07 정도 차이가 있었다. 또한 대체적으로 성취수준 분류의 일관성이 높은 것으로 나타났으며, 연도와 교과에 따라 .04～.15 정도 차이가 있었다. 이러한 연구 결과의 구체적인 원인을 밝히기 위한 후속 연구 과제를몇 가지 제안하였다.

영문 초록

The purpose of this study was to produce conditional standard errors of measurement (CSEM), reliabilities, and classification consistencies for 2003~2008 National Assessment of Educational Achievement (NAEA) in Korea. This study also provided the characteristics of the NAEA scale, the data collection design and methodology of equating, and linkage plans used in NAEA. The arcsine scaling method was used for NAEA scaling, and KICE had used the common item nonequivalent groups design and IRT true score equatings for NAEA, although a single-groups with counter balanced design was used once.The patterns of CSEMs of the equated forms were similar to that of the base forms in Korean, Science, Social Sciences, Math for Grades 9 and 10, and English in Grade 9. However, there were some cases that show different patterns in CSEMs between the base form and the equated forms, particularly in Math for Grade 6. Reliabilities and classification consistencies were high across years, although there were slight variations across years.

목차

Ⅰ. 서 론

Ⅱ. 국가수준 학업성취도 평가 척도점수의 특징과 동등화

Ⅲ. 척도점수의 조건적 측정오차, 신뢰도, 분류일관성 지수의 추정

Ⅳ. 연구결과

Ⅴ. 결론 및 논의

키워드

조건적 측정오차 분류일관성 검사동등화 국가수준 학업성취도 평가 Conditional Standard Error of Measurement Classification Consistency Test Equating National Assessment of Educational Achievement`