대학교 규준참조평가 문자점수 부여를 위한 문항반응이론 활용 가능성 탐색

• 영문명: Using Item Response Theory for giving Letter Grades in Norm-referenced Mixed-format Test
• 발행기관: 한국교육평가학회
• 저자명: 부재율(Jaeyool Boo)
• 간행물 정보: 『교육평가연구』제24권 제2호, 463~484쪽, 전체 22쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2011.06.30

국문 초록

대학교 규준참조평가 상황에서 복수의 학생들이 동일한 점수를 받는 문제를 해결하기 위해 문항반응이론을 사용하여 문자점수를 부여하는 방안의 활용 가능성을 탐색하였다. 혼합형 검사의 자료를 기초로 문항반응모형을 사용한 여러 방법으로 피험자들에게 문자점수를 부여하고 그 결과를 비교하였다. 연구 결과를 바탕으로 다음과 같은 시사점을 얻었다: 문항반응모형의 사용으로 복수의 학생들이 동일 검사점수를 받는 문제는 해결이 가능하고 검사의 일차원성 충족이 불확실하고 다분문항의 범주난이도 서열성이 완벽하지 않은 혼합형 검사에서, 전반적으로 일반화부분점수모형을 사용하여 동일 가중 값을 부여한 문항군 별 추정 방법이 유리하며 경계선 점수에서 피험자들을 변별하는 목적으로 한정하여 문항반응모형을 사용한다면 문항군 별 추정 방법보다 단일검사 추정 방법이 유리하다.

영문 초록

Letter grades used in college for norm-referenced testing has a flaw. When several students receive a same score at cut-score points, some of them get lower grade by unjustifiable criteria or all of them get lower grade. Using Item Response Theory(IRT) to give letter grades could help solve this problem. Participants took a mixed-format test composed of true-false, multiple-choice, and open-ended items, and ability was estimated using six different combinations of IRT estimation methods: Graded Response model & single calibration, Generalized Partial Credit model & single calibration, Graded Response model & separate calibration & unequal weights, Graded Response model & separate calibration & equal weights, Generalized Partial Credit model & separate calibration & unequal weights, Generalized Partial Credit model & separate calibration & equal weights. Followings were found: use of IRT model solved the problem of plural same scores at cut-score points; generally a combination of Generalized Partial Credit model & separate calibration & equal weights was advantageous; and when using IRT model mainly for differentiating examinees who have same traditional score at cut-score points, single calibration was advantageous.

목차

Ⅰ. 서론

Ⅱ. 문항반응이론 모형

Ⅲ. 연구 방법

Ⅳ. 분석 및 결과

Ⅴ. 결론 및 논의

후주

참고문헌

저자소개

〈ABSTRACT〉

〈부록〉

키워드

문자점수 다분문항반응이론 혼합형 검사 Letter grades Polytomous item response theory Mixed-format test