Effects of Model-Data Misfit on IRT Equating for Polytomous Data

• 발행기관: 한국교육평가학회
• 저자명: 전경희(Kyong Hee Chon)
• 간행물 정보: 『교육평가연구』제29권 제4호, 715~733쪽, 전체 19쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2016.12.30

국문 초록

이 연구에서는 모형-자료 부적합이 다분 문항반응반이론 모형을 이용한 동등화 결과에 미치는 영향에 대해 살펴보았다. 비등등집단 가교문항 동등화설계를 가정한 모의연구를 통해 모형-자료 간 부적합 정도와 가교문항 및 일반문항 세트 내에서의 부적합 문항의 위치 등의 조건을 달리하였을 때 다분문항반응 자료에 대한 동등화 결과가 어떻게 다르게 나타나는지 점수변환표 상에서의 일치도와 동등성 지표를 기준으로 분석하였다. 모의실험 결과, 모형-자료 간 부적합 문항이 포함될 경우 점수변환체계 상의 동등화 관계에 있어 왜곡이 나타났으며, 이러한 왜곡 현상은 부적합 문항이 가교문항 세트 보다 일반 문항세트에 포함될 경우 더 심각해지는 것으로 분석되었다. 동등성 지표를 이용한 결과비교에 있어서도 부적합 문항이 일반 문항세트 중에 배치될 때 부정적인 결과를 보였다. 또한, 모형-자료간 부적합 정도와 검사 내 부적합 문항 위치에 따른 영향을 비교할 때 부적합 문항의 위치에 의한 영향이 더 큰 것으로 나타났다.

영문 초록

This study examines the effect of model-data misfit on polytomous IRT equating under the common-item nonequivalent groups design. A simulation study was conducted to assess equating results according to different impacts and aspects of model-data misfit. The study factors include the proportion and the location of misfitting items on uncommon and common item sets. Equating results from different misfit conditions were evaluated based on two criteria: consistency in score conversions and equity properties. This study found that the equating relationship was substantially altered when a test from involves misfitting items in comparison to the situation where no misfit exists. Distortion of the score conversions tended to be more severe when misfits occurred in uncommon items rather than common items. First- and second- equity properties were not well achieved when uncommon items were functioning as misfitting items. The location of misfit rather than proportion of misfit has a larger impact on the equating results.

목차

Abstract

Ⅰ. Introduction

Ⅱ. Simulation Design

Ⅲ. Results

Ⅳ. Summary and Discussion

References

국문요약

키워드

모형-자료 적합도 검사동등화 비동등집단 가교문항 설계 Model-data fit Polytomous IRT equating Common-item nonequivalent groups design