등급반응모형과 일반화부분점수모형에서 능력 분포, 문항 반응 범주 수, 검사길이에 따른 문항 적합도 지수 수행 비교

• 영문명: A Comparison of the performance of item-fit indices based on ability distributions, the number of response categories, and test lengths under the graded response model and the generalized partial credit model
• 발행기관: 한국교육평가학회
• 저자명: 강유림(Yu Lim Kang) 이규민(Gue min Lee) 강상진(Sang Jin Kang)
• 간행물 정보: 『교육평가연구』제28권 제2호, 449~471쪽, 전체 23쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2015.06.30

국문 초록

본 연구는 등급반응모형과 일반화부분점수모형에서 능력 분포, 문항 반응 범주, 검사길이에 따른 전통적 접근과 대안적 접근의 문항 적합도 지수 수행을 제1종 오류 비율 통제정도를 통해 탐색하고자 하였다. θ를 기반으로 관찰 빈도를 산출하는 전통적 접근의 문항 적합도 지수로 PARSCALE G²가 사용되었으며, 전통적 접근의 단점을 극복하고자 제안된 대안적 접근의 문항 적합도 지수로서 Orlando와 Thissen(2000)이 제안한 S - X²와 S - G², Stone(2000, 2003)이 제안한 X²*와 G²*가 사용되었다. 이를 바탕으로 능력 분포, 문항 반응 범주, 검사길이에 따른 문항 적합도 지수의 수행을 살펴본 결과, G²는 짧은 검사길이에서 과대 추정된 제1종 오류 비율을 보인 반면 대안적 접근의 문항 적합도 지수들의 경우 정규 분포에서는 검사길이와 문항 반응 범주의 영향을 크게 받지 않고 안정적인 수행을 보였다. 비정규 분포일 때 대안적 접근의 문항 적합도 지수들은 검사길이와 문항 반응 범주에서 과대 추정된 제1종 오류 비율을 보였으나 검사길이와 문항 반응 범주가 증가함에 따라 향상된 수행을 보였다. 대안적 접근 중 X²*와 G²*의 제1종 오류 비율 과대 추정정도가 더 높게 나타났으며, S - X²와 S - G²가 가장 안정적인 수행을 보였다.

영문 초록

This study was conducted to explore the performance of item-fit indices based on ability distributions, the number of response categories and test lengths under the graded response model and the generalized partial credit model. As a traditional item fit statistics, G²from PARSCALE, was used because it is commonly reported item fit index. For alternative approaches, S-X² and S-G² proposed by Orlando and Thissen(2000) and X²* and G²* proposed by Stone(2000, 2003) were considered. The traditional index, G² did not appear to have a consistent pattern by ability, but showed sensitivity across test lengths as expected. In normal ability distribution, the alternative item fit indices controlled the Type I error rates properly regardless of the number of response categories and test lengths. In nonnormal ability distributions, X²* and G²* showed inflated Type I error rates because of the violation of normality assumption imbedded in the methods. The S-X² and S-G² indices showed the most stable performance of controlling Type I error rates.

목차

요약

Ⅰ. 서론

Ⅱ. 이론적 배경

Ⅲ. 연구방법

Ⅳ. 연구결과

Ⅴ. 결론 및 논의

참고문헌

키워드

문항 적합도 문항반응이론 등급반응모형 일반화부분점수모형 item fit item response theory graded response model generalized partial credit model