전문가 판정에 의한 차등 배점을 활용한 제한적 일반화부분점수 모형의 적용

• 영문명: Application of a restricted generalized partial credit model by using expert-evaluated item weights
• 발행기관: 한국교육평가학회
• 저자명: 박찬호(Park Chanho) 강태훈(Kang Taehoon)
• 간행물 정보: 『교육평가연구』제24권 제3호, 781~797쪽, 전체 17쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2011.09.30

국문 초록

이 논문에서는 전문가가 판정한 문항의 가중치를 문항반응이론의 모형에 적용하는 방법에 대해 연구하였다. 다분 문항을 위한 일반화부분점수 모형(GPCM)에 전문가 판정 문항 가중치를 적용한 제한적 일반화부분점수 모형(rGPCM)을 제시하고 이 모형이 일반화부분점수 모형과 부분점수 모형(PCM)에 비해 갖는 장점에 대해 논의하였다. 이분 문항에 대한 라쉬 모형이나 일모수 로지스틱 모형이 관찰할 수있는 값을 충분통계량으로 지니듯이 rGPCM도 충분통계량을 관찰된 값에서 얻을 수 있다. 청소년들의 위기 행동을 진단하는 도구의 결과 자료를 이 세 모형에 적용하고 그 결과를 비교하였는데, 이 때 rGPCM의 적용을 위해 40여명의 전문가가 평가한 문항가중치를 선형 변환하여 이용하였다. 모수 추정을 위해서는 마코프체인 몬테칼로 알고리즘을 이용하였고, DIC 값을 이용하여 세 모형의 적합도를 비교하였다. 선형 변환된 전문가 가중치는 GPCM의 a-모수와 뛰어난 일치도를 보였다. DIC를 이용한 세모형 간 비교에서 비록 GPCM이 가장 뛰어난 모형으로 선정되었으나 rGPCM의 적합도도 그와 매우 유사하였다. PCM이 충분통계량을 관찰된 값에서 구할 수 있다는 장점이 있으나 많은 피험자가 동일한 능력치를 부여받는데 반해 rGPCM 역시 충분통계량을 관찰할 수 있으면서도 PCM에 비해 낮은 능력의 피험자들을 더 잘 변별해내었다. 동시에 rGPCM은 GPCM과 유사한 수준의 적합도를 지녔다는 점에서 충분한 활용 가치를 지녔다고 할 수 있다.

영문 초록

This study investigated a method of applying expert-generated item weights to item response theory modeling. A restricted generalized partial credit model (rGPCM) was suggested by incorporating item weights into the generalized partial credit model (GPCM) for polytomous items. It was also discussed what strengths this new model had over the GPCM and the partial credit model (PCM). Like the Rasch model and the one-parameter logistic model for dichotomous items, the rGPCM had observable sufficient statistics. Data from a test to diagnose adolescents' crisis behavior were fitted to the three polytomous models, and their results were compared. When fitting the rGPCM, linearly transformed item weights evaluated by 40 experts were used. The parameters were estimated using the Markov chain Monte Carlo algorithm, and DIC values were used to compare the goodness-of-fit of the three models. Linearly transformed item weights by experts were consistently similar to GPCM's a-parameter estimates. Although the GPCM was selected as the best-fitting model by DIC, the goodness-of-fit of the rGPCM was similar to that of the GPCM. The PCM had observable sufficient statistics, but many examinees had the same levels of latent traits under the PCM. On the other hand, the rGPCM, also having observable sufficient statistics, could better discriminate low-ability examinees than the PCM. Since the rGPCM had similar levels of goodness-of-fit with the GPCM, it has satisfactory utilities.

목차

Ⅰ. 서론

Ⅱ. 이론적 배경

Ⅲ. 연구방법

Ⅳ. 결과

Ⅴ. 결론 및 논의

참고문헌

〈ABSTRACT〉

[부록] 위기행동 영역 진단 14개 문항

키워드

부분점수 모형 일반화부분점수 모형 제한적 일반화부분점수 모형 충분통계량 모형 간 비교 partial credit model generalized partial credit model restricted partial credit model sufficient statistics model comparison DIC