속도화 집단과 비속도화 집단의 분류를 위한 검사속도성 여과방법 적용연구

• 영문명: Comparisons Among Filtering Methods of Test Speededness To Classify Speeded group and Nonspeeded group
• 발행기관: 교육종합연구원
• 저자명: 이채희(Lee Che-hee)
• 간행물 정보: 『교육종합연구』제10권 제2호, 385~411쪽, 전체 27쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2012.06.30

국문 초록

본 연구의 목적은 첫째, 검사속도성 영향이 나타난 검사자료에서 선행연구를 통해 검사속도성 여과모형으로 제안된 수리적 모형인 Two-Class Mixture Rasch 모형의 검사속도성 여과효과를 분석하는 것이다. 다음으로는 본 연구에서 제안된 검사속도성 탐지지수인 수정된 Bejar 지수 그리고 문항반응 여과방법을 적용한 후, 이 방법의 준거점수를 선정하는 것이다. 중학교 2학년생 2,269명을 대상으로 언어유추검사를 충분한 검사시간 조건, 제한된 검사시간 조건에서 시행하였다. 세 가지 여과방법을 순차적으로 수행한 결과, Two-Class Mixture Rasch 모형에 의해 속도화 집단과 비속도화 집단의 분류비율을 얻었다. 수정된 Bejar 지수 방법과 문항반응 여과방법의 경우, Two-Class Mixture Rasch 모형에 의한 결과와 일치도가 가장 높은 준거점수를 선정하여 각각 속도화 집단과 비속도화 집단의 분류비율을 얻었다. 둘째, 검사속도성 여과모형의 효과분석을 위해 단일차원성 가정을 검증한 결과, Two-Class Mixture Rasch 모형, 수정된 Bejar 지수에 의해 일차원성 가정이 만족되었다. 그러나 문항반응 여과방법은 여전히 가정을 만족시키지 못했다. 본 연구 결과, 속도화된 자료를 여과하는 방법이 다양하게 시도되었고, 단일차원성 가정 맥락에서 Two-Class Mixture Rasch 모형과 수정된 Bejar 지수의 검사 속도성 여과효과가 있음을 확인하였다.

영문 초록

This study aimed to evaluate and compare the usefulness of the three filtering methods when test speededness existed. To accomplish the goal, a 50-item verbal analogy test was constructed and administered to two groups of middle school students. The two groups were tested under different time conditions, that is, almost no time-limit condition as in a power testing condition(PT) and a strict time-limit condition(ST). To evaluate the usefulness of four filtering methods on speeded tests, first of all, three filtering methods of test speededness using the most speeded data set(ST test) were analysed. Three Methods were (1) Two-Class Mixture Rasch Models using Bayesian Estimation method(Two-Class MRM-BaE method), (2) Modified Bejar Person-Index(MBPI method), and (3) the filtering method of Item Response(IR method). As there was a need to set up the criteria for MBPI method and R method suggested this study, the Kappa value between MBPI method and Two-Class MRM-BaE method was analysed. The Kappa value between IR method and Two-Class MRM-BaE method was analysed. As a result, through 3 filtering methods applied to ST test which was the most speeded, speeded group and nonspeeded group were classified, the portions of speeded group were 10.1%～58.8% of the 1,122 participants. MBPI and IR methods of the highest Kappa values were the 80%ile method and the minimum agreement portion of 60% method(MAP of 60% method).

목차

Ⅰ. 서 론

Ⅱ. 검사속도성 여과방법

Ⅲ. 연구방법

Ⅳ. 연구결과

Ⅴ. 논의 및 제언

키워드

검사속도성 혼합라쉬모형 Bejar 지수 DIMTEST Test speededness Two-Class Mixture Rasch Model Bejar s Person Index