검사 자동 구성을 위한 선형계획법과 가중편차법의 효율성 비교

• 영문명: Comparing the Efficiencies of Linear Programming and Weighted Deviation Method in Automated Test Assembly
• 발행기관: 한국교육평가학회
• 저자명: 박도영(Doyoung Park) 임은영(Eunyoung Lim) 박상욱(Sangwook Park) 시기자(Kija Si) 이용상(Yongsang Lee)
• 간행물 정보: 『교육평가연구』제26권 제1호, 131~150쪽, 전체 20쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2013.03.31

국문 초록

본 연구는 검사 자동 구성(ATA)에 적용되고 있는 대표적인 알고리듬인 선형계획법(LP)과 가중편차법(WDM)의 알고리듬에 대한 이론적인 배경을 개관하고 상용 프로그램을 이용하여 두 알고리듬의 효율성을 비교하였다. 가상 및 실제 문제은행을 대상으로 8개 검사형을 자동 구성하였으며 목적함수를 설정하는데 있어서 b-모수 평균을 사용하는 방법과 능력수준별 검사정보를 사용하는 방법을 사용하였다. 분석 결과에 의하면, 전반적으로 LP가 WDM보다 우수한 성능을 보였고, LP로 ATA를 실시할 경우 어떤 목적함수를 사용하느냐에 따라 검사의 측정학적인 속성이 다르게 구성되는 것으로 나타났다. 검사의 측정학적인 동형성이 자동 구성의 주된 목적이라면 동형성과 관련된 가용한 측정학적 정보를 최대한 반영하여 목적함수를 설정해야 한다는 사실도 확인되었다. 자동 구성에 소요되는 시간의 경우 두 알고리듬 간에 큰 차이는 없었다. 마지막으로 본 연구의 제한점과 후속 연구에 대해 논의하였다.

영문 초록

This study investigated the comparative efficiencies of Linear Programming (LP) and Weighted Deviation Method (WDM) algorithms applied to the Automated Test Assembly (ATA). By using commercial softwares, eight test forms were automatically constructed in simulated and real item bank conditions while applying two objective functions; the mean of b-parameters and the test informations at five ability levels. The results generally indicate that LP outperformed WDM. When LP was applied, it was confirmed that psychometric properties of multiple test forms differed depending on which objective function was used. It was also found that the objective function should, as much as possible, include the psychometric informations related to test parallelism, if the main purpose of the ATA is to create parallel test forms. Time consumptions for the ATA between LP and WDM were similar. Limitations of this study and future research topics were discussed, finally.

목차

Ⅰ. 서론

Ⅱ. 이론적 배경

Ⅲ. 방법

Ⅳ. 결과

Ⅴ. 논의

참고문헌

키워드

검사 자동 구성 선형계획법 가중편차법 검사정보함수 automated test assembly linear programming weighted deviation method test information function