학술논문
문항구성 모의실험을 통한 온라인 학업성취도 평가 시스템 분할점수 자동설정 방안 탐색
이용수 280
- 영문명
- An Exploratory Study of Automatic Standard Setting for iNAEA Through a Monte Carlo Simulation of Test Construction
- 발행기관
- 한국교육평가학회
- 저자명
- 김성숙(Sungsook Kim) 박찬호(Chanho Park) 김미경(Mikyung Kim) 김창환(Changhwan Kim)
- 간행물 정보
- 『교육평가연구』제31권 제3호, 631~651쪽, 전체 21쪽
- 주제분류
- 사회과학 > 교육학
- 파일형태
- 발행일자
- 2018.09.30
5,320원
구매일시로부터 72시간 이내에 다운로드 가능합니다.
이 학술논문 정보는 (주)교보문고와 각 발행기관 사이에 저작물 이용 계약이 체결된 것으로, 교보문고를 통해 제공되고 있습니다.
국문 초록
이 연구의 목적은 학업성취도 평가의 기출 문제은행 시스템을 구축함에 있어 기존 문항정보를 사용하여 검사의 분할점수를 자동설정하기 위한 방안을 탐색하는 데 있다. 문항반응이론을 기반으로 2015년과 2016년 중학교 국어 평가 자료를 활용하여 모의실험을 수행하였다. 먼저 각 성취수준에서 1,000명을 무작위 추출한 응답 자료를 대상으로 분석하였다. 검사의 문항 수, 문항의 난이도, 그리고 문항유형을 어떻게 구성하는지 각각의 조건에 따라 분석 대상의 실제 성취수준 집단과 모의 분석을 통해 구분된 성취수준 집단 간의 일치정도를 산출함으로써 분류의 정확성을 판단한 것이다. 분석 결과 일부 모의분석 조건에서 낮은 정분류 비율이 나타났으나, 대체로 성취수준의 정분류 비율은 적절한 것으로 판단되었다. 문항 수와 문항 난이도의 영향이 더 크게 나타난 반면 문항유형 구성 영향 차이는 적은 것으로 나타났다. 모의실험 조건에 따른 비교를 통해 검사지 구성 시 고려해야 할 시사점을 제공하였다.
영문 초록
The NAEA is a criterion-referenced assessment that assesses the degree of achieving the national curriculum, and the student’s achievement in the assessment subject is categorized in accordance with the degree of achieving the curriculum into the following achievement levels: ‘advanced’, ‘proficient’, ‘basic’ and ‘below-basic.’ This study has focused on developing a customized diagnostic test system with the previously-administered NAEA test items and the related information. Based on item response theory, a simulation study was carried out by using all the items in the system, which were calibrated to be on one scale. The response data of 1,000 randomly selected students in the middle school for the subject of the Korean language in 2015 and 2016 were analyzed. The accuracy of the classification was determined by calculating the degree of agreement between the actual achievement level of the subject and the achievement level obtained by the simulation analysis according to the respective conditions of the number of the items of the test, the difficulty of the item. As a result, acceptable results were obtained overall, whereas lower classification ratios were found in some conditions. The effect of the number of items and item difficulty was larger, while the effect of item type composition was smaller. This study provides suggestions to consider when constructing a test form by comparing according to the simulation conditions.
목차
Ⅰ. 서 론
Ⅱ. 이론적 배경
Ⅲ. 연구 방법
Ⅳ. 연구 결과
Ⅴ. 결론 및 제언
키워드
해당간행물 수록 논문
- ICILS 2013 컴퓨터·정보 소양 검사의 국가, 성별에 따른 차별기능문항 분석
- 고등학교 과학 교과 수업의 질과 정의·인지적 성취와의 관계: PISA 2015
- Mixture IRT model for detecting aberrant responses under low-stake testing
- 평가 이해관계자들의 평가 의미 분석
- 사범대학생의 실수인식과 성취목표지향성이 교실평가에 대한 태도에 미치는 영향
- 3수준 다중소속 다층자료에 대한 모형의 명세화 오류가 모수추정값과 모형적합도에 미치는 영향: 모의실험 연구
- 다차원 2모수 IRT 모형에 대한 대칭적 및 비대칭적 특성함수 척도연계 방법의 기능 비교
- 과학 수업에서의 탐구 활동 및 교사 피드백에 대한 학생 인식 유형: 학생-학교수준 영향요인 및 정의적 특성 분석
- 문항구성 모의실험을 통한 온라인 학업성취도 평가 시스템 분할점수 자동설정 방안 탐색
- 교실 수업에서 구두 피드백의 정도와 유형 분석
- 형성평가와 평가의 객관성
- 피드백 효과에 대한 메타분석
- 혼합분포 문항반응모형 적용을 위한 잠재집단의 이질성 수준 탐색
- 표본크기가 S-χ2문항 적합도 지수의 제1종 오류에 미치는 영향
참고문헌
교보eBook 첫 방문을 환영 합니다!
신규가입 혜택 지급이 완료 되었습니다.
바로 사용 가능한 교보e캐시 1,000원 (유효기간 7일)
지금 바로 교보eBook의 다양한 콘텐츠를 이용해 보세요!