학술논문
평정자간의 엄격성 차이정도가 피험자 총점산출 방법에 미치는 영향
이용수 456
- 영문명
- A simulation study for the comparison of person's raw score, standardized score, and facet score under the different conditions of rater severity
- 발행기관
- 한국교육평가학회
- 저자명
- 설현수(Hyunsoo Seol)
- 간행물 정보
- 『교육평가연구』제23권 제1호, 125~147쪽, 전체 23쪽
- 주제분류
- 사회과학 > 교육학
- 파일형태
- 발행일자
- 2010.03.30
5,560원
구매일시로부터 72시간 이내에 다운로드 가능합니다.
이 학술논문 정보는 (주)교보문고와 각 발행기관 사이에 저작물 이용 계약이 체결된 것으로, 교보문고를 통해 제공되고 있습니다.
국문 초록
본 연구는 평정자에 의한 피험자 평정과정에서 평정자간의 엄격성에 따른 차이를 반영해서 생성된 모의자료를 가지고 3가지 총점산출 방법(단순총점, 표준점수, Facet점수)에 의한 피험자의 능력추정치를 산출한 다음에 모의 합격률에 따른 3가지 총점산출방법 간의 피험자 등위 일치도를 비교하였다. 모의자료는 8명의 평정자가 2개의 문항을 평정하는 상황을 설정하고, 1000명의 피험자 점수를 평균 0, 표준편차 1의 정규분포 형태로 발생 시켜서 4개의 집단에 무선 배치하였다. 다음으로 평정자의 엄격성에 변화를 주기 위해서 5가지 상황(무선적인 엄격성, 엄격성 동일, 엄격성이 낮을 경우, 엄격성이 높을 경우, 엄격성의 범위가 넓을 경우)을 가정한 다음에 그에 해당하는 모의자료를 생성하였다. 마지막으로 모의 합격률을 상위 10%, 20%, 30%로 설정한 다음에 평정자의 엄격성에 따라서 설정한 5가지 상황에서 3가지 총점산출 방법 간의 합격등위 일치도를 분석하였다. 분석결과 원점수와 표준점수 보정방식의 일치율은 평정자간의 엄격성과는 상관없이 거의 변하지 않은 일정한 패턴을 보이고 있는 것으로 나타났지만, 평정자의 엄격성 분포가 크면 클수록 원점수와 Facet점수간의 일치율은 급격하게 낮아지고 있는 것으로 나타났다. 다음으로 이러한 결과가 실제 평정상황에 미치는 영향에 대한 측정학적 논의를 전개하였다.
영문 초록
This study investigated the difference between person's raw score and score adjustments using standardized score and facet score under the different conditions of rater's severity. To demonstrate how various rater severity manifest themselves in this analyses, data were simulated to represent five types of rater severity: (1) no effect (2) random (3) leniency (4) harshness (5) wide spread of rater severity.
Data generation was performed using WinGen and Facet computer program. The results showed that the agreement between person's raw score and standardized score was high regardless of rater severity conditions. On the other hand, as the magnitude of the rater severity increases, the agreement of raw scores and facet score was dramatically low. The reasons for the results were discussed and suggestions were made for future studies
목차
키워드
해당간행물 수록 논문
- 비선형 다층모형에 의한 차별기능문항 분석
- A Comparison of a Bayesian and Maximum Likelihood Algorithms for Estimation of a Multilevel IRT Model
- 정의적 특성 검사 자료 분석을 위한 문항반응모형 탐색
- 타당화 개념모형을 이용한 대학수학능력시험 체제 진단
- 교사의 형성평가 피드백 수행 척도 개발 및 타당화
- 중학교 특별보충과정 프로그램 평가척도 개발
- 대규모 학업성취도 평가 자료를 활용한 학교 부가가치 추정모형의 비교
- 초등학생의 학습부진에 대한 학생 및 학교수준의 결정요인 탐색
- 수행평가 적용 프로그램의 현장적용 연구
- 대학생의 학업성취와 중도탈락 생각에 영향을 미치는 변인 분석
- 평정자간의 엄격성 차이정도가 피험자 총점산출 방법에 미치는 영향
참고문헌
관련논문
사회과학 > 교육학분야 BEST
더보기사회과학 > 교육학분야 NEW
- 메타버스기반 캡스톤디자인 수업이 예비 유아교사의 학업성취도와 소속감에 미치는 영향
- 예비유아교사가 인식한 유아생활지도의 교육적 필요성 탐색
- 유아교사의 임파워먼트가 놀이지원역량에 미치는 영향 -성장 마인드셋의 조절효과-
최근 이용한 논문
교보eBook 첫 방문을 환영 합니다!
신규가입 혜택 지급이 완료 되었습니다.
바로 사용 가능한 교보e캐시 1,000원 (유효기간 7일)
지금 바로 교보eBook의 다양한 콘텐츠를 이용해 보세요!