The Impact of a Multidimensional Item on Differential Item Functioning (DIF)

• 영문명: The Impact of a Multidimensional Item on Differential Item Functioning (DIF)
• 발행기관: 한국교육평가학회
• 저자명: Yoonsun Lee(이윤선)
• 간행물 정보: 『교육평가연구』제20권 제4호, 281~306쪽, 전체 26쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2007.12.30

국문 초록

  미국에서 실시되는 대부분의 표준화 검사는 단일 차원을 측정하도록 개발되어졌다. 그러나 그 목적과는 달리 문항들이 하나 이상의 차원을 측정하는 경우가 있다. 예를 들면, 수학능력을 측정하는 검사에서 문항이 고도의 읽기 능력을 요구할 경우 그 문항은 수학능력 외에 언어 능력을 함께 측정할 수도 있다. 이런 경우 다차원 문항은 검사의 신뢰도와 타당도에 직접적인 영향을 미치게 된다. 본 연구는 다차원 문항이 차별문항기능에 어떤 영향을 미치는지를 세 가지 가설을 통해서 살펴보았다. 첫째, 관찰 집단과 잠재 집단간의 능력 차이가 차별 문항 기능과 어떤 영향이 있는지 조사하였다. 둘째, 문항이 주요차원과 이차적인 차원을 측정하는 정도와 차별문항기능과의 관계를 살펴보았고 마지막으로 표본크기가 차별문항기능에 주는 영향을 연구하였다. 연구 결과를 살펴보면 관찰 집단과 잠재 집단 간의 능력 차이가 없을 때 문항은 차별문항기능으로 감지되지 않았다. 그러나 두 집단 간의 능력 차이가 클수록 문항은 차별문항능력을 뚜렷하게 나타냈다. 집단 간의 능력 차이와 더불어 문항이 이차적인 차원을 측정하는 정도 역시 중요한 요인으로 나타났다. 문항이 이차적인 차원을 측정하는 정도가 클수록 차별문항기능을 두드러지게 나타났다. 표본크기 역시 차별문항기능에 주요 요인으로 조사되었으며 각 집단에 1000명의 피험자가 있는 경우가 500명의 피험자가 있을 때보다 차별문항기능을 발견하는데 용이했다.

영문 초록

  A simulation study was conducted to examine the effects of differences in mean of ability distribution between the reference and focal groups, weight and sample size on the use of SIBTEST to detect DIF. Results are presented for two configurations, those in which there is no simulated differential item functioning (non DIF) and those in which DIF was created within the simulation. The mean of Type I error rates were close to the nominal level for both the simulations across all sample sizes when the target item was multidimensional but there was no ability distribution difference between the reference and focal groups on the secondary dimension. However, the mean of Type I error rates showed high when there was a mean difference on the primary dimension with the same ability distribution on the secondary dimension. In the DIF configurations, main effects of weight, differences in means, and sample size (N) were the major factors in explaining the outcome measures.

목차

Ⅰ. Background
Ⅱ. Method
Ⅲ. Results
Ⅳ. Discussion
References
저자소개
〈요약〉

키워드

Differential Item Functioning(DIF) SIBTEST Item Response Theory Multidimen sionality 차별문항기능 문항반응이론 다차원성