평가도구의 공정성은 차별기능문항(differential item function)이 존재하는지 탐색함으로써 측정학적으로 진단한다. 수해평가 과제나 논술형 문항과 같은 다분문항(polytomous item)은 문항범주가 있기 때문에 이분문항의 경우에 비해 차별기능문항의 유형이나 특성이 더 ...

평가도구의 공정성은 차별기능문항(differential item function)이 존재하는지 탐색함으로써 측정학적으로 진단한다. 수해평가 과제나 논술형 문항과 같은 다분문항(polytomous item)은 문항범주가 있기 때문에 이분문항의 경우에 비해 차별기능문항의 유형이나 특성이 더 복잡해진다. 다집단 일반적 부분점수모형과 로지스틱 판별분석에 의한 다분 차별기능문항의 추출방법이 가능한 모든 다분 차별기능문항을 얼마나 효과적으로 추출하는지를 분석하였다. 어떤 문항이 차별기능문항인지, 어떤 범주에서 차별기능이 일어나는지에 대한 진실을 알고 있어야 추출방법의 효과성을 평가할 수 있으므로 이분문항 20개와 5개의 범주(0~4)를 가진 다분문항 6개로 구성된 검사에 1개의 다분 차별기능문항이 포함된 경우에 대한 응답자료를 모의 생성하였다. 피험자의 수, 차별기능문항의 정도와 유형을 고려한 조건 하에서 두 추출방법의 효과성을 평가한 결과, 피험자의 수가 많을수록, 차별기능의 정도가 클수록, 차별기능이 존재하는 범주가 많을수록 두 방법은 잘 추출해 내었다. 비일방적 차별기능문항의 추출은 다집단 일반적 부분점수모형방법이 로지스틱 판별분석 방법에 비해 훨씬 성공적인 것으로 나타났다.

The detection of DIF is important in addressing issues regarding the quality of the assessment instrument. In the past decade, educational reform efforts have led to an increased use of performance assessment, which raises the question of what effect ...

The detection of DIF is important in addressing issues regarding the quality of the assessment instrument. In the past decade, educational reform efforts have led to an increased use of performance assessment, which raises the question of what effect the use of such assessments has for various population subgroups, and has brought the extension of DIF techniques from clichotomous responses to polytomous responses. DIF in a polytomous item can occur within all of the score categories, or within some subsets of score categories. Effective methods for DIF detection in polytomous items must address all these possibilities. The main purpose of this study is to investigate whether two polytomous DIF procedures detect all possibilities for polytomous DIF with five categories. The results show that the more category transitions DIF affected, the higher the rejection rates were. DIF items with a magnitude of 0.3 were detected much better than DIF items with a magnitude of 0.1. When sample size is large, the power of the DIF procedures is more than that in case of small sample, because the methods need large enough sample for stability of parameter estimates.

Although the usefulness of the DIF statistics is yet to be fully determined, the DIF procedures could be used as straightforward approaches for the detection of polytomous DIF. The preference for one over the other may depend on the type of DIF that is of most interest. Note that the DIF methods might not detect a DIF item, when the size of sample is small, especially the magnitude of DIF is also small.

This study attempted to generate polytomous responses without the confounding factors that are often found in real settings. Future studies could investigate how to alter the results of the simulation considering confounding factors. Performance tasks require complex abilities of students, and a test on based an analytic scoring rubric is multidimensional.

Ⅰ. 서론
Ⅱ. 다분 차별기능문항의 유형과 추출
1. 다분 차별기능문항의 유형
2. 다분 차별기능문항의 추출
Ⅲ. 연구방법
1. 연구자료
2. 차별기능문항의 추출절차
Ⅳ. 분석 결과
Ⅴ. 결론 및 논의
참고문헌
ABSTRACT

Ⅰ. 서론
Ⅱ. 다분 차별기능문항의 유형과 추출
1. 다분 차별기능문항의 유형
2. 다분 차별기능문항의 추출
Ⅲ. 연구방법
1. 연구자료
2. 차별기능문항의 추출절차
Ⅳ. 분석 결과
Ⅴ. 결론 및 논의
참고문헌
ABSTRACT