Developing a Score Scale in Relation to Measurement Error for Mixed Format Tests

• 발행기관: 한국교육평가학회
• 저자명: Jae-Chun Ban(반재천) Won-Chan Lee(이원찬)
• 간행물 정보: 『교육평가연구』제23권 제4호, 1003~1023쪽, 전체 21쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2010.12.30

국문 초록

이 연구의 목적은 혼합형 검사에서 아크사인 척도화 방법을 이용하여 조건적 측정오차의 크기를 유사하게 만드는 절차에 대해 기술하고 그 결과를 제시하는데 있었다. 3모수 로지스틱 문항반응 모형과 일반화 부분점수 문항반응 모형을 이용하여 혼합형 검사에서의 관찰점수를 추정한 후, 이것을 아크사인 방법으로 점수를 비선형으로 변환했다. 다음으로 이 점수를 다시 일정한 크기의 조건적 측정오차를 갖도록 선형으로 변환했다. 연구결과 기본 검사형 및 동등화된 검사형에서 조건적 측정오차의 크기는 의도한 대로 유사하였다. 이 연구에서는 또한 T-점수, 스테나인, NCE 점수 등을 이용했을 때 조건적 측정 오차의 크기를 함께 제시하였다. 연구 결과 혼합형 검사에서 얻어진 총점을 아크사인 방법으로 척도를 개발했을 때 다른 방법으로 척도를 개발했을 때 보다 조건적 측정오차의 크기가 균일했다.

영문 초록

The purpose of this study was to describe the arcsine scaling procedure for equalizing measurement error for total scores on mixed format tests and to evaluate performance of the procedure in terms of a constant conditional standard errors of measurement (CSEM). The estimated observed scores using a mixture of the three‐parameter logistic and generalized partial credit IRT models were transformed to establish a reported scale score that was intended to possess the property of a constant CSEM. Four real mixed format tests were used to demonstrate the applicability of the arcsine scaling procedure to achieve a constant CSEM. The results showed that the arcsine scaling procedure performed well for mixed format tests resulting in approximately equalized CSEMs for base forms as well as equated forms. When compared to some other types of scale scores(T score, Stanine, and NCE), the arcsine transformed scale scores produced the most stable CSEMs.

목차

Ⅰ. Introduction

Ⅱ. Method

Ⅲ. Results

Ⅳ. Discussion

키워드

아크사인 척도화 조건적 측정오차 혼합형 검사 검사동등화 arcsine scaling conditional standard errors of measurement mixed format test