Linking a Short Test with Only Selected - Response Items to a Longer Test with Mixed-Type Items and Evaluating the Linking Procedures

• 영문명: Linking a Short Test with Only Selected - Response Items to a Longer Test with Mixed-Type Items and Evaluating the Linking Procedures
• 발행기관: 한국교육평가학회
• 저자명: 김동인(Dong-In Kim) 이규민(Guemin Lee)
• 간행물 정보: 『교육평가연구』제17권 제2호, 283~304쪽, 전체 22쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2004.11.01

국문 초록

이 연구는 선택형 문항으로 구성되고 상대적으로 길이가 짧은 검사의 점수와 선택형 문항과 서답형 문항으로 구성된 상대적으로 길이가 긴 검사 점수 사이의 연계화 방안과 관련된 이슈를 다루고 있다. 이 연구에서는 4가지 연계화 절차가 제시되었는데, (a) 문항반응이론 모형을 적용한 진점수 연계화, (b) 문항반응이론 모형을 적용한 관찰 점수 연계화, (c) 동백분위 연계화, 그리고 (d) 선형 관찰 점수 연계화 방안이다. 이러한 4가지 연계화 절차는 점수 척도의 중간 영역에서는 유사한 연계화 결과를 산출하였고 비슷한 일차-승수 동등성(first-order equity) 차이를 보였다. 그러나 능력 점수의 극단 부분에서는 연계화 절차들 사이에 작지 않은 차이와 간격을 나타냈다. 문항반응이론을 적용한 진점수 연계화 방법이 가장 작은 수준의 일차-승수 동등성 차이를 산출했다. 4가지 연계화 방법 중에 어떤 특정 방법이 다른 방법에 비해 유의미하게 작은 이차-승수 동등성 관련 지수를 산출하지는 않았지만, 일반적으로 문항반응이론을 적용한 관찰 점수 연계화 방안이나 동백분위 연계화 방안이 문항반응이론을 적용한 진점수 연계화 방안 보다는 이차-승수 동등성 요구를 잘 만족시키는 것으로 나타났다. 동백분위 연계화 방안은 동백분위 동등화 특성을 다른 방법보다 잘 만족시키는 것으로 나타났는데, 이것은 동백분위 방법이 점수 분포의 승수 보존특성(moment preservation property)을 만족시키기 때문인 것으로 판단된다.

영문 초록

This study was designed to address the issue of linking scores on a relatively short test with only selected-response items to scores on a test with both selected-response and constructed-response items. Four linking procedures were considered: (a) true score linking with IRT model (TIRT), (b) observed score linking with IRT model (OIRT), (c) equipercentile linking (EQ), and (d) linear observed-score linking (LE). The four linking procedures produced similar linking relationships and similar first-order equity deviations in the middle of the ability scale. There were some non-negligible first-order equity deviations and discrepancies among linking procedures at the extreme ends of the ability scale. TIRT met the first-order equity property more frequently than did the other linking methods. No single linking procedure was better than the other linking procedures with respect to second-order equity indices. However, in general, OIRT and EQ procedures met second-order equity property better than did TIRT. EQ procedure usually meets the equipercentile equating property more closely than other linking procedures since it satisfy the moment preservation property.

목차

ABSTRACT

Ⅰ. Introduction

Ⅱ. Linking Procedures

Ⅲ. Method

Ⅳ. Results

Ⅴ. Discussion

References

초 록