초등학교 3학년 국가수준 기초학력 진단평가 동등화 방안

• 영문명: A Study on Equating Methods for Grade 3 National Diagnostic Test of Basic Competency
• 발행기관: 한국교육평가학회
• 저자명: 이규민(Guemin Lee)
• 간행물 정보: 『교육평가연구』제18권 제1호, 125~151쪽, 전체 27쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2005.05.01

국문 초록

이 연구는 초3 기초학력 진단평가의 다년간 결과를 비교 가능하도록 만들어 주는 동등화 방안을 탐색하고, 그 상대적 적절성을 평가하여 현장에서 적용될 수 있는 구체적인 방안을 검토하는 것이다. 연구 결과를 요약하면 다음과 같다. 첫째, 2002년과 2003년 검사의 동등화를 위한 검사 구인의 동질성 분석 결과 기초 수학 검사가 동등화를 위한 조건들을 상대적으로 잘 만족시켰고, 결과적으로 양호한 동등화 결과를 산출하였다. 읽기와 쓰기는 검사 구성에 변화가 있었고, 이러한 변화가 검사 점수의 동등화에도 영향을 준 것으로 판단된다. 둘째, 동등화 표본의 사례 수가 적어 문항반응이론을 이용한 동등화 방법을 적용하지 못하는 상황에서 평균, 선형, 동백분위 동등화 방안이 제안되었다. 세 방법 모두 낮은 점수대와 높은 점수대에서 동등화 방법 간 차이가 발견되었고, 중간 점수대에서는 상대적으로 그 차이가 적었다. 검사 점수의 동등화를 위한 조건들을 잘 만족시켰던 기초 수학 검사의 경우, 적용된 모든 방법에서 유사한 동등화 결과를 산출하였다. 셋째, 기초학력 도달/미도달 여부의 일치 정도 분석과 Bootstrap 방법을 이용한 동등화 오차 분석은 동등화 방법의 상대적 적절성을 평가하는데 한계가 있었다. 반면 2003년 이루어진 Bookmark 기초학력 도달 기준선 설정 작업 결과를 준거로 사용하여 동등화 방법 간 적절성 평가에서는 동백분위 방법이 다른 방법 보다 상대적으로 우수한 것으로 나타났다.

영문 초록

The grade 3 National Diagnostic Test of Basic Competency (NDTBC), which was first developed and administered in 2002, has its main mission to diagnose performance levels of students with respect to their basic competencies (language literacy and numeracy). The NDTBC is a kind of national evaluation system of monitoring progress of student achievement levels and providing information for decision-making processes to increase educational accountability. This study was designed to address issues related equating test results across multiple years to obtain score comparability. Main conclusions based upon results of this study can be summarized as follows. First, the Mathematics test satisfied equating conditions relatively better than did the Reading and Writing tests. Test structures of the Reading and Writing tests were changed in numbers of items and in content balances. These changes could influence on equating relationships to some extent. Second, under a circumstance that it is not possible to apply equating methods based up item response theory due to sample size restrictions, this study proposed mean, linear, and equipercentile equating methods for collected data with a single-group design. Three proposed equating methods provided non-negligible differences in equating results in low and high ability score ranges, but those provided similar equating relationships in the middle range of the score scale. The Mathematics test that satisfied equating conditions more closely produced more similar results among three equating methods than did other content areas. Third, the decision consistency analysis between 2002 and 2003 test results, and equating error estimates from Bootstrap re-sampling techniques could not provide relevant information regarding relative appropriateness of proposed equating methods. Based upon the results form a analysis using 2003 Bookmark standard setting outputs as criteria, the equipercentile equating method produced equating results relatively better than did other equating methods.

목차

요약

Ⅰ. 서론

Ⅱ. 검사 점수의 동등화

Ⅲ. 연구 방법

Ⅳ. 연구 결과

Ⅴ. 논의 및 결론

참고문헌

ABSTRACT