위계선형모형으로 추정한 학교효과를 고려하여 고교내신등급을 보정하는 방안

• 영문명: A Method of Compensating the High School Record with the School Effectiveness Estimated by HLM2
• 발행기관: 한국교육평가학회
• 저자명: 남현우(Nam Hyun-Woo)
• 간행물 정보: 『교육평가연구』제19권 제2호, 137~155쪽, 전체 19쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2006.08.01

국문 초록

  2-수준 위계선형모형(HLM)으로 학교 효과성을 측정하고, 이를 바탕으로 단위 학교의 내신 등급을 보정하는 방안을 제시하고, 이 방안의 타당성을 검토하였다. 1-수준 변인은 성, 개인과외 경험, 사회경제적 지위(SES) 등이었고, 2-수준 변인은 평균 SES, 학교 규모, 지역 등이었으며, 종속 변인은 수능의 언어, 수리, 영어 점수였다. 본 연구에 사용된 자료는 한국직업능력개발원에서 수집한 한국교육고용패널(KEEP 2005)의 일부이다. 전국 평균과 학교 평균의 단순 차이로 학교 효과성을 측정하는 평균 점수 방식을 준거로 HLM 방식의 타당성을 검증하였다. 학교 효과성을 표준 점수로 환산하여 최대 3등급까지 상향 또는 하향 보정하였다. 평균 점수 방식과 HLM 방식을 비교할 때, 상대적으로 과대평가되는 학교는 영역별로 15∼19%, 상대적으로 과소평가되는 학교는 영역별로 19∼24% 정도였으며, 어떤 방식으로도 보정되지 않는 학교가 과목별로 56∼66% 정도였다. 과대평가되는 학교들은 다른 학교들에 비해 수능의 평균 점수와 평균 SES가 높거나 최소한 비슷했고, 과소평가되는 학교들은 낮았다. 기본 모형인 ANOVA 모형과 비교할 때 HLM2 모형의 무선 효과 비율이 어떠한지, 자료의 원천과 분석 모형이 달라짐으로써 집단 내 상관 계수(ICC)가 어떤 변화를 보이는지 등을 논의했다. 학교 효과성이 모든 영역에서 동일하게 나타나는지, 특정 학교 내의 모든 영역의 내신 등급이 천편일률적으로 상향되거나 하향되는 것은 아닌지를 검토하였다. 모든 영역이 동일한 방향으로 변화되는 학교는 19% 정도에 불과했고, 100개교 중 아무런 변화가 없었던 34개교를 제외한 66개교 중 47개교(71%)는 영역별 등급 변화가 달랐다.

영문 초록

  This research was intended to suggest and validate a method of compensating the high school record with the school effectiveness estimated by HLM2.
  The school effectiveness was estimated by using the KEEP 2005 data. The data are composed of Verbal, Math, and English scores in KSAT as dependent variables, SES, gender, private tutoring experience as 1-level independent variables, and mean SES, school size, schol location as 2-level independent variables. The HLM method was validated by comparing the so called Mean method, which estimated the school effectiveness by the difference of school mean and grand mean. The high school records were compensated upward or downward on the ground of standard scores of school effectiveness.
  Comparing the HLM method with Mean method, schools of 15∼19% were over-evaluated, 19∼24% were under-evaluated, and 56∼66% were not changed at all.
  KSAT scores and mean SES of schools over-evaluated were higher than the other schools. On the other hand, those of schools under-evaluated were lower than the other schools.
  Some issues were discussed. Comparing HLM2 model with ANOVA model, was there any change in random error variance? When the data sources or the estimating models were changed, was there any change in ICC(intra-class correlation coefficients)? This research also investigated whether the school effectiveness of Verbal, Math, and English were same or not, and the directions of compensating high school record were same or not.

목차

한국어 초록
Ⅰ. 연구의 필요성 및 목적
Ⅱ. 연구내용 및 방법
Ⅲ. 연구 결과
Ⅳ. 논의 및 결론
참고문헌
저자소개
ABSTRACT

키워드

위계선형모형(HLM) 학교 효과성(School Effectiveness) 내신등급 HLM(Hierarchical Linear Model) High School Record