문맥 (context)
Uwezo는 수학과 읽기 능력에 대한 동부 아프리카 지역의 가구조사로, 국가협력단체와 시민단체의 주도로 시작된 시민중심사업인 Twaweza에서 주관하고 있다. ASER 방법론을 기반으로 하여 개발되었다. Uwezo는 동아프리카 지역 학생들의 대다수가 해당 학년에서 요구되는 수준만큼의 학습이 제대로 이루어지지 않음을 증명하고, 나아가 학생들의 학습 능력 향상을 위해 개발되었다. 케냐는 2009년부터, 탄자니아와 우간다는 2010년부터 매년 실시되고 있다(Uwezo, 2012a). Uwezo는 6세부터 16까지 아동을 대상으로 하며, 초등 2학년 수준의 기초 읽기 능력과 수학 능력을 평가한다. 평가는 약 15분 정도 소요되며, 평가 내용으로는 문자 인식, 간단한 본문 읽기, 번호 인식, 기본적인 산술 내용이 포함된다(Uwezo, 2012a).
LLECE(Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación)는 라틴 아메리카의 교육의 질을 평가하기 위한 네트워크로 UNESCO의 라틴아메리카와 카리브해 지역 교육 협회에 의해 조직되었다. LLECE는 학생들의 학업성취에 대한 정보를 제공하고 학업성취와 관련된 요인을 분석할 뿐만 아니라 국가단위에서 이루어지는 측정 및 평가에 대한 지원과 조언을 제공하며 교육평가의 새로운 접근방식을 서로 교환하고 논의할 수 있는 장을 형성하기 위해 조직되었다. LLECE에서는 1997년에 라틴 아메리카 지역 13개국 약 52,000명의 3학년과 4학년 학생을 대상으로 첫 번째 지역적 비교 및 탐색 연구(PERCE)를 시행하였다. 2006년에 시행된 두 번째 연구(SERCE)에서는 16개 국가의 100,752명의 3학년 학생, 95,288명의 6학년 학생을 대상으로 성취도를 평가하였다.
PASEC(Programme d'Analyse des Systèmes Educatifs de la CONFEMEN)은 CONFEMEN(Conference of the Ministers of Education of French speaking countries)의 지원 하에 현재 아프리카 서부 사하라 사막 이남 지역의 국가들에서 시행되고 있다. PASEC의 일차적인 목표는 교육과 관련한 정책에 유용한 정보를 제공하는 것이며, 이를 위해 학생의 학업성취도를 평가하고 학업성취에 영향을 주는 변인들을 확인하는 것이다(Greaney & Kellaghan, 2008). PASEC은 1991년에 처음 개발되어 약 20년 동안 아프리카와 아시아의 약 20여개 이상 국가에서 실시되었으며, 2012년부터는 각 국가들의 요구에 더욱 부응하기 위해 국가 간의 비교평가를 실시하고 있다. 학생의 학업성취도 변화에 영향을 미치는 요인을 파악하기 위해 학년 초와 학년 말 2회에 걸쳐 학생의 성취도를 평가하며, 학생, 교사, 학교장 대상의 설문조사를 통해 학업성취에 영향을 미치는 다양한 학습 관련 변인과 사회적· 경제적 배경 변인에 대한 정보를 수집한다(CONFEMEN, 2014).
EGMA(Early Grade Math Assessment)는 비영리단체인 RTI international(구 Research Triangle Institute)에서 저소득 국가들을 대상으로 아동의 기초 단계 수학 능력을 평가하기 위해 개발되었다. EGMA는 2008년 USAID(United States Agency for International Development)와 RTI의 계약으로 개발되었으며(Ruebens, 2009), 2009년에 케냐에서 예비 연구가 이루어진 이후, 현재 1∼3학년을 대상으로 전 세계 14개 국가에서 실시되고 있다(RTI international, 2014a). EGMA는 초등 1학년 수준의 공통적인 수학능력을 평가하는 시험으로, 수(수 인식, 크기 비교, 수 규칙, 덧셈, 뺄셈, 곱셈, 나눗셈)와 도형에 관한 능력을 평가한다(RTI international, 2014a).
TIMSS(Trends in International Mathematics and Science Study: TIMSS)는 국제 교육 성취도 평가 협회(International Association for the Evaluation of Educational Achievement; IEA)에서 학생들의 수학·과학 성취도를 국제적으로 비교하고, 교육 맥락 변인들과 성취도 사이의 관계를 파악하기 위해 4년 주기로 시행되는 평가이다(김수진 외, 2013). 이 평가의 목적은 참여국 학생들의 수학과 과학 성취도 수준 및 성취도의 변화 추이를 파악하고, 성취도에 영향을 주는 배경 변인과 성취도와의 관계 분석을 근거로 참여국의 교육정책 수립의 기초자료로 활용하는 것이다(김수진 외, 2013). 1995년 처음 시행되어 4년을 주기로 평가가 시행되며, 가장 최근에 실시된 TIMSS 2011에는 4학년 평가에 50개국, 8학년 평가에 42개국이 참여했다(김수진 외, 2013).
수학 학습성과 평가를 위해 기존에 국제적으로 활용되고 있는 검사들을 평가 대상 학년에 따라 초등 전기와 후기로 구분해 보면, 초등 전기에 실시되는 평가로는 LLECE, EGMA, ASER, Uwezo가 있으며, 초등 후기에 실시되는 평가로는 TIMSS, LLECE, SACMEQ이 있다. 초등 전기의 수학 학습성과를 측정하는 평가에는 TIMSS 같이 전 세계 국가들이 광범위하게 참여하는 평가가 존재하지 않고, 권역별 평가인 LLECE와 민간 주도로 실시되는 다수의 검사들이 존재한다. 평가도구들의 세부 평가영역을 살펴보면, LLECE에서는 수와 연산, 도형과 기하, 측정, 자료 영역을 포괄하는데 비해, 민간 주도로 개발․실시되는 EGMA, ASER, Uwezo의 경우는 수와 연산 영역에 초점이 맞추어져 있다. 수와 연산 영역은 초등 전기에 가장 기본적으로 습득해야 하는 내용이며 초등 전기 학습에서 차지하는 비중도 가장 높다는 점에서 민간 주도의 평가들이 수와 연산 영역을 집중적으로 다루고 있는 것으로 보인다.
평가도구마다 내용 요소가 상세화된 정도는 다르다. 해당 평가의 보고서에 내용 요소가 제시된 평가도구는 TIMSS, EGMA, ASER, Uwezo이다. TIMSS는 내용 요소에 대해 구체적으로 제시되어 있지만(Mullis et al., 2009; 김수진 외, 2012), LLECE 평가 보고서에는 내용 영역까지만 제시되어 있고, 내용 요소를 제시하지 않았다(Casassus et al., 2002; Valdés et al., 2008). SACMEQ와 PASEC의 내용 요소는 각 평가주관기관의 보고서에는 제시되어 있지 않았으나, 국제 평가에 대한 보고서에서 그 내용 요소를 확인할 수 있었다(Greaney & Kellaghan, 2008). 한편, EGMA, ASER, Uwezo는 수 영역이 특화된 시험으로, 수 영역의 내용 요소들을 구체적으로 제시하였다(RTI International, 2014a; ASER centre, 2014; Uwezo, 2012).
지시문 (instruction)
다음 문맥을 읽고 질문에 답하시오.
질문 (question)
LLECE와 민간 주도로 개발 및 실시되는 평가 도구(EGMA, ASER, Uwezo)의 세부 평가 영역을 비교하여 설명하시오.
추론 과정 (compact_reasoning)
-
1과제 해석
task_interpretationLLECE와 민간 주도 평가 도구인 EGMA, ASER, Uwezo의 세부 평가 영역 차이점을 비교 분석하는 과업을 수행한다.
-
2정보 추출
information_extraction문맥에서 LLECE의 평가 영역과 민간 주도 평가 도구들의 평가 영역에 관한 정보를 추출한다.
- LLECE에서는 수와 연산, 도형과 기하, 측정, 자료 영역을 포괄하는데 비해
- 민간 주도로 개발․실시되는 EGMA, ASER, Uwezo의 경우는 수와 연산 영역에 초점이 맞추어져 있다.
-
3근거 선택
evidence_selection비교의 핵심이 되는 LLECE의 포괄적 영역과 민간 주도 도구들의 집중 영역 정보를 선택한다.
- LLECE에서는 수와 연산, 도형과 기하, 측정, 자료 영역을 포괄하는데 비해
- 민간 주도로 개발․실시되는 EGMA, ASER, Uwezo의 경우는 수와 연산 영역에 초점이 맞추어져 있다.
-
4논리 통합
logical_integrationLLECE는 여러 영역을 포괄하는 반면, 민간 주도 도구들은 특정 영역에 집중되어 있다는 대조적 관계를 설정한다.
-
5결론 도출
conclusion_formulationLLECE는 수와 연산, 도형과 기하, 측정, 자료 영역을 모두 포함하지만, EGMA, ASER, Uwezo는 수와 연산 영역에만 초점을 맞추고 있다는 결론을 도출한다.
-
6답변 생성
answer_generation도출된 결론을 바탕으로 질문에 대한 최종 답변을 작성한다.
최종 답변 (final_answer)
LLECE는 수와 연산, 도형과 기하, 측정, 자료 영역을 포괄적으로 다루는 반면, 민간 주도로 개발 및 실시되는 EGMA, ASER, Uwezo는 수와 연산 영역에 초점이 맞추어져 있다.
핵심 해석 (core_interpretation)
LLECE는 수와 연산, 도형과 기하, 측정, 자료 영역을 포괄하는 반면, 민간 주도의 EGMA, ASER, Uwezo는 수와 연산 영역에 초점이 맞추어져 있다.