대학의 교육 성과 및 운영 효과성을 측정하기 위한 다양한 내부·외부 성과 평가 지표와 국가별 평가 체계 및 사례 doc_id PCY_201502160909358731_19

단과대의 내부 평가는 학생의 학업과 학위 수여에 관한 현황을 파악하고, 학생들이 각 단과대에서 성공적으로 학위 과정을 이수할 수 있도록 하는 데 영향을 미치는 요소들을 평가하는 내용들로 구성 된다. 보고서에는 먼저 단과대에 관한 개괄로 단과대의 교육목표, 조직과 리더십 구조, 학생 특성들이 소개 된다. 다음으로 학과 수준의 학생 성취와 대학 수준의 학생 성취 목표가 어떻게 연관되는지에 관한 내용이 서술된다. 이후 “학생 성취도 지표”와 “학생 성취도에 영향을 미치는 요소 지표”에 관한 평가 내용이 기술된다. 마지막으로 평가를 통해 발견된 내용과 개선을 위한 계획으로 보고서가 마무리 된다. 이 과정을 지원하기 위해 전략기획부서(Office of Strategic Initiatives, 이하 OSI)에서 각 단과대 수준의 대시보드를 구성, 각 대학이 특정 지표와 관련된 데이터들을 수집하도록 돕는다. 필요한 경우 단과대나 대학 수준에서 필요한 데이터를 직접 구성할 수도 있다. 학생 성취도에 관한 핵심 지표로는 2학년 학생들의 재등록률, 2학년 학생들의 학점 수료 현황, 졸업까지 평균 학기 수, 졸업 까지 평균 학점 취득 수, 학위 수여 수, 전공 수 등이 포함된다. 더불어 NSSE와 CLA의 비판적 사고 영역 점수 등을 포함할 수도 있다. 미국의 대학들은 대학 인증평가나 주 정부의 정책적 요구에 부응하기 위한 다양한 평가에 참여활동에 참여함과 동시에 학교 내부에서 교육목표와 전략적 계획의 달성을 점검하고, 대학의 평판과 재정 자원 등 대학의 운영을 결정하는 중요한 요소들을 살피기 위해 정기적으로 다양한 성과 평가를 실시한다(Massy, 2009). 대학 내부의 성과 평가 지표는 주로 대학 운영의 효과성과 학생 학습의 두 가지 측면을 고려하여 선정 된다(Allen, 2004). 운영의 효과성의 경우 교과는 물론 비교과 활동 운영 전반을 포함하여 학생의 선발과 등록(선발, 장학금지금, 등록금 정책 등), 교육과정(멘토링, 교과과정 및 학위 수료 기준), 재정현황(운영비용 및 교직원 임금, 자산, 채권, 수입 관리, 이자), 대학경영계획(운영 전략, 학습 계획), 학사규정(학사, 규정 개선을 위한 의사소통), 기숙사, 대외 관계(기부금 유치, 졸업생 관리, 주 정부와의 관계, 지역 사회와의 연계) 등이 포함된다. 학생의 학습 성과와 관련해서는 학생들이 졸업 후 어떠한 지식과 능력을 갖추는가에 대한 근거를 제시하는 것이 평가의 핵심이 된다. 1876년 설립된 텍사스 대학은 9개의 대학과 6개의 의대로 구성되어 있으며, 텍사스 주의 주요 공립대학으로 연구와 교육의 중심이 되어왔다. 텍사스 대학은 오스틴 캠퍼스를 중심으로 216,000여 명의 학생과 17,000여 명의 교수, 63,000여 명의 행정직원을 가지고 있으며, 텍사스 대학 모든 캠퍼스를 관장하는 이사회에서 각 캠퍼스의 운영에 관한 주요 정책과 평가를 담당하고 있다. 2011년, 텍사스 대학 총장 Cigarroa의 주도하에 수월성 제고를 위한 기준(Framework for Advancing Excellence)을 발표하였고, 이에 따라 텍사스 대학의 각 캠퍼스에서는 주기적으로 단과 대학별 평가를 수행하고 평가 결과에 따라 발전, 개선 계획을 제시하고 있다. 각 캠퍼스의 단과 대학들은 적어도 매 10년마다 주기적으로 자체 평가와 외부 평가를 실시하여 보고서를 작성하고, 단과대 학장과 각 캠퍼스의 학장이 평가보고서에 대한 응답서를 작성, 전체 대학을 관장하는 교무처에 이를 제출하도록 한다. 각 대학은 주 정부의 평가 지표에 따라 학내의 교육 활동 내용을 평가하고, 각 대학의 평가 보고서는 다시 미네소타 대학 시스템 이사회와 미네소타 주립대학 협의회 이사회에서 최종 평가 되어 9월에서 10월 미네소타 고등교육부로 제출 된다. 더불어 각 대학은 학생 등록 등을 포함한 주요 지표와 관련된 데이터를 7월-10월 사이에 주 정부에 제출하게 되며, 고등교육부가 미네소타 교육부, 연방 정부 교육부, 인구 조사 데이터, 기타 다른 대학의 연구소나 시험 기관 등의 데이터를 취합하여 미네소타 대학평가 보고서(Minnesota Measures report)를 작성, 입법부와 정부, 대중에 공개한다. 이 대학평가 보고서는 국공립대학의 다양한 활동과 관련해 여러 지표를 활용하여 미네소타의 정책 입안자들이 고등교육의 목표와 효과성을 평가하는 것을 돕는 것을 목적으로 한다(Minnesota Office of Higher Education 2009, 이하 MOHE). 특히 이 보고서에서 활용된 지표 중 하나는 미네소타 주의 연구 중심 대학인 미네소타 대학(University of Minnesota)을 세계 최상위 3개 공립 대학 안에 포함될 수 있도록 하겠다는 미네소타 대학 이사회의 목표를 반영한 것이다(MOHE, 2009). 대학 교육과 학위 수여를 학생들의 능력으로 규정하고 이에 대한 대학의 책무성을 물어야 한다는 의견이 대두되면서 학계나 여러 기관들에서 학생들의 학습 능력을 평가하고 이를 대학의 성과 평가로 연결하려는 시도가 이루어졌다. 대학 학습 평가(Collegiate Learning Assessment. 이하 CLA) 역시 학생들의 학습 결과를 측정하려는 노력의 일환으로 OECD의 AHELO 프로젝트에서는 CLA 측정도구가 활용되기도 하였다. 미국에서는 자율적인 평가 목적으로 CLA를 대학에서 활용하고 있고, 몇몇 주에서는 국공립 대학의 평가 결과를 대학들이 공시하도록 하고 있다(예: 펜실베니아주 자발적 책무성 시스템과 텍사스 대학 시스템). 랜드 교육지원 협의회(Council for Aid to Education)가 개발한 CLA는 전 학년 학생을 대상으로 한다. 대학의 질은 대학에서 제공하는 교육이 학생들의 학습과 민주시민으로서의 자질을 향상시키는 정도에 직결된다는 관점(이를테면, 가치 부가적[Value-added] 관점)에서, CLA의 주요 지표는 학생들의 비판적 사고, 분석적 추론 능력, 그리고 글쓰기를 통한 의사소통 능력을 포함한다. 학생의 학업 참여 조사(National Survey of Student Engagement, 이하 NSSE)는 인디애나 대학의 중등후속교육 연구 및 기획센터(Center for Postsecondary Research and Planning)에서 개발되어 1999년 현장 테스트를 거쳐 2000년 첫 해 276개 대학 195,000명의 학생을 대상으로 시행되었다. 2014년 기준, 533개 대학이 조사에 참여 하고 있으며, 특히 1학년과 4학년 학생을 대상으로 시행된다. NSSE는 학생들의 학습 결과와 관련된 평가, 학부 교육의 질, 책무성과 관련된 자료를 축적 하는 데 그 목적을 둔다. 특히 대학에서 제공하는 학업의 도전 수준(level of challenge), 참여적/능동적 학습의 정도(active learning), 교수와의 상호작용 정도(student-faculty interaction), 지원적 환경의 구축 정도(supportive environment) 등 사전 연구를 통해 학부교육의 성과향상에 유의미한 영향을 끼치는 교육의 실천사례를 중심으로 조사 문항을 설계하여 자기보고 방식으로 각 영역에 대한 학생의 참여도를 측정한다. QAA는 독립적인 조직으로 영국고등교육의 기준과 질에 대하여 모니터하고 조언하는 역할을 담당하며, 질 보장 규정(Quality Code)을 제작하여 모든 영국의 고등교육 기관에 요구되는 기본적 기준을 제시하는 기능을 담당한다. 연구기금에 대한 통제권한은 RAE와 각 재정지원 위원회에 있으며, 영국정부는 국가 학생 조사(National Student Survey)를 통해 학생들의 고등교육 만족도를 조사하여 이를 기관 평가의 자료로 활용할 수 있도록 하는 기반을 마련하고 있다. 영국의 경우, 고등교육 기관 평가와 인증과정에 학생들을 적극 참여시키고 학생들의 경험과 그들의 목소리를 반영하고자 하는 노력의 측면에서 QAA의 활동이 긍정적으로 평가되고 있다. 또한 일반적인 대학 평가와 대중화된 대학 랭킹과는 달리 QAA는 고등교육 기관의 특성과 유형별 다양성을 인지하고 있으며 기관 자체의 평가를 지원하기 위한 문서의 제작과 컨설팅 제공에 초점을 맞추고 있는 점이 특징적이다.