인권교육 프로그램의 효과성을 높이기 위한 다양한 평가 도구의 활용, 전문가 리뷰 및 학습자 검토 방법론 doc_id PCY_201507300838075641_5

검토 요강 및 지침, 시험 운영 또는 시범운영, 면담 양식 등은 형성평가를 위한 정보 수집에 사용되는 도구의 일부이다. 이러한 도구에 대해서는 이 지침서의 제4부에서 보다 상세하게 설명되어 있다. 선택할 수 있는 도구의 종류가 많기 때문에 가장 적절한 도구를 선정하는 것 자체가 어려울 때도 있다. 형성평가를 위한 도구를 선택할 때 해당 정보의 “출처”에 가장 적합한 도구를 선택하도록 노력하라. 예를 들어 자문을 구하고자 하는 전문가가 출장이 잦다면, 이 전문가와 연락하기 위해서는 이메일이 가장 효과적인 수단이 된다. 마찬가지로, 구전문화(oral culture)가 지배적인 사회에서 온 잠재적 학습자 집단에게서 정보를 수집하고자 한다면, 개별 면담, 전화통화, 또는 기술적으로 가능하다면 인터넷 보이스 통화, 또는 기타 비-문서 기반 방법을 고려할 수 있다. 전문가 리뷰는 다양한 영역에서 전문성을 갖춘 개인에 의해 수행된다. 모든 내용 관련 측면들이 이행 단계로 넘어갈 준비가 되어 있는지 확인할 수 있도록 보통 다양한 전문가들로 하여금 인권교육 과정, 자료 또는 프로그램을 리뷰하도록 하는 것이 좋다. 인권교육의 경우 내용 또는 주제 관련 전문가, 교육 대상 전문가, 교육 방법론 전문가 등 대개 세 가지 유형의 전문가가 있다. 내용 전문가 또는 주제 전문가를 초청해서 교육 내용이 최신인지, 관련성이 있는지, 설명이 충분히 되어 있는지를 리뷰해서 확인할 수 있다. 이들 전문가는 누락된 부분을 찾아내고 정교화가 필요한 부분을 파악할 수 있다. 예를 들어서 국제 인권 문서 활용에 관한 교육 과정의 경우 자신의 통상 업무에서 이러한 문서들을 활용해온 법적 배경을 가진 사람이 전문가로 적절할 것이다. 교육 대상 전문가는 학습자와 그들의 필요, 특성에 대해 자신이 알고 있는 바를 기반으로 인권교육 활동의 적합성에 대해 자문을 제공해줄 수 있다. 이들 개별 전문가들은 교육 내용 및 관련 활동의 난이도 등과 관련 소중한 피드백을 제공해줄 수 있다. 예를 들어 난민의 권리에 관한 교육 과정의 경우, 난민 활동가나 조직가가 교육 대상에 대한 전문가라 할 수 있다. 전문가의 조언을 구할 때 명심해야 할 가장 중요한 사안 두 가지가 있다면 첫째 전문 분야에 맞는 피드백을 구할 것, 둘째 어떤 조언을 기대하고 있는지에 관해 매우 명확한 지침을 줄 것이다. 종종 많은 전문가들이 “여기에 대해서 어떻게 생각하세요?”라고 묻는 이메일을 받게 된다. 이렇게 전반적인 피드백을 요구하는 요청은 지나치게 부담스럽게 느껴 무시될 가능성이 높다. 공유할 만한 관련 경험을 지닌 전문가를 찾았다면 관련 페이지나 항목을 구체적으로 알려주면서 그 부분에 질문을 집중하라. 그러면 전문가들이 참여할 가능성이 더 높아질 것이다. 인권교육 과정을 개발하면서 관련 피드백을 구하는 현실적인 방법 중의 하나는 전문가와 이 교육의 세부 개요를 공유하는 것이다. 전체적인 목적과 학습 세부 목표를 명시하고 활동 및 발표 내역을 설명한 종합적인 개요와 함께 구체적인 지침과 질문을 전문가에게 제공하는 것이야말로 구체적인 관심 영역에 해당 전문가의 피드백을 집중적으로 받을 수 있는 효과적인 방법이다. 인권교육 과정 또는 프로그램이 궁극적으로 효과가 있을 것인지를 가장 잘 나타내주는 것이 바로 학습자에 대한 검토를 수행하는 일일 것이다. 학습자 검토의 목적은 학습자가 설정된 학습 세부 목표를 충족시킬 수 있을 것인지를 평가하는 것이다. 학습자 검토에는 대표 학습자들이 얼마나 잘 학습하는지, 그 과정에서 어떤 종류의 문제에 마주치게 되는지를 알아보기 위해 이들을 대상으로 “시험”해 보거나 교육 과정을 시범 시행해보는 활동이 필연적으로 수반되게 된다. 학습자와 쉽게 접촉할 수 있고 시간과 자금이 무한대로 지원되는 이상적인 상황에서라면 전체 교육 과정을 시험 삼아 돌려보는 것이 가능할 것이며 이를 통해 학습자로부터 피드백을 구할 수 있을 것이다. 하지만 현실에서는 이런 상황은 거의 불가능하기 때문에 인권교육가가 가장 불확실성이 높은 영역을 파악하여 이 영역에 질문을 집중하는 것이 중요하다. 리뷰 대상 영역에 따라 학습자와의 일대일 면담이 적절한 경우도 있고 다수의 학습자들과의 집단 면담이 적절한 경우도 있다. 개별면담(One-on-one): 학습자와의 일대일 면담 과정은 실제로는 교육 대상을 대표하는 여러 개인과 수행될 수도 있다. 소수의 학습자만을 참여시켜 진행함으로써 상세한 맞춤형 검토의 기회를 얻을 수 있다. 일대일 면담의 목적은 개별 학습자가 학습 세부 목표 달성을 꾀하는 과정에서 마주치게 되는 문제를 파악하기 위한 것이다. 이렇게 해서 파악될 수 있는 문제의 사례로는 부적절하게 작성된 지시사항, 부적절한 사례, 익숙하지 않은 용어 사용 등이 있다. 실제로 일대일 면담은 한 번에 한 명의 학습자만 참여하면 되기 때문에 면담을 조직함에 있어 노력이 덜 요구되기 때문에 수행이 상당히 쉬운 편이다. 언어, 문화와 같은 학습자 특성이 문제가 될 가능성이 있는 경우, 설사 교육 과정의 일부만 설계된 상황에서라도 조기에 일대일 면담을 수행해야 한다. 평가에 대한 평가에는 학습자가 구체적 개념 또는 질문을 어떻게 해석하는지에 대한 질문, 즉 여러분이 학습자의 일반적인 반응 패턴을 이해하는데 도움이 될 질문이 포함될 수 있다. 예를 들어서 학습자는 진행자를 기분 나쁘게 해서 눈 밖에 나고 싶어하지 않기 때문에 긍정적으로 질문에 답하는 경향을 보일 수 있다. 또는 학습자가 평가를 부담스러워해서 상세 정보를 요하는 질문은 피하면서 최대한 빨리 끝내버리고 싶어할 수도 있다. 여기에서 얻은 데이터는 최종 평가 데이터 해석에 너무나도 유용한 데이터일 수 있다. 인권교육에서 여러분의 평가 절차 및 도구를 시범삼아 해봄으로써 학습자에 대해서, 그리고 학습자의 평가에 대한 태도와 이해에 대해 많은 것을 발견할 수 있다. 또한 평가에 충실하게 참여하도록 권장하는 데에도 도움이 될 수 있다. 학습자들이 자신들의 신념과 경험에 의해 어떻게 자신들의 답변이 구성되는지를 깨닫고 인권교육에서 평가의 중요성을 인지하게 된다면 평가 참여율도 높아지게 될 것이고 마찬가지로 답변의 질도 향상된다. 이러한 평가가 길 필요는 없다. 실제로 단순히 교육 과정을 시작할 때 학습자와 대화를 나눠보는 형태를 취할 수도 있다. 중요한 것은 평가와 관련된 논의의 장을 열고 고려사항들을 다루는 것이다. 교육 종결 후 총괄평가란 그 명칭에서 알 수 있듯 하나의 교육 과정 또는 프로그램이 완료된 후에 그 전체적인 효과를 측정하기 위해 수행하는 평가 활동을 말한다. 교육 종결 후 총괄평가가 내부적으로, 즉 교육에 참여한 사람들에게 유용한 역할을 해야만 한다는 개념이야말로 핵심이다. “활용-중심 평가”라는 개념은 패톤(Patton, 1986)이 개발한 것으로 평가 수행의 가치 중 하나는 인권교육 활동을 개선하고자 하는 목적으로 우리 자신의 활동 환경 내에 이 정보를 적용할 수 있게 한다는 것임을 상기시켜준다. 스크리벤(Scriven)이 주장하듯 외부 청중 또는 의사결정자 (예를 들어서 자금 지원 기관, 감독 당국, 미래에 이를 활용할 가능성이 있는 사람)를 위하여 프로그래밍의 성과를 분명히 제시하는 것 역시 여러분의 인권교육 활동의 중요성과 효율성을 증언해줄 수 있기에 중요하다.