통계 품질 확보를 위한 조사표 설계, 무응답 관리, 가중치 조정 및 통계 비교성 유지에 관한 지침 doc_id CNTS-00118872825_3

단위무응답은 조사표에 응답자가 전혀 응답을 하지 않아 발생하는 무응답을 말한다. 단위무응답은 조사대상자를 접촉하지 못하거나 조사대상자가 응답을 거부하여 발생한다. 단위무응답이 발생하면 실질적인 유효 표본수의 감소효과가 발생하고, 무응답으로 인한 편향의 원인이 된다. 따라서 단위 무응답 실태를 제공하여 통계 품질의 특성을 이용자에게 알려야 한다. 단위무응답률은 표본으로 추출된 조사 대상 단위 중에서 응답을 받지 못한 단위의 비율을 말하며 다음과 같이 계산한다. 단위무응답은 응답자 가중치를 조정하는 가중치 조정법으로 처리하는 것이 보통이다. 진단에서는 불응, 부재 등에 따른 단위무응답률 수치와 산출산식을 확인한다. 주요 하위그룹 및 무응답 사유(불응, 접촉불가, 부적격 등)별 무응답률을 파악한 경우 이를 확인하고, 불응을 세분화하여 파악한 무응답률이 있으면 확인한다. 또한 단위무응답에 의한 편향 발생 및 분산 증가 가능성, 정도 등에 대하여 검토한 결과가 있으면 확인하고 진단한다. 표본대체를 하여 응답률을 100%로 하는 경우라도 최초 표본의 무응답률, 대체율 등을 관리하여야 한다. 조사표 문항 중에 응답자가 대답하기를 꺼려하는 문항이 있으면 이로 인해 응답 편향이 발생할 수 있다. 응답자에게 민감한 질문이나, 개인적인 질문 혹은 응답자에게 감정의 변화를 일으키는 질문 등에는 응답자가 올바른 대답보다는 보수적인 대답 혹은 사회적으로 받아들여지는 평범한 응답을 하는 경향이 있다. 따라서 조사표 항목 중에 응답자의 상황에 따라 민감할 수 있는 질문은 사전에 선별하여 올바른 응답을 받을 수 있는 방법을 강구하여야 한다. 자기 응답, 인터넷 응답, 전화 응답 등은 익명성이 있기 때문에 덜 민감하게 느껴질 수 있는 반면 면접조사는 면전에서 조사를 진행하기 때문에 민감한 질문에 거부감이 더 크게 느껴질 수 있다. 진단에서는 조사표 항목 중에 응답자가 민감한 질문이라고 느낄 수 있는 항목이나 부정확한 답변이 예상되는 항목이 기술되어 있는지 확인한다. 표본조사에서 가중치는 하나의 표본이 대표하는 모집단 단위의 수를 의미한다. 추정할 때 편향 없는 결과를 얻기 위해서는 설계가중치, 무응답조정 가중치, 사후층화 가중치 등을 종합한 가중치를 사용한다. 모든 단위가 동일한 추출확률을 갖는 등확률추출이 아닌 경우 단위별로 추출확률의 상이함에 따른 가중치 조정이 필요한데, 이러한 것을 설계가중치 조정이라고 한다. 설계가중치는 표본설계에 따른 표본추출 단위에 대한 포함확률을 계산해 이를 기초로 산출한다. 또한 무응답에 따른 편향을 줄이기 위한 가중치 조정을 무응답가중치 조정이라고 한다. 조사가 완료된 후 가중치를 적용한 표본의 분포가 성별이나 연령대별 등 특정 속성에 대해 이미 알려진 모집단 분포와 일치하지 않는 경우가 흔히 발생한다. 이런 경우 특정 속성에 대한 가중 표본 분포(구성 비율)가 알려진 모집단에서의 분포(구성 비율)와 같아지도록 하는 작업을 사후가중치 조정이라고 한다. 사후가중치 조정에는 사후층화 또는 레이킹 비 방법을 흔히 사용한다. 진단에서는 무응답 가중치 조정, 사후가중치 조정 등을 사용하였는지를 살펴보고, 각각의 필요성, 구체적인 방법, 가중치 분포 등이 기술되어 있는지를 진단한다. 조사표는 조사목적에 부합하는 정보를 응답자로부터 얻기 위하여 고안된 질문들을 모아놓은 표이다. 조사표는 자료수집과정에서 아주 핵심적인 역할을 한다. 자료가 조사표의 질문에 근거하여 수집되기 때문에 조사표는 자료 품질에 직접적인 영향을 준다. 또한 조사표는 이용자에게 공개되기 때문에 통계조사에 대한 이용자의 이미지에 큰 영향을 준다. 잘 만들어진 조사표는 이용자에게 신뢰감을 높여준다. 조사목적에 부합하는 조사를 실시하기 위해서는 조사에서 사용하는 조사항목이나 용어를 명확하게 정의하고 관련 개념을 분명하게 설명하여 조사항목이나 용어로 인한 혼선을 없애야 한다. 조사항목이나 용어의 분명한 정의는 조사원, 조사 관리자, 응답자 등 조사에 참여하는 사람들 사이의 의사소통을 원활하게 한다. 용어의 정의가 분명하지 않으면 불충분한 이해로 인하여 의도하지 않는 착오가 발생하기도 한다. 가능하면 용어의 정의는 일반적으로 통용되는 표준적인 정의와 일치하는 것이 좋으며, 더 나아가서 국제적인 용어의 정의와 일치하는 것이 바람직하다. 일관성 있는 용어의 정의는 통계의 비교가능성을 증진시켜 이용자의 통계활용을 늘리는 계기가 된다. 조사목적에 부합하는 정보를 응답자로부터 얻기 위하여 조사표를 구성할 때에는 다음의 사항을 고려해야 한다. 먼저 자료수집방법이 무엇인지를 고려한다. 자기 기입식 조사표는 조사원 면접 조사표보다는 질문이 간명하고 문항수가 적어야 한다. 전화조사나 인터넷 조사의 조사표도 조사원 인터뷰 조사표보다는 간명하여야 한다. 조사표 작성에는 응답자의 특성, 응답 부담, 자료수집과정의 복잡성이 반영되어야 한다. 또한 정보의 민감성이나 기밀성이 고려되어야 하고 다른 조사와의 비교가능성도 고려되어야 한다. 질문의 형태(개방형, 폐쇄형), 질문 순서, 조사표의 레이아웃, 측정 오차나 응답오차의 요인 등이 함께 고려되어야 한다. 진단에서는 조사표의 조사항목 배치 및 구성에 대한 충분한 논의과정이 있었는지 확인한다. 아울러 조사명, 조사목적, 조사의 법적근거, 응답자 비밀보호, 응답자 협조사항, 연락처 등 해당 조사와 관련해 응답자에게 제공해야 할 정보를 기재하고 있는지 확인한다. 특히 조사방법을 혼합하여 이용하는 경우, 조사방법별 조사표 구성 차별화 필요성에 대하여 검토한 결과가 있는지 확인한다. 보고양식은 통계작성목적에 부합하는 정보를 얻기 위하여 고안된 질문들을 모아놓은 표이다. 보고양식은 보고자료의 수집과정에서 아주 핵심적인 역할을 한다. 자료가 보고양식에 근거하여 수집되기 때문에 보고양식은 자료 품질에 직접적인 영향을 준다. 또한 보고양식은 이용자에게 공개되기 때문에 보고양식에 대한 이용자의 이미지에 큰 영향을 준다. 잘 만들어진 보고양식은 이용자에게 신뢰감을 높여준다. 잘 기획된 보고양식은 다음의 특징이 있다. 먼저 보고양식은 자료를 효율적으로 수집할 수 있도록 고안되어야 하며, 오류와 불일치가 없어야 한다. 그리고 보고양식은 응답자에게 친근하게 만들어져야 한다. 또한 자료수집과정에서 응답시간을 줄일 수 있도록 고안되어야 한다. 보고항목은 응답자가 무엇을 물어보는지 쉽게 이해할 수 있게 작성되어야 하고, 의도와는 달리 응답자가 잘못 해석하지 않도록 만들어져야 하며, 질문의 문구는 응답자에게 익숙한 용어와 표현방식으로 만들어져야 한다. 진단에서는 보고항목의 의미는 분명한지, 용어의 정의는 뚜렷한지, 보고항목이 통계작성목적을 달성할 수 있도록 만들어졌는지 확인하고 진단한다. 통계자료는 시간 또는 공간이 달라도 통계 자료가 동일한 개념, 분류, 측정도구, 측정과정 및 기초자료 등을 기준으로 집계되어 서로 비교가 가능해야 한다. 비교성은 시간적 및 공간적으로 자료가 비교 가능한 정도를 말한다. 즉, 특정 통계에 대하여 다른 나라, 다른 도시 또는 다른 연도의 자료와 비교가 가능한지를 보는 것이다. 비교성에서는 모집단의 정의 변경이나 조사항목 정의 변경과 같이 비교성에 영향을 주는 개념 변화에 대해 기술하고, 같은 항목을 조사하는 다른 통계의 항목 정의와 차이점을 비교(특히 국제기준이나 국내기준이 있다면 기준에서 정의하는 항목 정의와 비교)한 내용에 대해 상세히 기술한다. 상기 기술한 바를 바탕으로 지리적 및 비지리적 영역 또는 시간적 통계를 비교할 때 통계작성에 적용된 개념, 정의와 측정방법의 차이가 주는 영향 등을 점검하여 비교성 측면에서 통계품질을 평가한 결과를 기술한다.