전통적 조사 방식의 대안으로 주목받는 자원자 패널 웹 조사의 경제적 이점과 비확률 표본 추출에 따른 대표성 및 선택 편향 문제 doc_id CNTS-00118886766_1

최근 들어 웹은 모집단 조사를 위한 현실성 있는 대안으로 주목받고 있다. 과거 수십 년에 걸쳐 조사 환경은 빠르게 변하고 있다. 종이조사표에 응답을 기입하는 전통적인 대면조사 방식 (paper and pencil interviewing: PAPI)은 컴퓨터의 발전과 함께 컴퓨터를 보조도구로 활용하는 조사방법 (Computer assisted interviewing: CAI)으로 바뀌고 있다. 최근 들어 조사기관들은 컴퓨터를 이용한 대면조사 (CAPI), 전화조사 (CATI), 우편조사 (CASI)에서 웹 조사 방법으로 점점 전환하고 있다. 개념적 측면에서 이상적인 조사방법은 그 자료 수집 방법이 당해 시점에서 사회현상을 잘 반영할 수 있을 때 그 기능을 발휘할 수 있게 된다. 왜냐하면 조사방법은 조사하고자 하는 목적 변수들에 대해 종속적이기 때문이다. 사회조사는 국민의 삶의 질과 관련된 사회적 관심사와 주관적 의식에 관한 사항을 조사하여 국민의 삶의 수준과 사회적 변동을 파악하고, 이를 사회개발 정책 수립의 기초 자료로 제공하는 것을 목적으로 한다. 이 조사는 2개년에 걸쳐 10개 영역 조사를 목적으로 매년 5개 영역으로 나누어 조사하고 있다. 2009년에는 문화와 여가, 복지, 소득 및 소비, 노동, 사회참여 등 5개 영역을 조사하였고, 2010년에는 보건, 교육, 안전, 가족, 환경 등 5개 영역을 조사하였다. 사회조사는 전통적인 대면조사 방식으로, 조사원이 17,112가구를 직접 방문하여 응답을 얻는다. 2010년 사회조사는 5월 17일부터 20일에 걸쳐 실시되었다. 그러나 조사환경이 날로 어려워지고, 사회 환경이 복잡해지면서 점점 늘어나는 1인 가구, 맞벌이 가구 등을 대면하기 어렵게 됨에 따라 응답률이 점점 줄어들고 있는 실정이다. 이러한 현상은 우리나라뿐만 아니라 국제적으로도 심각한 상황에 있다고 볼 수 있다. 이에 대한 대안으로 응답 가구를 직접 방문하지 않고 쉽게 응답을 얻을 수 있는 웹 조사 방식이 각광받고 있다. 게다가 응답대상자조차도 스스로 조사에 참여할 의사가 있는 가구를 선정하여 사용하는 자원자 패널 웹 조사에 대한 연구의 관심이 높다. 웹 조사 방법의 대중화는 그리 놀라운 것은 아니다. 웹 조사는 다수의 응답 가능한 그룹에 대해 쉽게 접근할 수 있는 간단한 방법이다. 조사에 필요한 질문지는 매우 저렴한 비용으로 응답자에게 배부될 수 있다. 즉, 조사표 작성을 위한 조사원이 별도로 필요하지 않고, 우편 발송이나 질문지 인쇄에 들어가는 비용이 필요하지 않다. 이처럼 웹 조사는 조사에 소요되는 경제적․시간적 비용 측면에서 큰 이점이 있다. 뿐만 아니라 웹 조사는 다양한 멀티미디어 (그림, 애니메이션, 동영상 등)를 사용할 수 있다는 장점이 있다. 그러나 이러한 많은 장점에도 불구하고 웹 조사는 조사방법으로서 과학적 타당성에 대한 논쟁을 일으켰다 (Couper, 2000; Fricker 와 Schonlau, 2002; 등). 특히, 비확률표본에 기반 (non-probability based)한 웹 조사는 응답 대상자가 랜덤하게 선택되지 않고 목표 모집단 (target population) 자체가 확률표본이 아닌 편의(convenience)표본으로 구성되기 때문에 문제시되고 있다 (Stephanie 와 Kea, 2010). 자원자표본을 이용한 웹 조사는 관심 있는 사람은 누구나 조사를 완성할 수 있는 매우 간편한 조사방법임에는 틀림없다. 이러한 조사방법은 시장 여론조사 (marketing research)에서 빈번하게 사용되고 있다. 자원자표본 웹 조사가 모집단의 대표성, 선택편향 등의 문제에서 자유롭지 못한 것은 사실이다. 그렇지만 대표성에 관한 문제는 특히 우리나라와 같이 인터넷 보급률과 사용률이 높은 조사환경이라면 점차 해결될 수 있을 것으로 기대한다. 그러나 일반적으로 웹 조사에 참여하기 위해 자발적으로 자원한 사람들이 준거조사에 참여한 사람들과 그 속성이 얼마나 유사할지에 대해서는 확신하기 어렵다. 이에 대한 확신이 없다면 비확률표본을 이용한 웹 조사 결과를 해석하는 데는 상당한 주의가 필요하게 될 것이다. 자원자 패널 웹 조사가 자료수집 방법으로서 기존의 전통적인 대면조사나 전화조사의 좋은 대안이긴 하지만, 조사의 총 오차와 관련해서 볼 때 과학적 자료의 질을 암시하지는 못한다 (Groves, 1989). 왜냐하면 한 단계에서 다른 단계로 이동할 때 선택 메카니즘이 잘 알려져 있지 않을 뿐더러 연구자가 각 단계를 제어할 수 없기 때문이다. 자원자 패널 웹 조사의 가장 큰 위협은 일반 모집단에 대해 불확실하고 불완전한 커버리지에 있다. 일반 모집단 중 조사 참여를 선택한 비율만이 웹에 접근한다는 사실은 일반 모집단에 대한 대표성을 의심스럽게 한다. 따라서 살펴본 바와 같이 미포함, 비확률 추출, 무응답 등은 종합적으로 조사에 작용하여 웹 조사 추정치의 일반화를 어렵게 한다. 요약하면 이는 선택편향으로서 선택 메카니즘이 랜덤성을 보장하지 못하기 때문에 발생하는 문제이다. 본 절에서는 자원자 패널을 이용한 웹 조사의 개념과 특성에 대해서 주로 Bethlehem(2010)과 Lee (2009, 2006)를 인용하고 이 외에도 관련된 선행 연구 문헌들을 정리하는 수준에서 설명하고자 하였다. Bethlehem (2010)은 두 가지 측면에서 웹 조사 결과에 대한 신뢰성을 얘기하고 있다. 모집단에 대한 과소포함과 조사 참여에 대한 자기선택 (self selection) 현상이 그것이다. 이 두 가지 현상은 편향된 추정치를 유도하기 쉽고, 따라서 수집된 자료로부터 잘못된 결론을 내릴 수 있다. 과소포함은 조사에 사용된 표본 선택 절차가 목표 모집단의 누군가는 선택되지 않는다는 것을 의미한다. 만약 자료가 인터넷에 의해 수집되었다면, 인터넷에 접근이 가능한 사람만이 질문지를 작성할 수 있다. 그러나 조사의 목표 모집단은 항상 인터넷 사용자보다 훨씬 더 넓은 범위를 포함한다. 이것은 인터넷 사용을 하지 않는 사람은 조사에서 배제된다는 것을 의미한다. Bethlehem (2010)은 평균적으로 볼 때 인터넷에 접근하는 사람은 접근하지 않는 사람과 그 특성이 다르다고 하였다. 결과적으로 웹 조사 결과는 전제 모집단이 아닌 단지 인터넷이 있는 부차 모집단에 대한 정보를 제공한다. 성향점수 조정이 비확률 표본조사에 적용되었다. 비확률 표본조사는 주로 관측 연구에서 선택편향과 같은 비확률 이슈와 관련된 자원자에 의한 웹 조사에 해당된다 (Terhanian 과 Bremer, 2000; Lee, 2006; Schonlau 등, 2009). 비확률표본과 확률표본에서의 무응답과 비포함이 갖는 한 가지 차이는 후자는 확률표본추출 내에서 랜덤화 이론이라는 명백한 가정에 위배되는 것이고, 반면에 전자는 랜덤화 원리를 전혀 포함하지 않는 것이다. 이런 견해에서 보면, 비확률표본에서 선택편향에 의한 영향은 심지어 확률표본에서 무응답과 비포함이 주는 영향보다 훨씬 크다. 게다가 무응답과 비포함의 크기는 자원자 웹 조사가 확률표본조사보다 훨씬 크다는 것이 알려져 있다 (Couper, 등, 2007).