여론조사 결과를 바르게 읽기

여론조사 결과를 이해하고 이용할 때 유의할 사항

순번 유의사항 설명
1 표본 추출의 합리성 모집단 전체를 잘 대표하게끔 추출이 되었는가
2 항목 정의의 명확성과 질문의 형식 질문이 잘 정의되어있고, 특정 선호를 유도하지는 않는지
3 조사 방법과 응답률 조사 방법과 시간으로 인한 응답률 편향은 없는가
4 조사 시점 여론을 잘 반영할 수 있는 시점에 조사가 시행되었는지
5 표본 오차와 오차의 한계 표본 오차가 얼마인지, 오차 한계가 얼마나 되는 조사인지

1. 표본 추출의 합리성

  • 표본이 모집단 전체를 잘 대표할 수 있게끔 추출이 되었는가
  • 특정 지역, 특정 연령대만 집중적으로 응답한 여론조사는 전체 국민을 대표하지 못함

2. 항목 정의의 명확성과 질문의 형식

  • 질문이 잘 정의되어있는지
  • 질문이 특정 사항을 선호하도록 유도된 것은 아닌지 검토 필요
  • 아래 예시 참고

지하철노조 파업에 대한 여론조사에서

  • “일반 서민들의 교통수단인 지하철노조의 파업이 정당하다고 생각하십니까?” 라고 묻는 것과
  • “지하철 노동자의 열악한 환경 개선을 위한 파업이 정당하다고 생각하십니까?” 는 전혀 다른 답변이 나올 확률이 높음

3. 조사 방법과 응답률

  • 조사 방법과 조사 시간에 따라 응답률의 차이가 나타날 수 있다.
  • 조사 방법 : 전화조사, 면접조사, 우편조사, 인터넷조사 등
  • 조사 시간 : 업무가 바쁜 시간에는 재직자의 응답률이 떨어질 수 있음

4. 조사의 시점

  • 특정 사안에 대한 여론은 시간의 흐름에 따라 변하는 속성이 있음
  • 선거 관련 조사는 특히나 조사시점이 중요하다.
  • 선거에 영향을 미치는 사건이 일어나면, 그 전후의 조사결과는 큰 차이가 존재한다.

5. 표본 오차와 오차의 한계

  • 표본오차 : 동일한 조사를 다시 랜덤추출해서 진행했을 때, 이전 결과에서 얼마만큼 떨어진 결과가 나올 수 있는지의 범위
  • 여론조사 결과 A 정당 지지율이 40%, B 정당 지지율이 37%일때
  • 지지율 차이인 3%p는 통계적으로 유의한 차이인가?
  • 예를 들어 1,500명을 조사할 때 표본오차는 95% 신뢰수준에서 $\pm 2.6\%p$ 이다.
  • 3%p 차이는 표본오차를 크게 벗어나지 않으므로, 실제 모집단에서는 그 차이가 없을 수도 있어 통계적으로 유의한 차이라고 단정할 수 없다.

Reference

통계로 세상 읽기 - 이긍희, 이기재, 장영재, 박서영, 한종대 공저
방송통신대 - 통계로 세상 읽기 강의

Comments