선택한 단어 수는 입니다.
최소 단어 이상 선택하여야 합니다.
최소 단어 이상 선택하여야 합니다.
선택한 단어 수는 30입니다.
최대 10 단어까지만 선택 가능합니다.
최대 10 단어까지만 선택 가능합니다.
문제 정의
- (주)리서치 앤 리서치(R&R)는 두 표집법 간의 효과 비교를 위하여 2002년 6월 13일 치뤄진 지방선거에서 울산지역에 엄밀하게 임의추출법에 의한 조사를 실시하였다. 그 실시과정과 조사결과를 자세히 기술함으로써 임의추출법의 타당성을 검토하고자 한다. 물론 이 한 가지 사계로 임의표집법과 할당표집법의 효율을 비교하고 결론짓기는 어렵지만 그렇더라도 차후 유사 연구를 위한 기준점조사 (benchmark survey) 7} 될 수 있을 것이다.
제안 방법
- 최초 조사인원을 통상적인 95% 신뢰도에서 오차한계 ±3 정도를 보장하는 1000명으로 하기로 하고 2002년 3월 현재 가장 최신의 전화번호부를 이용하여 전화번호 1000개를 임의 추출하였다. 그러나 첫날 조사에서 최신 인명부 전화번호를 사용하였음에도 불구하고 결번, 팩스, 직장에서 사용하는 전화번호가 다수 발견되어 전화번호를 추가로 임의 추출하여 조사를 진행하였다. 최종적으로 조사에 사용된 전화번호는 1337개였다.
- 이때 흔히 쓰이는 방법이 생일법으로 가구원 중 조사 당일에서 생일이 가장 가까운 사람을 조사대상으로 한다. 만일 선정된 가구가 조사를 거절하거나 조사대상자로 선정된 사람이 부재중일 경우에는 약속을 하고 재차 방문하여 해당되는 사람을 조사하도록 하고 만일 조사가구나 조사대상자가 거절을 할 경우에도 쉽게 다른 가구나 사람으로 대체하지 않고 몇 차례의 재시도를 하도록 한다. 실제 미국의 여론조사기관에서 실시하는 여론조사는 임의 추출된 전화번호 목록을 이용하여 재시도, 응답 권유 등의 과정을 거쳐 조사를 실시함으로써 임의성을 엄밀히 지키는 것으로 알려지고 있다.
- 조사원 교육에서는 먼저 각 조사원에게 주어진 전화번호로 전화를 걸어서 상대방과의 통화상태를 기록하되 해당 전화번호가 통화 중인지, 아무도 안 받는지를 적도록 하고, 또 여론조사기관임을 밝히고 그 집에 거주하는 유권자 수를 물은 후 그 중 가장 최근에 생일 이 지난 사람을 조사대상자로 정하도록 하여 반드시 그 사람을 조사하도록 하였다. 만일 해당자가 현재 집에 없으면 약속시간을 정하고 이를 응답지에 기록한 후 약속시간에 다시 전화를 걸어 조사 하도록 하였다. 해당 전화번호가 통화중이거나 아무도 안 받는 경우에는 다시 전화를 걸되 최소 5차에 걸쳐 전화하도록 하고 조사에 응하지 않을 경우에는 설득을 하였다.
- 할당표집에서는 해당자가 집에 없을 때 전화번호를 대체하지만 임의표집에서는 약속을 통해 재 시도를 함으로써 무분별한 대체를 막는다. 본 조사에서는 해당자가 집에 없을 때 전화를 받은 사 람에게 해당자가 집에 있을 시간을 묻고 이들과 조사약속을 하여 재접촉을 시도하였다. 표 4에 그 결과가 나타나 있지만 성공율은 비교적 높았다.
- 그러나 엄밀한 임의추출법에서는 이들 전화번호에 재시도를 요구한다. 이번 조사에서는 주어진 전화번호를 4번까지 재시도하여 모두 5번까지 접촉하도록 하였다. 표 3에 첫 통화에서 전화를 받는 사람이 없어 부재중이었을 경우 재접촉을 시도한 결과를 정리하였다.
- 17명을 엄선하여 이들에게 임의조사법에 대해 교육을 실시하였다. 조사원 교육에서는 먼저 각 조사원에게 주어진 전화번호로 전화를 걸어서 상대방과의 통화상태를 기록하되 해당 전화번호가 통화 중인지, 아무도 안 받는지를 적도록 하고, 또 여론조사기관임을 밝히고 그 집에 거주하는 유권자 수를 물은 후 그 중 가장 최근에 생일 이 지난 사람을 조사대상자로 정하도록 하여 반드시 그 사람을 조사하도록 하였다. 만일 해당자가 현재 집에 없으면 약속시간을 정하고 이를 응답지에 기록한 후 약속시간에 다시 전화를 걸어 조사 하도록 하였다.
대상 데이터
- [표 1]에 추출된 전화번호 1337개에 대한 전화조회 결과를 요약하였다. 전화번호가 결번인 것이 4%, 팩스로 사용하여 전화통화가 불가능한 것이 1%, 회사나 공장 및 식당 등으로 가구가 아닌 업무용으로 사용되는 전화가 2.
- 선거가 있은 이틀 후인 6월 15일(토)에 선거전 조사응답자와 조사거절자를 대상으로 재조사를 실시하였다. 그 결과 조사응답자는 56.7%인 275명 이 응답에 응하였고, 조사거절자는 23명만이 조 사에 응하여 3.3%에 그쳤다. 조사 응답자들중 투표여부는[표8]에서 보는 바와 같이 선거이전에 밝힌 투표참여강도를 대체로 반영하고 있다.
- 부적합 전화번호를 제외하고 최종적으로 조사에 활용된 전화번호는 1233 사례였다. 1233개 전화번호에 대하여 최소 1회(즉 처음 전화에 해당자를 찾고 해당자 조사를 성공한 경우)에서 최대 5회까지 접촉을 시도하여 이틀 동안 임의표본추출 조사법에 의하여 전화를 건 최종회수는 모두 3751번이 었다.
- 선거가 있은 이틀 후인 6월 15일(토)에 선거전 조사응답자와 조사거절자를 대상으로 재조사를 실시하였다. 그 결과 조사응답자는 56.
- 선거일을 이틀 앞둔 6월 11일부터 경험 많은 조사원.17명을 엄선하여 이들에게 임의조사법에 대해 교육을 실시하였다. 조사원 교육에서는 먼저 각 조사원에게 주어진 전화번호로 전화를 걸어서 상대방과의 통화상태를 기록하되 해당 전화번호가 통화 중인지, 아무도 안 받는지를 적도록 하고, 또 여론조사기관임을 밝히고 그 집에 거주하는 유권자 수를 물은 후 그 중 가장 최근에 생일 이 지난 사람을 조사대상자로 정하도록 하여 반드시 그 사람을 조사하도록 하였다.
- 그러나 첫날 조사에서 최신 인명부 전화번호를 사용하였음에도 불구하고 결번, 팩스, 직장에서 사용하는 전화번호가 다수 발견되어 전화번호를 추가로 임의 추출하여 조사를 진행하였다. 최종적으로 조사에 사용된 전화번호는 1337개였다.
- 최초 조사인원을 통상적인 95% 신뢰도에서 오차한계 ±3 정도를 보장하는 1000명으로 하기로 하고 2002년 3월 현재 가장 최신의 전화번호부를 이용하여 전화번호 1000개를 임의 추출하였다. 그러나 첫날 조사에서 최신 인명부 전화번호를 사용하였음에도 불구하고 결번, 팩스, 직장에서 사용하는 전화번호가 다수 발견되어 전화번호를 추가로 임의 추출하여 조사를 진행하였다.
성능/효과
- 2) 본 조사에서는 응답율을 높이기 위해 응답할 경우 인센티브를 준다고 설득하였지만 인센티브에 의한 호응 도는 매우 낮았고 오히려 거부감을 표하는 경우도 있었다
- 또 조사거부거나 부재중인 경우라도 재접촉을 시도할 경우 응답율을 제고 할 수 있음을 보여준다. 4차례의 걸친 접촉으로 응답율이 30% 이상에 도달하여 평균적인 전화조 사 성공율인 14-15%의 두 배에 달하는 성과를 올렸고 약속의 경우에도 20%가 넘는 응답율을 보였다.
- 먼저 부재중인 601사례를 제 1차 시도한 결과 여전히 전화를 받지 않는 계속 부재중이 61.8%였 고 처음부터 조사거부자는 11%, 해당자가 부재중이면서 전화를 받은 사람이 조사를 거부한 경우가 3.6%, 해당자가 있으면서 조사를 거부한 사람은 1%, 해당자가 부재중이어서 조사약속을 받은 사람은 8.3%였고 해당자와의 조사에 성공한 경우는 12.1%였다. 1차, 2차, 3차, 4차에 걸쳐 부재중의 비율은 평균 64%를 차지하여 가장 많았다.
- 3%처럼 낮을 경우에는 실제 선거결과와 예측은 크게 다르다. 본 조사결과에서 유권자 전체를 기준으로 가중치를 준 경우의 투표 예즉치는 실제 선거결과와 7% 내외의 오차가 나타나고 당선 자 예측마저 틀리는 오류를 보이고 있다. 또 후보지지 의사를 밝히지 않은 유보층을 판별분석하고 투표율을 반영한 결과도 실제 선거결과와 많은 차이를 보이고 있다.
- 표 4에 그 결과가 나타나 있지만 성공율은 비교적 높았다. 전체 평균성공율이 12%5며 부재자의 경우도 11%-8%정도인 것에 비해 평균 22%의 높은 성공율을 보이고 있다. 약속을 한 경우에는 20% 대의 높은 성공율을 보이므로 조사비용의 큰 증가 없이 표본의 대표성도 높일 수 있어 효율성이 높다.
- [표 1]에 추출된 전화번호 1337개에 대한 전화조회 결과를 요약하였다. 전화번호가 결번인 것이 4%, 팩스로 사용하여 전화통화가 불가능한 것이 1%, 회사나 공장 및 식당 등으로 가구가 아닌 업무용으로 사용되는 전화가 2.7%로 전체 전화번호 중 조사대상으로 부적합한 것이 7.7%를 차지하였다. 우리나라 전화는 가정용과 업무용으로 구분되어 있으나 가정용으로 신청한 전화 중 일부 는 소기업이나 자영업에서 업무용으로 사용하는 경우가 있다.
- 다만 처음부터 조사거부가 1차, 2차, 3차에서는 11%-14%정도였다가 4차 에서는 20%를 넘은 것은 잦은 전화에 응답자가 거부한 것을 나타낸다. 주목할 점은 1차 시도에서 조사해당자와의 조사성 공율이 12.1%, 2차시도에 서는 11.2%로 10%대를 유지 하고, 3차와 4차에서 는 8% 대를 유지하여 재시도의 경우 조사성공율이 새 전화번호를 거는 확률과 비교하여 그리 떨 어지지 않는다는 것이다. 따라서 부재중인 전화번호의 경우라도 적어도 2차례의 재시도를 할 경우 조사의 비용을 크게 늘리지 않으면서도 대표성을 높일 수 있다.
- 최종 집계된 응답자는 485명이었고 유효 전화번호로 추출된 1233가구에 대한 응답성공율은 36.3%로 집계되었다. 전화시도회수 3751번에 대한 응답성공율은 12.
- 이렇게 표집된 조사대상자를 근거로 조사의 목적인 선거결과를 예측한 결과를 표 7에 제시하였다. 편의상 당선자와 차점자만을 비교하였고 조사에서 나타난 무응답층을 제외한 응답자 기준 백 분비로 나타난 결과가 실제 선거결과와 당선자의 경우 0.7% 포인트, 차점자의 경우 0.9% 포인트로 예측되어 95% 신뢰도에서 표본오차 내의 매우 높은 정확성을 보였다. 앞서 지적한 대로 본 조사의 표본은 모집단과 인구사회학적 변인에서 많은 차이가 있음에도 불구하고 투표결과와 유사한 이유는 무엇일까.
후속연구
- 그 실시과정과 조사결과를 자세히 기술함으로써 임의추출법의 타당성을 검토하고자 한다. 물론 이 한 가지 사계로 임의표집법과 할당표집법의 효율을 비교하고 결론짓기는 어렵지만 그렇더라도 차후 유사 연구를 위한 기준점조사 (benchmark survey) 7} 될 수 있을 것이다.
- 그러나 일반적으로 어렵게 여겨지는 임의추출법에 의한 조사가 나름대로 장점을 갖고 있으며 실사과정에서 새로운 특장점을 발견했다는 점이 이번 시험 조사의 성과라 하겠다. 앞으로 임의추출법이 현실적으로 효과적으로 실행할 수 있는 방안이나 조사결과에 대한 보정 방안등이 함께 연구되어야 할 것으로 판단한다.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.