미국에서 전화 여론 조사에 대한 편견이 있습니까?


11

WashingtonTimes / ABC 설문 조사를보고 있었는데 특히 나이별로 결과가 나에게 놀라운 것처럼 보였습니다. 그래서 편견을 찾아갔습니다.

"여론 조사는 성인 1,000 명 중 무작위 표본 중 2014 년 12 월 11 일부터 14 일까지 전화로 진행되었습니다. 인터뷰는 유선 전화와 휴대 전화에서 영어와 스페인어로 진행되었습니다."

설문 조사는 각 연령대의 응답자 수를 제게 알려주지 않았으며, 나의 첫 생각은 18-29 세의 전화에 응답 할 수있는 집의 종류는 무엇입니까? 여기에는 셀룰러가 포함되어있어 조금 더 공정합니다. 그러나 여전히 어떤 종류의 18-29 세 휴대 전화에 응답하고 설문 조사를할지 묻는 메시지가 표시되고 "그렇습니다."라고 말합니다.

(수사적 질문으로 의미하는 것은 아닙니다. 제 직감은 특정 그룹이 훨씬 가능성이 높다는 것입니다. 예를 들어 자존감이 낮은 사람은 전화를 통해 낯선 사람이 의견을 묻는 과정을 즐길 수 있습니다.

이 주제에 대한 연구가 있습니까? 여론 조작에 관심이있는 조직이 특정 편견을 가지고 있다면 전화 여론 조사, 온라인 여론 조사 또는 거리에서의 인터뷰를 선택합니까?


2
일반적인 종류의 연구에는 "일반적인 편견"이 없습니다. 그들은 연구마다 다릅니다.
Tim

3
(유명한) 여론 조사 결과를 볼 때 숫자는 거의 항상 선택 바이어스에 맞게 조정됩니다. 특정 폴링 방법론을 강요하는 것보다 폴링을 편향시키는 훨씬 쉬운 방법이 있다는 점도 주목할 가치가 있습니다.
Andy Jones

3
Fwiw 나는 18-29 세입니다
shadowtalker

@ssdecontrol 자존감이 낮은 사람? 나는 우리 모두가 당신이 환상적이라고 생각하고 파티에서 당신과 확실히 이야기 할 것임을 알고 싶습니다. :-)
대런 쿡

@DarrenCook hahaha no, 실제로 전화 인터뷰에 응답하는 더 넓은 범주! 그러나 자신감 향상에 감사드립니다
shadowtalker

답변:


7

Pew의 반응 속도가 얼마나 떨어졌는지, 그리고 그 효과가 어떤지 살펴 보는 멋진 연구가 있습니다.

http://www.people-press.org/2012/05/15/assessing-the-representativeness-of-public-opinion-surveys/

"Pew Research Center for the People & the Press의 새로운 연구에 따르면 응답 속도의 감소에도 불구하고 유선 전화와 휴대 전화를 포함하고 인구의 인구 통계 학적 구성과 일치하는 가중치를 가진 전화 설문 조사는 계속해서 대부분의 정치에 대한 정확한 데이터를 제공합니다 , 사회적, 경제적 수단 : 이것은 선거 결과를 예측할 때 주요 여론 조사에 의해 달성 된 일관된 정확성의 기록으로 이루어집니다.

"이것은 응답 속도의 감소가 결과가 없다고 말하는 것은 아닙니다.이 연구에서 확인 된 잠재적 비 응답 편향의 중요한 영역 중 하나는 설문 참여자가 참여하지 않은 사람들보다 시민 활동에 훨씬 더 관여하는 경향이 있다는 것입니다. 자원 봉사자들은 이런 일을하지 않는 사람들보다 설문 조사에 참여할 가능성이 더 높으며, 이는 설문 조사가 자원 봉사 및 시민 활동과 관련된 행동을 정확하게 측정 할 수있는 능력에 심각한 영향을 미칩니다. 교회 출석, 선출 된 공무원 접촉 또는 캠페인 행사 참석과 같은 행동을 과대 평가할 수 있습니다. "


1
다른 대답도 훌륭했습니다. 이 보고서에는 내가 찾던 숫자와 정확히 일치하므로이 표시를 표시했습니다.
대런 쿡

14

미국에서 전화 여론 조사에 대한 편견이 있습니까?

그렇습니다. 미국에는 전화 여론 조사와 관련하여 알려진 편견이 있습니다. 휴대폰.

오랫동안 미국의 무작위 전화 폴링의 금본위는 무작위 숫자 다이얼링이었습니다. 기계는 임의의 전화 번호를 생성했고 설문 조사자들은 누가 전화를했는지에 대한 질문을했습니다. 모든 사람이 전화를 하나만 가지고 있다고 가정하면 설문 조사는 단순한 임의의 전화 소유자 샘플입니다.

그러나 휴대폰의 도착은 다음과 같이 바뀌었다. 많은 사람들, 특히 젊은이들은 유선 전화가 없다. 특정 인구 통계 (연령, 성별, 인종) 내에서도 이러한 휴대 전화 전용 인구는 유선 전화 또는 두 유형의 전화를 사용하는 인구와 구별되는 정치적 태도를 가지고 있습니다. 자동 다이얼러가 휴대폰에 전화하는 것은 불법이므로 여론 조사에 혼란을 초래합니다.

여론 조사자들에게 이것은 모든 핸드폰을 호출하기 위해 인간을 사용해야한다는 것을 의미하며, 이는 훨씬 비쌉니다. 여론 조사는해야한다 그래서 사전 , 그들이 관리 비용을 호출 할 필요가 얼마나 많은 휴대 전화를 결정합니다. 핸드폰 통화 수는 과학적으로 건전한 방식으로 자동 유선 통화 수와 균형을 이루어야합니다. 휴대 전화 전용 주택, 유선 전용 주택 및 집에 전화를 걸면 인구의 발생률에 비례하여 충분한 전화를 걸 수 있습니다. 그들의 예산을 초과!

핸드폰의 효과는 아마도 잠재적 편견의 원인이 아닐 수도 있습니다.

워싱턴 타임즈 / ABC 설문 조사에서 사용한 설문 조사자들은이 모든 것을 잘 알고 있다고 생각합니다. "핸드폰 효과"에 비추어 무작위 표본을 구성하는 방법 은 오늘날의 모든 정치 설문 조사가 오늘날 다루고 있는 주제입니다. 따라서 여론 조사원은이 여론 조사에서 "핸드폰 효과"를 완화하기위한 조치를 취했을 것입니다. 그러나 여론 조사원은 나쁜 하루를 보냈고 핸드폰 번호를 무작위로 다이얼했을 때 충분한 실제 응답을 얻지 못했습니다.

편향이있는 경우 샘플 중량 일 수 있습니다.

이러한 여론 조사에서 또 다른 잠재적 인 편향은 샘플 가중치입니다. 표본 가중치의 목표는 다양한 인구 집단에 다른 가중치를 부여하여 다양한 인구 통계 그룹에서 도달해야하는 사람들의 수를 줄이는 것입니다. 물론 이것은 "샘플에 올바르게 가중치를 부여했는지 어떻게 알 수 있습니까?"라는 질문으로 이어집니다. 그렇기 때문에 일부 여론 조사 기관은 다른 여론 조사 기관에 비해 일관되게 위 / 아래에있는 추정치를 갖게됩니다. 표본에 가중치를 부여하는 방법이 다르며 결과를 지속적으로 특정 방향으로 끌어옵니다.

이것은 바이어스-분산 트레이드 오프의 예입니다. 설문 조사자들은 작고 간단한 무작위 표본을 사용하여 고 분산 추정치를 달성 할 수 있습니다. 또는 가중치를 사용하여 작은 표본의 추정 분산을 줄일 수 있지만 (통계적) 편견을 희생 할 수 있습니다.

여론 조사관 (및 통계 학자)은 모두 편향-분산 트레이드 오프와 관련하여 어떤 식 으로든 격투해야합니다. 반드시 그들이 악의적이거나 대중을 조작하려는 것을 의미하지는 않습니다.

대체 설명이 풍부합니다.

우연히 또는 고의적으로 여론 조사를 망칠 수있는 많은 방법이 있습니다. 질문을 표현하면 그룹마다 다른 답변을 얻을 수 있습니다. 특정 응답을 이끌어 내기 위해 질문을 구성하는 푸시 폴링이 가장 분명하고 사악한 예입니다.

여론 조작에 관심이있는 조직이 특정 편견을 가지고 있다면 전화 여론 조사, 온라인 여론 조사 또는 거리에서의 인터뷰를 선택합니까?

이 질문은 일부 가상적이고 악의적 인 개체의 동기와 방법에 대한 추측을 요구하기 때문에 완전히 통계적인 것은 아닙니다. 부분적으로 만 대답 할 수 있습니다.

거리에서 사람들을 인터뷰하는 것은 실제로 무작위가 아니며 편향 될 수 있습니다 (어떤 그룹은 다른 그룹보다 더 많은 비율로 포함되는 경향이 있음).

난수 다이얼링의 목표는 모든 사람이 동일한 선택 가능성을 갖는 상태를 달성하는 것입니다. 근처에 살고 일하는 사람들을 포함시키는 경향이 있기 때문에 거리 구석에 가서 사람들을 인터뷰하는 것은 이것을 달성하지 못합니다. 워싱턴 DC의 거리에 가면 DC, 메릴랜드 또는 버지니아 출신이 아닌 사람을 선택할 가능성이 거의 없습니다.

또한 어느 거리를 가는지 고려하십시오. 예를 들어 워싱턴 DC의 클리블랜드 파크 (Cleveland Park) 지역에서 거리에서 사람들을 인터뷰하는 것은 아나 코 시아 (Anacostia)에서 거리에서 사람들을 인터뷰하는 것과는 매우 다릅니다.

온라인으로 사람들을 폴링하는 것은 실제로 임의적이지는 않지만 전화 폴링보다 나쁜지 확실하지 않습니다 .

온라인 설문 조사에 참여하는 사람들의 인구는 스스로 선택하는 인구이며, 모든 잠재적 응답자로부터 무작위로 표본 추출 될 필요는 없습니다. 전화 폴링을 선호하는 전통적인 여론 조사자들은 이런 이유로 온라인 설문 조사에 매우 회의적입니다. 그러나 Andrew Gelman과 같은 사람들 은 무작위로 발신 된 전화 설문 조사와 자체 선택된 온라인 설문 조사 의 최종 결과 가 의미가 다르다는 확신이 없습니다 . 이것은 매우 개방 된 연구 분야입니다.


정말 대담한 형식이 필요합니까?
gung-Monica Monica 복원

@gung 그것은 실제로 아이폰 앱에서 잘 읽습니다
shadowtalker

3
@ gung 나는 쉽게 탐색하고 텍스트 벽으로 표시되지 않도록 분리하고 싶었습니다. 이게 더 낫습니까?
Sycorax는 Reinstate Monica가

1
나는 다른 사람 (예를 들어, @ssdecontrol) 또는 어떻게 모바일 장치에서 보이는을 위해 말할 수 있지만, 그것은 보이는 많이 나에게 친절을. 감사.
gung-Monica Monica 복원

1

여론 조작에 관심이있는 조직이 특정 편견을 가지고 있다면 전화 여론 조사, 온라인 여론 조사 또는 거리에서의 인터뷰를 선택합니까?

질문에 언급되지 않은 다른 방법을 포함하여 모든 폴링 방법을 편향시킬 수 있습니다.

노인의 견해를 과도하게 표현하려면, 전화 설문 조사를 선택하고 연령대 할당 그룹을 정상화하기 위해 '잊어 버려', 젊은 응답자가 잘못 대표됨을 알고 있습니다.

할당량 설정 및 정규화가없는 거리 폴링은 편향을 얻는 가장 쉬운 방법 일 것입니다. Sycorax에 따라 거리를 선택하십시오. 근무 시간 또는 그 밖의 설문 조사도 결과를 변화시킬 것입니다. 한때 거리 면접관이었습니다. 우리는 연령대, 성별 및 사회 계급을 결합하여 엄격한 할당량을 설정하기 위해 노력했지만이 내에서 나는 외모를 좋아하는 할당량 내의 사람들 (당신이 좋아하면 조금 나와 같은 사람들)에게 접근하는 경향이 있음을 의식했습니다. 즉각적인 시각적 호소력이 적은 할당량 내의 사람들보다 그리고 나는 그들이 인터뷰 유형에 대한 할당량을 가지고 있다고 생각하지 않습니다!

영국 타블로이드 신문은 정기적으로 독자를 대상으로 독자 선발 예 / 아니오 '설문 조사'를 실시합니다. 설문 조사를 실시했습니다.

Andy Jones가 언급했듯이 여론 조사를 편향시키는 훨씬 쉬운 방법이 있습니다. 날짜 및 시간 선택, 단어 조정 (특히 설문 조사 전후), 주요 질문, 방향 설정 이전 또는 필터링 질문, 축소 가정, 제한적 응답 선택 등. 런던에서는 다양한 협의회 교통 관리, 주차 관리 및 공공 상담 섹션이 그러한 수중 기술을 전문화하는 것으로 보입니다.

일반적으로 교통 제한을 적용하는 경우 좁은 지역에 거주하는 주민들과 운전자들과 상담하지 않을 것입니다. 주민들은 문을 통해 진드기 상자 카드를 받거나 5 ~ 7 개의 개별 아파트로 나뉘어 진 큰 오래된 건물에 2 장의 카드를받습니다.

폴링 프로세스 자체의 일부는 아니지만, 정말로 탁월한 형태의 폴링 바이어스는 어떤 방식 으로든 (예 : 완벽하게) 수행 한 다음 적합하지 않은 경우 결과를 간단히 억제하는 것입니다. 내가 한때 살았던 지역에 대한 주민 협회는 매우 조작적인 노동 조합 관리에 의해 철 손으로 통제되었으므로 정확하게 그랬습니다.

마지막으로 2004 년 Stansted 공항에서 휴가를 마치면서 이중 방풍 벽과 동작 감지기로 구성된 "도어 웨이"에 직면하게되었습니다. 런던에서 올림픽을 펼치고 자한다면 승객들은이 선택적인 출입구를 통과하도록 초대되었습니다. 당시의 소수의 여론은 허영심 사건에 대한 막대한 청구서를 받고 그리스 재정 부담과 유타 부패를 회상하는 것에 대해 열의가 없었으며 런던 백 입찰 팀은 지원을 강화하려고했습니다.

올림픽을 위해 매번 '투표'(등록)를 등록하기 위해 원하는 횟수만큼 출입구를 걸을 수 있으며 어린 아이들과 함께하는 가족의 기쁨을 누릴 수 있습니다. 아아, 그들은 30 년 동안 큰 법안을 원하지 않는 사람들이나 파리가 이벤트의 가치가 있다고 생각하는 사람들과 같은 사람들에게 두 번째 출입구를 제공하는 것을 잊었습니다.

이상하게도 소비에트 스타일의 결과는 영국인의 100 %가 올림픽을 원한다는 것이었다. 나는 아직도 퇴직까지 오랫동안 돈을 지불 할 것입니다. 편리한 것들, 여론 조사.

당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.