Цикл новостей переполнен опросами. Включите ночные передачи или просмотрите новостные статьи в Интернете, и вы будете засыпаны последней «статистикой» о проценте американцев, верящих в Бога; разделение любителей собак и любителей кошек; и сколько людей в возрасте от 65 до 85 лет владеют Nintendo Switch. В год выборов результаты опросов сами по себе становятся заголовками: «Клинтон опережает Трампа среди избирателей с высшим образованием»; «Республиканцы голосуют с большей вероятностью, чем демократы»; и даже иногда "Дьюи побеждает Трумэна!"
Конечно, опросы попадают в заголовки, но насколько они точны? Насколько мы должны доверять опросам, особенно политическим опросам, которые пытаются предсказать исход выборов? Кто проводит эти опросы и как они решают, кого спросить? Можно ли получить репрезентативную выборку избирателей путем случайного вытаскивания номеров из телефонной книги?
Политический опрос - это разновидность опроса общественного мнения. При правильном проведении опрос общественного мнения представляет собой точную социальную науку со строгими правилами в отношении размера выборки, случайного выбора участников и пределов погрешности. Однако даже самый лучший опрос общественного мнения - это лишь снимок общественного мнения в конкретный момент времени, а не вечная истина. Если вы опросите общественное мнение об атомной энергетике сразу после ядерной катастрофы, оно будет намного ниже, чем за день до катастрофы. То же самое верно и для политических опросов. Мнение избирателей резко меняется от недели к неделе, даже день ото дня, поскольку кандидаты сражаются на поле предвыборной кампании.
Политические опросы не всегда были такими научными. В конце 19-го и начале 20-го веков журналисты проводили неофициальныесоломенные опросы рядовых граждан, чтобы узнать общественное мнение о политиках и предстоящих выборах. Газетчик, путешествующий в поезде, может задать один и тот же вопрос всем, кто сидит в его вагоне, подсчитать результаты и опубликовать их как факт в газете на следующий день.
В 1930-х годах популярный журнал «Литературный дайджест» проводил опросы общественного мнения о своей большой подписке по почте и телефону, полагая, что большой размер выборки автоматически даст безошибочные результаты. Журнал не заметил, что его читатели были богаче и с большей вероятностью были республиканцами, чем средний американский избиратель, что привело к тому, что журнал ошибочно предсказал убедительную победу Альфа Лэндона над Франклином Д. Рузвельтом в 1936 году.
Сегодня ведущие политические организации используют математические методы и компьютерный анализ для сбора ответов от наиболее репрезентативной выборки избирателей Америки. Но в науке о политических опросах еще много «искусства». Даже случайные ответы должны быть скорректированы и просеяны, чтобы выявить тонкие тенденции в мнении избирателей, которые могут помочь предсказать возможного победителя в день выборов.
Начнем рассмотрение политических опросов с самого важного показателя точности: репрезентативной выборки.
Получение репрезентативного образца
Миссия политических опросов состоит в том, чтобы оценить политическое мнение всей нации, опрашивая только небольшую выборку вероятных избирателей. Чтобы это работало, социологи должны убедиться, что выборочная группа точно представляет большую часть населения. Если 50 процентов избирателей составляют женщины, то 50 процентов выборочной группы должны быть женщинами. То же самое относится к таким характеристикам, как возраст, раса и географическое положение.
Чтобы получить наиболее точную репрезентативную выборку, политические социологи берут пример из теории вероятностей. Цель теории вероятностей состоит в том, чтобы придать математический смысл кажущимся случайным данным. Создавая математическую модель данных, исследователи могут точно предсказать вероятность будущих результатов. Политические социологи пытаются придумать модели, которые точно предсказывают исход выборов. Для этого им нужно начать с совершенно случайной выборки, а затем скорректировать выборку так, чтобы она точно соответствовала характеристикам всего населения.
Самый популярный метод получения случайной выборки - этонабор случайных цифр (RDD)Опросники начинают с постоянно обновляемой базы данных всех перечисленных телефонных номеров в стране. Для наземных - как стационарные, так и мобильные телефоны. Если бы они звонили только по номерам из базы данных, то исключали бы все незарегистрированные номера, что не было бы по-настоящему случайной выборкой. Используя компьютеры, социологи анализируют базу данных перечисленных номеров, чтобы идентифицировать все активныеблоки номеров, которые являются кодами городов и обменами (вторые три цифры), которые активно используются. Затем компьютеры запрограммированы на случайный набор всех возможных комбинаций цифр в каждом активном блоке. Обратите внимание, что стационарным и мобильным телефонам назначаются разные блоки обмена или последние четыре цифры. Вот как социологи обходят тот факт, что нет каталогов номеров мобильных телефонов, в отличие от стационарных, и определяют, до каких номеров они доходят.
Для действительно случайной выборки социологи должны не только набирать случайные числа, но и выбирать случайных респондентов из домохозяйства. Статистика показывает, что женщины и пожилые люди гораздо чаще отвечают на телефонные звонки, чем другие американцы. Чтобы рандомизировать выборку, политические социологи часто просят поговорить с членом дома, у которого самый последний день рождения. Этот метод используется только при наборе номера со стационарного телефона.
После того, как политическая организация по опросу общественного мнения собрала ответы из достаточно случайной выборки, она должна скорректировать или взвесить эту выборку, чтобы она соответствовала самым последним данным переписи населения США по полу, возрасту, расе и географическому признаку. Мы еще поговорим о взвешивании в следующем разделе, но сначала давайте разберемся с некоторыми загадками, скрывающимися за пределами погрешности.
Сотовые телефоны и опросы
Распространение сотовых телефонов и исчезновение стационарных телефонов создали новые проблемы для избирательных организаций. ABC News, например, начала включать номера мобильных телефонов только в 2008 году. Теперь она следит за тем, чтобы процентное соотношение номеров мобильных и стационарных телефонов в своих опросах соответствовало национальной разбивке. В марте 2020 года новостная организация обновила свой коэффициент опроса до 75 процентов мобильных телефонов и 25 процентов стационарных телефонов. Федеральный закон запрещает социологам использовать системы автоматического набора номера для звонков на мобильные телефоны, а это означает, что эти номера необходимо набирать вручную. Это делает опрос более дорогим (но более точным), когда включены номера мобильных телефонов.
Погрешность
Что на самом деле означает, когда ведущий новостей говорит: «Последние опросы показывают, что у Джонсона 51 процент голосов, а у Смита 49 процентов, с погрешностью в 3 процента»? Если существует 3-процентная погрешность, а Джонсон опережает Смита всего на 2 процентных пункта, то разве опрос не бесполезен? Разве Смит не выигрывает с разницей в одно очко?
Погрешность - один из наименее понятных аспектов политических опросов. Путаница начинается с самого названия. Официальное название предела погрешности -предел ошибки выборки (MOSE). Предел ошибки выборки - это статистически подтвержденное число, основанное на размере группы выборки. Это никак не связано с точностью самого опроса. Истинную погрешность политического опроса измерить невозможно, потому что есть много разных вещей, которые могут повлиять на точность опроса: предвзятые вопросы, плохой анализ, простые математические ошибки и т. д.
Вместо этого MOSE представляет собой простое уравнение, основанное исключительно на размере выборки (при условии, что общая численность населения составляет 10 000 или более человек). Как правило, чем больше выборка, тем меньше погрешность. Например, размер выборки из 100 респондентов имеет MOSE +/- 10 процентных пунктов, что довольно много. Однако выборка из 1000 респондентов имеет MOSE +/- 3 процентных пункта. Чтобы получить MOSE +/- 1 процентный пункт, вам нужна выборка не менее 5000 респондентов. Большинство политических опросов нацелены на 1000 респондентов, потому что они дают наиболее точные результаты при наименьшем количестве звонков.
Вернемся к нашей жесткой политической гонке между Джонсоном и Смитом. Означает ли что-нибудь 2-процентное опережение в опросе с 3-процентной погрешностью выборки? Не совсем. На самом деле, это хуже, чем вы думаете. Погрешность применяется к каждому кандидату независимо. Когда в опросе говорится, что у Джонсона 51 процент голосов, это на самом деле означает, что у него где-то между 48 и 54 процентами голосов. Точно так же 49 процентов Смита на самом деле означают, что он имеет от 46 до 52 процентов голосов. Таким образом, вполне вероятно, что в ходе опроса Смит выиграет со счетом 52 против 48.
Далее мы рассмотрим один из важнейших факторов, определяющих точность политического опроса: формулировку вопросов и ответов.
Опросы и ответы
Вопросы и ответы - причина, по которой у нас есть политические опросы. «За кого из кандидатов вы будете голосовать на выборах?» «Вы одобряете выступление президента?» «Насколько вероятно, что вы будете голосовать на промежуточных выборах в Конгресс?» Но порядок этих вопросов и ответы, которые могут выбрать респонденты, могут сильно повлиять на точность опроса.
Порядок вопросов, как известно, играет значительную роль в влиянии на результаты политических опросов. Возьмем пример вопроса «скачки», в котором респондентов спрашивают, за кого бы они проголосовали в гонке один на один: за кандидата А или за кандидата Б. Чтобы обеспечить наиболее точный результат, политические социологи задают вопрос этой лошади -расовый вопрос первый. Почему? Потому что формулировка предыдущих вопросов могла повлиять на ответ респондента.
Опросы, как мы уже упоминали, представляют собой моментальный снимок мнения респондента в момент заданного вопроса. Хотя многие избиратели имеют твердое и давно сформированное мнение о политике и политических кандидатах, взгляды других избирателей постоянно меняются - иногда от момента к моменту. Респондент политического опроса может начать опрос с небольшого уклона в сторону кандидата А. Но после серии вопросов о взглядах кандидата А на экономику, внешнюю политику и социальные проблемы респондент может понять, что на самом деле он больше согласен с кандидатом Б..
В предвыборных опросах, в частности, очень важно сначала задать вопрос о скаковой лошади, потому что избиратели входят в кабину для голосования «холодными», не отвечая сначала на список «разминочных» вопросов.
Большинство политических опросов проводятся по телефону, и независимо от того, является ли опрос интервьюером или автоматизированной системой, обычно есть набор ответов, из которых можно выбрать. Политические социологи обнаружили, что формулировка этих ответов может помочь лучше понять политические взгляды.
Например, исследовательская компания Rasmussen Reports ежедневно отслеживает рейтинг одобрения президента. Вместо того, чтобы просто спрашивать, одобряют или не одобряют респонденты его выступление, Расмуссен предлагает им выбрать один из следующих вариантов: полностью одобряю, отчасти одобряю, отчасти не одобряю или решительно не одобряю. Фирма обнаружила, что варианты «несколько» важны для учета мнений «меньшинства».
Например, если зарегистрированный республиканец не в восторге от выступления президента Трампа, она все равно может выбрать «одобрить» вместо «неодобрить», если это будут единственные варианты. Но вариант «несколько не одобряю» позволяет ей быть более честной, не подрывая ее поддержку президента. Точно так же зарегистрированный демократ может «в некоторой степени одобрить» президента-республиканца, не чувствуя, что он предал свою партию.
Пуш-опросы
Push-опросы - это негативная политическая реклама, замаскированная под законные политические опросы. Вместо того, чтобы задавать респонденту серию вопросов о нескольких политических кандидатах и проблемах, вопросы фокусируются исключительно на негативных впечатлениях от целевого кандидата. Примеры могут быть такими: «Вы бы с меньшей вероятностью проголосовали за кандидата А, если бы знали, что у него был роман со своей секретаршей, когда его жена была в больнице?» или «Если бы вы могли привлечь президента к ответственности за вопиющую некомпетентность и отсутствие патриотизма, вы бы это сделали?» Push-опросы запрещены в некоторых штатах и считаются нарушением закона о выборах. Американская ассоциация изучения общественного мнения осуждает push-опросы за подрыв общественного доверия к политическим опросам.
Результаты взвешивания
Как мы обсуждали ранее, случайность важна для получения репрезентативной выборки населения. Используя программное обеспечение для случайного набора номера, организации, занимающиеся политическими опросами, пытаются получить идеально рандомизированную выборку респондентов. Но есть пределы эффективности случайного набора номера. Например, женщины и пожилые американцы, как правило, чаще отвечают на телефонные звонки, что искажает соотношение пола и возраста в выборке. Вместо того, чтобы полагаться исключительно на случайный набор номеров, политические социологи предпринимают дополнительные шаги по корректировке или взвешиванию результатов, чтобы они соответствовали демографическому профилю вероятных избирателей.
Обратите внимание, что мы сказали «вероятные избиратели», а не все возрастное население Соединенных Штатов. Это важное различие. Если бы социологи хотели взвесить свои результаты, чтобы они соответствовали всему возрастному населению для голосования, они бы скорректировали результаты, чтобы они соответствовали последним данным переписи. Сначала они будут распределять результаты географически, оставляя больше ответов из более густонаселенных штатов и городов. Затем они корректировали результаты, чтобы они соответствовали демографическому распределению пола, возраста и расы в Америке.
Но если вы хотите получить наиболее точные результаты политического опроса, вам необходимо еще больше отфильтровать выборку, чтобы отсеять всех респондентов, которые вряд ли будут голосовать. Вот где в игру вступает «искусство» политического опроса. Лучшими социологами являются организации, которые могут разрабатывать вопросы для опросов и модели анализа, которые отделяют зерна от плевел и изолируют ответы только наиболее вероятных избирателей. В конце концов, в политике ваше мнение имеет значение, только если вы действительно голосуете.
Каждая избирательная организация имеет свою собственную систему определения и взвешивания вероятных избирателей, но общие вопросы могут включать:
- Сколько вам лет?
- Вы зарегистрировались для голосования?
- Вы собираетесь голосовать?
- Вы внимательно следите за гонкой?
- Вы голосовали на прошлых выборах?
- Вы знаете, где находится ваш избирательный участок?
Не все политические опросы используются для прогнозирования исхода выборов. Иногда социологи хотят оценить общественное мнение по различным политическим вопросам, часто пытаясь сравнить мнения разных демографических групп: старых и молодых, демократов и республиканцев, черных и белых. В этом случае социологи не стремятся к идеально репрезентативной выборке. Вместо этого они используютизбыточную выборку для создания выборки, включающей равное количество респондентов из каждой демографической группы. Например, если вы хотите опросить отношение белых и чернокожих избирателей к какому-либо политическому вопросу, вам потребуется избыточная выборка чернокожих домохозяйств, поскольку рандомизированная выборка будет включать только 10-15 процентов чернокожих респондентов.
Выходные опросы
Вы когда-нибудь задумывались, как новостные организации могут предсказать победителя выборов еще до закрытия избирательных участков? Это потому, что политические организации, проводящие опросы, посылают целую армию полевых работников, чтобы спросить избирателей, за кого они проголосовали и почему. Результаты этихопросов на выходе собираются в режиме реального времени и передаются в Национальный избирательный пул, консорциум крупных телевизионных информационных агентств.
Примечание автора
Со мной никогда не связывались участники опроса общественного мнения, и, честно говоря, я немного обижен. Разве мое образованное и (очевидно) увлекательное мнение ничего не значит? Изучая эту статью, я наткнулся на следующую оценку количества опросов, проводимых каждый год, и количества людей, с которыми связались. Если каждый год проводится примерно 2 500 общенациональных опросов, и в каждом опросе принимает участие 1 000 участников, то только 2 500 000 из 200 миллионов взрослых населения страны ежегодно принимают участие. Это дает мне один шанс из 100 получить звонок от Гэллапа. До тех пор я придерживаюсь одного и того же ответа каждый раз, когда вижу последние данные опроса, претендующие на то, чтобы отразить мнение всех американцев: «Ну, меня никто не спрашивал».