Как правильно оценивать выборки и опросы

Коротко: Опрос спрашивает лишь часть (выборку) и делает вывод обо всех (генеральной совокупности). Его убедительность зависит от того, как выбрана выборка и насколько она велика.

Подробнее: Случайно отобранные выборки репрезентативны. Самоотбор участников («онлайн-голосование») — нет.

Подробности

• Репрезентативность: Каждый человек генеральной совокупности имеет известный шанс быть отобранным. Квоты и взвешивание компенсируют искажения.
• Размер выборки и ошибка: Статистическая ошибка уменьшается с квадратным корнем размера выборки. 1000 опрошенных дают при доле около 50 % примерно ±3 процентных пункта. Вчетверо больше уменьшают ошибку вдвое.
• Искажения: Самоотбор (отвечают только заинтересованные), ошибка выжившего (видны только успехи), отказ от ответа, социально желательные ответы, наводящие вопросы.
• Вопросы: Формулировать нейтрально, без двойных вопросов, полные шкалы ответов.
• Доверительный интервал: Указывает диапазон, в котором истинное значение лежит с высокой уверенностью (обычно 95 %). «Партия A 30 %, партия B 28 %» при ±3 пункта — не различие.
• Онлайн-опросы: Голосования на сайтах и в соцсетях нерепрезентативны и поддаются манипуляциям.
• Контрольные вопросы: Кого спрашивали? Сколько? Как отбирали? Кто заплатил? Какой был точный вопрос?

См. также: корреляция и причинность, медиаграмотность