Кого представляє вибірка
Генеральна сукупність — це всі люди, про яких дослідник хоче зробити висновок. Наприклад, повнолітні жителі певного міста. Вибірка є частиною цієї сукупності. Її якість залежить від способу відбору, охоплення різних груп і того, хто погодився відповідати.
В імовірнісній вибірці учасники мають відомі ненульові шанси потрапити до дослідження. Добровільне голосування в каналі працює інакше: відповідають ті, хто побачив допис і захотів долучитися. Навіть сотні тисяч таких відповідей можуть систематично відрізнятися від поглядів людей поза цією аудиторією. Вагові коригування допомагають за певних умов, але не усувають будь-яке зміщення.
Що насправді означає похибка
Похибка вибірки описує лише частину невизначеності. Для простої випадкової вибірки з приблизно тисячі людей максимальна похибка частки за 95-відсоткового рівня довіри становить близько трьох відсоткових пунктів. Це навчальний орієнтир: складніший дизайн і зважування можуть змінювати оцінку.
Така похибка не охоплює невдалих запитань, відмов від участі або пропущених груп. Її також не можна механічно приписувати добровільному онлайн-голосуванню. Якщо рейтинг зріс із 30 до 32 відсотків, це ще не достатня підстава проголошувати тенденцію. Потрібно врахувати невизначеність обох вимірювань та їхню методику. Потрібні дані про ці обидві вибірки.
Як запитання змінює відповідь
Формулювання «Чи підтримуєте ви корисну реформу?» вже містить оцінку. Запитання «Чи задоволені ви ціною та якістю послуги?» поєднує дві різні речі: ціна може влаштовувати, а якість — ні. Проблемою стають також незрозумілі слова, неповні варіанти відповіді та порядок запитань.
Порівнювати результати різних років доречно, коли запитання й умови достатньо зіставні. Якщо раніше питали про довіру до установи, а тепер про задоволеність її керівником, різницю не можна одразу називати зміною довіри. Спосіб розмови теж має значення: на чутливі теми люди можуть відповідати інакше в присутності інтерв’юера.
Дата опитування також є частиною результату. Відповіді описують погляди в певний період, а не незмінні переконання людей. Якщо між двома вимірюваннями сталася важлива подія, потрібно врахувати її можливий вплив. Прогноз майбутньої поведінки потребує додаткових припущень: сказане в анкеті та реальна дія не завжди збігаються.
Які відомості мають бути відкритими
Поряд із результатом шукайте назву виконавця й замовника, дати збору даних, опис сукупності, обсяг вибірки та метод опитування. Важливо бачити точний текст запитання, варіанти відповідей і спосіб роботи з тими, хто не визначився. Відсоток серед усіх опитаних може суттєво відрізнятися від відсотка серед тих, хто зробив вибір.
Дані про невелику підгрупу зазвичай менш точні, ніж загальний результат. У вибірці з тисячі людей певну професію можуть представляти лише кілька десятків. Тому красивий графік із дуже докладними поділами потребує особливої уваги до кількості відповідей.
Замовник із власними інтересами не робить дослідження автоматично хибним. Оцінювати потрібно прозорість і методику. Найкраще запитання до гучного відсотка звучить конкретно: чи дозволяє спосіб отримання цих даних зробити саме такий висновок?
Іван Гудзенко
