Як створити хороше опитування (посібник)

Простий посібник зі створення хорошого опитування

LimeSurvey дає змогу дуже швидко створити опитування. На жаль, це також дуже спрощує створення поганого опитування.

На цій сторінці ви знайдете простий посібник зі створення опитування, яке буде не лише зручним для проходження вашою аудиторією, а й дасть вам змістовні відповіді.

Блог "Survey design tips & tricks" також містить іншу дуже корисну інформацію.

Перед створенням опитування

Перед розробкою будь-якої анкети потрібно відповісти на кілька важливих питань, а точніше — ще до того, як вирішувати, чи є анкета правильним вибором.

Що саме ви насправді хочете з'ясувати за допомогою свого дослідження?

Отримавши відповідь на це питання, запитайте себе:

• Чи допоможе опитування отримати інформацію, потрібну для мого дослідження?
• Кого саме слід просити пройти опитування?
• Як мені переконатися, що я дістануся до потрібних людей?
• Як найкраще допомогти тим, хто проходить опитування, повністю зрозуміти питання (щоб отримана інформація була точною / корисною)?
• Які статистичні методи (для аналізу даних), якщо такі є, я хочу/маю застосувати до даних після їх збору?

Це лише кілька питань, на які вам потрібні чіткі відповіді, коли ви вирішуєте, чи є LimeSurvey потрібним для вас інструментом.

LimeSurvey чудово підходить для повністю структурованих (ви знаєте всі питання, які може знадобитися поставити, ще до початку інтерв'ю), стандартизованих (усі отримують більш-менш однакову анкету), переважно кількісних (йдеться головним чином про числа або питання з наперед визначеними відповідями) анкет, які збираються онлайн.

Певною мірою від цього, звісно, можна відступати. Ви можете використовувати LimeSurvey для збору відповідей під час деяких видів телефонних інтерв'ю. Також можна використовувати LimeSurvey для збору якісних даних, наприклад за допомогою текстових питань.

Але в якийсь момент ви можете дійти висновку, що інші методи дослідження більш доречні.

Структурування анкети

Щоб вирішити, в якому порядку ставити питання і як їх групувати, слід врахувати кілька аспектів.

Якщо можливо, починайте з питань, на які легко відповісти і які не викликають незручності в усіх учасників. Часто це будуть відсівні питання, тобто питання, які потрібно поставити, щоб з'ясувати, чи опитуєте ви потрібних людей (для роботи з такими відсівними питаннями використовуйте умови та/або квоти).

Розміщення таких питань на початку може допомогти уникнути того, що учасники залишать опитування, не завершивши його, адже люди менш схильні припиняти, коли вже доклали певних зусиль, відповідаючи на ці вступні/відсівні питання.

Приклади:

Which of the following fruit do you like?
#Apples   ()
#Bananas  ()
#Cherries ()

(одиничний вибір)

Ви можете використати умови, щоб наступне питання про вишні з'являлося, якщо учасник вибрав ''вишні''.

Why do you prefer cherries?
#They are tasty
#I love the color
#They are healthy
#They are juicy
#I love cherry pie

(питання з множинним вибором (або одиничним вибором, залежно від того, чи потрібні точні дані))

How much do you like cherries?
#1) Not much more than other fruit
#2) Like them more than other fruit
#3) It's one of my favourite fruits!
#4) I ADORE CHERRIES!

(одиничний вибір)

Do you know any recipes with cherries?

[textfield]

Вище наведено приклад легких вступних питань, за якими йде основне питання.

Метою було зібрати рецепти з вишнями, яблуками та бананами.

З іншого боку, якщо вам потрібно поставити складні питання, подумайте про використання окремих сторінок для кожного питання або групи питань і розмістіть ці складні питання в самому кінці. Так, якщо учасники вирішать не завершувати опитування, їхні попередні відповіді принаймні буде збережено.

Ще один аспект, який варто врахувати щодо структури, — уникайте упередженості, яку вносить сама анкета.

Наприклад, у маркетингових дослідженнях існують концепції, які вимагають питань без підказок і питань з підказками.

Прикладом питання без підказок може бути таке:

"Які бренди шоколаду вам відомі?"

(далі йде порожнє текстове поле)

Нижче наведено приклад питання з підказками:

 "Які з наведених нижче брендів шоколаду вам відомі?"

(далі йде список брендів (множинний вибір))

Як згадувалося раніше, якщо ви вирішили включити в одну анкету обидва типи питань (з підказками і без), розмістіть їх на різних сторінках, а питання без підказок поставте перед питаннями з підказками. Якщо поставити питання з підказками перед питанням без підказок, це може ненавмисно вплинути на відповіді учасників і зробити ваші результати недійсними.

Окремі питання

Питання не повинні бути навідними. «Яка ваша думка про LimeSurvey?» — прийнятне (ненавідне) питання, тоді як «Чи не погоджуєтеся ви, що LimeSurvey — справді чудовий інструмент?» — навідне питання.

Інші приклади та поради щодо формулювання питань:

Люди можуть відповісти "Так" на пропозицію пожертвувати гроші, якщо поставити питання таким чином:

• Чи любите ви природу?
• Чи пожертвуєте ви гроші, щоб допомогти річці?

Імовірно, вони відповідять «ні», якщо поставити питання так:

• Чи є нестача грошей проблемою для вас?
• Чи пожертвуєте ви гроші, щоб допомогти річці?

Щоб отримати належні відповіді, впорядковуйте питання:

• від найменш чутливих до найбільш чутливих
• від загальних до більш конкретних
• від питань про факти до питань про думки

Також питання опитування може бути:

• Відкритим (людина відповідає своїми словами) або
• Закритим (людина вибирає з обмеженої кількості варіантів)

Закриті питання набагато легше аналізувати, але вони можуть не дозволити респондентам дати відповідь, яку ті справді хочуть.

Приклад: «Який ваш улюблений колір?»

Відкрите: хтось може відповісти «темна фуксія», і тоді вам потрібно буде мати в результатах категорію «темна фуксія».

Закрите: якщо запропонувати вибір лише з 12 кольорів, ваша робота буде легшою, але респонденти можуть не знайти свій точний улюблений колір.

Уважно обміркуйте кожне питання та вирішіть, яким воно має бути: відкритим чи закритим. Якщо вам потрібне глибше розуміння відповідей, використовуйте відкриті питання. В іншому випадку можна використовувати закриті питання.

Приклад (відкрите): «Як, на вашу думку, найкраще очистити річку?»

Зробіть його відкритим: відповіді може бути непросто звести в таблицю чи діаграму, але ви можете глибоко зрозуміти почуття та ідеї людей щодо очищення річки чи довкілля й використати прямі цитати у своєму звіті.

Приклад (закрите): «Як часто ви відвідуєте річку?»

Зробіть його закритим з такими варіантами:

• Майже щодня
• Щонайменше 5 разів на рік
• Від 1 до 4 разів на рік
• Майже ніколи

Ви зможете подати ці дані у вигляді охайної стовпчастої діаграми.

Працюючи з питаннями з множинним або одиничним вибором, обов’язково обирайте відповідний тип питання та належним чином формулюйте і питання, і відповіді.

Наприклад:

Which of the following fruit do you like?
#Apples   ()
#Bananas  ()
#Cherries ()

Наведене вище — типове питання з множинним вибором, оскільки вам може подобатися кілька пунктів зі списку. З іншого боку, «Який один із наведених фруктів ви любите найбільше?» — це питання з одиничним вибором.

Обидва приклади з фруктами сформульовано так, щоб було зрозуміло, що вас цікавлять лише перелічені фрукти. Якщо ви запитаєте «Який ваш улюблений фрукт?», вам слід або мати справді вичерпний список фруктів, або, що ймовірніше, скористатися налаштуванням LimeSurvey для додавання поля «Інше». Загалом варіанти відповідей здебільшого мають бути повними, взаємовиключними та визначеними.

Якщо у вас є питання з множинним або одиничним вибором з великою кількістю варіантів, майте на увазі, що це може внести ще одне упередження, оскільки учасники, найімовірніше, зосереджують увагу на перших варіантах, а не на тих, що посередині. LimeSurvey пропонує чудову можливість випадкового порядку питань, що певною мірою усуває цю проблему.

Що робить опитування якісним?

Є 3 ознаки опитування, які допомагають отримати належні відповіді для точнішого оцінювання:

1. Питання чіткі та точні й разом дають змогу отримати докладні, однозначні та змістовні відповіді.
2. Усі запропоновані попередньо визначені відповіді та їхні формати відповідають питанню.
3. Є місце, де люди можуть додати додаткову інформацію, якщо вона їм потрібна.

Крім того, завжди враховуйте досвід користувача. Читання, прокручування та клацання втомлюють. Тому:

1. Уникайте непотрібних питань.
2. Використовуйте умови, щоб не ставити питання, які не стосуються конкретного учасника.
3. Робіть питання та відповіді короткими й легкими для читання - використовуйте відповідну розмітку.
4. Зважте на баланс між прокручуванням і клацанням. Для коротких анкет (5-15 питань, залежно від складності питань) відображайте все на одній сторінці. Для довших анкет розумно використовуйте групи, тобто групуйте питання зрозуміло. Використовуйте описи груп, щоб чітко окреслити тему наступних питань.
5. Не плутайте учасників різними шкалами, тобто максимально обмежте кількість різних типів шкал, їхніх діапазонів і різних описів шкал. Намагайтеся не змінювати напрямок шкал. (Існують певні методологічні винятки).
6. Для рейтингових шкал може бути корисно використовувати парну кількість варіантів оцінки, щоб респондентам було легше ухвалити рішення (див. нижче).

Приклад шкали відповідей про те, наскільки щось ''добре'':

1. Дуже добре

2. Добре

3. Досить добре

4. Не дуже добре

5. Погано

6. Дуже погано

Приклад шкали відповідей про те, наскільки щось ''погано'':

1. Добре

2. Задовільно

3. Погано

Найкращий спосіб почати розробку опитування - на мить уявити свій ідеальний відгук. Само собою зрозуміло, що змістовні відповіді найкорисніші, тому намагайтеся створювати питання, які спонукають до таких відповідей.

Як це зробити? Найкращий метод - розділити всі сфери та визначити, яка інформація вам потрібна.

Наприклад, уявіть, що ви провели захід, відкритий для публіки, і вам потрібно отримати загальний відгук про нього.

Наведене нижче опитування є прикладом того, яке може не підходити для отримання корисних відповідей:

Вам сподобався захід?

( ) Так

( ) Ні

Наскільки добре працював Wi-Fi?

1 2 3 4 5 6 7 8 9 10

( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )

Чи виникли у вас проблеми з дорогою на захід?

( ) Так

( ) Ні

Чи була корисною надана карта?

( ) Так

( ) Ні

Яке у вас враження від складу спікерів?

( ) Дуже засмучений(-а) ( ) Засмучений(-а) ( ) Нейтрально ( ) Задоволений(-а) ( ) Дуже задоволений(-а)

Для наведеного вище сценарію краще підійшли б матричні питання.

Матричні питання

Як правило, шкали слід використовувати лише для питань про вік, час (можливо) або кількість. Матричні питання потрібно формулювати правильно, щоб отримати найкорисніші відгуки. Пам'ятайте, що матриця з обов'язкових питань може відлякнути вашу аудиторію, адже за неправильної структури вона не дає змоги зібрати жодної додаткової інформації.

Імовірно, якщо хтось заповнює ваше опитування, він хоче залишити відгук, а якщо людина вважає, що не може поділитися нічим корисним, вона просто закриє вікно й піде далі.

Отже, що не так із наведеним вище опитуванням?

Розгляньмо кожне питання окремо.

Питання 1 насправді нічого не дає. Уявіть, що ви отримали 100 відповідей «ні». Сама по собі така відповідь не дає жодної корисної інформації про те, чому учаснику не сподобався захід. Ви б не знали причини відповідей «ні» і не розуміли б, що з ними робити. Можливе покращення цього питання ми розглянемо трохи згодом.

Питання 2 гірше за перше. Повертаючись до трьох ознак гарного опитування, бачимо, що питання мають бути чіткими й точними. Я не експерт із Wi-Fi, але цілком упевнений, що існують кращі способи це виміряти. Крім того, воно не дає змоги отримати змістовну відповідь на питання на кшталт: «Що ви зробите, дізнавшись, що 33% людей оцінили ваш Wi-Fi як хороший проти лише 23%?» Три ознаки гарного опитування також передбачають, що попередньо визначені відповіді мають відповідати питанню.

Цілком очевидно, що використання шкали для цього питання не допоможе вам покращити якість Wi-Fi. Для цього питання безумовно потрібне місце, де люди зможуть додати додаткову інформацію. Як можна повідомити про конкретну проблему, не маючи змоги розповісти докладніше?

У цьому випадку майже неможливо мати достатньо інформації, щоб належно розв'язати проблеми, з якими зіткнулися учасники з Wi-Fi. Опитування потрібні для того, щоб отримати корисну інформацію, з якою можна працювати або з якої можна вчитися.

Питання 3 і 4 дадуть такі самі результати, як і перші два. Вони допускають лише відповідь «так» або «ні», і жодне не дає можливості додати деталі. Після цього розділу ми наведемо поради щодо покращення таких питань.

Питання 5, останнє, також неефективне. Запитувати про рівень задоволеності чимось не дуже корисно, адже в кожної людини різні інтереси, тож і думки про кожного доповідача, імовірно, будуть різними. Це ще один приклад того, коли використано питання зі «шкалою», хоча не слід було.

Погляньте на покращене опитування нижче.

Чи користувалися ви внутрішнім Wi-Fi?

( ) Так

( ) Ні

Чи виникали у вас проблеми з Wi-Fi?

( ) Жодних проблем

( ) Кілька дрібних неполадок, нічого серйозного

( ) Одна-дві серйозні проблеми

( ) Wi-Fi був майже повністю непридатним для використання.

Якщо у вас виникли проблеми, чи не могли б ви коротко їх описати? (Текстове поле)

Чи виникали у вас проблеми з дорогою на захід?

( ) Так

( ) Ні

Як ви дісталися нашого заходу?

( ) Потягом

( ) Автомобілем

( ) Автобусом

( ) Легкорейковий транспорт (наприклад, метро, трамвай)

( ) Пішки

Чи користувалися ви картою з нашого вебсайту?

( ) Так

( ) Ні

Якщо ви дивилися на карту, чи була вона достатньо детальною?

( ) Так

( ) Вона дала мені загальне уявлення, але для більшої деталізації я користувався(-лася) іншою картою.

( ) Зовсім не детальна

Якщо ви не користувалися картою, то чому?

( ) Недостатньо деталей

( ) Натомість я користувався(-лася) GPS-навігатором/Google Карти.

( ) Я навіть не знав(-ла), що вона існує!

Загалом, чи були доповідачі цікавими? Чи сподобалися вам виступи?

( ) Майже всі були цікавими та дуже сподобалися

( ) Здебільшого сподобалися, але кілька виступів були менш цікавими.

( ) Навпіл

( ) Більше нудних, ніж цікавих

( ) Не знайшов(-ла) жодного цікавого

Будь ласка, розгорніть свою відповідь на попереднє питання. Можете згадати будь-яких

конкретних людей/виступи. (Текстове поле)

Якщо ми могли б покращити добірку виступів або у вас є інші цікаві ідеї щодо

виступів, перелічіть їх нижче (Текстове поле)

Якщо у вас є інші рекомендації або ідеї, перелічіть їх нижче. (Текстове поле)

Це опитування може бути трохи довшим, але на нього набагато легше відповідати, а відповіді — інтерпретувати. Якщо поставити два-три питання щодо кожної теми, під час обробки результатів можна провести дещо глибший аналіз. Наприклад, уявіть, що у відповідь на перше питання опитування 30 осіб повідомили, що мали проблеми з дорогою на захід.

Це була б уся інформація, яку можна отримати з результатів, але з новим набором відповідей можна було б визначити, які види транспорту спричинили проблеми. Більше того, можна було б з’ясувати, чи користувалися люди наданою картою, чи іншим засобом навігації, і використати це для цілеспрямованих покращень у майбутньому.

Пам’ятайте, що після 50 питань користувач, найімовірніше, перестане читати

Ще одним важливим доповненням є питання з текстовим полем. Вони дають змогу учасникам залишити конкретний відгук, з якого ви можете черпати інформацію. Краще не робити їх обов’язковими, оскільки це може відштовхнути людей від відповіді.

Підсумовуючи: створюючи опитування, прагніть, щоб воно містило конкретні питання, які дають більш корисну для аналізу інформацію. Також пам’ятайте, що корисно зібрати трохи додаткової довідкової інформації, адже її можна використати для кращого аналізу відповідей.

Також важливо правильно формулювати питання. Якщо людям потрібно відповісти на питання, а вони їх не розуміють, вони закриють вікно й підуть. Якщо можливо, попросіть когось іншого вичитати ваше опитування перед публікацією, щоб переконатися, що питання зрозумілі.

Упередженість в опитуванні

Під час проведення маркетингових досліджень ключовим чинником отримання неупереджених відповідей є уникнення питань, які можуть вплинути на відповіді учасників опитування. Уникнення упередженості в опитуванні допомагає усунути відповіді, які можуть зробити зібрані дані недійсними або спотвореними. Компанії чи особі без належної підготовки або знань у сфері маркетингових досліджень досить легко й нерідко припуститися такої помилки. Це стосується багатьох аспектів: від формулювання питання до типів відповідей, з яких можна обирати, і до того, як інтерв’юер подає питання, якщо дані збираються телефоном або особисто.

Нижче наведено приклад упередженого питання:

How much did you enjoy the event?

( )Very much

( )Just a little

( )Not very much

( )Not at all

На перший погляд здається, що зі структурою цього питання все гаразд. Адже респондент має варіанти від «дуже сподобалося» до «зовсім не сподобалося». Проте проблема полягає у формулюванні питання. Запитуючи учасника, «наскільки» йому сподобався захід, особа, яка проводить опитування, уже закладає упередженість, припускаючи, що респондентові захід так чи інакше сподобався, а це може бути не так.

Наведений нижче приклад — кращий спосіб поставити питання так, щоб не впливати на відповідь учасника:

How would you rate your overall enjoyment of the event on a scale of 1 - 5: 1 = "Not at all" and 5 = "Completely enjoyed"

1 2 3 4 5

( ) ( ) ( ) ( ) ( )

Переформулювання питання дозволяє респондентові відповісти за допомогою шкали, яка полегшує визначення рівня задоволення, а особі, яка проводить опитування, — зведення в таблицю та порівняння результатів з відповідями інших респондентів. Звісно, слід додати більше питань, щоб з’ясувати подробиці того, що саме сподобалося або не сподобалося учасникам.

Це лише один із прикладів того, як незначні зміни у формулюванні можуть покращити ваше опитування.