Как да проектираме добро проучване (ръководство)

Просто ръководство за правене на добро проучване

LimeSurvey улеснява много бързото съставяне на проучване. За съжаление, това също прави съставянето на лошо проучване много лесно.

На тази страница ще намерите просто ръководство за съставяне на анкета, която не само ще бъде безболезнена за вашата аудитория; но също така ще ви даде смислени отговори.

Блогът "Survey design tips & tricks" предоставя и друга много полезна информация.

Преди да направите проучване

Трябва да се отговори на някои важни въпроси, преди да се създаде какъвто и да е въпросник - всъщност дори преди да се реши дали даден въпросник е правилният път.

Какво наистина искате да разберете с вашето изследване?

След като отговорите на този въпрос, попитайте следното:

• Проучването ще ми помогне ли да получа информацията, от която се нуждая за моето изследване?
• Кои са правилните хора, които да попитам за да попълните анкетата?
• Как мога да се уверя, че достигам до правилните хора?
• Кой е най-добрият начин да помогнете на тези, които попълват анкетата, да разберат напълно въпроси (така че получената информация да е точна/полезна)?
• Кои, ако има такива, статистически методи (за анализ на данни) искам/трябва да използвам върху данните, след като бъдат събрани ?

Това са само няколко от въпросите, на които се нуждаете от ясни отговори, когато решавате дали LimeSurvey е правилният инструмент за вас.

LimeSurvey е страхотен за напълно структуриран (знаете всички въпроси, които може да се наложи да зададете, преди да започнете интервюто), стандартизиран (всеки получава повече или по-малко един и същ въпросник), предимно количествен (основно за числа или въпроси с предварително дефинирани отговори) въпросници, които се събират онлайн.

До известна степен можете, разбира се, да се различавате от това. Можете да използвате LimeSurvey, за да събирате отговори на някои видове телефонни интервюта. Можете също така да използвате LimeSurvey за събиране на качествени данни, например чрез използване на текстови въпроси.

Но в един момент може да стигнете до заключението, че други методи на изследване са по-подходящи.

Структуриране на въпросник

За да решите в кой ред да задавате въпроси и как да ги групирате, трябва да вземете предвид някои аспекти.

Ако е възможно, започнете с въпроси, на които е лесно да се отговори и на които всички участници са удобни да отговорят. Често това ще бъдат въпроси за проверка, т.е. въпроси, които трябва да зададете, за да разберете дали питате правилните хора (използвайте условия и/или квоти, за да се справите с тези проверки въпроси).

Поставянето на този тип въпроси в началото може да помогне на участниците да не напускат анкетата ви, преди да са я попълнили, тъй като е по-малко вероятно хората да прекратят, след като вече са положили малко работа, за да отговорят на тези въвеждащи/проверъчни въпроси.

'Примери:

 Кои от следните плодове харесвате?
#Ябълки ()
#Банани ()
#Череши ()

(един избор)

Можете да използвате условия, за да накарате следващия въпрос да се появи за череши, ако участникът избере „череши“.

Защо предпочитате череши?
#Вкусни са
#Обичам цвета
#Здравословни са
#Сочни са
#Обичам черешов пай

(въпрос с множество възможности за избор (или с един избор, зависи дали имате нужда от точни данни))

Колко обичате череши?
#1) Не много повече от други плодове
#2) Харесвате ги повече от други плодове
#3) Това е един от любимите ми плодове!
#4) ОБОЖАВАМ ЧЕРЕШИ!

(един избор)

Знаете ли рецепти с череши?

[текстово поле]

По-горе е даден пример за лесни за отговор въвеждащи въпроси, последвани от основния въпрос.

Целта беше да се съберат рецепти с череши, ябълки и банани.

От друга страна, ако трябва да зададете въпроси, на които е трудно да се отговори, може да помислите да използвате различни страници за всеки въпрос или група въпроси и да поставите тези въпроси, които е трудно да се отговори в самия край. По този начин, ако участниците решат да не попълнят анкетата, поне предишните им отговори се запазват.

Нещо друго, което трябва да имате предвид по отношение на структурата - избягвайте пристрастия, въведени от самия въпросник.

Например в проучването на пазара има концепции, които изискват неподпомогнати и подпомогнати въпроси.

Пример за неподпомогнат въпрос би бил:

„Кои марки шоколад познавате?“

(последвано от празно текстово поле)

Следното е пример за подпомогнат въпрос:

„Кои от следните марки шоколад познавате?“

(последван от списък с марки (множествен избор))

Както бе споменато по-рано, ако решите да включите и двата типа въпроси (подпомагани и неподпомагани) в един и същи въпросник, трябва да се уверите, че сте ги поставили на различни страници и да поставите неподпомаганите въпроси пред подпомаганите въпроси. Поставянето на подпомогнат въпрос пред неподпомогнат въпрос може неволно да повлияе на отговора на участниците, което би обезсилило вашите резултати.

Индивидуални въпроси

Въпросите не трябва да са внушителни. „Какво е мнението ви за LimeSurvey?“ е приемлив (несугестивен) въпрос, докато „Не сте ли съгласни, че LimeSurvey е наистина страхотен инструмент?“ е подсказващ въпрос.

Други примери и предложения за формулиране на въпроси:

Хората могат да кажат "да" на даряването на пари, ако им бъдат зададени въпроси по следния начин:

• Обичате ли природата?
• Ще дарите ли пари в помощ на реката ?

Те вероятно ще кажат "не", когато им бъдат зададени въпросите по този начин:

• Липсата на пари проблем ли е за вас?
• Ще дарите ли пари, за да помогнете на река?

За да подпомогнете търсенето на правилните отговори, подредете въпросите си:

• от най-малко чувствителните към най-чувствителните
• от общи към по-конкретни
• от въпроси за факти до въпроси за мнения

Също така, анкетен въпрос може да бъде:

• 'Отворен (човекът отговаря със собствените си думи) или
• 'Затворен' (човекът избира от ограничен брой опции)

Затворените въпроси са много по-лесни за анализ, но може да не позволят на респондентите да дадат отговора, който наистина искат.

Пример: „„Кой е любимият ви цвят?““

Отворено: Някой може да отговори "тъмна фуксия", в който случай ще трябва да имате категория "тъмна фуксия" в резултатите си.

Затворен тип: С избор от само 12 цвята работата ви ще бъде по-лесна, но респондентите може да не успеят да изберат точния си любим цвят.

Внимателно обмислете всеки въпрос и решете дали трябва да бъде отворен или затворен. Ако имате нужда от по-задълбочен поглед върху отговорите, използвайте отворени въпроси. Ако това не е така, могат да се използват затворени въпроси.

Пример (отворен): „„Какъв според вас е най-добрият начин за почистване на реката“?“

Направете го отворено: отговорите може да не са лесни за поставяне в таблица или графика, но можете да придобиете дълбока представа за чувствата и идеите на хората относно почистването на реката или околната среда и да използвате директни цитати в вашето отчитане.

Пример (затворен): "Колко често посещавате реката?"

Направете го затворено със следните опции:

• Почти всеки ден
• Поне 5 пъти годишно
• 1 до 4 пъти годишно
• Почти никога

Ще можете да представите тези данни в чиста лентова графика.

Когато работите с въпроси с множествен отговор или с един отговор, не забравяйте да изберете подходящия тип въпрос и да формулирате както въпросите, така и отговорите по подходящ начин.

Например:

Кои от следните плодове харесвате?
#Ябълки ()
#Банани ()
#Череши ()

Горното е типичен въпрос с няколко отговора, тъй като можете да харесате няколко елемента от списъка. От друга страна, "Кой от следните плодове предпочитате най-много?" е въпрос с един избор.

И двата примера за плодове са формулирани, за да изяснят, че вашето безпокойство е само за изброените плодове. Ако трябваше да попитате „Кой е любимият ви плод?“, трябва или да имате наистина изчерпателен списък с плодове, или, по-вероятно, да използвате настройката на LimeSurvey, за да добавите поле „други“. Като цяло опциите за отговор в повечето случаи трябва да бъдат пълни, взаимно изключващи се и категорични.

Ако имате въпроси с няколко или един отговор с много възможности за избор, трябва да сте наясно, че това може да доведе до друго пристрастие, тъй като има вероятност участниците да съсредоточат вниманието си върху първите опции, а не върху тези по средата . LimeSurvey предлага страхотна възможност за рандомизиране на реда на въпросите и до известна степен премахване на този проблем.

Какво прави една анкета добра?

Има 3 характеристики на анкета, които ще помогнат за извличане на правилните отговори, необходими за по-точна(и) оценка(и):

1. Въпросите са ясни и точни, като заедно позволяват подробни, недвусмислени и смислени отговори.
2. Всички предоставени предварително дефинирани отговори и техните формати са подходящи за въпроса.
3. Има място за хората да добавят допълнителна информация, ако имат нужда.

Като добавим към това, винаги имайте предвид потребителското изживяване. Четенето, превъртането и щракането са уморителни дейности. Така че,:

1. Избягвайте ненужните въпроси.
2. Използвайте условия, за да избегнете задаването на въпроси, които не са подходящи за конкретен участник.
3. Поддържайте въпросите и отговорите кратки и лесни за четене - използвайте подходящо маркиране.
4. Помислете за компромиса между превъртане и щракване. Покажете всичко на една страница за кратки въпросници (5-15 въпроса, в зависимост от сложността на въпроса). Използвайте разумно групите за по-дълги въпросници, т.е. групирайте въпросите по разбираем начин. Използвайте групови описания, за да дадете ясно изявление относно темата на следните въпроси.
5. Избягвайте да обърквате участниците с различни скали, т.е. ограничете количеството на различните типове скали, обхвати на скали и различни описания на скали, доколкото е възможно. Опитайте се да не променяте посоката на везните. (Има някои методологични изключения).
6. За скалите за оценка може да е полезно да използвате четен брой опции за оценка, за да улесните вземането на решения за респондентите (вижте по-долу).

Пример за скали за отговор за това колко „добро“ е нещо:

1. Много добре

2. Добре

3. Доста добре

4. Не толкова добре

5. Лошо

6. Много зле

Пример за скали за отговор за това колко „лошо“ е нещо:

1. Добре

2. Справедлив

3. Лошо

Най-добрият начин да започнете да проектирате проучване е да отделите секунда, за да си представите вашата идеална обратна връзка. От само себе си се разбира, че смислените отговори са най-полезните, така че опитайте се да създадете въпроси, които приканват към тези отговори.

Как можеш да направиш това? Най-добрият метод е да отделите всички области и да решите от каква информация се нуждаете.

Например, представете си, че сте провели събитие, което е отворено за обществеността и трябва да получите обща обратна връзка за събитието.

Следното проучване е пример за такова, което може да е недостатъчно за получаване на полезни отговори:

Хареса ли ви събитието?

( ) Да

( ) Не

Колко добър беше Wi-Fi?

1 2 3 4 5 6 7 8 9 10

( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )

Имахте ли проблеми да стигнете до събитието?

( ) Да

( ) Не

Беше ли полезна предоставената карта?

( ) Да

( ) Не

Как се почувствахте за комбинацията от говорители?

( ) Много тъжен ( ) Тъжен ( ) Неутрален ( ) Щастлив ( ) Много щастлив

Матричните въпроси биха били по-добър избор за горния сценарий.

Матрични въпроси.

Като общо правило скалите трябва да се използват само за въпроси, свързани с възраст, време (може би) или количества. Въпросите на матрицата трябва да бъдат правилно формулирани, за да се получи най-полезна обратна връзка. Имайте предвид, че матрица от задължителни въпроси може да бъде малко възпираща за вашата аудитория, защото, когато не е структурирана правилно, не позволява събирането на допълнителна информация.

Шансовете са, че ако някой попълва вашата анкета, той иска да даде обратна връзка и ако не смята, че може да сподели нещо полезно, просто ще затвори прозореца и ще продължи напред.

И така, какво не е наред с проучването по-горе?

Нека разгледаме всеки въпрос един по един.

Въпрос 1 всъщност не постига нищо. Представете си, че получавате 100 отговора „не“. Отговорът сам по себе си не предоставя полезна информация защо участникът не се радва на събитието. Ще бъдете оставени да се чудите за причината за отговорите „не“, а също и да се чудите какво да правите с отговорите. След малко ще разгледаме възможно подобрение на това.

Въпрос 2 е по-лош от първия. Връщайки се към 3-те характеристики на доброто проучване, виждаме, че въпросите трябва да бъдат ясни и точни. Не съм експерт по Wi-Fi, но съм доста сигурен, че има по-добри начини за измерване на това. Нещо повече, той не позволява смислен отговор на въпрос като: „Какво ще правите със знанието, че 33% от хората са оценили вашия Wi-Fi като добър срещу само 23%?“ 3-те характеристики на доброто проучване също гласят, че предварително дефинираните отговори трябва да са подходящи за въпроса.

Съвсем очевидно е, че използването на скала за този въпрос няма да ви помогне да подобрите качеството на вашия Wi-Fi. Съществува определена необходимост този въпрос да има място за хората да добавят допълнителна информация. Как може някой да докладва конкретен проблем, без да може да го разясни?

В този случай би било почти невъзможно да разполагате с достатъчно информация, за да адресирате правилно проблемите, които участниците са имали с Wi-Fi. Проучванията целят да получите полезна информация, с която можете да работите или да се учите.

Въпроси 3 и 4 биха имали същите резултати като първите два въпроса. Те позволяват само отговор „да“ или „не“ и нито един от тях не дава възможност за добавяне на подробности. Предоставяме предложения след този раздел как да подобрите този тип въпроси.

Въпрос 5, последният въпрос, е друг неефективен. Питането за нивото на удовлетворение от нещо не е много полезно, тъй като всеки човек има различни интереси и затова всеки вероятно ще има различни мнения за всеки оратор. Това е друг пример за това къде се използва въпрос за "мащаб", а не трябва да се използва.

Разгледайте подобрената анкета по-долу.

Използвахте ли вътрешния Wi-Fi?

( ) Да

( ) Не

Имахте ли проблеми с Wi-Fi?

( ) Няма никакви проблеми

( ) Няколко малки проблема, нищо сериозно

( ) Един или два сериозни проблема

( ) Wi-Fi беше почти напълно неизползваем.

Ако сте имали проблеми, можете ли да ги опишете накратко? (Текстово поле)

Имахте ли проблеми да стигнете до събитието?

( ) Да

( ) Не

Как дойдохте на нашето събитие?

( ) Влак

( ) Кола

( ) Автобус

( ) Трамвай (IE метро, трамвай)

( ) Разходка

Използвахте ли картата от нашия уебсайт?

( ) Да

( ) Не

Ако погледнахте картата, беше ли достатъчно подробна?

( ) Да

( ) Това ми даде груба представа. Все пак използвах друга карта за повече подробности.

( ) Изобщо не е подробно

Ако не сте използвали картата, защо не?

( ) Няма достатъчно подробности

( ) Вместо това използвах сателитна навигация/карти на Google.

( ) Дори не знаех, че съществува!

Като цяло, интересни ли бяха лекторите? Харесаха ли ви презентациите?

( ) Почти всички бяха интересни и изключително забавни

( ) Предимно приятни, но шепа по-малко интересни разговори.

( ) Разделяне 50 - 50

( ) По-скоро скучно, отколкото интересно

( ) Не намерих нищо интересно

Моля, разяснете отговора си на въпроса по-горе. Чувствайте се свободни да посочите всеки

конкретни хора/разговори. (Текстово поле)

Ако можем да подобрим обхвата на разговорите или имате други интересни идеи относно

разговорите, избройте ги по-долу (Текстово поле)

Ако имате други препоръки или идеи, моля, избройте ги по-долу. (Текстово поле)

Тази анкета може да е малко по-дълга, но е много по-лесно да се отговаря и тълкува отговорите. Задаването на два или три въпроса по всяка от темите означава, че когато става въпрос за обработка на резултатите, можете да направите малко повече анализ. Например, представете си, че в отговор на първия въпрос от проучването сте получили 30 души, които казват, че са имали проблеми да стигнат до събитието.

Това би било толкова информация, колкото можете да извлечете от резултатите, но с новия набор от отговори ще бъде възможно да се заключи кои форми на транспорт създават проблеми на хората. Нещо повече, можете да продължите, за да видите дали са използвали предоставената карта или друга форма на навигация и да използвате това, за да насочите подобрения в бъдеще.

Имайте предвид, че след 50 въпроса е най-вероятно потребителят да спре да чете

Други важни допълнения са въпросите за текстовото поле. Те позволяват на вашите участници да дадат конкретна обратна връзка, от която можете да черпите. Добра идея е да не ги правите задължителни, тъй като може да попречат на хората да отговорят.

В заключение, когато пишете анкета, трябва да се стремите да създадете такава, която задава конкретни въпроси, за да получите повече полезна информация за анализ. Освен това не забравяйте, че е полезно да съберете малко допълнителна основна информация, тъй като тя може да се използва за по-добър анализ на отговорите.

Също така е важно да формулирате въпросите си правилно. Ако хората трябва да отговорят на въпросите и не ги разбират, те ще затворят прозореца и ще продължат напред. Ако е възможно, помолете някой друг да коригира вашето проучване, преди да го направите публично достояние, за да сте сигурни, че въпросите са ясни.

Пристрастност на проучването

При провеждането на пазарни проучвания, важен ключ за получаване на безпристрастни отговори е да се избягва задаването на въпроси на участниците в проучването, които могат да повлияят на отговорите, които предоставят. Избягването на пристрастия в проучването помага да се елиминират отговорите, които могат да направят невалидни или изкривени събраните данни. Това е доста лесно и обичайно за компания или физическо лице без подходящо обучение/познания за проучване на пазара да сгреши по този начин. Това се отнася за много неща, като например начина, по който е формулиран въпросът, за видовете отговори, от които можете да избирате, за начина, по който интервюиращият представя въпросите, ако данните се събират по телефона или лично.

Следното е пример за пристрастен въпрос:

Колко харесахте събитието?

( )Много

( )Само малко

( )Не много

( )Въобще не

На пръв поглед изглежда, че няма проблем със структурата на този въпрос. В края на краищата респондентът има избор, вариращ от „много много“ до „изобщо“. Проблемът обаче е в начина, по който е формулиран въпросът. С въпроса на участника „Колко“ той или тя се радва на събитието, лицето, провеждащо проучването, вече е установило пристрастие, като приема, че респондентът е харесал събитието по един или друг начин, което може да не е така.

Следният пример би бил по-добър начин да зададете въпроса по начин, който не влияе на отговора на участника:

Как бихте оценили цялостното си удоволствие от събитието по скала от 1 до 5: 1 = „Изобщо не“ и 5 = „Напълно удоволствие“

1 2 3 4 5

( ) ( ) ( ) ( ) ( )

Перифразирането на въпроса позволява на респондента да отговори с помощта на скала, която го улеснява да определи нивото на удоволствие и улеснява лицето, което провежда проучването, да таблицира и сравнява резултатите с други респонденти. Разбира се, трябва да се добавят повече въпроси, за да се съберат подробности за това какво се радват или не на участниците.

Това е само един пример за това как малки промени във формулировката могат да подобрят вашето проучване.