如何設計一份好的問卷(指南)
From LimeSurvey Manual
製作優質問卷的簡易指南
LimeSurvey 讓您可以非常快速地建立問卷。遺憾的是,這也讓製作一份糟糕的問卷變得非常容易。
在本頁中,您將找到一份簡易指南,幫助您建立一份不僅讓受眾輕鬆完成、還能為您帶來有意義答案的問卷。
部落格 「Survey design tips & tricks」 也提供了其他非常實用的資訊。
製作問卷之前
在設計任何問卷之前,有一些重要的問題必須先回答——事實上,甚至在決定問卷調查是否為合適的方式之前就應該先思考。
您的研究真正想要找出什麼?
回答完這個問題後,請接著思考以下問題:
- 問卷能幫助我取得研究所需的資訊嗎?
- 哪些人是填答這份問卷的合適對象?
- 我如何確保能接觸到合適的對象?
- 如何才能讓填答者充分理解問題(使取得的資訊準確/有用)?
- 資料收集完成後,我是否想要/需要對資料使用任何統計方法(用於資料分析)?若是,使用哪些?
在判斷 LimeSurvey 是否適合您的工具時,以上只是您需要明確回答的其中幾個問題。
LimeSurvey 非常適合用於線上收集完全結構化(在開始訪談前,您就已知道可能需要詢問的所有問題)、標準化(每個人拿到的問卷大致相同)、以量化為主(主要是數字或具有預先定義答案的問題)的問卷。
當然,在某種程度上您也可以有所變化。您可以使用 LimeSurvey 收集某些類型電話訪談的答案,也可以使用 LimeSurvey 收集質性資料,例如使用開放性問題。
但到了某個階段,您可能會得出其他研究方法更適合的結論。
問卷的結構規劃
在決定問題的先後順序以及如何分組時,有幾個方面需要考慮。
如果可能,請從容易回答、且所有參與者都樂於回答的問題開始。這些通常是篩選問題,即用來判斷您詢問的對象是否正確的問題(可使用條件和/或配額來處理這些篩選問題)。
將這類問題放在開頭,有助於避免參與者在完成前離開問卷,因為當人們已經投入一些心力回答這些引導/篩選問題後,中途退出的可能性會降低。
範例:
Which of the following fruit do you like?
#Apples ()
#Bananas ()
#Cherries ()
(單選)
如果參與者選擇了''櫻桃'',您可以使用條件讓下一個問題顯示與櫻桃相關的內容。
Why do you prefer cherries?
#They are tasty
#I love the color
#They are healthy
#They are juicy
#I love cherry pie
(多選問題(或單選,視您是否需要精確資料而定))
How much do you like cherries?
#1) Not much more than other fruit
#2) Like them more than other fruit
#3) It's one of my favourite fruits!
#4) I ADORE CHERRIES!
(單選)
Do you know any recipes with cherries?
[textfield]
以上是一個範例:先以容易回答的引導問題開場,再接著提出主要問題。
此問卷的目標是收集含有櫻桃、蘋果和香蕉的食譜。
另一方面,如果您需要提出難以回答的問題,可以考慮為每個問題或題組使用不同的頁面,並將這些難以回答的問題放在最後。這樣一來,即使參與者決定不完成問卷,至少他們之前的作答結果已被儲存。
關於結構,還有一點需要考慮:避免問卷本身造成偏差。
例如,在市場研究中,有些概念需要區分無提示問題與有提示問題。
無提示問題的範例如下:
"您熟悉哪些巧克力品牌?"
(後面接一個空白的文字方塊)
以下是有提示問題的範例:
"以下哪些巧克力品牌是您熟悉的?"
(後面接一個品牌清單(多選))
如前所述,如果您選擇在同一份問卷中同時包含這兩種類型的問題(有提示與無提示),請務必將它們放在不同的頁面,並將無提示問題放在有提示問題之前。若將有提示問題放在無提示問題之前,可能會在無意間影響參與者的作答,導致結果無效。
個別問題
問題不應具有引導性。「您對 LimeSurvey 有什麼看法?」是可接受的(非引導性)問題,而「您是否同意 LimeSurvey 是一個非常棒的工具?」則是引導性問題。
其他問題措辭的範例與建議:
若以下列方式提問,人們可能會對捐款回答「是」:
- 您熱愛大自然嗎?
- 您願意捐款幫助這條河川嗎?
若以這種方式提問,他們可能會回答「否」:
- 缺乏資金對您來說是個問題嗎?
- 您願意捐款幫助這條河川嗎?
為了獲得適當的作答結果,請依下列順序安排問題:
- 從最不敏感到最敏感
- 從一般到更具體
- 從關於事實的問題到關於意見的問題
此外,問卷中的問題可以是:
- 開放式(受訪者以自己的話回答),或
- 封閉式(受訪者從有限的選項中選擇)
封閉式問題更容易分析,但可能無法讓受訪者給出他們真正想要的答案。
範例:「您最喜歡的顏色是什麼?」
開放式:有人可能回答「深紫紅色」,此時您的結果中就需要有「深紫紅色」這個類別。
封閉式:若只提供 12 種顏色供選擇,您的工作會比較輕鬆,但受訪者可能無法選出他們真正最喜歡的顏色。
請仔細考慮每個問題,並決定它應該是開放式還是封閉式。如果您需要更深入了解作答結果,請使用開放式問題;若無此需要,則可使用封閉式問題。
範例(開放式):「您認為清理這條河川的最佳方法是什麼?」
採用開放式:答案可能不容易整理成表格或圖表,但您可以深入了解人們對於清理河川或環境的感受與想法,並在報告中直接引用他們的話。
範例(封閉式):「您多久造訪一次這條河川?」
將其設為封閉式,並提供以下選項:
- 幾乎每天
- 一年至少 5 次
- 一年 1 至 4 次
- 幾乎從不
您將能夠以簡潔的長條圖呈現這些資料。
使用多項選擇或單選問題時,請務必選擇適當的題型,並妥善撰寫問題與答案。
例如:
Which of the following fruit do you like?
#Apples ()
#Bananas ()
#Cherries ()
以上是典型的多選問題,因為您可以同時喜歡清單中的多個項目。相反,「以下水果中,您最喜歡哪一種?」則是單選問題。
這兩個水果範例的措辭都明確表示,您只關心所列出的水果。如果您要問「您最喜歡的水果是什麼?」,就必須提供一份非常完整的水果清單,或者更常見的做法是使用 LimeSurvey 的設定來新增「其它」欄位。一般來說,在大多數情況下,答案選項必須完整、互斥且明確。
如果多選或單選問題有很多選項可供選擇,您需要注意這可能會造成另一種偏差,因為參與者很可能會把注意力集中在最前面的選項,而忽略中間的選項。LimeSurvey 提供了隨機排列問題順序的選項,可在一定程度上消除這個問題。
什麼是好的問卷?
問卷具備以下 3 項特點,有助於引出所需的適當回應,以進行更準確的評估:
- 問題清晰明確,整體上能讓參與者給出詳細、無歧義且有意義的答案。
- 所提供的所有預設答案及其格式都適合該問題。
- 讓人們在需要時有空間補充額外資訊。
此外,請隨時考慮使用者體驗。閱讀、捲動和點擊都是令人疲勞的操作。因此:
- 避免不必要的問題。
- 使用條件,避免向特定參與者提出與其無關的問題。
- 讓問題和答案保持簡短易讀,並使用適當的標記。
- 權衡捲動與點擊。對於較短的問卷(5-15 個問題,視問題複雜程度而定),將所有內容顯示在同一頁。對於較長的問卷,請妥善使用群組,即以易於理解的方式將問題分組。使用群組說明,清楚說明後續問題的主題。
- 避免以不同的量表使參與者感到困惑,即盡可能限制不同量表類型、量表範圍和量表說明的數量。盡量不要改變量表的方向。(在方法論上有一些例外情況)。
- 對於評分量表,使用偶數個評分選項可能有助於讓受訪者更容易做出決定(見下文)。
Example for answer scales about how ''good'' something is:
1. Very good
2. Good
3. Quite good
4. Not that good
5. Bad
6. Very bad
Example for answer scales about how ''bad'' something is:
1. Good
2. Fair
3. Bad
設計問卷的最佳起點,是花點時間想像您理想中的回饋。不言而喻,有意義的回應最有用,因此請嘗試建立能引出這類答案的問題。
該如何做到呢?最好的方法是將所有領域分開,並決定您需要哪些資訊。
例如,假設您舉辦了一場對外開放的活動,需要取得一些關於該活動的整體回饋。
以下問卷是一個可能不足以引出有用回應的範例:
Did you enjoy the Event?
( ) Yes
( ) No
How good was the Wi-Fi?
1 2 3 4 5 6 7 8 9 10
( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )
Did you have problems getting to the event?
( ) Yes
( ) No
所提供的地圖是否有幫助?
( ) 是
( ) 否
您對講者的組合有何感受?
( ) 非常難過 ( ) 難過 ( ) 中立 ( ) 開心 ( ) 非常開心
針對上述情境,矩陣問題會是更好的選擇。
矩陣問題
一般而言,分級僅適用於與年齡、時間(或許)或數量有關的問題。矩陣問題必須措辭得當,才能獲得最有用的回饋。請注意,由必答問題組成的矩陣可能會讓您的受眾卻步,因為若結構不佳,這類矩陣無法收集到任何額外資訊。
如果有人願意填寫您的問卷,很可能是因為他們想提供回饋;而如果他們認為自己無法分享任何有用的內容,就會直接關閉視窗離開。
那麼,上述問卷有什麼問題呢?
讓我們逐一檢視每個問題。
問題 1 其實沒有達到任何效果。試想收到 100 個「否」的作答結果,光憑這些作答結果,並無法得知參與者為何不喜歡這場活動。您會對「否」的原因感到疑惑,也不知道該如何處理這些作答結果。稍後我們會看看可能的改進方式。
問題 2 比第一個更糟。回顧一份好問卷的三項特點,可知問題必須清楚且精確。我並非 Wi-Fi 專家,但我相當確定有更好的衡量方式。此外,對於像「得知有 33% 的人評價您的 Wi-Fi 良好,而只有 23% 的人這麼認為,您會怎麼做?」這類的問題,這種方式也無法得到有意義的答案。好問卷的三項特點也指出,預先定義的答案必須適合該問題。
很明顯,此問題使用分級無助於提升您的 Wi-Fi 品質。這個問題確實需要留有空間,讓人們新增額外資訊。如果無法詳細說明,又該如何回報具體問題呢?
在這種情況下,幾乎不可能取得足夠的資訊,來妥善處理參與者在 Wi-Fi 方面遇到的問題。問卷的重點,就是取得可供您運用或從中學習的有用資訊。
問題 3 和 4 的結果會與前兩個問題相同。它們只允許回答「是」或「否」,且都沒有提供新增詳細資訊的機會。本節之後,我們會提供如何改進這類問題的建議。
問題 5(最後一個問題)同樣成效不彰。詢問對某件事的滿意程度並不是很有用,因為每個人的興趣不同,因此每個人對每位講者很可能都有不同的看法。這是另一個不該使用「分級」問題卻使用了的例子。
請看下方改進後的問卷。
您是否使用了場地內的 Wi-Fi?
( ) 是
( ) 否
您在使用 Wi-Fi 時是否遇到任何問題?
( ) 完全沒有問題
( ) 有一些小問題,但不嚴重
( ) 有一兩個嚴重問題
( ) Wi-Fi 幾乎完全無法使用。
如果您遇到問題,可否簡要描述?(文字欄位)
您前往活動現場時是否遇到任何問題?
( ) 是
( ) 否
您是如何前來參加我們的活動的?
( ) 火車
( ) 汽車
( ) 公車
( ) 輕軌(例如地鐵、電車)
( ) 步行
您是否使用了我們網站上的地圖?
( ) 是
( ) 否
如果您看過地圖,地圖是否足夠詳細?
( ) 是
( ) 它讓我大致了解位置,但我另外使用了其他地圖來取得更多細節。
( ) 一點也不詳細
如果您沒有使用地圖,原因是什麼?
( ) 細節不足
( ) 我改用衛星導航/Google 地圖。
( ) 我根本不知道有這份地圖!
整體而言,講者是否有趣?您是否喜歡這些簡報?
( ) 幾乎全都很有趣,令人十分享受
( ) 大部分都很精彩,但有少數演講比較無趣。
( ) 一半一半
( ) 無趣多於有趣
( ) 沒有覺得任何一場有趣
請進一步說明您對上一個問題的答案。歡迎提及任何
特定的人物/演講。(文字欄位)
如果我們可以改善演講的多樣性,或者您對演講有任何其他有趣的想法,
請在下方列出(文字欄位)
如果您有任何其他建議或想法,請在下方列出。(文字欄位)
這份問卷可能稍長一些,但答題和解讀作答結果都容易得多。針對每個主題提出兩到三個問題,意味著在處理結果時,您可以進行更多一些的分析。例如,假設針對第一份問卷的第一個問題,有 30 人表示他們在前往活動現場時遇到了問題。
這就是您能從結果中取得的全部資訊;但有了新的一組問題,就可以推斷出哪些交通方式讓人們遇到問題。此外,您還可以進一步了解他們使用的是所提供的地圖還是其他導航方式,並據此針對未來進行改善。
請注意,超過 50 個問題後,使用者很可能會停止閱讀。
另一項重要的補充是文字欄位問題。這類問題可讓您的參與者提供具體的意見回饋,供您參考。建議不要將這些問題設為必填,因為這可能會讓人不願作答。
總結來說,在撰寫問卷時,您應致力於建立能提出具體問題的問卷,以取得更有助於分析的資訊。此外,請記得多蒐集一些額外的背景資訊,這將有助於更完善地分析作答結果。
正確表述問題同樣重要。如果人們必須回答問題,卻無法理解問題內容,就會關閉視窗並離開。若可能,請在公開問卷之前請他人校閱,以確保問題清楚易懂。
問卷偏差
在進行市場研究時,取得無偏差作答結果的重要關鍵,是避免向問卷參與者提出可能影響其作答的問題。避免問卷偏差有助於排除可能使所蒐集資料失效或失真的作答結果。 缺乏適當市場研究訓練或知識的公司或個人,很容易也很常犯這類錯誤。這涉及許多方面,例如問題的措辭方式、可供選擇的作答類型,以及以電話或面對面方式蒐集資料時訪問員提出問題的方式。
以下是一個有偏差的問題範例:
您有多喜歡這場活動?
( )非常喜歡
( )只有一點點
( )不太喜歡
( )完全不喜歡
乍看之下,這個問題的結構似乎沒有問題。畢竟,受訪者的選項涵蓋從「非常喜歡」到「完全不喜歡」。然而,問題出在問題的措辭方式。當詢問參與者「有多」喜歡這場活動時,執行問卷的人已預設受訪者多少喜歡這場活動,因而產生偏差,但實際情況未必如此。
以下範例是更好的提問方式,不會影響參與者的作答:
請以 1 至 5 分評價您對這場活動的整體喜愛程度:1 =「完全不喜歡」,5 =「非常喜歡」
1 2 3 4 5
( ) ( ) ( ) ( ) ( )
重新表述問題後,受訪者可以使用量表輕鬆表達喜愛程度,而執行問卷的人也能輕鬆彙整並與其他受訪者的結果進行比較。當然,還應加入更多問題,以了解參與者喜歡或不喜歡的具體原因。
這只是措辭上的細微調整即可改善問卷的其中一個例子。