よいアンケートの作り方(ガイド)
From LimeSurvey Manual
よいアンケートを作るための簡単なガイド
LimeSurvey を使えば、アンケートをすばやく簡単に作成できます。残念ながら、そのせいで悪いアンケートを作るのも、とても簡単になってしまいます。
このページでは、参加者が負担なく回答できるだけでなく、意味のある回答も得られるアンケートを作るための簡単なガイドを紹介します。
ブログ、「Survey design tips & tricks(アンケートデザインのコツと技)」では、この他のとても役に立つ情報を掲載しています。
アンケートを作る前に
アンケートを設計する前に、あらかじめ答えを出しておくべき重要な質問がいくつかあります。実際には、そもそもアンケートが適切な方法かどうかを判断する前に考えておく必要があります。
アンケートで本当に知りたいことは何ですか?
その質問に答えたら、次の点を確認してください。
- アンケートは、調査に必要な情報を得るのに役立つか?
- アンケートに回答してもらうのに適切な人は誰か?
- 適切な人にどうすれば届けられるか?
- 参加者が質問を十分に理解して回答できるようにする(得られる情報を正確で有用なものにする)最善の方法は何か?
- 収集したデータに対して、(データ分析のための)統計的手法を使いたい、または使う必要があるか。ある場合はどの手法か?
- 本当に必要な個人データは何か、またそれをどのように保護するか?
こうした質問・確認は、LimeSurvey が最適な道具かどうかを判断する際にはっきりさせておくべき点のほんの一部です。
LimeSurvey は、完全に構造化された(調査を始める前に、尋ねる可能性のある質問がすべてわかっている)、標準化された(全員がほぼ同じアンケートに回答する)、主に定量的な(おもに数値や、あらかじめ回答が決まっている質問を扱う)オンラインのアンケートに最適です。
もちろん、ある程度はこの限りではありません。たとえば、電話での聞き取りなど、インタビューの回答を LimeSurvey に入力することもできます。また、記述質問などを使って、定性的なデータを収集することもできます。
しかし、ある時点で、他の調査方法の方が適しているという結論になるかもしれません。
アンケートの構成
質問の順序をどうするか、どう質問をグループ化するかを決めるには、考えるべき点があります。
なるべく、はじめは答えるのが簡単で、参加者全員が答えるのに不快と感じない質問から尋ねます。こうした質問は、よくスクリーニング(ふるい分け)の質問として使われます。つまり、適切な人に回答してもらうための確認として用いる質問です(こうしたスクリーニングの質問を取り扱うには、条件 ・ 割り当て のいずれか、または両方を使います)。
最初にこの種の質問をすると、参加者がアンケートの回答を完了する前に離れてしまうのを防ぐことができます。こうした導入・スクリーニングの質問に答える労力をすでに費やしてしまったことで、多くの人は作業を中断する可能性が低くなるからです。
例:
次のくだもののうち、どれが好きですか?
#りんご ()
#バナナ ()
#さくらんぼ ()
(複数選択)
条件を使うと、''さくらんぼ''を選択した参加者にだけ、次のさくらんぼに関する質問を表示できます。
なぜさくらんぼが好きですか?
#おいしいから
#色が大好きだから
#健康的だから
#みずみずしいから
#チェリーパイが大好きだから
(複数選択)
さくらんぼは、どのくらい好きですか?
#1) 他のくだものほど好きではない
#2) 他のくだものよりも好き
#3) 大好きなくだものの1つ!
#4) さくらんぼが大好きだ~っ!!!
(単一回答)
さくらんぼを使ったレシピを何か知っていますか?
[記述]
上記は、つづくメインの質問への導入として配置する簡単な質問の例です。
目的は、くだもののレシピを集めることでした。導入の質問は答えやすく、さくらんぼが好きな参加者にだけさくらんぼについて尋ねるようになっています。
一方、答えにくい質問をしなければならない場合は、質問ごと、または質問グループごとにページを分けることを検討してください(一般設定でアンケートのフォーマットをグループごとまたは質問ごとに設定します)。また、そのような答えにくい質問は最後に配置してください。こうしておけば、参加者がアンケートを最後まで回答しなかったとしても、少なくともそれまでの回答は保存されます。
構成に関して考慮すべきこととして、アンケート自体がもたらすバイアス(先入観)を避けることも重要です。
たとえば市場調査では、補助なしの質問と補助ありの質問を必要とする概念があります。
補助なしの質問の例は次のとおり :
「あなたが知っているチョコレートのブランドは何ですか?」
(つづいて空白のテキストボックス)
以下は、補助ありの質問の例 :
「次のチョコレートのブランドのうち、知っているのはどれですか?」
(つづいてブランドのリスト・複数回答)
両方のタイプの質問(補助ありと補助なし)を同じアンケートに含める場合は、必ず別のページに配置し、補助なしの質問を補助ありの質問より前に配置してください。補助ありの質問を補助なしの質問の前に置くと、参加者の回答に無意識に影響を与え、結果が無効になるおそれがあります。同じ理由から、戻る操作を許可をオフにすることも検討してください。これにより、参加者が選択肢のリストを見たあとで戻り、補助なしの質問への回答を変更することを防げます。
個々の質問
質問は示唆的であってはなりません。「LimeSurveyについてどう思いますか?」は、承認できる(示唆的ではない)質問です。一方、「LimeSurvey が本当にすばらしいツールであることに同意しませんか?」は示唆的な質問です。
質問の表現に関するその他の例と提案 :
次のように質問すると、多くの人は寄付に「はい」と答えるかもしれません:
- 「自然は好きですか?」
- 「川を守るために寄付しませんか?」
次のように質問すると、多くの人はおそらく「いいえ」と答えるでしょう :
- 「お金が足りなくて悩んでいますか?」
- 「川を守るために寄付しませんか?」
適切な回答を求めるために、質問の順序を次のようにします :
- 当たり障りのないものからセンシティブ(敏感)なものへ
- 一般的なものからより具体的なものへ
- 事実についての質問から意見を聞く質問へ
質問を作成するときは、次の点にも注意してください。
- 一度に尋ねるのは1つのことだけにします。 「当社の製品の価格と品質にどのくらい満足していますか?」という質問は、品質には満足していても価格には満足していない人が適切に答えられません。2つの質問に分けてください。
- 簡単で日常的な言葉を使い、参加者が知らないかもしれない略語や専門用語は避けます。
- 否定表現は避けます。 特に「川を清掃すべきではないという意見に反対ですか?」のような二重否定は避けてください。
- 期間は具体的に示します。 「過去12か月の間に、どのくらいの頻度で川を訪れましたか?」は、「どのくらいの頻度で川を訪れますか?」よりも答えやすく、比較もしやすくなります。
また、アンケートの質問は以下の通り大別できます :
- 自由回答 (回答者が自分の言葉で回答)
- 限定回答 (限られた数の選択肢から選ぶ)
限定回答は、分析がはるかに簡単ですが、回答者が本当に望む選択肢を用意できないかもしれません。
例 : 「好きな色は何ですか?」
自由回答: 「ダークフューシャ」と答える人がいるかもしれません。結果に「ダークフューシャ」の分類を作らなければなりません。
限定回答: 12種類の色から選ばせれば集計は楽です。しかし、回答者が本当に好きな色を選べないかもしれません。
各質問をよく検討し、自由回答にするか、限定回答にするかを決めてください。回答からより深い洞察を得たい場合は、自由回答の質問を使用します。そうでない場合は、限定回答の質問を使用できます。
例(自由回答) : 「川をきれいにする最善の方法は何だと思いますか?」
「自由回答」にする : 回答を表やグラフにまとめるのは簡単ではないでしょう。しかし、川や環境の浄化に対する人びとの感情や考えについて深い洞察が得られ、レポートに直接引用できるかもしれません。
例(限定回答):「過去12か月の間に、どのくらいの頻度で川を訪れましたか?」
次の選択肢を使って限定回答にします。
- ほぼ毎日
- 5回以上
- 1~4回
- まったくない
このデータはきれいな棒グラフで表すことができます。
複数選択または単一選択の質問を使用する場合は、適切な質問タイプを選び、質問と回答の両方を適切に作成してください。
例 :
Which of the following fruit do you like?
#Apples ()
#Bananas ()
#Cherries ()
上の例は、リストの中に好きなものが複数あり得るため、典型的な複数選択の質問です。一方、「次のくだもののうち、どれが一番好きですか?」は単一選択の質問です。
どちらのくだものの例も、関心の対象がリストにあるくだものだけであることがはっきりわかるように作成されています。「好きなくだものは何ですか?」と尋ねる場合は、くだものを本当にすべて網羅したリストを用意するか、より現実的には、LimeSurvey の「その他」オプションを使って、リストにない回答のためのテキストフィールドを追加する必要があります。一般に、回答の選択肢は、ほとんどの場合、網羅的で、相互に排他的で、明確である必要があります。
質問に答えられない参加者がいる可能性がある場合は、「わからない」や「該当なし」などの選択肢を用意して、逃げ道を作ってください。必須ではない質問では、LimeSurvey に「無回答」オプションを表示させることもできます。そうしないと、先に進むためだけに適当な回答を選ぶ人が出て、データの信頼性が低下します。
複数選択または単一選択の質問で選択肢が多い場合は、別のバイアスが生じる可能性に注意が必要です。参加者は、中ほどの選択肢よりも、最初のほうの選択肢に注意を向けやすいためです。この問題を軽減するには、質問の選択肢の順序をランダムに設定します。これにより、参加者ごとに異なる順序で選択肢が表示されます。同様に、ランダム化グループを使って、質問を不規則な順序で表示することもできます。
どうしたらよいアンケートになるか?
正確な評価に欠かせない適切な回答を収集する、よいアンケートの特徴は 3 つあります:
- 質問は明確かつ正確で、詳細で明確かつ有意義な回答を可能にする。
- すべて事前定義された選択肢が提供され、その形式は質問に適している。
- 必要に応じて追加情報を追加する余地がある。
それに加えて、常にユーザーエクスペリエンスを考慮してください。読む、スクロールする、クリックするといった作業は疲れるものです。そのために、次の点に注意しましょう。
- 不必要な質問は避ける。
- 条件を使って、特定の参加者に関係のない質問をしないようにする。
- 質問と選択肢は短く、読みやすくする。適切なマークアップを使用する。
- スクロールとクリックのトレードオフを考える。短いアンケート(質問の複雑さにもよりますが、5~15問程度)は、すべてを1ページに表示する。長いアンケートでは、グループを賢く使う。つまり、質問をわかりやすくグループ化する。グループの説明を使って、続く質問のテーマを明確に伝える。
- 異なるスケールで参加者を混乱させない。つまり、スケールの種類、スケールの範囲、スケールの説明の違いを、できるだけ少なくする。スケールの方向を変えないようにする(方法論上の例外もあります)。
- バランスの取れた評価スケール、つまり肯定的な選択肢と否定的な選択肢を同じ数にする。中立の選択肢が中央にくる奇数個の選択肢にするか、参加者がどちらかに傾くことになる偶数個の選択肢にするかを、意図的に決める(下の例を参照)。
- 本当に回答が必要な場合にのみ、質問を必須にする。答えたくない質問への回答を強制された参加者は、適当に回答したり、アンケートから離脱したりすることがよくあります。ソフトの必須設定を使うと、未回答の質問があることを参加者に知らせつつ、先に進めるようにできます。
- 多くの参加者がスマートフォンでアンケートに回答することを念頭に置く。列の多い大きな配列(マトリクス質問)は、小さな画面では使いにくいため、小さくするか分割し、開始前にスマートフォンでアンケートをテストする。
バランスの取れたスケール(選択肢が偶数で、中立の選択肢なし):
1. とてもよい
2. よい
3. 悪い
4. とても悪い
バランスの取れたスケール(選択肢が奇数で、中立の選択肢あり):
1. とてもよい
2. よい
3. よくも悪くもない
4. 悪い
5. とても悪い
バランスの悪いスケール(避けてください - 肯定的な選択肢が3つに対し、否定的な選択肢は1つだけ):
1. 非常に優れている
2. とてもよい
3. よい
4. 悪い
アンケートの設計をはじめるベストな方法は、理想的な回答を、少し想像してみることです。意味のある回答が最も有益であることは言うまでもないので、そのような回答をうながす質問を作成するようにしてください。
そのためにはどうしたらよいでしょう? すべての領域を分離し、必要な情報は何かを決めることが最善の方法です。
例えば、一般公開のイベントを開催し、そのイベントについての一般的なフィードバックを得る必要があるとします。
次のアンケートは、有用な回答を引き出すのに不十分と思われるアンケートの例です。
イベントは楽しかったですか?
( ) はい
( ) いいえ
無線 LAN はどのくらい快適でしたか?
1 2 3 4 5 6 7 8 9 10
( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( ) ( )
イベント会場に着くまでに問題はありましたか?
( ) はい
( ) いいえ
配布した地図は役に立ちましたか?
( ) はい
( ) いいえ
出演者の組み合わせについてはどう思いましたか?
( ) とても悲しい ( ) 悲しい ( ) どちらでもない ( ) うれしい ( ) とてもうれしい
サンプルアンケートの改善
評価スケールは便利ですが、回答を活かせる場合に限ります。評価だけを尋ねる質問では、何かがよかった、あるいは悪かったという事実はわかっても、その理由はわかりません。必須の評価質問が長く続くと、追加の情報を伝える余地がないため、回答者が回答をためらう原因になることにも注意してください。
フィードバックを提供したいと考えて、アンケートに回答しようとしている人にとって、「役に立つ情報を共有できる」と思えなかったら、ウィンドウを閉じてアンケートから離れてしまうでしょう。
では、上記のアンケートの何がよくないのでしょうか?
それぞれの質問を見ていきましょう。
質問 1 では実際には何も得られません。100 件の「いいえ」の回答を受け取ったと想像してみてください。この回答だけでは、参加者がイベントを楽しめなかった理由について有益な情報を得られません。「いいえ」の回答の理由がわからず、またその回答をどうすればよいのか悩むことになるでしょう。改善例については、のちほど見てみます。
質問 2 は最初の質問よりもさらに問題があります。よいアンケートの 3 つの特徴を振り返ると、質問は明確かつ正確でなくてはなりません。「どれくらいよいか」は、速度、通信エリア、安定性、接続のしやすさなど、さまざまな意味にとれるため、参加者ごとに評価する点が異なる可能性があります。さらに、「33% の人が Wi-Fi を『よい』と評価し、別の場合は 23% だったという結果を受けて、あなたは何をしますか?」といった問いに対して、意味のある答えは得られません。また、よいアンケートの 3 つの特徴には、あらかじめ用意する回答は質問に適したものでなければならない、とも記されています。
この質問にスケールを使っても、無線 LAN の品質向上に役立たないことは明らかです。この質問には、回答者が追加情報を記入できる欄が必要です。どうやったら詳しい説明をせずに、具体的な問題を報告できるのでしょうか?
この例では、参加者が Wi-Fi に関して抱えていた問題に適切に対処するための情報を得ることは、ほぼ不可能です。アンケートの目的は、活用したり学んだりできる有用な情報を得ることです。
質問 3 と 4 も、最初の 2 つの質問と同じ結果になります。どちらも「はい」か「いいえ」でしか答えられず、詳細を追加する機会がありません。こうした質問の改善方法については、以下で提案します。
最後の 質問 5 も、効果の薄い質問です。講演者の顔ぶれについて「とても悲しい」から「とてもうれしい」までのスケールで参加者がどう「感じた」かを尋ねても、あまり有益ではありません。人によって関心が異なり、講演者ごとに意見も異なる可能性が高いためです。これも、使うべきでない場面で「スケール」の質問を使っている例です。
改善したアンケートを見てみましょう。「問題が発生した場合は、簡単に内容を教えてください」のような質問は、問題があったと回答した参加者にだけ表示すれば十分です。これには条件を使用します。
会場の Wi-Fi を利用しましたか?
( ) はい
( ) いいえ
無線 LAN で問題が起きましたか?
( ) まったく問題ない
( ) 少々の問題はあったが、大したことはない
( ) いくつか重大な問題があった
( ) 無線 LAN は使いものにならなかった
問題が発生した場合は、簡単な説明をお願いします。(テキストフィールド)
イベント会場に着くまでに問題はありましたか?
( ) はい
( ) いいえ
会場にはどのように来ましたか?
( ) JR
( ) 車
( ) バス
( ) 地下鉄または路面電車
( ) 徒歩
( ) その他: ________
公式ウェブサイトの地図を使いましたか?
( ) はい
( ) いいえ
地図をご覧になって、十分詳細に記載されていましたか?
( ) はい
( ) 大まかな情報は得られたが、詳細は別の地図を使った
( ) 不十分だった
公式サイトの地図を使わなかった方は、なぜ使わなかったのですか?
( ) 詳細が不十分だったから
( ) 代わりにナビゲーションアプリを使った
( ) 地図があることを知らなかった!
全体として、講演者はおもしろかったですか? スライドは楽しめましたか?
( ) ほとんどが興味深く、とても楽しかった
( ) 大体楽しめたが、つまらないものもあった
( ) 半々だった
( ) おもしろいよりも退屈な方が長かった
( ) おもしろいものはまったくなかった
上記の質問に対する答えについて、詳しくお聞かせください。どのようなことでも、ご自由にご参照ください。
特定の人・話の内容について。 (テキストフィールド)
話題の範囲の改善点、またはその他の興味深いアイディア
講演内容について。以下にリスト(テキストフィールド)
その他、ご要望やご意見があれば、以下にお書きください。 (テキストフィールド)
アンケートは少し長くなりましたが、回答するのも回答を解釈するのも、はるかに容易になりました。話題・テーマごとに 2 ~ 3 の聞くことにより、結果を処理する際により詳しく分析できるようになります。例えば、最初のアンケートの質問で、30人がイベント会場に着くまでに何らかの問題があったと回答したとします。
これが結果から得られるかぎりの情報でしたが、新たな選択肢のセットで、どの交通手段に問題があったのかを推測することができます。さらに、参加者が提供した地図を使ったか、あるいは別の地図やアプリを利用したかがわかり、今後の改善の対象にすることもできます。
質問が 1 つ増えるごとに、参加者が回答をやめてしまう可能性が高くなることに注意してください。 アンケートはできるだけ短くし、ウェルカムメッセージで所要時間を伝え、プログレスバーの表示も検討しましょう。
もう 1 つの重要な追加要素が、テキストフィールドの質問です。参加者が具体的なフィードバックを提供でき、それを参考にできます。必須にすると回答そのものをやめてしまうかもしれないので、必須にしないほうがよいでしょう。
まとめると、アンケートを作成するときは、分析に役立つ情報をより多く得るために、具体的な質問をするアンケートにすることをめざしましょう。また、背景情報を少し余分に収集しておくと、回答をよりよく分析するのに役立つことも覚えておいてください。
質問を適切に表現することも重要です。質問に答えようとしていても、内容を理解できなければ、ウィンドウを閉じて離れてしまいます。可能であれば、アンケートを公開する前に他の人に確認してもらい、質問が明確であることを確かめてください。
アンケートのバイアス
市場調査を実施する際、偏りのない回答を得るための重要なカギは、アンケート参加者の回答に影響を与える可能性のある質問を避けることです。アンケートのバイアス(偏り)を避けることで、収集したデータを無効にしたりゆがめたりする回答を排除できます。 適切な市場調査の訓練や知識のない企業や個人は、こうしたミスを犯しやすく、実際によくあることです。質問の表現、選択肢の種類、さらに電話や対面でデータを収集する場合のインタビュアーの質問のしかたなど、さまざまな点が当てはまります。
バイアスがかかった質問の例 :
イベントはどの程度楽しかったですか?
( )とても楽しかった
( )少し楽しかった
( )それほど楽しくなかった
( )まったく楽しくなかった
一見すると、この質問の構造に問題はなさそうです。回答者には「とても楽しかった」から「まったく楽しくなかった」までの選択肢が用意されています。しかし、問題は質問の表現にあります。参加者にイベントを「どの程度」楽しんだかを尋ねることで、アンケートの実施者は、回答者が程度の差はあれイベントを楽しんだはずだと仮定しており、すでにバイアスが生じています。実際にはそうでない可能性もあります。
参加者の回答に影響を与えない、よりよい質問の例 :
イベント全体の楽しさを 1 ~ 5 で評価してください: 1 =「まったく楽しくなかった」、5 =「とても楽しかった」
1 2 3 4 5
( ) ( ) ( ) ( ) ( )
質問の表現を変え、スケールで回答できるようにしたことで、回答者は楽しさのレベルを答えやすくなり、アンケートの実施者は結果を集計して他の回答者と比較しやすくなりました。もちろん、参加者が何を楽しんだのか、あるいは楽しめなかったのかを具体的に尋ねる質問も追加する必要があります。
これは、文言を少し変更することでアンケートがどのように改善されるかを示す一例にすぎません。
開始前にアンケートをテストする
アンケートを参加者に送信する前に、十分にテストしてください。
- プレビューを使ってご自身でアンケートを最後まで進め、さまざまな回答を試して、条件によって適切な質問が表示・非表示になることを確認します。アンケートロジックファイルを使うと、条件や式のエラーを見つけやすくなります。
- コンピューターだけでなく、スマートフォンでもアンケートを開いて確認します。
- 対象となる人々の中から数人にアンケートへの回答を依頼し(パイロットテスト)、分かりにくかった質問を尋ねます。回答内容も確認してください。多くの人が「その他」を選択したり、質問を空欄のままにしたりしている場合は、その質問や選択肢の改善が必要かもしれません。
- エクスポートした結果を、計画した方法で分析できることを確認します。
アンケートを稼働する前に変更を済ませてください。アンケートが稼働中になると、質問の追加や削除はできなくなります。アンケートの構造を変更するには、アンケートを停止する必要があります。その場合、これまでに収集された回答はアーカイブテーブルに移動されます。
参加者のデータを保護する
調査に本当に必要な個人データのみを尋ねてください。回答がどのように扱われるかが分かっていれば、参加者はより正直に回答してくれます。