ChatGPTの顧客満足度調査では、単に「満足したか」を聞くだけでなく、使いやすさ、回答の品質、目的を達成できたか、継続して使いたいかを分けて分析します。さらに、利用目的や利用頻度、無料・有料プランなどの違いによって満足度が変わるため、回答者全体の平均だけで判断しないことが重要です。
ChatGPTの顧客満足度調査で分析する主な項目
最初に、満足度を構成する要素を複数の項目に分けて確認します。総合評価が低い場合でも、原因が「回答の正確さ」なのか「操作のしやすさ」なのかによって改善策が変わるためです。
| 分析項目 | 確認する内容 | 質問例 |
|---|---|---|
| 総合満足度 | ChatGPTの利用全体にどの程度満足したか | 「全体としてどの程度満足していますか」 |
| 回答の正確さ | 内容が正しく、信頼して使えるか | 「回答は目的に必要な正確さを満たしていましたか」 |
| 回答の分かりやすさ | 文章の構成や説明が理解しやすいか | 「回答は理解しやすかったですか」 |
| 目的達成度 | 質問、文章作成、要約などの目的を達成できたか | 「利用目的を達成できましたか」 |
| 使いやすさ | 入力、修正、再質問などをスムーズに行えるか | 「操作や会話の進め方は簡単でしたか」 |
| 応答速度 | 待ち時間が利用上の負担にならなかったか | 「回答が表示されるまでの時間に満足していますか」 |
| 再利用意向 | 今後も利用したいか、他者に勧めたいか | 「今後もChatGPTを利用したいと思いますか」 |
「満足度」と「目的達成度」は似ていますが、同じではありません。回答が分かりやすくても目的を達成できない場合があるため、両方を別の設問として分析します。
まず総合満足度と不満足の割合を見る
総合満足度では、平均値だけでなく、満足・中立・不満の割合を確認します。平均が同じでも、回答が中間に集中している場合と、満足と不満に二極化している場合では、必要な対応が異なるためです。
たとえば、5段階評価を使う場合は、次のように集計できます。
- 満足：5・4の回答割合
- 中立：3の回答割合
- 不満：2・1の回答割合
- 平均満足度：各評価の合計を回答数で割った値
ただし、満足度の区分は調査目的に合わせて事前に決めておきます。調査後に都合のよい区分へ変更すると、結果の解釈が不安定になります。
利用目的ごとに満足度を比較する
ChatGPTの顧客満足度は、利用目的によって分けて分析する必要があります。文章作成、翻訳、要約、アイデア出し、学習、プログラミングなどでは、利用者が重視する品質が異なるためです。
| 利用目的 | 重視されやすい評価項目 | 確認したい不満 |
|---|---|---|
| 文章作成 | 文章の自然さ、修正のしやすさ、指示への適合 | 意図と違う表現、修正回数の多さ |
| 要約 | 重要情報の保持、簡潔さ、正確さ | 情報の抜け、誤った要約 |
| 翻訳 | 意味の正確さ、自然さ、専門用語への対応 | 文脈に合わない訳、用語の揺れ |
| アイデア出し | 提案の多さ、具体性、発想の広がり | 一般的な案に偏る、実行しにくい |
| プログラミング | コードの動作、説明の分かりやすさ、修正支援 | エラー、環境に合わないコード |
この比較から、たとえば「全体の満足度は高いが、特定の利用目的では不満が多い」といった傾向を把握できます。全体平均だけでは見えない問題を見つけるための分析です。
利用状況や利用者の属性で分けて分析する
満足度の違いを説明するには、どのような人が、どの条件で使ったのかを確認します。ただし、個人を特定できる情報を必要以上に集めず、分析に必要な範囲に限定することが大切です。
比較対象として、次のような項目が考えられます。
- 利用頻度：初回利用、月に数回、週に数回、ほぼ毎日など
- 利用期間：使い始めたばかりか、継続利用者か
- 利用環境：パソコン、スマートフォン、タブレットなど
- 利用プラン：調査対象に含める場合は、プランの区分
- 利用者の立場：個人利用、学生、会社員、管理者など
- 習熟度：生成AIを初めて使う人か、使い慣れている人か
特に、初回利用者と継続利用者は分けて見ると、初期の使いやすさと長期的な価値を区別できます。両者を混ぜると、どの段階で満足度が変化したのか分かりにくくなります。
満足度に影響した理由を自由回答から分析する
選択式の設問だけでは、なぜ満足したのか、なぜ不満だったのかまでは分かりません。自由回答を設け、回答内容を同じ基準で分類すると、改善につながる具体的な理由を把握できます。
自由回答の分類例
- 回答の正確さや誤情報
- 指示への従いやすさ
- 文章の自然さや分かりやすさ
- 回答速度や利用中のエラー
- 会話を続けたときの文脈理解
- 料金や利用制限に対する評価
- 個人情報や安全性への不安
- 期待していた機能との違い
自由回答を集計するときは、1つの回答に複数の不満が含まれる場合があります。そのため、主な理由を1つだけ選ぶのか、複数の分類を付けるのかを先に決めておきます。
また、自由回答に書かれた個人情報や機密情報は、分析結果にそのまま掲載しないようにします。引用する場合も、個人が特定されないように内容を要約する方法があります。
「また使いたい」と「人に勧めたい」を分けて見る
再利用意向は、ChatGPTが今後も役立つと感じているかを確認する指標です。一方、「他者に勧めたいか」は、本人の満足度だけでなく、他人へ説明しやすいか、利用を勧めるリスクがないかなどにも左右されます。
そのため、次の設問は分けて集計します。
- 今後も自分で利用したいか
- 同じ目的で再び利用したいか
- 他の人や部署に勧めたいか
「他者に勧めたいか」を数値化するNPS（ネット・プロモーター・スコア）を使う方法もあります。ただし、NPSは顧客満足度そのものではないため、総合満足度や具体的な不満の設問と組み合わせて解釈します。
調査結果は平均だけでなく、関連性も分析する
満足度の原因を考えるときは、各評価項目と総合満足度の関係を確認します。たとえば、正確さの評価が低い人ほど総合満足度も低いなら、正確さが満足度に関係している可能性があります。
ただし、関係が見られたからといって、必ず一方が他方の原因だとは限りません。次のような見方を組み合わせます。
- 項目別の平均値
- 満足・不満足の割合
- 利用目的別の差
- 利用頻度別の差
- 総合満足度と各項目の関連
- 自由回答で繰り返し出ている不満
たとえば「回答の正確さ」と「総合満足度」に関連があっても、調査対象が専門的な利用者に偏っていれば、すべての利用者に同じ傾向があるとは判断できません。回答者の集まり方や回答数も、結果と一緒に確認します。
ChatGPTの顧客満足度調査を進める手順
調査は、目的を決めてから質問を作り、利用条件をそろえて集計します。次の順番で進めると、結果を改善活動に使いやすくなります。
- 調査目的を決める。全体の満足度を知りたいのか、回答品質の問題を探したいのか、継続利用の意向を確認したいのかを明確にします。
- 対象者と利用条件を決める。利用目的、利用期間、対象プラン、調査期間などを定めます。
- 評価項目を作る。総合満足度に加えて、正確さ、分かりやすさ、使いやすさ、目的達成度などを分けて質問します。
- 自由回答を設ける。「最も満足した点」「最も改善してほしい点」など、具体的な理由を聞きます。
- 回答を集計する。平均値だけでなく、評価の分布と不満足の割合を確認します。
- 条件別に比較する。利用目的、利用頻度、利用環境などで分け、差があるかを見ます。
- 自由回答を分類する。内容を同じ基準で分類し、頻出する問題や満足理由を整理します。
- 改善項目を優先順位付けする。不満が多く、総合満足度への影響が大きいと考えられる項目から検討します。
- 同じ条件で再調査する。改善後に変化を比較する場合は、対象者や質問、評価尺度の違いを確認します。
調査結果を判断するときの注意点
ChatGPTの満足度調査では、回答者の偏りに注意が必要です。強い満足や不満を持つ人だけが回答している場合、利用者全体の傾向とは異なる結果になる可能性があります。
また、満足度は利用時点のモデル、機能、混雑状況、入力内容によって変わることがあります。調査結果には、少なくとも調査期間、対象者、利用目的、利用環境などを記録しておくと、後から比較しやすくなります。
- 回答者数が少ない場合は、結果を全利用者の傾向と断定しない
- 平均値だけで「満足度が高い」と判断しない
- 利用目的の違う回答者を一括して比較しない
- 自由回答の一部だけで全体の問題と判断しない
- 調査時点と現在の利用環境が同じとは限らない
- 個人情報や機密情報を分析・共有する範囲を限定する
ChatGPTの顧客満足度調査では、総合満足度、回答の品質、使いやすさ、目的達成度、継続利用意向を分けて分析することが基本です。さらに、利用目的や利用者の習熟度ごとに比較し、自由回答から不満の理由を確認すると、単なる数値では分からない改善点を把握できます。
