ユーザーテスト実施手順書 01

ユーザーリサーチの進め方

202４年３月
デジタルサービス局
TOKYO METROPOLITAN GOVERNMENT目次
１

ユーザーリサーチとは

３

定性調査についてユーザーリサーチとは・・・・・・・・・・・４

定性調査の実施方法・・・・・・・・・・・・・・18

ユーザーリサーチの重要性・・・・・・・・・５

定性調査での質問のポイント・・・・・・・・・・19

デジタル１０か条・・・・・・・・・・・・・６

定性調査の結果分析・・・・・・・・・・・・・・21

ユーザーリサーチを実施することのメリット・７
ユーザーリサーチの実施時期・・・・・・・・８

４

ユーザーリサーチの種類・・・・・・・・・・９２

定量調査について定量調査の実施方法・・・・・・・・・・・・11

テスター
テスターについて・・・・・・・・・・・・・・・23

５

サービスリリース後のユーザーリサーチ
サービスリリース後のユーザーリサーチについて・25

定量調査での質問のポイント・・・・・・・・12
定量調査の結果分析・・・・・・・・・・・・13（参考）定量データの活用方法・・・・・・・14

2

１

ユーザーリサーチとはユーザーリサーチとは

ユーザーリサーチとは、定量調査や定性調査を用いてサービス利用者の 潜在的なニーズ や 真の課題 を抽出し、最適な解決策 を導くための活動です。ユーザーが何に困っていて、何を求めているのかを具体的に洗い出し、課題を見つけ出すことが重要です。

幅広い属性のテスター確保や専門的な分析ができるため、ユーザーリサーチは事業者へ委託し、実際のサービス利用者への定量・定性調査を行うのが望ましいですが、職員・家族など身近な人にヒアリングをする方法などでも実施できます。事業の規模やスケジュールに応じて、それぞれに合った方法で課題を深堀りしていきましょう。

4ユーザーリサーチの重要性
私たちが取り組む事業では、サービス利用者自身がはっきりと自覚していないニーズや課題の解決に取り組まなければならないことがしばしばあります。ユーザーリサーチを実施することで、表面的なニーズに応える解決策だけではなく、潜在的なニーズや課題にも応えられる解決策を導き出すことが可能となります。

休暇申請検索休暇申請時に必要な書類-------------------------------------------------------------------------------------------2023/2/20

直接的なニーズや課題ニーズに応える解決策

 このWebページの検索機能が使いにくい こういう条件で絞り込みができればいいのにな

絞り込み条件を追加しよう

ユーザーリサーチで深掘り解決策にギャップ

潜在的なニーズや真の課題

潜在的なニーズに応える解決策

01_年次有給休暇の申請-------------------------------------------------------------------------------------------2024/01/01

このWebページは古い順に表示されて使いにくいな

絞り込み作業が面倒人によく見られているコンテンツを優先的に表示してほしいな アクセス数の多いコンテンツを上位に表示しよう 行動履歴を元に検索結果をフィルタリング
しよう

5デジタル10か条”価値観”（＝行動規範）と”作り方”（＝ガイドライン）の２つを共有して推進することで、目指すべきサービス水準や品質管理を一定化し、都民誰しもが”使いやすく、満足度の高い”デジタルサービスの実現を目指します。
デジタル10か条が掲げる行動規範を実践するためにもユーザーテストの実施が不可欠です。
顧客視点でデザインしよう

都民と共創しよう

つねに見直しチャレンジし続けよう6ユーザーリサーチを実施することのメリット

 ユーザーリサーチを行い、ユーザーの声をサービスに反映させることで満足度を向上させることができます。

 事前のリサーチがしっかりと行われていれば、その後の改修等の手戻りが少なくなり、結果的に時間・コストの削減へつなげることが可能となります。

 ユーザーリサーチで得られた回答結果を集計・分析することで、サービスキャンバスの利用者エリアを記載することができます。

利用者が望むことや困りごと、嬉しさについてリサーチに基づく
事実で深堀りすることで、利用者が求める価値に近づくことができます。
7ユーザーリサーチの実施時期
ユーザーリサーチは、利用者に満足してもらうためのサービス企画の基盤です。そのため、要件定義よりも前の企画段階でユーザーリサーチを実施し、サービスの合理性の確認やリスク整理をすることで、要件定義時の負担軽減や満足度の高いサービスの企画につながります。
サービスキャンバス
作成

企画

要件定義・調達

設計
開発

仮説検討

サービス立案

ユーザーリサーチ

要件定義

仕様書作成

基本設計

詳細設計

プロトタイピング

テスト・
改善

リリース

ユーザビリティテスト

8

ユーザーリサーチの種類
ユーザーリサーチには、 定量調査 と 定性調査 の2種類の調査があります。
理想は、定量調査と定性調査の2種類を用いてユーザーリサーチを行うことですが、スケジュール上等の制約でどちらか一方のみの場合は、直接テスターに対し質問の深堀りができる定性調査（インタビュー）を実施するようにしましょう。

定量調査と定性調査
 定量調査 ⇒ 全体の意見を知る
数字で表せる客観的なデータ情報を得ることを目的とし、その情報を用いて特定の現象や問題を分析する調査です。
定量調査では統計的な分析によって傾向や関係性を明らかにすることが可能であり、結果を数値化することで客観的な判断や比較が可能となります。
（アンケート/アクセス解析/ABテスト など）

 定性調査 ⇒ 気づきを得る
ユーザーの言葉や行動といった、数値では表せない主観的な情報や意見を得ることを目的とし、その情報を用いて「感情」や「行動の理由」等を整理・分析するための調査です。
人々の行動や意識の背後にある理由、動機を明らかにするために使用されます。
（ユーザーインタビュー/ユーザビリティテスト/専門家によるユーザビリティ評価 など）
9２

定量調査について

定量調査の実施方法
定量調査の実施に当たっては、下記のポイントを確認しながら準備を進めていきましょう。
１

目的を定め集めたい情報を整理する

 調査の目的、事業の内容、目標、課題認識など必要情報を整理します 仮説を立て、集めたい情報を整理します２

リサーチ手法を決める

 ユーザー層や回収したい情報によりネットリサーチや郵送調査など調査方法を判断します 調査をリサーチ会社へ依頼するのか、職員で実施するのかを決定します
職員で調査を実施する場合は、アンケート作成ツールは何を使用するのかなどを決めましょう３

ユーザーリサーチを設計する
調査規模

テスター選定質問量及び回答スケジュール設定

回答者に偏りがでないよう必要なサンプル数には配慮します
詳細はP23参照※ 配信数などを考慮する必要があるため、有効回答数が何件欲しいのか明確にしておきましょう
自分たちが想定したターゲットユーザー層が正しいのかどうかも調査できるよう、幅広くテスターを選定し調査します

テスターの負担とならないよう適切な質問量と回答期間を設定します

質問項目作成想定課題や新規サービスに関わることを軸にした質問を設定します
質問する順番は、「過去⇒未来」「簡単⇒複雑」など自然な流れで回答できるよう作成します

回答方式の選択

単一回答・複数回答・自由回答・制限付き回答などから最適な回答方式を選択します11

定量調査での質問のポイントポイント 質問量は15分程で回答できるボリュームにしましょう 回答期間は1週間～2週間に設定しましょう（長すぎても回答数は期待できません）

 段階評価の質問項目はポジティブな聞き方に統一し、回答の選択肢も汎用的な内容にし、全ての質問で統一をしましょう（例：「5 とてもそう思う～1 全くそう思わない」など）

 ネガティブな値を回答した際の理由の聞き方は、ポジティブな聞き方にしましょう（例：「どうすれば改善できると思いますか？」「もっと良いサービスにするためには何が必要ですか？」など）

定量調査・定性調査

共通のポイント １つの質問に対して複数の確認事項を入れない
 誘導するような質問設定をしない(例：〇「優先順位を考えるとき重要視しているものは何ですか？」×「業務の優先順位を考えるとき、所要時間が重要だと思いますがいかがでしょうか？」） 最初から回答をストレートに求めない
 なぜ？など威圧感（追及されている感）を感じさせる聞き方をしない

12

定量調査の結果分析
以下の手法を参考に、リサーチ結果を整理しましょう。
データの整理
回答データをエクセル等に入力し、必要な情報を整理します
質問ごとにデータを分類し、集計のための準備をします集計と統計処理
質問ごとに回答の頻度や割合を集計し、グラフや表にまとめます
また、クロス集計や相関分析などの統計手法を用いて、データの関連性や傾向を分析することもありますデータの可視化グラフやチャートを活用し、回答の分布や比較を行います
データを可視化することで傾向やパターンを把握しやすくし、データ理解のサポートが可能となりますデータを読み解く
回答データから得られた情報をもとに、調査の目的や仮説に対する結論を導き出しますレポート作成
分析結果をまとめ、レポートを作成します
分析の目的や結論、洞察を明確に伝えるために、グラフや表、文章を適切に組み合わせましょう13

（参考）定量データの活用方法
手持ちの定量データを活用して、紹介事例を参考に下記１及び２を実践してみましょう。
１ 数字で表せる合理的な根拠や情報をまとめる（数的根拠）

２ データから仮説を立て、仮説の確認ができるインタビュー対象者を定める（ターゲット把握）
参考事例（注：参考事例の事業は架空のものです）「運動不足の改善や栄養バランスの取れた食生活を紹介するアプリ」 をリリースする際の事例を参考に、データをまとめてみましょう。
事業として重要な（目指したい）こと

 健康増進のために運動や栄養バランスの取れた食生活を継続的に行ってもらえるようにしたい 〇年後に週に２回以上運動をしている人を５割以上にしたい 〇年後に健康寿命が〇歳延びている14

（参考）定量データの活用方法
１ データを整理し、仮説を立ててみよう（架空データ）① ○○病院研究データ
・運動不足や乱れた食生活になってしまっているのは、20代～50代が多い② ××大学論文データ
・栄養バランスの取れた食生活と適度な運動が健康管理には重要だが、半年以上継続して取り組めている割合は10％③ 民間の統計調査
・20代～50代の各年代の80%が月に1回以下しか運動をしない・幅広い年代で手軽に利用できるアプリで家計簿や予定を管理している④ 運動や食事の管理のために都民が求めているサービスの種類
・アプリ 67％

仮啓発ＨＰ 11％

運動施設の整備 8%

その他 14%

説
アプリで日々の運動や食事の記録をつけ、カロリーの消費量や摂取量の可視化をするとともに、手軽にできる運動や簡単に作れる栄養バランスの取れた食事メニューを案内することにより、運動習慣の定着や健康寿命の延伸が見込めるのでは？
15

（参考）定量データの活用方法

２ ターゲット把握・インタビュー対象者⇒継続的に「運動」や「バランスの取れた食生活」を実践できていない人（20代～50代）
ポイント
継続的に運動・バランスの取れた食生活を続けることができない理由や取組を続けるために欲しかったものなどを深堀りすることで、継続させるためのヒントを得ることができます。

このアプリの事例では、数的根拠（前ページ：データ①②③④）が揃っており、データをもとに仮説立てができ、ターゲット把握や提供者側の観点（目指したいこと）も明確になっています。定量データは、このような視点で情報整理をしていきましょう。

16

３

定性調査について

定性調査の実施方法
定性調査の実施に当たっては、下記のポイントを確認しながら準備を進めていきましょう。
１

目的を定め仮説を立てる

 事業の内容、ビジョン、目標、課題認識などを整理します ターゲットとなるユーザーと、解決したい課題や実現したいことを明確化し、リサーチの目的を定め、仮説を立てます２

リサーチ手法を決める

 目的やテスターに合せて最適な形式を選びます（１対１・グループインタビューなど）

３

ユーザーリサーチを設計する
実施人数

属性ごとに3～5名程度※詳細はP23参照

ターゲット選定

事業概要や計画、仮説を基にターゲットを確認した上でテスターを選定します

所要時間及び回答スケジュール設定

テスターの負担とならないよう適切な質問量と時間を設定します

リサーチ実施体制

２名以上（進行役と記録者）

質問項目
インタビュー内容作成※集めるテスターの属性により開始時間も考慮する（例：テスターが社会人の場合、定時後に実施できる時間設定をするなど）・質問は明確で具体的なものにし、対象者が自由に意見を述べられるような質問を心がけましょう※「はい・いいえ」で答えられる質問は控え、「どれくらい・どのように」などの質問をすることで、テスターの本心をより導き出せます・テスターに何か作業をしてもらう場合は、その操作（タスク）も考えておきましょう18

定性調査での質問のポイント
ポイント
 Yes／Noで回答できる質問はしない（例：〇「このサイトについて感じたことを教えてください」×「このサイトは使いやすかったですか？」など）

 改善点などを見つけたくてもネガティブな聞き方はしない（例：〇「申請機能に関して感じたことはありますか？」×「申請機能で使いづらかった箇所はありますか？」など）

 テスターの回答の中で気になる箇所、キーになる回答は必ず深堀りする
 テスターのネガティブな意見に対して、説明や補足をしない テスターの考えを決めつけてインタビューをしない（例：〇「操作してみてどうでしたか？」×「操作は少し難しかったと思いますが、特にどこが難しかったでしょうか？ 」など）

定量調査・定性調査

共通のポイント １つの質問に対して複数の確認事項を入れない
 誘導するような質問設定をしない(例：〇「優先順位を考えるとき重要視しているものは何ですか？」×「業務の優先順位を考えるとき、所要時間が重要だと思いますがいかがでしょうか？」 最初から回答をストレートに求めない
 なぜ？など威圧感（追及されている感）を感じさせる聞き方をしない19

定性調査での質問のポイント（実際のサービスが操作可能な場合）サービスを操作しながら定性調査を行う場合は、P19に記載したポイント以外にも下記の点にも注意をし、調査を実施しましょう。
ポイント サービスを理解してそれを基に操作（タスク）・質問を設定する⇒質問設計時に正しい操作がわからないと、テスターが困りそうな箇所が不明なため、聞きたいことを聞くことができません
必ずご自身でサービスを操作してから質問設計を行ってください テスターが操作に戸惑っていた箇所は必ず質問する（例：ユーザー登録時に何度もログイン名やパスワード条件が不適でエラーが発生していた⇒質問することで、パスワード条件等がわかりづらいのか否かを確認し課題を見つけられる）

 テスターにサービスの直接的な改善策を聞かない⇒改善策を考えるのはテスターではありません。
テスターからの意見は参考とし、受託者と連携した上で改善策を立案するようにしましょう20

定性調査の結果分析
定性調査の分析
以下点を念頭に置いて、リサーチ結果を整理しましょう。
 インタビュー結果を個人の主観や偏見に左右されず、公平かつ客観的に分析することが重要。
（熱量ある人=正しい意見とは限らないため、テスターの発言全てが正しいと思わないことも大切） 共通のテーマやパターンを見つける。
（類似した意見が複数回出てくる場合、重要な課題である可能性がある）
 特定のテーマに関する意見の頻度を計算することで、傾向や優先順位を把握する。
 結果から浮かび上がった課題や改善点を明確にし、それに基づいて具体的な対策や施策を立案することが重要。
まとめ方の例〇：ポジティブな意見 ×：ネガティブな意見：同意見〇 写真で食べたものを共有できるのは手軽で使いやすい。

〇

自動でカロリー計算してくれるのは助かる。

〇 写真からカロリー計算をしてくれるのも簡単でよい。

×

運動の時間確保が難しいので、家事や育児をしながらできる運動を紹介してほしい。

〇

おすすめの食材通知は足りない栄養素が分かりやすい×

これまで様々なダイエットを試したが続かない。

× プッシュ通知で運動促進をしてくれるのは良いが、40代 独身男性
平日は仕事が遅く外食やコンビニ飯が多いできるタイミングとできないタイミングがあると思う
ので、通知の時間設定などできるとよい。
× 自炊をしないので、食材のおすすめを通知されてもなかなかそれを食べるのは難しい。

40代 専業主婦
未就学児童が1人
平日はワンオペ21

４テスターテスターについて原則

基本的にサービスを利用するユーザーにテスターとなってもらいます。都民向けのサービスは原則として都民（またはユーザーとなりえる職員等）をテスターとします。
※ 職員で代替する場合は、なるべく別部署のサービスの利用者となりえる方へ依頼するようにしましょう

定量調査

定性調査

調査結果に代表性が確保できるレベルである、「気づき」を探るための調査のため、属性ごとに1セル50名以上の回答を回収するのが望ましい。

3～5名程度に実施するのが望ましい。

※セルとは特定の属性や特徴を持つ人々のグループのこと（例）30代×男性＝セル①・40代×女性＝セル②など※属性や特徴を持つ人々のグループが単一もしくは少ない場合でも、最低400名以上※１の回答を回収するようにしましょう。

【参考】

5名のテスターがいれば85％のUIの改善点が発見できると言われております。事業ターゲットが特定の属性に限定されている場合は、５名程度を目安に調査をしてみましょう。

※１ 統計学上許容誤差5%・信頼度95%とした場合の必要サンプル数
参照：総務省統計局（https://www.stat.go.jp/naruhodo/15_episode/toukeigaku/taishosha.html）

23

５

サービスリリース後のユーザーリサーチ

サービスリリース後のユーザーリサーチについて常に見直し改善し続けよう
ユーザーリサーチをしたからといって100％完璧なサービスがリリースできるわけではありません。
リリース後もユーザーの声を聞き、改善をし続けることでQOS向上につながります。
リリース後のユーザー意見の取り方

サービスリリース後のユーザーリサーチ ユーザーレビューの取得

定量調査 ⇒ 総合的な満足度を調べることが可能。

 NPS（ネットプロモータースコア）による評価

ユーザビリティテストやインタビュー⇒ ユーザビリティに問題がある場合などに実施

 アクセス解析
NPS®（ネット・プロモーター・スコア）
11段階評価で友人・知人にそのサービス等を勧める可能性を問い、数値化するもの
02

批判者
3
4

5

推奨者の割合－批判者の割合

1

6

中立者
7
8＝NPS

（参考）
QRコード決済部門 最高値:-24.5pt（平均:-38.2pt）
クレジットカード部門 最高値:-18.4pt（平均:-38.7pt）（出典） 「NPS®業界別ランキング＆アワード」（NTTコムオンライン）

推奨者
9 10

リリース後にユーザー意見を取る仕組みを開発段階からしっかりと検討し、現状把握を常に行うよう心掛けましょう

25

End Of File