日本行動計量学会第43回大会(2015/09/02)
ラウンドテーブル・ディスカッション「ネット調査はどこまで『使える』ようになったのか」

ネット調査と「リサーチという経験のデザイン」

株式会社インサイト・ファクトリー

小野滋

ono@insightfactory.jp

自己紹介

マーケティング意思決定

integration
消費者調査手法の開発に取り組んでいます

購買データ

ソーシャル
リスニング

消費者調査
データ

消費者2

ネット調査に対する視座

3

調査の2つの側面

調査対象者

目標母集団に照らして適切な調査対象者を、いかにして選択するか

調査方式

調査対象者から、どのように回答を集めるか4ネット調査の特徴についての議論
2000年代初頭からのネット調査普及を踏まえ、ネット調査の特質について多くの議論がなされてきた例)
大隅(2006): 多くのネット調査は以下のことが不透明：
調査対象者として誰をどのように捕捉し集めたのか（登録者集団の集め方）•
集めた調査対象者は、一体誰を（何を）代表しているのか（登録者集団の構成と代表性）•
登録者集団が分かったとして、調査対象者をどのように選び、どのように行った調査か（計画標本と回収標本の関係）•調査の質の十分な議論がなされたか、インターネットを使うことで生じる従来型調査とは異なる調査誤差をどう評価するのか。
『調査としての正確な基礎情報の記載や開示が皆無に近く調査方法論として科学的なアプローチが可能であるかが見えないのが現在のネット調査である。』•本多(2006): ネット調査の特質について、抽出バイアスと測定誤差の２側面から概観
長崎(2008): これまでに指摘されたネット調査の主要な問題点
••
•

•
•

インターネット・ユーザーのみを対象としていること
公募モニターに対する調査であること
いいかげんな回答を行う対象者が存在していることなりすましをするモニターや多重登録をするモニターがいること
従来の調査との差異が明確でないこと(調査対象の違い、記入方式の違い)
5

<ネット調査の特徴についての議論>の特徴

調査対象者

これまでの標本と、公募型モニターパネルから抽出した標本はどのようにちがうか？

調査方式

他の調査方式と比べて、誤差はどのようにちがうか？

ネット調査への視座：「ネット調査はこれまでの調査に代わりうるか？」6

<ネット調査の特徴についての議論>の特徴あり得べきもうひとつの視座：「ネット調査は調査の可能性をどのように拡張するか？」

調査対象者例) 新しいタイプの対象母集団
ブランド・コミュニティ・リサーチ

調査方式(本報告の焦点)7

調査方式としてのネット調査：その可能性

8

調査方式としてのネット調査：その特徴

分散性

オンライン性

回答行動が時間・空間上に広く分散して発生する

回答行動をリアルタイムで把握できる

郵送自記式
ネット調査
電話インタビュー9分散性が切り拓いた可能性

デルファイ法

多様な対象者に調査を反復。結果をそのたびにフィードバックする
知識集約の手法として広く用いられている(科学技術動向研究センター,2010)10

オンライン性が切り拓いた可能性


相互作用的サーヴェイ(Piazza, Sniderman & Tetlcok, 1989)

例： 反論テクニック

政策・価値観に対する支持/不支持を聴取。回答に対して反論を提示し再聴取

人種間平等に対する態度の研究に活用
白人の対象者に対して、合衆国政府は黒人を助けるプログラムへの支出を増やすべきだ、と考える人がいます。また、黒人は自分たちだけでどうにかすべきだと考える人もいます。あなたはどちらが正しいと思いますか？
支出を増やすべきだ

政府が黒人を助けるということが、黒人がただ黒人だというだけの理由で特別な扱いを受けるということを意味するとしても、やはりあなたはそう思いますか？ それとも意見を変えますか？

支出を増やすべきでない

その結果、黒人は引き続き貧しいままであり、白人よりも職を失いやすいままであるとしても、やはりあなたはそう思いますか？それとも意見を変えますか？

11オンライン性が切り拓いた新しい可能性「黒人を助けるプログラムへの支出」

最初に賛成
57%

最初に反対
43%

「大学入試でのアファーマティブ・アクション」
最初に
賛成
27%

17%

反対に変化
52%

最初に反対
73%

23%

賛成に変化
40%

現実の政治行動の基盤となるのは、むしろ圧力下(反論後)の態度では？
12

分散的オンライン性は、調査のどのような可能性を切り拓くか？
分散性オンライン性

回答行動が時間・空間上に広く分散して発生する回答行動をリアルタイムで把握できる

郵送自記式
ネット調査
電話インタビュー?
13

例1. 市場メカニズム
予測市場


未来の出来事によって価値が決まる仮想的な証券を取引する市場
参加者の知識を反映した動的な予測を可能にする

1998年頃から研究が急増 (Tziralis & Tatsiopoulos, 2007)
代表的な事例
選挙予測 … Iowa Electronic Market (IEM); Shuugi.in (現存しない)
市場予測 … Hollywood Stock Exchange (HSX)

14

例1. 市場メカニズム

Hollywood Stock Exchange15例1. 市場メカニズム


さまざまな予測課題で成功をおさめている

Hollywood Stock Exchangeによる映画の興収予測 (Wolfers & Zitzewitz, 2004)
16

例1. 市場メカニズム

各参加者の知識を反映した動的な予測が可能

Tradesports.comによるサダム・フセイン失脚予測 (Wolfers & Zitzewitz, 2004)17

例1. 市場メカニズム
選好市場

Dahan, Kim, Poggio, & Chan (2011)

製品コンセプト評価のための仮想市場
1. “株”とお金のポートフォリオを受け取る
株は製品コンセプトに対応している

2. 製品コンセプトを提示される
3. “株”の取引市場に参加する
非常に短期間 (1時間程度)

4. インセンティブを受け取る
取引の成績に応じたインセンティブ
現実の出来事とは無関係

18

例1. 市場メカニズム

株価は何を表すか？



当該コンセプトに対する対象者自身の評価 ＆ ほかの人の選好についての評価
株の均衡価格はすべての対象者の選好を反映する



架空店舗における売上を正確に予測19

例2. 回答という行為の社会化
アイデア･バルーン

弊社開発事例 (小野, 2014a)

オンライン調査のための自由回答聴取手法
多様な意見・視点を収集
製品開発初期のアイデア開発、製品･サービスのユーザ経験収集などの場面での利用を想定
青空をふわふわと流れていく
バルーンを、マウスで捕まえてカゴにいれる

共同開発：株式会社マーシュ20

例2. 回答という行為の社会化
通常の自由回答聴取

自由回答画面

アイデア・バルーン
自由回答画面Question:Question:

AnswerAnswer

アイデア・バルーン画面

ゲーム的な画面で、他の人の回答を分類

21

例2. 回答という行為の社会化

実査終了の時点で、回答の分類と、関係性の分析が可能

円は個々の参加者の自由回答。
数字と色は、自由回答の内容に基づいて行った分類を示す。
アイデア・バルーンによってアフターコーディングを再現できることがわかる。
22

例2. 回答という行為の社会化
回答はより豊かになる

文字数平均



35
30
25
20
質問1
15

質問2

10
50
通常の自由回答

アイデア・バルーン

回答の文字数平均23例2. 回答という行為の社会化
通常の自由回答聴取

自由回答画面Question:

Answer

アイデア・バルーン
自由回答画面Question:

Answer

誰が読むの？
誰が読むの？
アイデア・バルーン画面

さあ？

私とおなじような他の人が私の回答を読む！

24

例3. 集合知の創出
アイデア・エボリューション

弊社開発事例 (小野, 2014b)共同開発：株式会社マーシュ
25

例3. 集合知の創出
通常の自由回答聴取

アイデア・エボリューション

自由回答画面

自由回答画面1

Question:

Question:

AnswerAnswer

アイデア・エボリューション画面

他の人の回答を評価
自由回答画面2

全く同じ質問に再度回答
Answer「最初に書いてくださったアイデアのままでも、全く新しいアイデアにしていただいても結構です。」
26

例3. 集合知の創出ある参加者の聴取フロー以降の参加者の聴取フロー

自由回答画面1

自由回答画面1

Question:

アイデア1

アイデア・エボリューション画面

他の人の回答を評価

自由回答画面2

全く同じ質問に再度回答

アイデア2

Question:

最適化アルゴリズム
 一定以上の語数を持つ回答のみを提示する(無意味な回答は提示しない)
 評価が高い回答(有望回答)は、提示回数を多めにする
 同一の参加者に、複数の類似した回答は提示しない (入力直後に形態素解析を行い、過去回答との類似性を測定)

アイデア1

アイデア・エボリューション画面

他の人の回答を評価

自由回答画面2

全く同じ質問に再度回答

アイデア2

27

例3. 集合知の創出


課題: 「こんな自販機があったらいいな」
アイデア1

アイデア2

ソフトクリームの自販機。
いろいろなテイストがあり、自分の好みの味をチョイスできる。ミックスでも良いし、いろいろな味を混ぜ込んでも良い。
最後に自販機から、自動で自分のチョイスしたフレーバーのソフトクリームが出てくる。

フルーツジュースの自販機。
色々な果物の中から自分の好きな果物を選び、自分の食べたいミックスのフルーツジュースができる。

「いいね」 18.2%「いいね」 33.3%

他の人の回答この人の評価

評価者数

いいね%

野菜サラダとかカットフルーツなど手をくわえないですぐにたべられるものがあったらいいなと思います。都会にはもうあるのかもしれませんが・・・

511.18

食中毒などの心配もあるのでカットフルーツまたは、個包装のフルーツなどならあってもいいと思います。

511.27

フルーツセットの自動販売機。それぞれに切り、皮をむいた物のセット（開ければすぐ食べれる）
最近は若者の間でフルーツ離れをしていると聞きます。
学校の帰り、通勤の帰り道などにあると買ってすぐに食べれるので便利だと思います。
食べごろのフルーツで自動販売機なので適度に冷えていていいと思うのですが。

511.1828例3. 集合知の創出

アイデア1よりアイデア2 のほうが、評価の高いアイデアとなりやすい

p<.10

29

例3. 集合知の創出


調査の進行に伴い、アイデア2の評価が高くなる

30

例3. 集合知の創出

アイデア・エボリューションを通じて、通常の自由記述聴取に比べ、評価の高い、優れたアイデアが生成される
参加者間相互作用に伴い、より優れたアイデアが生成される (集合知の創出)

集合知
アイデア2
アイデア1
アイデア2
アイデア1
アイデア2
アイデア1
アイデア2
アイデア1

31

リサーチという経験のデザイン

32

手法開発への視座

ネット調査への視座：調査手法開発への視座：「ネット調査はこれまでの調査に代わりうるか？」

リサーチのデザイン
対象母集団の真の特性への接近「ネット調査は調査の可能性をどのように拡張するか？」

リサーチという経験のデザイン調査から得られる価値の拡張

33

リサーチという経験のデザイン
調査手法開発の取り組みを通じて浮かび上がった、私たちの新しい枠組み情報集約をデザインする相互作用をデザインする

rXD

リサーチという経験のデザイン

回答状況をデザインする
小野 (2014a)
34

リサーチという経験のデザイン
階段

階段のデザインリサーチ

リサーチのデザイン

ユーザ

階段

階段という経験のデザイン

参加者

リサーチ

リサーチという経験のデザイン

rXD
35

まとめ

36

まとめ
 ネット調査への視座「ネット調査は従来の調査に代わりうるか」と問うだけではなく、「ネット調査は調査の可能性をどのように拡げるか」と問おう！

 調査方式としてのネット調査の可能性

キーワードは「分散的オンライン性」 ！

 調査手法開発への視座「リサーチのデザイン」から「リサーチという経験のデザイン」へ

37

ご清聴ありがとうございました
引用文献
Dahan, E., Kim, A.J., Lo, A.W., Poggio, T., & Chan, N. (2011) Securities Trading of Concepts (STOC).
Journal of Marketing Research, 48(3), 497-517.
Tziralis, G., & Tatsiopoulos, I. (2007) Prediction markets: An extended literature review. Journal ofPrediction Markets, 1, 75-91.
Wolfers, J., & Zitzewitz, E. (2004) Prediction Markets. Journal of Economic Perspectives. 18(2), 107-126.
Piazza, T., Sniderman, P.M., & Tetlcok, P. (1989) Analysis of the dynamics of political reasoning: A
general-purpose computer-assisted methodology. Political Analysis, 1(1), 99-119.
大隅昇 (2006) インターネット調査の抱える課題と今後の展開. ESTRELA, 143.
小野滋(2014a) リサーチという経験のデザイン. 朝野煕彦(編)「ビッグデータの使い方・活かし方―マーケティン
グにおける活用事例」, 東京図書.
小野滋 (2014b) Web調査による集合知創出とアイデア開発支援. 日本行動計量学会第42回大会, 2014.09
科学技術動向センター(2010) 将来社会を支える科学技術の予測調査 第９回デルファイ調査. NISTEP REPORT
140. 文部科学省科学技術政策研究所.
長崎貴裕 (2008) インターネット調査の歴史とその活用. 情報の科学と技術, 58(6), 295-300.
本多則惠 (2006) インターネット調査・モニター調査の特質. 日本労働研究雑誌, 551, 32-41, 2-11.

38