PRI

Open Campus データとうまく付き合ってい～財務総研の研究・交流活動紹介～

くためには

財務総合政策研究所 総務研究部 財政経済計量分析室 研究官

升井 翼

20

連載
PRI OpenCampus

今月のPRI Open Campusでは、本年5月に財務総合時間より少ない」の割合が増加し、右の「1時間以上、政策研究所（以下、「財務総研」）から刊行されたリサー

2時間より少ない」と「1時間より少ない」の割合が減少

チ・ペーパー（RP）「法人企業景気予測調査の調査結果しています。しかし、2008～2017 年度の推移を見ると、の継続性の検証」について、どのような問題意識に基づ「4 時間以上」と「3時間以上、4 時間より少ない」の割いており、何を明らかにしようとしているのかを「ファ合はこの10 年で減少傾向にあり、「1時間以上、2時間よイナンス」の読者の方々に紹介します。ポイントは、統り少ない」と「1時間より少ない」の割合では逆に増加計をはじめとする「データ」が、どこまでその調査方法

傾向が読み取れます。2007 年度から2008 年度にかけによって影響を受けるのか、ということであり、調査方ての動きが、その後の推移から大きく外れているのです。

法が回答に及ぼす実際の事例を交えつつ紹介します。

2008 年度以降の動きは、SNS 等の普及によるメディアの多様化等によって生活スタイルに占めるテレビ視聴の１．データ（数字）だけ見ていてはわ
からないことがある

ウェイトが小さくなっていることから説明がつきそうですが、2007 年度から2008 年度の動きはなぜでしょうか。
小学 6 年生の興味関心があるテレビ番組などが多かった

図表 1は小学 6 年生のテレビ等の視聴時間を調査しのでしょうか。それとも、児童の生活様式が急に変わった結果です。2007～2008 年度の推移を見ると、100％たのでしょうか。このころの時代背景は…など、様々な積み上げグラフ左の「4 時間以上」と「3時間以上、4ことが頭に浮かびますが、決め手はなさそうです。

図表 1

小学 6 年生のテレビ等の視聴時間

普段（月～金曜日）、1 日当たりどれくらいの時間、テレビやビデオ・DVD を見たり、聞いたりしますか（勉強のためのテレビやビデオ・DVD を見る時間、テレビゲームをする時間は除く）
2017
2016
2015
2014
2013
2012
2010
2009
2008
2007
0％

20％
4 時間以上2 時間以上、3 時間より少ない
1 時間より少ない（出所）全国学力・学習状況調査から筆者作成

58

ファイナンス2023 Jun.

40％

60％

3 時間以上、4 時間より少ない
1 時間以上、2 時間より少ない
全くしない

80％

100％

PRI Open Campus ～財務総研の研究・交流活動紹介～

20

図表 2 テレビ等の視聴時間の回答選択肢

2007 年度

2008 年度〜（出所）全国学力・学習状況調査（2007、2008）

こうした調査方法による回答への影響については回「いったいどんな面白い番組が流行っていたのかと訝

答データを見るだけでは気付きにくく、上述の例のよられたが、原因はおそらく調査票の設計にある（土屋うに継続した調査において調査方法を変更した場合や2014）」というのが種明かしです。2007 年度の調査

予備調査等による検証を経ない限りはインパクトの軽票と 2008 年度以降の調査票を見比べてみると明らか

重や本当に影響が生じているのかどうかを含めて判断な違いがあります（図表 2）。

が困難です。しかし、データに向き合う際には、そのデータがどのように計測されたもので、どのような計な違いです。2007 年度の調査票では、1 番に「全く測上の傾向が生じうるのかについて考慮する必要があ

見たり、聞いたりしない」が置かれ、そのあと視聴時るのです。

間が短い順に選択肢が並んでいるのに対し、2008 年度以降では選択肢の並び順が真逆になっています。ひとつひとつの回答カテゴリは全く一緒ですので、並び

PRI OpenCampus

選択肢の並び順が異なっているというのが実は大き連載

実は、こうした結果が得られたことについては、

２．
「合計」を聞くか「分割」を聞くか順がどうであれ“正しい”選択肢が選ばれれば結果に本年 5 月に財務総研から刊行された RP「法人企業影響はないはずです。しかし、選択肢回答方式では、

景気予測調査の調査結果の継続性の検証」は前章の問最初に置かれた選択肢ほど選ばれやすい傾向があるこ

題意識に関連した研究です。この RP では質問方法ととは調査の分野では良く知られています（Krosnick

して「まとめて尋ねる（合計）」か「個別に尋ねる& Alwin 1987）。今回の調査に当てはめて考えると、（分割）」か、という質問の仕方の違いによって回答に2007 年度は比較的短い時間の選択肢が選ばれやすい

影響が生じるのかを検証したものと位置づけることが状況にあり、2008 年度以降は比較的長い時間の選択できます。まずは 2.1、2.2 で関連する文脈での先行肢が選ばれやすい状況にあったのです。そしてその傾研究を、続いて 2.3 で RP の概要をご紹介いたします。

向のとおりの結果が得られているというわけです。
上述の例は回答選択肢の順序が回答に影響を与えて

２.１

先行研究（1） 段階的な質問による数いるものですが、他にも質問文から受ける印象（林量の推定（Armstrong et al. 1975）1970） や 複 数 あ る 質 問 の 回 答 順 序（Schuman &この研究では、クイズのように正答がある問いにつPresser 1981、Herek & Capitanio 1999）、複数回

いて、回答として数量を推定してもらう調査を行って答 方 式 か 強 制 選 択 方 式 か（Smyth, Dillman,

います。その際に図表 3のように2 通りの質問票を用い

Christian & Stern 2006）、また調査票のレイアウトて、質問票 A では世帯数を直接質問しており（Directによる影響（Christian & Dillman 2004）など様々

version）、質問票 Bでは世帯数を算出するために分割さな要因が議論されています。

＊1。
れた2問を質問しています（Decomposed version）＊1） 回答した（人口÷平均世帯人数）で世帯数を計算する。
ファイナンス2023 Jun.

59

B では世帯数を算出するために分割された 2 問を質問しています（Decomposed version） 。
この研究では 1970 年代のアメリカについての質問がされていますが、ぜひ日本や身近なことに置き換えてその違いを考えてみてください。
図表 3 1970 年代のアメリカの世帯数を尋ねる 2 種類の質問票

図表 3 1970 年代のアメリカの世帯数を尋ねる 2 種類の質問票
質問票
質問票
質問票
質問票 B B
A A

Q1
1970 年のアメリカの人口は？

Q1

Q2

1970 年のアメリカの世帯数は？

1970 年のアメリカの平均世帯人
数は？
（出所）Armstrong, J. S., Denniston Jr, W. B., & Gordon, M. M.（1975）. The use of the decomposition principle in making judgments. Organizational（出所）Armstrong,
J. S., Denniston Jr, W. B., & Gordon, M. M. (1975). The use of the decomposition principle in
Behavior and Human Performance , 14（2）, P257-263. から筆者作成

making judgments. Organizational Behavior and Human Performance, 14(2), P257-263. から筆者作成

この研究では 1970 年代のアメリカについての質問が・1970年のアメリカの高校中退者数について（Dropouts）

されていますが、ぜひ日本や身近なことに置き換えて・1970 年のアメリカのポラロイドカラーフィルムの質問票 A より質問票 B の方では問題が小分けになっていて考えやすかったのではないでその違いを考えてみてください。

消費数について（Film）

しょうか。実際に 2 種類の調査票を用いた実験の結果も、質問を分割した調査票 B を使用

質問票 A より質問票 B の方では問題が小分けになっ・1969年のアメリカのタバコ生産量について（Tobacco）ていて考えやすかったのではないでしょうか。実際に・1972 年にフィラデルフィアで開催されたコンテス

した群の方が正解により近い回答が得られたと報告されています。この結果については、下

連載

記の他の質問内容、分割内容、分割数、質問の順序のバリエーションを加えて検証されてお2 種類の調査票を用いた実験の結果も、質問を分割しトへの応募数について（Contest）

り、いずれの場合においても細かく分割して聞く方が段階的に推定できることなどにより

PRI OpenCampus

た調査票 B を使用した群の方が正解により近い回答が得られたと報告されています。この結果については、
２.２
1 回答した（人口÷平均世帯人数）で世帯数を計算する。
下記の他の質問内容、分割内容、分割数、質問の順序

先行研究（2） 丁寧な想起（Sudman& Bradburn 1973）のバリエーションを加えて検証されており、いずれのもう 1 つの研究では、1 週間のうちに見かけた雑誌

場合においても細かく分割して聞く方が段階的に推定について、「どの雑誌を見かけましたか？」と直接質できることなどにより正確な値が推定できているよう問した場合（Unaided Recall）と、「これらの雑誌を

example, for all groups combined, 64% of the direct estimates for the Tobacco problem were off by a factor of ten or
more, while only 20% of the decomposed estimates for this problem
were off by such a degree. These results
見かけましたか？」と雑誌のリストを見せて質問した
support hypothesis H1 that use of the decomposition principle leads to more accurate estimates. There was' noevidence that accuracy was affected by a reward. Follow-up dis cussions with each group also led to mixed reactions
as to whether the reward had any effect and, if so, what would be the direction of the effect. In any event,decomposition led to significant improvements with or without the use of a reward.

です（図表 4）。

図表 4 2 種類の質問票による正確性の比較

TABLE 1
Median Accuracy Ratio: Decomposed vs. Direct Questions

QuestionGroup 1
Dropouts
Film
TobaccoGroup 2
Families
Dropouts
Film
TobaccoContestGroup 3
Families
Dropouts
Film
TobaccoContest(1)
Original rank

(2)
Direct version(n = 25)(3)
Decomposed version(n = 25)

Difference

2
3
4

5.3
21.1
103.2

2.2
2.1
2.1

3.1
190
101.1

1
2
3
4
5

1.3
5.4
10.2
18.0
831.3

1.3
2.3
7.0
7.4
147.8

0.0
3.1
3.2
10.6
683.5

1
2
3
4
5

1.4
5.9
5.1
9.0
351.0

1.2
6.0
2.7
5.7
184.7

0.2
0.1
2.4
3.3
166.3

The rankings of differences for Groups I and II were in perfect agreement with the hypothesis (see columns 1 and
4 in the table). While the number of questions for Group I was too small to allow for a test of statistical significance,
the rankings in Groups II and III were each significant at the .05 level (using Spearman Rank Correlation fromSiegel, 1956). Thus, the results also support H2--i.e., that the value of decomposition is greatest where the subject's
knowledge is poorest.
（出所）Armstrong, J. S., Denniston Jr, W. B., & Gordon, M. M.（1975）. The use of the decomposition principle inmaking judgments. Organizational Behavior
and Human
Performance , 14（2）, P257-263.
FURTHERRESEARCH

60

ファイナンス2023 Jun.

Further research would be useful in trying to better define how the decomposition should be carried out. For
example, does it help to use bounded questions? To what degree should the problem be decomposed? What role
does the scaling (units) of the answers have upon the results? Is it better to have the subject decompose the problem
in order to make better use of his own information? We did some exploratory work on this last question by

PRI Open Campus ～財務総研の研究・交流活動紹介～

場合（Aided Recall）を比較しています。
読者のみなさんにご想像いただきたいのですが、ま

２.３

20

RP「法人企業景気予測調査の調査結果の継続性の検証」

ず前者の質問方法ではどうでしょうか。何の補助もな

この RP では、2 つの先行研究等を踏まえ、法人企

く漠然と過去の行動等を思い出すことはそれなりに難

業景気予測調査の調査方法の変更の影響について検証

易度が高いのではないかと思われます。対して後者のを実施しています。具体的な変更点は、図表 6 のよう質問方法のように雑誌リストが提示されていると、想に 2019 年度から企業収益等に関する計数項目の記入

起がしやすくなっているはずです。

単位を前期、後期の 2 項目から年度の 1 項目に変更し実験の結果でも、リストを見せて質問をした方が回たものです。

答される雑誌数が多かったと報告しています（図表 5）。

年度の計数を記入する場合と半期ごとの計数を記入

記憶に対する調査に対しては、Omission error＊2 及びする場合では、半期ごとの予測を段階的に考えること、と呼ばれるエラーが作用するとあるいは丁寧に予測することにより年度の計数をまと考えられており、リスト形式で一つずつ判断させるよ

めて聞くのとは異なるのではないかという疑問が浮かうな丁寧な想起を促すと、Omission error が低減すんできます。この点について実際には事前に有識者等る一方で Telescoping error が増幅され、総合して回へ諮ったうえで調査項目変更を実施しており、影響は答レベルが増加すると考えられています。

軽微であろうことは予想されていましたが、変更してTelescoping error

＊3

図表 5

記録の有無、設問の構成、想起の補助による回答への効果

連載から実際に得られたデータを用いて検証を試みました。
検証方法としては、法人企業景気予測調査と母集団を利用し、法人企業景気予測調査の調査項目の記入単
位の変更前後で両統計による結果＊4 を比較し、変化が

PRI OpenCampus

名簿が共通している法人企業統計調査（年次別調査）生じているか確認しました。
図表 7 から、平均値及び分散では 2018 年度以前、
2019 年度以降ともほぼ一定の間隔を保っています。
企業ごとの両調査の計数についての相関係数＊5 については、全期にわたって一貫して非常に高い値となって（出所）Sudman, S., & Bradburn, N. M.（1973）. Effects of time and memory
factors on response in surveys. Journal of the American Statistical
Association , 68（344）, P805-815.

います。この結果から、調査方法の変更前後の調査期による違いは見られませんでした。
つまり、法人企業景気予測調査においては、調査方

図表 6 法人企業景気予測調査の調査項目の変更点（出所）法人企業景気予測調査から筆者作成＊2） 報告すべきイベント等の数え漏れにより回答レベルが減少する効果。
＊3） 報告すべきでないイベント（例えば、直近 1 週間の出来事の報告を求められたときの、2 週間以上前のイベント）を錯覚して報告することにより回答レ
ベルが増加する効果。
＊4） 法人企業景気予測調査では売上高等の当期の見通し、法人企業統計調査では売上高等の決算計数を利用した。
＊5） 両調査の計数の関連の強さを示し、値が 1 に近いほど関連が強く、連動していることを示す。法人企業景気予測調査では売上高等の見通しを回答しているため、法人企業統計の決算計数と原理的に一致するものではない。その意味では、各社の両計数についての相対的な位置関係を表す相関にて判断する方が変化をとらえるためにより適していると考えられる。
ファイナンス2023 Jun.

61

図表 7

法人企業景気予測調査と法人企業統計調査の売上高の推移（出所）法人企業景気予測調査、法人企業統計調査から筆者作成

連載
PRI OpenCampus法が変わったものの、そのことによって結果に影響をそのようなことが起こるか、という疑問に対する一つ与えたとはいえないというものでした。つまり調査結の答えとして、「Satisficing」と呼ばれる回答者心理果の時系列の推移をみるときに特別な操作なく統計のが考えられています。

継続性が保たれており、そのまま分析に用いることがSatisficingとはsatisfy（満足させる）とsuffice（十分できることが確認できたといえます。今回の結果は、である）の合成語であり、Simon（1957）によって心素人目には単なる杞憂、取り越し苦労ともみえます

理学等の文脈で「目的を達成するために十分な行為」

が、この研究の貢献として、異なる調査方法が採られを 指 す 用 語 と し て 使 わ れ ま し た。 こ の 考 え 方 がたときに回答に変化が生じるケースばかりではなく、

Krosnick & Alwin（1987）, Krosnick（1991）によっ変化が生じないケースを示すことができた点がありまて調査の文脈に援用され、「満足のいく回答を作成するす。ここから、どのような場合に両者が区別されるのために最小限の労力を費やすこと」と解釈されています。

か考えていきます。

なお、自計記入式質問紙についての回答の作成プロセス
は「認知・理解・検索・判断・表現＊6」の5ステップとさ３．Satisficing〜調査方法によって回答が変化する回答者心理
それでは、回答に変化が生じるケースと生じないケースの差異は何でしょうか。

れており（Dillman et al. 2014）、このステップを完遂させるのではなく一部または全部を省略することがすな
わちSatisficing 行動だと考えられます。例えば、全て同じ選択肢を選ぶ（Straight lining）、前に示された選択
肢を選ぶ（Primacy effect）などの回答行動が知られて調査方法によって回答が変化するということは、過います。このようなSatisficing 行動が採られると調査方去の同一の行動等について質問する場合でも、質問形法の変更等により回答が変化することがわかります。

式 A で聞いた場合と質問形式 B で聞いた場合の回答がSatisficing の起こりやすさには Task difficulty、異なる人が少なからず存在するということです。なぜAbility 及び Motivation＊7 が関係していて、下記の概＊6） 認知：どの質問に回答すればよいのか認識する。理解：何が問われているのか理解する。検索：記憶や記録等から適切な情報を引き出す。判断：問われていることと、引き出した情報を照らし合わせて回答を作成する。表現：要求されている形で回答を表現する。
＊7） Task difficulty：質問文や選択肢の解釈、記憶の検索、比較や尺度判断などの困難度。Ability：認知的レベル、特定のテーマ等への造詣などの回答者の能力。Motivation：回答者にとっての質問のテーマの重要度、調査の社会的価値、責任感などの調査に対する熱心さ。

62

ファイナンス2023 Jun.

PRI Open Campus ～財務総研の研究・交流活動紹介～

20

念的な式に表されるように、質問の Task difficulty が複雑な統計手法等に頼りすぎることは誤りを犯す恐れ高いほど、あるいは回答者の Ability 及び Motivation

があり、そのデータがどのように収集されたものであが低いほど Satisficing が起こりやすいとされています

るか、把握しておくことも重要なのです。

（Krosnick 1991）。

a（
1 Task difficulty）
p（Satisficing）＝×a（a（
2 Ability）
3 Motivation）
法人企業景気予測調査では、政府統計であることや調査対象が企業経営者であることなどから先に示した
Ability や Motivation が高く、Satisficing が起こりづらい特徴があると考えられます。一方、冒頭の全国学力・学習状況調査では、小学 6 年生を対象にしていることな
どからAbility や Motivation が比較的低かったのかもしれません。近年多くの調査で採用されているWeb 調査
等でも、回答者がポイントなどの報酬を得ることを主目
どからMotivation が低くSatisficing が起こりやすい環

４．おわりに
本稿では、調査方法のささいに思えるような違いで異なる結果が得られることがあるということ、そして、政府統計や Web 調査等の性質の違いによって影響の受けやすさに違いがあることを具体的な事例を通して紹介してきました。
これを踏まえて、データとうまく付き合っていくた
めには、調査実施者の立場からは、実際に調査を実施することになったときに、調査方法をどのように設計

PRI OpenCampus

境であることが考えられます（三浦・小林 2015）。

Armstrong, J. S., Denniston Jr, W. B., & Gordon, M. M.
（1975）. The use of the decomposition principle inmaking judgments. Organizational Behavior and Human
Performance , 14（2）, 257-263.
Christian, L. M., & Dillman, D. A.（2004）. The Influence ofGraphical and Symbolic Language Manipulations on
Responses to Self-Administrated Questions. Public
Opinion Quartery , 68（1）, 58-81.
Dillman, D. A., Smyth, J. D., & Christian, L. M.（2014）.
Internet, Phone, Mail, and Mixed-Mode Surveys：The
Tailored Design Method . New Jersey：John Wiley &Sons.
Herek, G. M., & Capitanio, J. P.（1999）. Sex differences in
how heterosexuals think about lesbians and gay men：
Evidence from survey context effects. Journal of Sex
Research , 36（4）, 348-360.
Krosnick, J. A., & Alwin, D. F.（1987）. An evaluation of a
cognitive theory of response-order effects in survey
measurement. Public Opinion Quarterly , 51（2）, 201219.
Krosnick, J. A.（1991）. Response strategies for copingwith the cognitive demands of attitude measures insurveys. Applied Cognitive Psychology , 5（3）, 213-236.
Schuman, H., & Presser, S.（1981）. Questions & Answers
in Attitude Surveys . Massachusetts：Academic Press.
Simon, H. A.（1957）. Models of Man; Social and Rational .
New Jersey：John Wiley & Sons.
Smyth, J. D., Dillman, D. A., Christian, L. M., & Stern, M.
J.（2006）. Comparing check-all and forced-choiceq u e s t i o n f o r m a t s i n w e b s u r v e y s . Public Opinion
Quarterly , 70（1）, 66-77.
Sudman, S., & Bradburn, N. M.（1973）. Effects of timeand memory factors on response in surveys. Journal of
the American Statistical Association , 68（344）, 805-815.

連載

的に日常的に数多くの調査に回答する傾向があることな参考文献
土屋隆裕（2014）. 事例に見る調査票の設計と回答者の回答行動.
マーケティング・リサーチャー , 125, 24-32.
林知己夫（1970）. 身近な社会. 統計数理研究所国民性調査委員会（編）『第 2 日本人の国民性』至誠堂, 75‒110.
三浦麻子・小林哲郎（2015）. オンライン調査モニタの Satisfice に関する実験的研究. 社会心理学研究, 31（1）, 1-12.

すればよいのか、知ろうとしているものがその方法で本当に得られているのか、という観点が重要であることがわかります。またデータユーザー（分析者）の立場からは、調査方法等によって結果に影響を生じうるということを念頭に置いたうえで、調査方法が結果に影響を与えていないかに気を配りながら結果を解釈することが求められます。結果の数値のみに着目し、データの内容や調査方法を吟味することなくいきなり

財務総合政策研究所

POLICY RESEARCH INSTITUTE, Ministry Of Finance, JAPAN

プロフィール
研究官

升井 翼
2013 年に北陸財務局に入局。2016 年から財務総合政策研究所へ出向し、統計の作成、財政の長期推計などに従事しています。また、在職中の 2023 年に修士号（データサイエンス）を取得しました。

過去の「PRI Open Campus」については、
財務総合政策研究所ホームページに掲載しています。
https://www.mof.go.jp/pri/research/special_report/index.html

ファイナンス2023 Jun.

63