日本心理学会第66回大会ワークショップ 2002/9/25「スピーチにおける感性情報-3-」

音声中の実発声時間･休止時間の配分量と話者の性格印象･自然性･わかりやすさ内田 照久
大学入試センター 研究開発部

背景と目的• 音声コミュニケーションを図るには，相手の人柄を推し量ることが必要• 音声から想起される印象には，どのような特徴があるのか• 音声の音響的な性質の操作によって，性格印象はどのように変容するのか

音声を介した印象形成のあり方を探るためには，音響的特徴と性格印象との関係の記述が必要

実験1 基本周波数(F0)を操作した音声から認知される話者のパーソナリティ印象¾ 被験者 国立大学１年生: 132名

聴力健常な者 [男性: 78名, 女性: 54名] (18-25才)¾ 音声刺激話者: 8名，原音声データ: 8文
日本語話者4名: 男声2名(M1，M2)，女声2名(F1，F2)
英語話者4名: 男声2名(MA，MB)，女声2名(FA，FB)
発話内容は4つのスクリプト，日本語と英語にした8文❍ 英会話教材CDより抽出: [S1J-S4J，S1E-S4E]❍ 被験者を2ブロックに分け， 原音声を4つずつ割当て

Fig. 1 原音声データ(F1-S2J)の基本周波数(F0)を変換した音声刺激の音声波形と基本周波数

40

外向性

情緒経験へ
不安定性 の開放性

勤勉性

協調性

3428

2216

E Japanese Speakers' Speech (M1, M2, F1, F2)
E English Speakers' Speech (MA, MB, FA, FB)

1040.00011.000
1 .5

12.000
1 .5

13.000
1 .5

14.0001 .51基本周波数の変換率 [log scale]Fig. 2 基本周波数(F0)変換音声に対する話者の性格印象評定

5.00
1 .5

実験2 発話速度とF0 を操作した音声から認知される話者のパーソナリティ印象¾ 被験者 大学１年生: 138名

[男性: 77名, 女性: 61名] (18-28才)¾ 音声刺激実験1の [M1-S1J，MA-S1E，F1-S2J，FA-S2E]¾ 実験音声刺激の作成

基本周波数: Low1(80%)，High1(125%)に変換
発話速度: Fast2(64%)，Fast1(80%)，Original(100%)，
Slow1(125%)，Slow2(156.25%) の5段階操作¾ 実験手続き 実験1と同様

40

外向性
34

情緒経験へ不安定性 の開放性

勤勉性

協調性

28

22

16

10

40.000

E F0 Converted Speech [High1-125%] (M1, MA, F1, FA)
E F0 Converted Speech [Low1 - 80%] (M1, MA, F1, FA)

11.000
1 .5

12.000
1 .5

13.0001 .5

14.000
1 .5

音声の時間伸縮率 [log scale]

15.00
1 .5

Fig. 4 話速変換音声に対する話者の性格印象評定[外向性: E][情緒不安定性: N]

内田 2001 日本心理学会
第 65 回大会発表論文集, 303.
(2001.11.9.)[経験への開放性: O][勤勉性: C]

[協調性: A]

Fig. 2 音声の基本周波数(F0)･発話速度(Speech Rate)と話者のパーソナリティ特性印象との関係モデル

音声の基本周波数･発話速度と話者の性格印象の関係モデル
1. 話者の性格印象は，特性ごとに独立して認知2. 基本周波数や発話速度が変化した場合，性格印象はいずれかの箇所にピークを持つ関数形で変化
3. 印象変化パターンは単一の関数形で近似でき，特性ごとの特徴は係数の値の取り方で表現可能
4. 総体的な印象の複雑な変化は 特性ごとに推定値を求め，組合せることで構造的なモデル化が可能
このモデルは，単文レベルでなく，一定の内容を持つ十分な長さの発話においても成り立つのか ？？？

【原音声データ(M1)の音声波形】
実音声区間 (21.700 Sec [70.6 %])…

0102030…

Time[Sec.]

休止区間 (9.026 Sec [29.4 %])【発話スクリプト(M1) [6.61 mora/Sec.] ∇: 休止区間(200ms 以上)】
それでは，∇1 今日の講義は以上です。∇2 それから，∇3 来週の試験についての注意事項を言っておきます。∇4 私の文化人類学の試験は，∇5 テキストの持ち込みは可としますが，∇6 ノートの持ち込みは認めません。∇7 また，∇8 携帯電話については，時計代わりであっても∇9 机の上に置いておくことは出来ません。∇10 電源を切って，かばんの中に入れてください。∇11 試験中に∇12 携帯電話が鳴ったら，∇13 他の人に大変迷惑になりますからね。

【可変時間長条件】

発話速度の一様変換後に休止時間を操作: 5 段階(q = 75%, 86.6%, 100%, 115.47%, 133.33%)

Fast Block (p = 75%)
休止: 0.5625 b

一様変換音声
Original Block (p = 100%)

休止: b

原音声
実音声時間 (a)Slow Block (p = 133.33%)

変換実音声時間 (pa)

休止時間 (b)休止: 1.7778 b

変換休止時間 (pqb)10

自然性の印象評定x【可変時間長条件】x
S: Fast Block
E: Original Block
G: Slow Block

7x[評定項目]
自然な
わかりやすいはっきりした間の取り方のよいぎこちない†
聞き取りにくい†話のリズムの悪い†4

音声刺激:(男声1,女声1)×2スクリプト†:逆転項目1

ƒ

1

1.5

休止区間の伸縮率 [log scale]1. 可変時間長条件と同様に休止時間を操作
2. 一様変換時間長の保持のため実音声時間を伸縮【固定時間長条件】
Fast Block (p = 75%)

実音声: 0.646 a (原音声 M1 の場合)

一様変換音声－実音声伸縮率の昇順で図示－

Original Block (p = 100%)
原音声
実音声時間 (a)Slow Block (p = 133.33%)

変換実音声時間 (p{a+(1-q)b})

休止時間 (b)実音声: 1.472 a (原音声 M1)

変換休止時間 (pqb)

10

早口感x

自然性x74【固定時間長条件】
S: Fast Block
E: Original Block
G: Slow Block

休止区間の伸長方向

lƒ

1



1

ƒ


1.5



1

実音声区間の伸縮率 [log scale]

1.5

10

情緒
経験へ
不安定性 の開放性

外向性

勤勉性

協調性

音声刺激:(男声1,女声1)×2スクリプト74【固定時間長条件】x
S: Fast Block
E: Original Block
G: Slow Block

休止区間の伸長方向

1
11.5

11.5

11.5

11.5

実音声区間の伸縮率 [log scale]

11.5

パラグラフ･レベルの連続音声での時間構造と自然性･性格印象
1. 実音声時間長の伸長･圧縮に伴って自然性低下
2. 性格印象の変化パターンには独自性
3. 連続音声においても，発話速度と性格印象との関係モデルは有効¾ 全ての休止区間を等価に扱うのは妥当か？
要check ⇒ 小森･長岡･中村 : 9/27(金) 3AM137

実験操作によらない現実の音声においてもここでの結果は成り立つのか ？？？

【日本語話し言葉コーパス】について¾日本語の大規模自発音声データベース《国語研・通信総研・東工大にて共同で構築中》¾話し言葉を対象とした音声認識･言語学的研究への貢献を目的¾学会発表講演 / 模擬講演を収録¾約700～800時間のモノローグを格納¾音声データの書き起こしテキスト、形態素情報・分節音情報・韻律情報などを付与

【日本語話し言葉コーパス】収録風景 日本行動計量学会 第 28 回大会にて(2000.10. 東京大学 教養学部 [駒場キャンパス])

講演音声に対する印象評定実験¾講演音声の収録時に印象評価を実施¾『話し方･声の印象』の評定語を2件法で評定⇒ 数量化III類により「講演の評価」の軸を抽出¾『講演の特徴』として[自発性] ，[発話速度]などの評定語について5件法で評定¾講演音声の書き起こしテキストから[モーラ数]，[ポーズ比]などの『音声特徴量』を算出¾講演音声の特徴と印象評定との関係について共分散構造分析を利用してモデルを構築
籠宮･槙･菊地･前川 (2001) 自発音声コーパスにおける印象評定とその要因
音響学会秋季講演論文集, 381-382.

音声特徴量印象の主観評定.51

発話量

知覚される
発話速度.23-.41-.20

講演の評価.22-.11

ポーズ-.11.06

笑い-.35.22.23.35発音の明瞭さ-.19.19

発話スタイル-.15

講演の自発性山住・籠宮・槙・前川 (2002) 自発音声コーパスにおける発話速度知覚と講演の評価との関係
日本心理学会第66回大会発表論文集, 478. [9/26(木) 感覚・知覚 2AM056]

音声の音響的特徴と認知的な印象
1. 単独発話音声に関して，音声の音響的な特徴と各種の認知的な主観印象との関係性が少しずつ徐々に明らかに
2. 現実のリアルな音声をターゲットとした研究を行う
ための環境も整いつつある

音声コミュニケーションの本質である対話状況ではいったい何が起こっているのか ？？？