小林聡研究室S073048竹谷雄太2011年2月9日
•目的･･パラ言語情報とは･･先行研究●実験方法･･実験で用いる音声･･声の大きさについて･･分析方法•実験結果•まとめ•今後の予定目的•声の高さ•長さ•大きさの変化から人間はどのような情報（パラ言語情報）を受け取るのかを調査･分析する。
3

音声に含まれる情報は、言語情報、パラ言語情報、非言語情報に三分される。本研究でのパラ言語情報は、話者が容易かつ動的に変更可能なパラ言語的特徴(声の高さ、強さ、長さ、大きさなど）により表現される情報（話者の感情、意図や心的態度が含まれる)のことをいう。話者4
.石井ら、“自然発話に現れる感動詞の発話スタイルと機能の分析”日本音響学会講演論文集(2008,9)  pp. 269-270 →多くの感動詞に共通した音響的特徴の機能があることに注目.高悬、“パチ曇鬪情報の認知における声の高さ及びその変化の影響”
島根大学卒業論文（2008） →「ええ」の声の高さやその変化から人間が受け取る印象●藤原、“「ええ」と「ああ」に対するパラ言語情報の認識におけるF0の影
響” 島根大学卒業論文(2009) →「ああ」の声の高さやその変化から人間が受け取る印象→異なる語彙により人間が受け取るパラ言語情報に差異が生じるかの調査[ええ]と「ああ」） .竹川“声の高さ及び長さによるパラ言語情報の認知への影響”島根大
学卒業論文(2010) →「ええ」の声の高さと長さの変化から人間が受け取る印象
●基準音声×3＋評価対象音声×1を1セットとし、1人の被験者に50セットを聞いてもらう。実験時間は1人あたり2時間程度。基準音声を基準に評価対象音声を聞いた際に受けた印象を28個の印象語について各々1(受け取れない)から5(はっきり受け取れる）の5段階で評価。 •被験者数は25名(大学生)。〇評価対象音声・・「え」の高さ・長さ・大きさを変えた「ええ」 (同じ高さ･長さ･大きさの場合もある)〇基準音声・・・前後の高さは一般男性の基本周波数120Hzの「ええ」前後の長さは1モーラ0.2秒、声の大きさは58.5dB 6
•印象語のリスト悲しみ無関心不満信頼驚き恐れ感心安堵慎み怒り好意中立落胆冷静同情喜び軽蔑満足疑問高揚肯定嫌悪不安強調苛立ち相槌自信あり自信なし7
•合成音声は「ええ」という2モーラ語○モーラとは日本語で一音(一拍)と感じる音声の単位•音声はフォルマント合成方式を用いたklattの合声器で作成した合成音声を使用○フォルマントは声道共振周波数で、母音の弁別は第一フォルマントと第二フォルマントによって行うことができる第１フォルマントと第２フォルマントを求める式F1= -0.565×F0+580.2 F2= 0.732×F0+1712.56
•先行研究では、声の高さ5パターン×音の長さ36パターンを組み合わせて180種類の音声を使用していた。 -音の高さ1オクターブ半幅で作成できるすべての音の中から5パターン。 -音の長さモーラ継続長「0.1s」、「0.13s」、「0.17s」、「0.23s」、 「0.3s」、「0.4s」を組み合わせた36パターン。 •今回はこの中から25パターンを選択し、大きさを変化させて被験者実験を行う。
9

Cluster Dendrogram
●今回使用する25パターンの音声(1: ｢0.1s｣,2: ｢0.13s｣,3: ｢0.17s｣,4: ｢0.23s｣,5: ｢0.3s｣,6: ｢0.4s｣,)
統計ソフト「R」を用いて25のクラスター間の有意差をMANOVAを行って確認> summary(data.manova,test="Wilks") Df Wilks approx F num Df音名672 24 0.1249 5.7514 den Df    Pr(>F) 32023    < 2.2e-16 *** Residuals 1775 Pr値が0.001より小さいので有意差がある。
12

•今回は声の大きさとして、 [52.5dB」、「55.5dB」、「58.5dB」、 「61.5dB」、「64.5dB」の5段階を使用した。最終的に実験に用いる音声は、 25(高さと長さ)×5(大きさ)=125種類とする。
13

●被験者25名の実験結果に対して、印象語の5段階での評価の平均をとった値を求める。 ●平均した評価を基に回帰係数を求め、グラフ及び回帰係数の値から、声の高さ・長さ・大きさによって各印象語が受け取りやすくなるのか、受け取りにくくなるのかの関係について調べる。
14

(1)悲しみ、不安、自信無. FO・音の長さの変化に関わらず、多くの回帰係数において負の値の傾向●グラフから見ても声が小さいほど評価が高くなる傾向.例として、「自信無」の図を示
 

②高揚、強調、自信有● FO・音の長さの変化に関わらず、多くの回帰係数において正の値の傾向●グラフから見ても声が大きいほど評価が高くなる傾向.例として、「強調」の図を示す
(3)驚き、疑問回帰係数はOに近い値にな•る傾向気が長い音声例として、「疑問」の図を示す. 17
5)冷静F0の変化が負の時、回帰係.数が負の値になる傾向(音が下がる音声の時、小さい声の影響を受けやすい）ラフから見ると、音が下がる音声と継続長が短い音声辻評価が高くなる傾向.例として、「冷静」の図を示す
6肯定、相槌回帰係数はOに近い値になる傾向と、音が下がフカルと継続長が短い音声る音声くだら代目例として、「相槌」の図を示.  
(8)無関心、嫌悪、不満、落胆、苛立ち.回帰係数での変化は小さく、グラフでの評価は中程度例として、「不満」の図を示す•
今回得られたデータのより詳細な分析を行な●う。 •他の語の場合を検討する。表情と音声の組み合わせを考慮してパラ言語情報の伝達について研究を行なう。ご清聴ありがとうございました
23

•フォルマントは声道共振周波数声帯音源が声道(声帯〜唇)で共鳴することにより特定帯域ごとに倍音が増幅される。この増幅された成分の塊、ピークをフォルマントと呼ぶ•母音はこのフォルマント周波数の低いほうから2つ「第1フォルマント」、「第2フォルマント」で聞き分けることができる
24

•モーラ・・・言語における音の単位の一つ。
一母音ー子音＋母音、子音＋子音＋母音（拗音「きゃきゅきよ」など） ー長音「一」 ー促音「っ」 -撥音「ん」 を1モーラとして数える•短歌や俳句はモーラを単位として、五・七・五• 「サッカー」は「サッ」「カー」で2音節だが、モーラで考えると「サ」「ッ」「カ」「 ー」で4モーラ
25

•音程･･･ふたつの音の高さの隔たり•シャープやフラットのつかない音を幹音といい、この幹音間の音程は、完全系の度数と長短系の度数に分かれる。1, 4, 5, 8度が完全系の度数で、2, 3, 6, 7度が長短系の音程。長短系は半音の数で決定される☆ドレ（長2度）ドレミファソラシドC C C ☆ミファ(短2度)全音
半音
26

先行研究では、前半の「え」は120Hzを中心に1オクターブ幅、後半の「え」は1オクターブ半幅の範囲で作成し、後半の「え」は前半の「え」に対して、1オクターブ幅の範囲内で変化させた前の「え」後の「え」
27

●人間同士の対話では、「え」「あ」などの非語彙的な発話が頻繁に現れる。これらの字面には特定の意味はないが、発話の仕方によって何らかの意図、態度、感情などのパラ言語情報を伝達している●本研究では対話音声に頻繁に現れ、発話の仕方によって豊富な種類のパラ言語情報が伝達される「ええ」に着目した
｢え｣｢えと｣｢あ｣｢ま｣の5種類で全体の92%を力バーしている(中川・小林(1995):自然な音声対話における間投詞・ポーズ・言い直しの出現パターンと音響的性質.日本音響学会誌, 51(3), 202-210))
• F0の場合回帰係数が、0.03以上を傾きが正、-0.03以下を傾きが負、その他はOと定義した。それを基に決めた分類グループの定義は以下のとおりである.正の傾向の条件・・半分以上が正の値かつその他は0の値.負の傾向の条件･･半分以上が負の値かつその他は0の値. Oに近い値の傾向・・正の傾向の条件、負の傾向の条件を満たさないかつ半分以上が0の値＊半分以上とは、「サ0ミ0」、「ド1レ0」、「リ1サ0」の中から2つ以上または「ソロレ1」、「ラロソ1」の中から1つ以上のこと
.継続長の場合回帰係数が、0.04以上を傾きが正、-0.04以下を傾きが負、その他はOと定義した。それを基に決めた分類グループの定義は以下のとおりである●正の傾向の条件・・半分以上が正の値かつその他は0の値●負の傾向の条件・・半分以上が負の値かつその他は0の値•  Oに近い値の傾向・正の傾向の条件、負の傾向の条件を満たさないかつ16個の内8個以上が0の値＊半分以上とは、音の長さの前半8つの中から4つ以上または後半8つの中から4つ以上のこと感心(4)回帰係数はOに近い値になる傾向ラフから見ると、音が上がる音声は評価が高くなる傾例として、「感心」の図を示す.の中立.回帰係数はOに近い値になる作順向グラフから見ると、継続長が短い音声は評価が高くなる傾例として、「中立」の図を示す• (9)怒り、恐れ.回帰係数での変化は小さく、グラフでの評価は低い例として、「恐れ」の図を示す• (10)軽蔑、喜び• FO・継続長・声の大きさによらず、評価は中程度例として、「軽蔑」の図を示す• (11)安堵、慎み、好意、満足、同情• FO・継続長・声の大きさによらず、評価は低い例として、「安堵」の図を示す• |被験者データ被験者: 25人出身都道府県:島根(13)、鳥取(1)、広島(2)、山口(1)、岡山(1)、高知(1)、愛媛(1)、長崎(1)、鹿児島(1)、滋賀(1)、静岡(1)、愛知(1)、最年少:20歳(8人)最年長: 23歳(2人)
• 80デシベル•地下鉄の車内•電車の車内•ピアノ(正面1m) • 70デシベル•ステレオ(正面1m、夜間) •騒々しい事務所の中•騒々しい街頭• 60デシベル•静かな乗用車•普通の会話• 50デシベル•静かな事務所・クーラー（屋外機、始動時） • 40デシベル•市内の深夜•図書館•静かな住宅の昼