1-R-27
複数の会話コーパスを対象とした笑い声イベントのアノテーション ∗○森 大毅 (宇都宮大), 有本 泰子 (帝京大／理研), 永田 智洋 (宇都宮大)
はじめに

1

exhalation
inhalation

笑いは対話参与者の心理的・認知的状態を伝達する社会的シグナルである。機械による笑い声の形態的

consonantvowel

特徴の認識や，様々な形態の笑い声の合成は，音声にcallよる人間と機械のコミュニケーションに新たなチャ

bout

ンネルを導入する点で重要な意義を持つが，その研究

episodeのためには笑い声のデータが必要である。
大規模なコーパスに対する信頼性の高いアノテー

Fig. 1

笑い声の時間構造 ([3] を一部改変)

ションを実現するためには作業マニュアルの整備が欠かせない。しかし，音声言語と異なり，笑い声のアノテーションにはその基盤となる理論があまりなが終わる場合とで，吸気音が笑い声に含まれるか否かく，参考となる作業マニュアルも存在しない。そこが異なる問題があった。そこで本ガイドラインではで我々は，過去のコーパス構築の事例 [1] にならい，以下のように記述した。

これまでの笑い声アノテーション [2] の経験を基に定笑いに付随する吸気音は，それがひと続きの笑い声めた当初仕様に従って作業を進め，発見された問題を形成していると判断できる限り，episode に含に対処する過程で仕様を修正して行く試行錯誤的なめる。

方法で作業マニュアルを作成してきた。本論文では，
この過程で顕在化した笑い声のアノテーションにお吸気音を episode に含めることにより，既存のコーける問題点を示すとともに，策定した作業ガイドライ

パスでは発話区間の変更が多数生じることとなる。
ひと続きの笑い声ンを述べることで笑い声アノテーションの標準的方ひと続きの笑い声法の確立を目指す。
なお，笑い声の分節音 (call) レベルのアノテーションについては稿を改めて取り上げることとする。

2

笑い声の構造とアノテーション

2.1

Episode, bout, call, 吸気／呼気bout に対応する吸気音まで境界を移動

本研究では，Trouvain [3] の図式に従い笑い声を階層的に記述する (図 1)。笑い声は，1 回以上の呼気／

本研究では言語音と独立した笑い声のみを対象と吸気に対応する音響イベントからなり，これらが知覚し，笑いながら言語音を産生している部分 (speech-的なひとかたまりを形成する。音声コーパスの転記
では<笑>などと記述されるこのまとまりを episode とlaugh) は episode に含めない。言語音と bout が切れ目なく続いている場合は，その bout の最初の call の呼ぶ。また，1 回の呼気に対応する笑い “句” (bout)開始時刻を episode の開始時刻とする。また，当初はは 1 個以上の笑い “音節”(call) からなる [4]。
呼気による主要な音の後には，しばしば吸気音がepisode は 1 つ以上の bout を含むと定義したが，これでは speech-laugh の直後の吸気音を笑い声の一部聞かれる [5]。一部の吸気音は，前後の bout と一体ととして記述することができない。そこで，このようななって笑い声を特徴づけている。

吸気音は単独で episode を形成し得ることとした。

笑い episode 区間の同定

2.2

2.3

無音区間

UUDB など既存の対話コーパスの多くは，笑いに本研究が対象としている会話コーパスでは，400 ms

付随する吸気音を発話区間に含めていない。このた以上の無音区間が発話の境界となっている (ただし語め，笑い声の後に言語音が続く場合と，笑い声で発話中の促音は 400 ms 以上の無音でも発話境界ではな∗

Laughter event annotation for diﬀerent conversational speech corpora. by MORI, Hiroki (UtsunomiyaUniversity), ARIMOTO, Yoshiko (Teikyo University / RIKEN), and NAGATA, Tomihiro (UtsunomiyaUniversity)

日本音響学会講演論文集- 217 -2017年9月い)。一方，発話内部の分節化された無音をポーズとTable 1 作業者 1 との笑い声アノテーション一致度呼んでいる。
笑い episode は bout と吸気音からなるが，ポーズ作業者 2
作業者 3は含まないものとした。これは，ポーズの認定は作業効率を著しく下げるだけでなく，経験上，笑い声の形態を規定する上でポーズの有無は本質的でないと予想したためである。Bout の直後の呼気を使い切っ

episodeRP
0.98 0.97
0.78 0.98

boutRP
0.83 0.69
0.76 0.75

吸気音
RP
0.76 0.88
0.51 0.88

作業マニュアルの有効性検証

3て無音になる区間は，bout の一部とすることとした。

作成した作業マニュアルにより複数作業者が一致

この無音区間は 400 ms を超える長さを持つことがあした笑い声アノテーションを行えることを検証する

る。同様に，吸気音の直後の息を吸い切って無音になため，笑い声を豊富に含む以下のコーパスについて笑る区間は吸気音の一部とすることとした。

い声のアノテーションを試行している。

• UUDB• OGVC• アクションゲーム音声コミュニケーションコー
パス (AGSC) [7]
本稿では，このうち OGVC の女性話者 1 名の音声(約 24 分) に対して行った笑い声アノテーションの一致度を示す。作業者 1 が付与した episode, bout, 吸気

2.4

音のラベルを ground truth とし，別の作業者 2 名が付呼気音と吸気音の判別

図 1 に示したように，bout は call すなわち呼気による音から構成される。逆に，吸気による音は boutではない。これは，笑い声のアノテーションにおいて呼気音と吸気音を区別する必要があることを意味する。これら 2 種類の発声は生成機構において顕著な違いを有する [6] が，音響的な違いは顕著でない場合が多く，正確に判別するのは困難である。
吸気音 (下図 h) と呼気音 (下図 b) の間には，しばしば特徴的な非常に短時間の低パワー区間が見られ，これを吸気音と呼気音の判別に利用することができる。

与した各ラベルの再現率 (R) および適合率 (P) を表 1に示す。作業者 1 が付与したラベルの個数は，episode106 個，bout 89 個，吸気音 (有声+無声) 178 個である。Episode, bout のアノテーションについては作業者間で比較的一致していることがわかる。Episode の不一致の主な原因の 1 つは，speech-laugh の直後に微弱な息の音がある場合に，そこを笑い声の一部とするかどうかの判断の揺れであった。また，吸気音の再現率が比較的低い。この主な原因は，微弱な吸気音を笑いの一部とみなすかどうか，また「クックッ」などの微弱な音を吸気音と判断するかどうかの判断の違いであった。

おわりに

4

笑い声アノテーションの作業ガイドラインを作成し，作業者間一致性を検証した。今後は不一致の原因となる箇所の記述を改良し，合成などの応用において信頼できる箇所の選択的使用を可能にしたい。

2.5

顕著な吸気音謝辞 本研究は JSPS 科研費 26280100 の助成を受け笑い声の中では，吸気音はしばしば声帯振動を伴ている。

う。応用上重要と考えられるため，無声 (h) と有声(H) の吸気音は区別して記述することとした。
吸気音の中には，呼気による主要な音の後に付随するものだけでなく，それ自身が主要な笑い声を形成しているとみなせるものがある (いわゆる引き笑い)。
典型的には，複数回の吸気音が連続してひと続きの笑いを構成する。このような顕著な吸気音と，bout に付随する吸気音の判別は困難であり，区別なく記述することとした。

日本音響学会講演論文集

参考文献[1] 国立国語研究所編, “日本語話し言葉コーパスの構築法,”
国立国語研究所, 2006.
[2] 森, 音講論 (春), 2-Q-43, 2015.
[3] J. Trouvain, Proc. ICPhS 03, 2793–2796, 2003.
[4] Bachorowski et al., J. Acoust. Soc. Am. 110, 1581–1597, 2001.
[5] Urbain et al., Proc. LREC 2010, 2996–3001, 2010.
[6] K.-I. Sakakibara, ICVPB 2012, 2012.
[7] 菊地, 森, 音講論 (秋), 3-P-31, 2017.

- 218 -2017年9月