Title

音声認識アプリを用いたドイツ語発音学習の実践と検証

Author(s)岩居, 弘樹Citation

大阪大学高等教育研究. 2 P.11-P.18

Issue Date 2014-03-31
Text Version publisher
URL

https://doi.org/10.18910/28099

DOI10.18910/28099

rights大阪大学高等教育研究2（2013），11­18【原著】

音声認識アプリを用いたドイツ語発音学習の実践と検証
岩居弘樹

Practice and Research on German Voice Training with a Speech Recognition
Application
Hiroki IWAI
In this paper, I report on an example of German voice training using the speech recognition
application “Dragon Dictation” and provide results of research on how the German sentences
Japanese college students pronounced are recognized by the application.
A total of 114 students took part in the study (91 from Osaka University and 23 from Konan
University). They learn German as a second foreign language. The training was held during the first
30 minutes of the class, and the students spoke sentences aloud to “Dragon Dictation” and wrote
down the dictated text on a practice paper.
In the first part of the research, one of six example sentences, “Am Dienstag um zwei treffe ichFreunde.”, was dictated almost always correctly by Dragon Dictation. In contrast, only a few students
could pronounce the following sentences correctly: “Was haben Sie am Mittwoch um Viertel vor sechs
vor?” “Haben Sie am Mittwoch von zwei bis vier Zeit?”, and a lot of them had the same pronunciation
problems with “um Viertel” and “vier”. Other words of these sentences were dictated almost perfectly.
An analysis of the practice papers revealed that a few learners successfully tried to change their
German pronunciation without any instruction.
In the next part of the research, which took place from October to November at Konan University, it
became clear that there are some German sentences that Japanese learners could speak without any
pronunciation problems, such as “Gehen wir morgen Abend ins Kino?” “Ich trinke Tee mit Milch.”
and two sentences which they could barely pronounce correctly: "Ich suche eine Bluse.” “Mögen SieZwiebeln?”
There are, however, some cases in which I cannot determine the checkpoint from the dictated texts. I
have to research this issue further.
Keywords : Speech Recognition, German Voice Training, iPad, German Lesson

1．はじめにるしかない（1）．
筆者は数年前から，ビデオ撮影プロジェクトの発音練

一般に，外国語学習者は自分の発音が正しいかどうか習に音声認識アプリ（Speech to Text app，以下 STT）を自分自身で判断することはできない．発音練習や発音を用いる試みを始めた（2）．STT を使うと，自分が発音し矯正をするには，教師やネイティブスピーカーに発音た音声が文字化されて表示されるため，正しく認識されチェックしてもらうか，高価な発音矯正ソフトを利用すた時の喜びは大きく，学習のモティベーションを維持す所

属：大阪大学全学教育推進機構

Affiliation : Center for Education in Liberal Arts and Sciences, Osaka University, JAPAN
連絡先：
11

ることに役だっている．また，普段声を出さない学生も，以前の合成音声はロボットの声のように不自然なもの

なんとか認識させようと同じ文を繰り返し発音しているであったが，現在では英語を中心に，ドイツ語や日本語姿を頻繁に目にする．の合成音声もかなり自然な発音に近づいてきた．もちろ

本稿では，大阪大学および甲南大学で実施しているん「感情」を伴わない読み上げになるという点は改善のiPad を使用したドイツ語授業における発音練習の状況余地がある．と練習から得られたデータを示し，外国語学習の新たな合成音声を使えば，任意の文の発音を何度も繰り返しアプローチについて論じる．

聴くことができ，読み上げスピードを調整することもできる．例文の単語を変えたり語順を入れ替えたりしても2．音声認識アプリによる発音練習すぐに修正して発音の確認が可能である．
ネイティブスピーカーが録音した CD や MP3 の音声

2.1 Dragon Dictation についても良いが，あらかじめ録音されている表現と自分が話し

iPad 対 応 の STT に は い く つ か あ る が ， 筆 者 はたいと思う表現が一致するとは限らない．想像をふくらDragon Dictation を使用している．Dragon Dictation

ませ自由に喋りたいと思う学生は，TTS を活用していは Nuance Communications Inc. が開発した音声認識る．2013 年 11 月現在，甲南大学では Speak it!，大阪大エンジンによるサービスで，無料で利用できる．すでに学では German Word Wizard を利用している（6）．

（3）

携帯端末，タブレット端末やカーナビゲーションなどに3．音声認識アプリを用いた調査応用されており，PC 向けのソフトウェアも有償販売さ（4）れている ．
Dragon Dictation を使うと，ネイティブスピーカー

3.1 異なる学習環境での比較
Dragon Dictation を用いた昨年までの発音練習の観の明瞭な発音であればかなり高い割合で正しく認識されテキスト化されるが，不明瞭な発音や方言などは正しく

察では，次のような傾向を確認することができた（7）．

認識されないこともある．しかし，ネイティブスピー

（1）[f] 音 [b] 音の曖昧さが顕著に出ている

カーではない学習者が利用した場合には正しく認識され「Fußball」が das war と認識されるないケースが多数でてくる．

（2）[g] 音の曖昧さが顕著に出ている

Dragon Dictation で正しく認識されない場合，以下「Guten Tag」が durch den Tag / dritten Tag と認のケースが考えられる．

識される

・そもそも読み方を間違えている（発音とスペルの対（3）[f] 音の曖昧さが顕著に出ている「Freut mich」が Leute / heute / wollte / halte ... と応が理解できていない）
・読み方は合っているが細かな発音がちがっている認識される・そもそも日本人にとって難しい発音である（4）[v] 音の曖昧さが顕著に出ている「Woher kommst du?」が Vorher / Daher ... と認識

一方，正しく認識された場合は「通じる発音である」と考えられるが，STT は人間のように相手の言いたいされる（5）[ts] 音 [n] 音の曖昧さが顕著に出ていることをくみ取ったり誤りを修正して理解するような機能はないという点で，人間の発する音声に対する許容範囲「Es ist 2:10 Uhr (zehn nach zwei)」が zähne /ははるかに狭い．したがって「認識されない＝通じない」

denn / seht ... と認識されるとはいえない点に注意が必要である．
今回，甲南大学および大阪大学の第二外国語ドイツ語
2.2 合成音声アプリの利用

4 クラス，履修者合計 114 名（8） に対して，2013 年 9 月30

学習者が教科書に書かれている例文の発音を練習する

日から10 月1日にかけて，以下の 6 文について（9）学生の場合は，付属の CD や MP3 などの音声データをモデルドイツ語発音がどのように認識されるか調査を行った（10）．にすることができるが，教科書から離れて自分でドイツ学生には，Dragon Dictation で 3 回試行し，認識結果語の文を組み立てた場合，発音練習のモデルとなるドイとして表示されたドイツ語を毎回そのまま記録するようツ語音声データがない．このような状態を改善する方法に指示した（11）．記録を取らずに 3 回以上試行している学として合成音声アプリの利用（5）を始めた．

生もいた．
12

音声認識アプリを用いたドイツ語発音学習の実践と検証

例文 1

Ich stehe um sieben auf.

例文 2

Ich frühstücke um halb acht.

例文 3

Um wie viel Uhr gehen Sie zur Uni?

例文 4

Am Dienstag um zwei treffe ich Freunde.

例文 5

Was haben Sie am Mittwoch um Viertel vor

sechs vor?
例文 6

Haben Sie am Mittwoch von zwei bis vierZeit?
グラフ 3

今回は調査結果を以下のような基準で分類した．
・

数回の試行で一度でも 100% 正しく認識された場合は「認識された」とする．

・ 認識された語が 3 割以下（2 ～ 3 語以下）の場合は「認識されない」とする．
・

ほぼ正しく認識されているが，単語の一部が認識されずに欠落している場合，あるいは誤認識されている場合などは「一部認識された」とした．例えば，
例文 1 で um が欠落したり nun となったりする場
合，例文 3 で，文頭の Um と文末の Uni が欠落する
場合，後半の「gehen Sie zur Uni」は正しいが前グラフ 4半の「Um wie viel Uhr」が認識されない場合などもこれに含む（12）．

この結果から，各クラスの集計は次のようになっている．

・例文 4

Am Dienstag um zwei treffe ich Freunde.

はいずれのクラスでも高い確率で正しく認識されていることがわかる．
一方，
・例文 5

Was haben Sie am Mittwoch um Viertel vor

sechs vor?
・例文 6

Haben Sie am Mittwoch von zwei bis vierZeit?
は，100% 正しく認識されるというケースは多くはないが，全く認識されないという学生もほとんどいない．ここで共通する問題点は，例文 5 では「um Viertel」例文

グラフ 1

6 では「vier」であった．
また，例文 1，2 では，全く認識されないという割合が特に大阪大学の学生に目立った．
さらに今回の調査では，学生自身が発音を自己修正していく過程を明確に観察することもできた（13）．
Ich stehe um sieben auf.
（1 回め）Ich hor lieber auf.
（2 回め）Ich stehe Liebe auf.
（3 回め）Ich stehe wieder auf.
（4 回め）OK! （H くん）

グラフ 213Ich frühstücke um halb acht.

調査終了後，声門閉鎖音について説明し，例文 3 文頭（1 回め）Ich frühstücke und hab acht.の Um に注意して発音する練習をしたところ，以下のよ（2 回め）Ich frühstücke im halb acht.

うに Um だけでなく後続する単語も正しく認識される（3 回め）OK! （F くん）

ケースが複数見られた．

＜ halb を修正，次に um を修正している．＞

Um wie viel Uhr gehen Sie zur Uni?
（1 回め）Irgendwie fehlt nur gehen Sie zur Uni

Am Dienstag um zwei treffe ich Freunde.

（2 回め）Irgendwie fehlt nur gehen Sie zur Uni（1 回め）Am Dienstag um zwei welche ich schon.

（3 回め）Um wie viel Uhr gehen Sie zur Uni（S くん）（2 回め）Am Dienstag um zwei natürliche ichFreunde.

学生の練習を観察していると，自分の発音が正しく認（3 回め）Am Dienstag um zwei richte ich Freunde.

識されない場合，立ち止まって問題点を考えてから再（4 回め）A m D i e n s t a g u m z w e i S t r i c h e i c h

挑戦するケースと，むやみに繰り返して認識させよう

Freunde.とするケースがあることがわかる．前者の場合は，発（5 回め）Am Dienstag um zwei drittel ich Freunde.

音規則を思い返したり調べたり，あるいは TTS アプリ（6 回め）OK!（H くん）や電子辞書を使って発音を確認したりしてから Dragon＜ treffe について毎回発音を変えて試している．＞

Dictation に向かっている．
Am Dienstag um zwei treffe ich Freunde.

Um wie viel Uhr gehen Sie zur Uni?

（1 回め）Am Deinstedt um zwei treffe ich schon.

（1 回め）Die 4:00 Uhr gehen Sie zur Uni（2 回め）Am Geiselberg zwei treffe ich Freunde.

（2 回め）Um wie viel Uhr gehen Sie dazu nie（um が欠落）（3 回め）Am Dienstag um zwei treffe ich Freunde.

（3 回め）OK!（C さん）＜ vier と viel の L/R を意識している．＞（YK くん）＜ Dienstag の読み方を間違えていたことに気づいて修Was haben Sie am Mittwoch um Viertel vor sechs

正した．＞(5:45 Uhr) vor?
（1 回め）haben Sie am Mittwoch vierte vor sechs

一方，ドイツ語の発音を聴いた直後は比較的うまく認vor（Wasとum が欠落）識されたが，繰り返すうちにダメになっていったケース（2 回め）Das haben Sie am Mittwoch vierte vor

もある（いずれも YY くん）．

sechs vor（um が欠落）

Ich stehe um sieben auf.

（3 回め）Das haben Sie am Mittwoch um 5:45 Uhr（1 回め）Ich stehe um sieben auf.
（2 回め）C über CD aufvor（3 回め）Ich geh mit sieben auf（4 回め）Was haben Sie am Mittwoch vierte vor
sechs vor（K くん）＜ D と W の区別，Viertel と vierte に見られる L の発

Um wie viel Uhr gehen Sie zur Uni?

音を意識して挑戦している．＞（1 回め）Wie viel Uhr gehen Sie zur Uni[ 文頭の umが落ちている ]Was haben Sie am Mittwoch um Viertel vor sechs（2 回め）Wie viel Uhr gehen Sie zur Uni[ 文頭の um(5:45 Uhr) vor?

が落ちている ]（1 回め）W a s h a b e n S i e a m M i t t e B o c h u m（3 回め）Irgedwie fehlt nur gehen Sie zur Uni

ungefähr telefon vor（2 回め）Was haben Sie am Mitte Bochum 5:45

ドイツ語の音を聴いてから発音することの重要性についUhr vorて感想として述べている学生もいる．
「音を聞いて発音したらドラゴン先生（14）もちゃんと（3 回め）OK!（T くん）

ききとってくれるんですけど，読み方がわかってい14音声認識アプリを用いたドイツ語発音学習の実践と検証

11 月 18 日

るときに発音を確認せずに読むとアクセントの位置とかでドラゴン先生がききとってくれないことがあDu kannst uns gerne besuchen.

りました．
」（M くん）

Gehen wir morgen Abend ins Kino?
Ich besuche euch sehr gerne.
Sie besucht mich dieses Wochenende.

3.2 例文の難易度調査

Seid Ihr am Wochenende zu Hause?

甲南大学では 10 月以降も毎回異なる内容で練習を行いデータを収集した．使用した例文は以下のとおりである．

受講学生数が 8 から 15 名と少ないが，

10 月 7 日・ほとんどの学生ができる例文，

Ich trinke Tee mit Milch.

・ほとんどの学生ができない難しい例文，

Mögen Sie Zwiebeln?という 2 点については明確な傾向をみてとることができ

Was essen die Deutschen morgens?

る．

Die Wurst schmeckt fantastisch.
10 月 14 日
Ich möchte einen Apfelstrudel.
Hat es Ihnen gut geschmeckt?
Ich bezahle den Wein und das Eis.
Das macht 17. 50 € . (17 Euro 50 )Stimmt so.
10 月 21 日
Ich wohne in einem Studentenwohnheim.
Mein Zimmer ist sehr klein.

グラフ 5

Es hat nur 12 m². (Quadratmeter)
Es kostet nur 200 € (Euro) im Monat.
Meine Wohnung ist groß und hell.
10 月 28 日
Sie braucht noch einen Fernseher.
In meinem Zimmer gibt es Pflanzen.
Die Wohnung hat ein Wohnzimmer, ein Schlafzimmer
und eine Küche.
Ich habe in meinem Zimmer keine Abfalleimer.
Wir finden unsere Balkone fantastisch.
11 月 4 日
Wohin stellen Sie die Pfannen?
Stellen Sie bitte die Töpfe auf den Küchenschrank?
Mein Zimmer ist 25 m² (Quadratmeter) groß undkostet nur 170 € (Euro).

グラフ 6

Ich habe ein Bad und eine kleine Küche.
Ich bin gern im Wohnheim.

ほとんどの学生ができたものの内，

11 月 11 日

Am Dienstag um zwei treffe ich Freunde.

Was trägst du im Sommer?
Ich trage meistens ein T-Shirt und eine Hose.

は，Ich suche eine Bluse.

Gehen wir morgen Abend ins Kino?

Die Farbe finde ich schön.

Ich trinke Tee mit Milch.
15グラフ 716音声認識アプリを用いたドイツ語発音学習の実践と検証とは異なり，um がなかなか認識されずに悪戦苦闘したになる．学生と同じ iPad で著者が発音した場合は跡が見られる．

17.50 Euro と表示される．
・Die Jacke ist mir nicht zu groß. : groß が表示されまた，ほとんどの学生ができない難しい例文の中では，besuchen, suchen, Bluse が認識されないケースがない．（15）多く，ついで du と mögen, Zwiebeln に苦労している．
また，周囲の騒音やマイクの「吹かれ」の問題もあ4．可能性と問題点

る．著者の経験では静かな環境であれば正しく認識できる文が，駅や電車の中では認識されないことがある．教Dragon Dictation を使った発音練習を始めてからは，室で練習する場合も周囲の騒音が誤認識につながると考実際に声を出して発音練習をする時間が大幅に増加しえられるが，逆にマイクを近づけ過ぎると息が直接マイた．この練習について学生からは肯定的な感想が届いてクにあたりノイズになることもある．Dragon Dictation

いる．

サポートサイト（16）には「自然な声ではっきりと話すよ「iPad を取り入れた Dragon 先生による発音トレーうにしてください．口とデバイスの間を約 18cm 離し，ニングなどは何度も反復して練習でき，変化も観察人に話しかけるのと同じイメージで発話してください．
」

しやすいので個人的に気に入った勉強方法だった．とある．

自主学習に利用できる良い教材がネット上にたくささらにプロファイルの存在にも注意を払いたい．共同んある事を実感でき，活用していきたいと感じた．」

で利用する iPad の場合は，時々アプリ内のプロファイ（YM くん）

ルをリセットする必要がある．Dragon Dictation は個「授業ではこれでもかというくらい発音練習をした人での利用を想定しており，使用者の音声プロファイルのでまだたくさんの独文が頭の中に残っています．」

を端末に蓄積している．正しく発音されていると思われ（MS くん）

るにもかかわらずなんども同じ誤認識が現れる場合には「機械おんちの僕でも何とかビデオ撮影などのりきプロファイルのリセットで解消されるケースもある．

れたのでよかったです．自分のドイツ語の発音が5．まとめどうなのかをドラゴン先生で試せて楽しかったです．あっという間に前期が終わった感じがします．」

STT は認識の許容範囲があり，多少おかしな発音で（TS くん）「Dragon で何度も発音の練習をしているといつのも正しく認識されることがある．STT を用いた発音練間にかドイツ語の発音が上達していたのにも気づい

習では，正しく認識されるかどうかということ以上に，た．外国語は喋れば喋るほど身につくものだと実感

ドイツ語を声に出すきっかけと考えるほうが良いかもしした．
」（K くん）

れない．STT で認識されないということが，ネイティ「最近はドイツ語を音を聞いて，スペルを想像できブスピーカーに通じないという訳ではないということをるようになってきました！ドイツ語のアルファベッ

繰り返し強調したほうが良い．

トの読み方は一通りしかないので，英語に比べると発音のポイントを全員に伝えても，すぐにできる学習かなり楽です．また，スペルから発音も少しずつで者とできない学習者がでる．iPad を用いた発音練習をきるようになってきたのですが，アクセントの位置始めてからは，学生個々の発音と記録に注意しながら個がわからなかったり，始めて見る長めの単語とかだ別対応できるようになった．と読み方がわからなかったりします．
」（YM くん）
ドイツ語を声に出す時間が増えたことで何が起こった
このように STT を利用した発音練習は効果的に機能か，学生の感想を見てみよう：していることがわかる．一方で Dragon Dictation の認「だんだんスペルを見るとドイツ語の発音が出てく

識結果からだけでは問題点が把握できないケースもあるようになってきました．完璧に合ってるかどうかり，認識アプリ側の問題か，学習者の発音の問題か判断

自信がないですがパソコンで流すとだいたい近い発できないケースもある．

音にはなっています．」（IO くん）

・Das macht 17.50 Euro. : 学生の発音では 17.40 Euro

すでに 5 回めの授業でこのような感想を述べる学生が17

（3） iOS 付属の音声入力，iSpeech App，Google 音声入力（Googleいた．

Search で利用可能）など「耳で手本の発音を聞いて繰り返し唱えました．そ（4） ドラゴンスピーチ11：http://japan.nuance.com/dragonspeech/

うしたら大体の文章は正しく発音できたのですが，price.asp

一部上手くできないものがありました．そこででき（5） 岩居（2013）pp.51

ない部分の共通点を考えてみたところ，できない箇（6） Speak it!：https://itunes.apple.com/jp/app/speak-it!-text-

所はそもそもほとんど聞き取れていない箇所だとわ

to-speech/id308629295?mt=8, German Word Wizard :かりました．
」（TM くん）https://itunes.apple.com/jp/app/german-word-wizardtalking/id496574443?mt=8，「Um は何度か nun と判定されてしまって n と m の（7） 岩居（2013）p.54

発音があいまいなのかなと感じました．（YS くん）（8） 甲南大学基礎ドイツ語（文学部・再履修）11 名・中級ド

このように，ドイツ語を声に出すことによる様々なイツ語 12 名，大阪大学地域言語文化演習（ドイツ語）の波及効果を学習者自身が感じていることがわかる．ま

工学部向けクラス 46 名，基礎工学部向けクラス 45 名．遅た，「できる」という実感を得ることでドイツ語学習のれて参加した学生，最後の例文までできなかった学生もいモティベーションを維持していることもみてとれる．

たため，合計数にはばらつきがある．

しかし，認識結果を見ただけでは問題点が見えない（9） 例文は，甲南大学で使用している教科書「Start frei」（藤ケースや，何度トライしても全く認識されない学生に対原三枝子ほか著，三修社刊，2010 年第 8 刷）のテキストを利用した．

する指導をどのようにするかなど，今後の課題として取（10）例文を印刷したプリントを配布し，認識結果を手書きで記り組む必要がある．

録する．記録欄は 3 行あるが，4 回以上記録をとった学生もいる．

謝辞：本研究は JSPS 科研費 12003287 の助成を受けて（11）発音のアドバイスを行う際には，誤認識結果をみて問題といる．

思われる発音を一つだけ取り出し，その発音のポイントを説明するようにしている．
（12）この分類のうち「認識されない」「一部認識された」の 2

受付 2013.11.29 ／受理 2014.01.29

点に関する基準は客観的な根拠が弱いことは否めないが，おおよその傾向は観察できるものと思われる．

参考文献（13）ここに例示する誤認識の例，自己修正の過程は，当該学生

1） 岩居弘樹（2012）「iPad を活用したドイツ語アクティブラー固有のものではなく，他の学生にも共通して観察されている．

ニング」，大阪大学大学教育実践センター紀要 8，pp.1-8.

（14）筆者のクラスでは，Dragon Dictation を「ドラゴン先生」

2） 岩居弘樹（2013）「音声認識アプリを活用したドイツ語発と呼ぶ学生がいる．

音練習の試み」，大阪大学高等教育研究 01，pp.51-58.

（15）Die Jacke ist mir zu groß. Die Jacke ist mir nicht zu
klein. など他のパターンであれば正しく表示されることか

注

ら，音声認識サービス側の問題かと思われる．

（1） 英語の発音矯正ソフトとしては ATRCall が知られている．

（16）http://dragonmobilejapan.com/apple/supportdictation.

ドイツ語対応のものはない．

html（2） 岩居（2012）参照．

18