北海道地区

教育システム情報学会 2014年度学生研究発表会

パソコンテイク代替支援のための音声認識ソフト導入の検討− リアルタイム性能の観点からの評価 –Introducing Speech Recognition Software to Help Students with Hearing Difficulties- Evaluation of Performance of the Software for Real-time Use in Classrooms 西村 知恵*1

樋田 康宏*2*1

Tomoe NISHIMURA

Yasuhiro HIDA

*1 札幌学院大学*2

皆川 雅章*3
Masaaki MINAGAWA

*3

人文学部

*1 Department of Literature, Sapporo Gakuin University*2 札幌学院大学 電子計算機センター*2 Computer Center, Sapporo Gakuin University*3 札幌学院大学

社会情報学部*3 Department of Social Information, Sapporo Gakuin University
Email:r120211@e.sgu.ac.jp
概要：札幌学院大学では聴覚障がいを持つ学生の講義受講支援として、講義中の教員の発話を支援学生が「ノートテイク」や「パソコン筆記」の手段で文字化し情報保障を行っている。支援の充実が図られている一方で、支援学生の負荷を考慮する必要もあり、軽減のための代替案を検討してきた。近年、スマートフォンやタブレット型端末などで音声認識ソフト(サービス)が身近に利用できるようになっていることから、音声認識ソフトを用いた情報保障の代替支援の可能性を探ってきた。本報告では、音声がリアルタイムで、要求される認識精度を保ちつつ、文字情報に変換される発話速度を実験によって調べ、講義進行速度への影響を評価する。

１．はじめに講義中の教員の発話を認識する際に問題となるの札幌学院大学では聴覚障がいを持つ学生の講義受講は①認識精度、②認識速度、③操作性の 3 つである。

支援(情報保障)として、講義中の発話を支援学生が講義進行を妨げないためには③も重要である。この「ノートテイク」や「パソコン筆記」で文字化して観点から、前回の実験(1)では「PC＋Bluetooth 接続いる。2014 年度は前期 63 科目、後期 58 科目で支援ヘッドセット＋ドラゴンスピーチ」を採用した。①を行い、支援の充実が図られる一方、支援学生の負と②に関して、まず発話速度が認識精度に及ぼす影荷を考慮する必要もあり、軽減のための代替案を検響について予備実験を行った。実験では人間が聞き討してきた。近年、スマートフォンなどで音声認識取りやすい速度とされる「1 分間に 300～350 文字」ソフト(サービス)が身近に利用できるようになってを基準として文章を 3 パターンの速さで読み上げた。

いることから、音声認識ソフトを用いた情報保障の認識後に誤入力・誤変換数から正答率を算出し比較代替支援の可能性を探ってきた。本報告では、リアした結果、268 字/1 分間のときの正答率は 89.4%、

ルタイム音声認識を実際に使用して得られた知見か

385 文字/1 分間のときの正答率は 78.4%となり、11%

ら、講義での実用化にはどのような改善が必要か検の差があった。以上から発話速度によって認識精度討し、講義進行速度への影響を評価する。

が変化することがわかった。この実験結果をふまえ、実際の講義で実験を行った。その結果、教室内の環

２．これまでの取り組みと課題

境音やマイクを通じた話者の声の反響などの環境要3教育システム情報学会 2014年度学生研究発表会

北海道地区

因が認識精度に影響を及ぼすことが判明し、対応策見が文字化されることで要点を掴みやすくなった」

としてノイズ除去マイクを導入した。また PC の処理と健常学生にも利点があるとする意見があった。一能力によっては、発話速度が速くなると認識結果の方で誤認識が多いことやフリーズが起きたことから、表示にタイムラグが生じたり認識が停止する問題も「情報の伝え間違いが多くなる」「改行や記号が入ら確認された。以上のことから、認識精度と認識速度ないので見づらい」「問題が起きた時対処できるか不には、話し方、環境、機材の 3 つの要因（図 1）が安だ」といった問題点を訴える意見もみられた。

影響することが判明した。以下では、操作性が改善

５．考察・課題

されたデバイスを用いて、この影響を考慮した認識

iPod を利用した音声認識は複雑な操作がなく、文精度、認識速度向上の取組みを行っている。

字化までのタイムラグも少ないため健常学生からは話し方好意的に受け止められた。音声認識があることでグ滑舌・声量・発話速度

ループワークに支障があるという意見はなかったた

環境

機材

め、導入上健常学生に対する特別な配慮は必要ない

周囲の雑音

PC・マイクの性能と考えられる。一方聴覚障がい学生にとって誤情報の伝達は大きな問題であり、現状では逆に音声認識

図１が理解の妨げともなり得る。そのため認識された文音声認識に影響する３つの要因章をその場で修正したり、同時にテイクを行うなど、

３．今回の取組み

音声認識によって表示された情報が正確かを聴覚障2014 年 9 月にリリースされた iOS8 の新機能としがい学生自身が確かめる手段が必要となる。また自て即時連続音声認識機能が標準実装された。この機身の話し方が認識精度に影響することを意識せず、能によって従来よりタップ操作の必要回数が減り、音声認識システムの改良のみを求める学生が多かっ

前述の PC に近い利用環境を得ることができる。本機た。改めて音声認識の特性について周知し協力を促

能は予備実験を行った結果、認識精度が高く、自動すことも必要とされる。教員が一方的に話す大講義

誤字修正機能も備えることから講義での利用可能性の場合、タップ操作が煩雑であるなどの問題点が講を検討した。実際に聴覚障がい学生が参加する本学義進行の妨げとなるため導入は難しいと考えられる。

講義内のグループワークで認識実験を行った。本実

課題は多いが「それを差し引いても役に立つ」との

験には iOS8 の iPod Touch(以下 iPod)を使用し、参意見もあり、少人数グループワークなどの小さな場加者全員が見やすい位置に iPod をミラーリングす面では現状でも利用可能といえる。

るモニターを設置した。参加者は 5 名の健常学生と６．おわりに1 名の聴覚障がい学生、ノートテイクを行う支援学生の計 8 名である。
発言の際には話者が iPod を持ち、これまでの取り組みからわかった音声認識に影響iPod に話しかけるように留意させた。終了後、参加する話し方・環境・機材の 3 要因を踏まえ、iOS8 の者全員にアンケート用紙で音声認識の評価を依頼し、標準機能であるリアルタイム連続音声認識を使ってその結果を元に音声認識の実用可能性を検討した。

小人数グループで認識実験を行い、講義での音声認識の利用可能性を検討した。

４．実験結果
参考文献

アンケートの結果、音声認識を利用したグループ
ワークに抵抗を持つ学生はおらず「とても便利」「実(1)

札幌学院大学：“音声認識ソフトを用いたノートテイ用的」との回答が殆どだった。
「支援学生の負担が減

ク代替支援 -認識精度向上に向けた取り組み-”，る」「伝達がスムーズだった」「より多くの情報を伝http://www.tsukuba-tech.ac.jp/ce/xoops/file/10th_sympos

えられる」という支援に関わる視点だけでなく、「意ium/contest_result/sapporo.pdf(2014)4