1−7−12
音声訂正：選択するだけで訂正可能な音声入力インタフェースとその評価
○緒方 淳

後藤 真孝

はじめに音声認識を日常的に使えるインタフェースにするためには，必ずどこかで生じてしまう誤認識を容易に訂正できる音声入力インタフェースが不可欠となる．本
稿では，ユーザが認識誤りを選択操作だけで訂正することを可能にする「音声訂正」という音声入力インタフェース機能とその評価について述べる．

音声訂正インタフェース「音声訂正」とは，音声認識器により引き起こされた誤認識を，ユーザとのインタラクションを介して訂正する新しい音声入力インタフェースである．以下では，音声訂正により提供される主な つの機能について概観する 詳細な実装方法については文献   に委ねて省略する．

¾º½ 音声訂正の基本機能

図  に音声訂正インタフェースの画面表示の模式図を示す．音声訂正では，従来の音声認識と異なり，最上段の通常の認識結果 単語列 に加えて，その下へ「競合候補」のリストを常に表示する．通常の認識結果は各単語の区間ごとに区切られて，その単語に対する競合候補が整列して表示される．ここで，競合候補の個数はその区間の曖昧さを反映しており，ユーザは候補が多いところに誤認識がありそうだと思って，注意深く見ることができる．逆に，認識結果として信頼性が高い区間は候補が少ないため，ユーザに余計な混乱を与えることが少ない．このように認識結果が提示されると，ユーザは競合候補の中から正解を「選択」する操作だけで，容易に認識誤りを訂正できる．

通常の
認識結果
競合候補

音声認識は誤りを起こす」「

温泉 認識 は 誤り を 起こす
音声がと 降ろすに犯す
お酢（産総研）タフェースは実現されていなかった．それに対し音声訂正では，「 」を，誤り訂正インタフェースへと応用することにより，大語彙，小語彙を問わず多様な入力音声に対して上述のような効果的な候補の提示，訂正を可能にした  ．

¾º¾ 即時誤り訂正機能
使いやすいインタフェースを構築するには，ユーザの入力中に逐次現在の認識状態をフィードバックすることが重要となる．音声訂正では，ユーザに対するフィードバックを通じて，誤り訂正作業を効率的に行うことを目的とした「即時誤り訂正機能」を提供する．これは，発話中に認識の中間結果を競合候補付きでリアルタイムにフィードバックし続け，さらにユーザの選択も可能にすることで，発声の最中においても，あるいは，認識器が認識結果を確定していない段階 認識処理最中 においても，誤りを即時に訂正することを可能にする機能である．

¾º¿ 発話中休止機能
前節の即時誤り訂正機能を使っていると，発話中に正しい候補を選択している間，音声認識器に一時的に続きを言うのを待って欲しくなる場面が出てくる．そこで，音声訂正では，発話中にユーザが意図した時点で，認識処理を一時停止させる「発話中休止機能」を提供する．そして次の発話が始まると，あたかも一時停止前の発話が続いていたかのように動作させる．このユーザの一時停止の意図を伝えるために，音声中の非言語情報の  つである有声休止 語中の任意の母音の引き延ばし を，発話中休止機能のトリガーとして採用した．これにより，ユーザは自然に一時停止をかけて，正しい候補を選択したり，続きの発話を考えたりできる．

評価実験

ユーザによる候補の選択

音声訂正の有効性を確認するために，文の入力をタスクとした被験者実験を行った．本実験での調査ポイ
温泉 認識 は 誤り を 起こす
ントは， 音声訂正により，通常の音声入力 最尤単
音声がと 降ろす語列のみを出力する音声認識 に比べて，文入力がどに犯すの程度効率的になるか， 発話中休止機能が文入力お酢の際に有効に働くかどうか，  システム全体に対し
図  音声訂正インタフェースの模式図てどのような印象を受けたか，の主な 点である．
今回の実験では，評価対象により幾つかの課題を行っ
なお，図  のように，選択肢には必ず空白の候補が たが，全体的な実験方法としては，提示した文を被験含まれる．これを「スキップ候補」と呼び，その候補 者に入力してもらい，一字一句間違えずに入力できたが属する区間の認識結果をないものとする役割を持つ． 時点で  つの文を入力完了とした．また，通常の音声
これにより，最上段の認識結果に湧き出し誤りが存在 入力の際に認識誤りが発生した場合や，音声訂正で競しても，ユーザはスキップ候補を選択するだけで容易 合候補中に本来の正解がなくて選択できない場合には，に削除できる．つまり単語の置き換えと削除が，「選択」 キーボード，マウスを利用してタイプ入力にて訂正すという一つの操作でシームレスに実行できる．また， ることとした．各課題の つの文は，全被験者を通し各区間の競合候補は，上から可能性 存在確率 の高い て共通だが，順番をランダムに変えたものを  通り用順に並んでいるため，通常はユーザが上から下へ候補 意して各被験者に割り当てた．
を見ていくと，早く正解にたどり着けるようになって音声を用いた実験では，音声認識単体の基本性能差いる．
による影響を排除するために，認識デコーダ，音響モ
しかし，従来，大語彙を対象とした連続音声認識で デル，言語モデルに関しては，通常の音声入力，音声は，競合候補を生成するための中間結果は非常に大規 訂正の各実験ともに同一のものを用いた．本実験には，模なものとなるため，このようなシンプルな訂正イン 音声入力ソフトウェアを普段利用していない， 代の 名の被験者 男性  名，女性  名 が参加した．
  
                      !"!# $% " &! "'と発声した例

日本音響学会講演論文集−15−

2005年9月

表  認識率の比較
認識率 
通常音声入力音声訂正 訂正前
音声訂正 訂正後
¿º½ 実験方法
まず，音声訂正と通常の音声入力の比較を目的とした課題として，新聞記事から選定した つの文を，各入力手法を使用して入力した．被験者は，課題を行う
直前に，通常の音声入力，音声訂正 基本機能と即時誤り訂正機能 についての説明を受け，それぞれの入力手段について，上記の 文とは別の  文を用いて練習を行った．また，各入力手法の順番は，被験者ごとに交互に変わるように設定した．本課題の終了後には，音声訂正の基本機能，即時誤り訂正機能それぞれについてのアンケート  項目  段階評価 を実施した．
次に，発話中休止機能の評価を目的とした課題を行った．本研究で提案した発話中休止機能は， 節で述べたように，ユーザが発声中に音声認識処理を意図的に中断させることが可能となるものである．このような機能の実際の利用状況として，我々は，自発的に発声された音声に対する入力インタフェースを想定しており，そのため，休止状態にするためのトリガーとしては言い淀みを採用している．したがって，発話中休止機
図  アンケートの集計結果
能の評価を目的とした本課題においては，被験者が自発的に発声する状況になるべく近くなるように，頭の 本機能については，項目 ，，  ともに評定値が高中にある文を発声して入力している場面を想定し，以 く，候補を選択するだけで誤り訂正することの有効性，効率性が示された．% の即時誤り訂正機能について下のような手順で実験を行った．
まず，発話中休止機能についての説明を行い，その は，項目  が他に比べると低い評定値となった．これ
後被験者は実際に本機能を練習した．次に，本課題に は，発声途中から逐次表示される候補をチェックし，訂ついての説明を行った後，発話中休止機能を使うかど 正処理を行うことに対して，被験者が一定の負担や慌うかは被験者の自由という条件で，最初の課題とは別 ただしさを感じたためであるが，ある程度慣れることの 文の入力を行った．ただし，被験者には，各々の により有効に使用できそうであるという意見は多かっ文を入力する前に，提示した入力対象文を記憶して 頭 た 項目 ．  の発話中休止機能についても，% との中に入れて もらった．このとき，記憶に要する時 同様に機能を有効に使えたか 項目 &，という点につ間は特に制限せず，被験者の自由とした．文を入力す いて評定値が低かった．この理由としては，今回の実る際の制約として，発声している最中には，入力対象 験において，被験者が「言い淀む」ことに対して一定文は確認できないこととした．ただし，発話中休止機 の抵抗を感じたことが挙げられる．特に女性にそのよ能を使って休止状態にし，発声がなされていないとき うな意見が多かった．有効に使えた被験者においては，には，入力対象文を確認することは可能とした．本課 比較的長い文に対する入力が格段に楽になったとの意
題の終了後には，発話中休止機能について，また音声 見を得た 項目 "．最後に，項目  の音声訂正シス
テム全般については，& 割以上の被験者が今後使いた訂正全般についてのアンケートを実施した．
いとの意見を得られ，以上のアンケート結果からも本¿º¾ 実験結果インタフェースの有効性が確認できた．
表  に，通常音声入力，音声訂正の各認識率を示す．
表より，これまでに報告した音声データベース   まとめ
本稿では，音声認識による認識誤りをユーザによっ での結果   と同様に，実際の被験者実験においても，音声訂正はほとんどの誤りを訂正可能とし， て効率的かつ容易に訂正できる「音声訂正」という音高い訂正能力を示した．また，音声訂正では，通常の 声入力インタフェース機能と， 名の被験者による評音声入力に比べて約 !の入力にかかる所要時間を削 価実験について報告した．実験の結果，音声訂正によ減できていた 通常音声入力平均  秒，音声訂正 り文入力が効率化され，被験者にとって今後も使いた
平均 "" 秒．なお，同じ 文をキーボードで入力し いと思われるインタフェースであることがわかった．
今後は，未知語への対処を行い，より効率的な誤りたときの平均入力時間は   秒であった ただし，あくまでも訂正の際のタイプ入力の練習を兼ねて本課題 訂正処理について検討する予定である．本研究は「音の直前に実施したものであり，入力時間に関する厳密 声補完シリーズ」 の第  弾に位置付けられるが、こな比較対象にはならない．以上の結果より，音声訂正 れから言い淀み以外の非言語情報も積極的に取り入れ，は優れた訂正能力を持ち，より効率的に文入力が可能 音声ならではの機能を持った，さらに使いやすい音声であることがわかる．発話中休止機能の評価のための 入力インタフェースを実現していきたいと考えている．
課題では，本機能が使用されたのは，全被験者の全発参考文献
声のうちで約 !# であった．また，本課題の()*緒方，後藤+,-../ 論文集# /01-# -../
文を入力するにあたり，発話中休止機能を全く使用しなかったのは全  名のうち  名であり，今回実験に (-* 緒方，後藤 情処研報 -../ 231/1/# 4)54-/# -../
参加した多くの被験者が本機能を利用していたことが (4* # $   ,-..1# & '(/* 2$ #    2# 6)/# /# 404/..# -...
わかった．
(1* 後藤 他 信学論# 6748 # ))# -44.-4/.# -...
図  に音声訂正使用後のアンケート結果 各項目と (9* 後藤 情処研報 -../ 231-0# /)/9# -../
も 〜$ の  段階尺度 を示す． の音声訂正の基

日本音響学会講演論文集−16−

2005年9月