(57)【特許請求の範囲】
【請求項１】
話者の学習用音声を用いて音響モデルパラメータを再学習し、話者に適応した音響モデルを作成する話者適応学習手段と、誤認識した単語の認識結果に相当する音素又は音節からなる音響モデル系列を正解の音素又は音節系列として発音辞書に追加する話者登録学習手段と、認識しやすさが発声内容に依存するかどうかを判断する手段と、各話者の認識しやすさと発声内容の依存の強さによって、話者適応学習手段と話者登録学習手段との選択を行い、どちらかの学習を話者に促す手段を有することを特徴とする話者学習装置。
【請求項２】
認識しやすさが発声内容に依存するかどうかを判断した結果、依存すると判断された場合には話者登録学習手段を用い、依存しないと判断された場合には話者適応学習手段を用いることを特徴とする請求項１記載の話者学習装置。
【請求項３】
認識のしやすさが発声内容に依存するかどうかを判断する手段は、認識スコアが所定のしきい値以下であるか、所定のしきい値以上であっても誤認識している音素又は音節の全発声に含まれる音素又は音節に対する割合により判断を行う請求項１記載の話者学習装置。
【請求項４】
話者の学習用音声を用いて音響モデルパラメータを再学習し、話者に適応した音響モデルを作成する話者適応学習ステップと、誤認識した単語の認識結果に相当する音素又は音節からなる音響モデル系列を正解の音素又は音節系列として発音辞書に追加する話者登録学習ステップと、認識しやすさが発声内容に依存するかどうかを判断するステップと、各話者の認識しやすさと発声内容の依存の強さによって、話者適応学習手段と話者登録学習手段との選択を行い、どちらかの学習を話者に促すステップとを有することを特徴とする話者学習方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、音声認識における話者学習装置及び方法に関するものである。
【０００２】
【従来の技術】
以下、従来の話者学習法を説明する。従来の不特定話者音声認識システムでは、なるべく不特定多数の話者に対応できる標準的な音響モデルを構築して用いているが、実用上では、話者の発声特徴は多種多様であり、全ての使用話者に対して高性能を保証する音響モデルを学習することは困難である。そこで従来は、認識しない話者について、話者自身の発声を用いて音響モデルパラメータを再学習し、話者に適応した音響モデルを再構築することにより全話者に対する性能を保証する話者適応手段をとっている。この話者適応には話者の特徴を捉えるに十分な多くの学習用音声が必要であるが、発声者の負担になるので、最低限の発声回数に絞る様々な工夫がなされている（たとえば、特許第2037877）。一方、別の学習方法として、誤認識した単語の認識結果に相当する音響モデル系列を正解系列として発音辞書に追加し、誤った系列として認識したものを正しい系列として認識することを可能とする話者登録方法もある（特開平8-171396号公報）。
【０００３】
【発明が解決しようとする課題】
従来の話者適応法は、学習データが十分あれば、原理的に確実に認識性能を向上できる手法であるが、ほとんど全ての実用上システムでは行われているように、話者の学習負担を考慮して発声回数が絞られた場合、学習データに存在しない一部の発声に対して、逆に認識率が低下してしまう可能性があるという問題がある。一方、従来の話者登録法は、学習された発声部分の認識率は確実に向上するが、多くの発声内容で認識しにくい話者の場合は、学習時に認識しにくい全ての発声をしなければならず学習に負担がかかる、という問題がある。
【０００４】
本発明の目的は、従来の話者適応学習と話者登録学習の問題点を解決し、話者に負担にならない学習発声量で、学習後に確実に認識率を向上させる話者学習法を提供するものである。
【０００５】
【課題を解決するための手段】
上述した課題を解決するために、本発明は、話者の学習用音声を用いて音響モデルパラメータを再学習し、話者に適応した音響モデルを作成する話者適応学習手段と、誤認識した単語の認識結果に相当する音素又は音節からなる音響モデル系列を正解の音素又は音節系列として発音辞書に追加する話者登録学習手段と、認識しやすさが発声内容に依存するかどうかを判断する手段と、各話者の認識しやすさと発声内容の依存の強さによって、話者適応学習手段と話者登録学習手段との選択を行うものである。
【０００６】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態の話者学習を説明する。
【０００７】
図1は本発明の実施形態の話者学習のブロック図である。
【０００８】
各話者が自分に対する認識性能を向上させる必要を感じた場合に選択するように設定された話者学習機能において、まず、システムからユーザに対し特定単語発声を促し、話者の特定単語発声が入力される。この発声内容は、各話者に対して、予め準備した標準音声がどのくらい適切かを判断するのに必要な最低限の内容であり、たとえば日本語認識の場合は、５母音を全て含む単語「マイクテスト」などの内容がふさわしい。システムが単語認識の場合には５母音が全て含まれるように対象単語から複数単語を選択しても良い。
【０００９】
この発声に対して音声認識処理１で通常の認識処理が行われ、認識スコア算出処理２で認識結果と認識信頼度スコアが計算される。認識結果は、認識結果の音素または音節系列と正解の音素系列とを比較し、異なっている部分を誤りとし一致している部分を正解として、正解系列の各音素毎に正誤を記録しておく。また信頼度スコアは、たとえば正解音素または音節系列と発声された結果との各音素または音節毎の音響的距離スコアであり、距離尺度として重み付きケプストラム距離を用いた場合は、各音素の信頼度は式１で算出されるものを用いてもよい。
【００１０】
【数１】
0003876703.tif 000002
【００１１】
学習法決定処理３では、信頼度スコアが閾値以下であるか、閾値以上であったとしても誤認識している音素または音節（適応候補音素または音節と呼ぶ）の全発声に含まれる音素または音節に対する割合を計算する。この割合が大きい場合は、発声内容に依存せず話者の発声特徴が標準音声に適応していないことが推定され、全ての標準音声を話者に適応するように学習する必要があると考えられる。また、この割合が小さい場合には、誤認識は発声内容に依存しており、話者の発声特徴と標準音声は適応しているが、特定の発声においてのみ学習が必要であると考えられる。従って、この割合が一定値以上である場合、話者適応学習を選択し、一定値以下である場合、話者登録学習を選択する。
【００１２】
話者適応学習を選択した場合は、話者適応処理４で、ユーザにさらに適応するに必要最低限の発声を促す。話者適応法は、たとえば、特開平5-53599に記載のＶＦＳ法を利用した場合には、標準音響モデルと学習用入力音声パラメータとをマッチングし、対応するパラメータの関係からファジー級関数を求め、求められた関数を重みとして、標準音声を学習用入力音声に近づくように標準音響モデルのパラメータを更新している。
【００１３】
また、話者登録学習を選択した場合には、話者登録処理５で、学習決定処理で算出した適応候補音素または音節が含まれている単語のみの発声を促し、適応候補音素に相当する音素系列を含む単語の音素系列に、発声に対する音素または音節認識結果系列を発音辞書７に追加する。たとえば、「メニュー」という単語が誤認識を起こす場合、この単語のみの発声を促し、その認識結果が「デニュー」であったとする。音響モデルとして音素モデルを使用している場合には、「メニュー」の正しい音素モデル系列は/m e ny u u/であり、認識結果音素系列は/d e ny u u/である。この話者の場合、単語の始めであり、次に/e/が続く音素/m/は/d/に誤る傾向があることがわかる。そこで、認識対象単語の中で、単語の先頭であり、次が/e/である/m/は/d/と誤っても/m/と認識するように、発音辞書に音素系列を追加する。この例の場合には、もともと辞書上で「メニュー/m e ny u u/」であったところに/d e ny u u/を追加し、「メニュー/m e ny u u/または/d e ny u u/」と辞書を変更する。これにより、この話者が「メニュー」を/d e ny u u/  と認識しても結果的には「メニュー」が認識できることになる。
【００１４】
以上のように、話者の発声が発声内容に依存せずに誤るかどうかを推定し、発声内容に依存しない場合は話者適応学習、依存する場合は話者登録学習を行うことにより、従来の話者適応学習で、適応するための多くの学習発声をしたにもかかわらず認識率が低下する問題を、話者適応学習ではなく話者登録学習を行うことで解決することができる。また、従来の話者登録学習で、多くの単語を発声しなければ学習できなかった問題を、話者登録学習ではなく話者適応学習を行うことで解決することができる。
【００１５】
以上詳述したように、本発明に係る実施形態の話者学習法は、各話者の認識しやすさと発声内容の依存の強さによって、話者適応学習を行うか話者登録学習を行うかの選択を行い、どちらかの学習を話者に促すことにより、従来の話者適応学習において、適応するための多くの学習発声をしたにもかかわらず認識率が低下する問題を、話者適応学習のかわりに話者登録学習を自動選択することで解決することができる。また、従来の話者登録学習において、多くの単語を発声しなければ学習できなかった問題を、話者登録学習のかわりに話者適応学習を自動選択することで解決することができる。従って、話者に負担にならない程度の学習量で、確実に認識率を向上させることが可能である話者学習法を提供するものである。
【００１７】
以上詳述したように、本発明に係る実施形態の話者学習法は、認識しやすさが発声内容に依存するかどうかを判断した結果、依存すると判断された場合には話者登録学習を行い、依存しないと判断された場合には話者適応学習を行うことにより、従来の話者適応学習において、適応するための多くの学習発声をしたにもかかわらず認識率が低下する問題を、話者適応学習のかわりに話者登録学習を自動選択することで解決することができる。また、従来の話者登録学習において、多くの単語を発声しなければ学習できなかった問題を、話者登録学習のかわりに話者適応学習を自動選択することで解決することができる。従って、話者に負担にならない程度の学習量で、確実に認識率を向上させることが可能である話者学習法を提供するものである。
【００１９】
以上詳述したように、本発明は、各話者の認識しやすさと発声内容の依存の強さによって、話者適応学習を行うか話者登録学習を行うかの選択を行い、どちらかの学習を話者に促すことにより、従来の話者適応学習において、適応するための多くの学習発声をしたにもかかわらず認識率が低下する問題を、話者適応学習のかわりに話者登録学習を自動選択することで解決することができる
【図面の簡単な説明】
【図１】本発明の一実施例である話者学習法ブロック図
【符号の説明】
１  音声認識
２  認識スコア算出
３  学習法決定
４  話者適応
５  話者登録
６  音響モデル
７  発音辞書
８  認識スコアバッファ
【図１】
0003876703.tif 000003