(57)【要約】【課題】音声認識の処理を行って所定のコマンドを実行する映像信号の再生装置において、簡易な構成でありながら、ユーザの使い勝手を向上させる。【解決手段】  入力部１２、符号化部１３、記録／読取部１４、制御部２等を備える。制御部２内のＲＯＭ３には、音声認識プログラム４１、認識文字表示プログラム４２が記録されている。表示装置１１０には、制御部２が処理できる所定のコマンドを文字で表示したものがＯＳＤ表示され、制御部２は、音声認識プログラム４１により音声信号の待機状態として、このコマンドに対応する音声がマイク１０１から収音されると、これとのパターン認識を行い、もっとも類似度の高いものを選択する。そしてこの類似度が所定の閾値以上であれば、制御部２は、このコマンドに対応する再生位置の制御を行う。【選択図】図２
2008158266.tif 000002
【特許請求の範囲】
【請求項１】
装置本体の所定の情報を表示するＯＳＤ画像を出力するＯＳＤ画像出力手段と、
所定のコンテンツを再生した映像信号と前記ＯＳＤ画像を重ねて出力する映像信号出力手段と、
音声を電気信号に変換するマイクから収音した音声を認識してその認識結果を出力する音声認識手段と、
前記認識結果に基づいて装置本体に対し所定のコマンドを実行する制御を行う制御手段と、を備えた再生装置において、
前記ＯＳＤ画像出力手段は、前記コンテンツの区切り位置と現在再生している位置との関係に基づいて、前記再生状態において前記制御手段が実行可能なコマンドを表したＯＳＤ画像を出力すると共に、前記区切り位置の前後の所定の再生位置で、特定のコマンドを表したＯＳＤ画像を出力し、該再生位置以外では、該ＯＳＤ画像の出力をせず、
前記音声認識手段は、現在出力しているＯＳＤ画像に対応するコマンドのみについて前記マイクから収音した音声のパターン認識を行い、
前記制御手段は、前記区切り位置の前後の所定の再生位置で、前記音声認識手段が、前記区切り位置の前後の所定の再生位置で表示される特定のコマンドを表したＯＳＤ画像に対応する音声を認識した場合に、その区切り位置の１つ前の区切り位置に戻って前記コンテンツの再生を開始させる再生装置。
【請求項２】
装置本体の所定の情報を表示するＯＳＤ画像を出力するＯＳＤ画像出力手段と、
所定のコンテンツを再生した映像信号と前記ＯＳＤ画像を重ねて出力する映像信号出力手段と、
音声を電気信号に変換するマイクから収音した音声を認識してその認識結果を出力する音声認識手段と、
前記認識結果に基づいて装置本体に対し所定のコマンドを実行する制御を行う制御手段と、を備えた再生装置において、
前記ＯＳＤ画像出力手段は、前記映像信号の再生状態に応じて、前記再生状態において前記制御手段が実行可能なコマンドを表したＯＳＤ画像を出力し、
前記音声認識手段は、現在出力しているＯＳＤ画像に対応するコマンドのみについて前記マイクから収音した音声のパターン認識を行う再生装置。
【請求項３】
前記ＯＳＤ画像出力手段は、前記コンテンツの区切り位置と現在再生している位置との関係に基づいて、前記ＯＳＤ画像を出力する請求項２に記載の再生装置。
【請求項４】
前記制御手段は、前記音声認識手段が、特定のコマンドを表したＯＳＤ画像に対応する音声を認識した場合に、その区切り位置の１つ前の区切り位置に戻って前記コンテンツの再生を開始させる請求項３に記載の再生装置。
【請求項５】
前記ＯＳＤ画像出力手段は、前記区切り位置の前後の所定の再生位置で、前記特定のコマンドを表したＯＳＤ画像を出力し、該再生位置以外では、該ＯＳＤ画像の出力をしない請求項４に記載の再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声認識の処理を行って所定の処理を行う映像信号の再生装置に関する。
【背景技術】
【０００２】
従来より、音声信号を認識して、検索コードの入力操作や所定の制御を行う表示装置が開示されている（特許文献１、２等）。
【０００３】
特許文献１では、リモコンマイクからの音声入力を音声認識処理サーバを介してＶＴＲに送信し、ＶＴＲ表示装置に音声認識結果候補を表示する映像信号記録再生装置が開示されている。特許文献２では、ユーザからの音声入力を解析し、応答内容を映像表示装置とともにスピーカから音声送出し、電子計算機使用学習支援等に利用するユーザ対話方法等が開示されている。
【特許文献１】特開２００５−６５１５６公報
【特許文献２】特開２００２−２３９０３公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の再生装置では、認識精度が好ましくなく、また、精度を向上するためには音声認識処理サーバを使用するなど（特許文献１等）、大掛かりな構成が必要であるなどの問題があった。一方、再生装置のユーザとしては、それほど多くのバリエーションのコマンドを必要とせず、音声認識処理サーバを使用するなどの構成はオーバースペックとなり、大掛かりでコストアップになるだけでなく、サーバを介しているので時間がかかるおそれがあった。
【０００５】
そこで、本発明は、音声認識の処理を行って所定の処理を行う映像信号の再生装置において、簡易な構成でありながら、ユーザの使い勝手を向上させることを目的とする。
【課題を解決するための手段】
【０００６】
本発明は、上述の課題を解決するための手段を以下のように構成している。
【０００７】
（１）  装置本体の所定の情報を表示するＯＳＤ画像を出力するＯＳＤ画像出力手段と、
所定のコンテンツを再生した映像信号と前記ＯＳＤ画像を重ねて出力する映像信号出力手段と、
音声を電気信号に変換するマイクから収音した音声を認識してその認識結果を出力する音声認識手段と、
前記認識結果に基づいて装置本体に対し所定のコマンドを実行する制御を行う制御手段と、を備えた再生装置において、
前記ＯＳＤ画像出力手段は、前記映像信号の再生状態に応じて、前記再生状態において前記制御手段が実行可能なコマンドを表したＯＳＤ画像を出力し、
前記音声認識手段は、現在出力しているＯＳＤ画像に対応するコマンドのみについて前記マイクから収音した音声のパターン認識を行う。
【０００８】
この構成では、前記映像信号の再生状態に応じて、前記再生状態において前記制御手段が実行可能なコマンドを表したＯＳＤ画像を出力するので、再生状態を操作できるコマンドがユーザにとって明確になり、ユーザの便宜に寄与する。また、前記音声認識手段は、前記ＯＳＤ画像に対応するコマンドのみについて前記マイクから収音した音声のパターン認識を行うので、大掛かりな構成や背後のネットワークを用いなくても、認識精度を向上させることができる。また、前記音声認識手段は、現在出力しているコマンドに対応する音声のみという限定された音声を認識しているから迅速に認識できる。また、ネットワークを用いていないので、ホストコンピュータと通信する必要がなく迅速に認識できる。したがって、制御手段は迅速に応答することができる。以上のとおり、簡易な構成でありながら、必要な操作入力を指示する音声について認識精度を向上させることができる。したがって、認識できずに、ユーザをいらいらさせたりすることを軽減でき、ユーザの使い勝手を向上させることができる。
【０００９】
なお、コンテンツは、一連の映像信号を連続して再生できるものであればよく、ビデオファイルが複数あっても、連続して再生できるものであればコンテンツに相当する。また、チャプタや、ユーザがマークした位置を含んでいてもよい。また、映像信号の再生状態には、再生の停止も含む。
【００１０】
（２）前記ＯＳＤ画像出力手段は、前記コンテンツの区切り位置と現在再生している位置との関係に基づいて、前記ＯＳＤ画像を出力する。
【００１１】
コンテンツ内の区切り位置では、次の区切り位置に移動したり、前の区切り位置に移動したりする操作が頻繁に要求される。この構成では、前記コンテンツの区切り位置と現在再生している位置との関係に基づいて、前記ＯＳＤ画像を出力し、ＯＳＤ画像に表されたコマンドについて前記音声認識手段が認識するので、こういった操作の操作性が向上する。
【００１２】
なお、この区切り位置は、コンテンツのうち、チャプタや、ユーザがマークした再生位置や、ビデオファイルが複数あって連続再生可能な場合の各ファイルの終了、開始位置であってもよい。
【００１３】
（３）  前記制御手段は、前記音声認識手段が、特定のコマンドを表したＯＳＤ画像に対応する音声を認識した場合に、その区切り位置の１つ前の区切り位置に戻って前記コンテンツの再生を開始させる。
【００１４】
特定のコマンドを表したＯＳＤ画像、例えば「もう一度」といった表示した場合に、制御手段は、これに対応する音声を認識した場合、その区切り位置の１つ前の区切り位置に戻って前記コンテンツの再生を開始させるので、ユーザが繰り返し学習するような場合に、適切な位置に戻すことができる。また、この構成では、前記区切り位置の後の所定時間においても、その区切り位置に戻るのではなく、その区切り位置の１つ前の区切り位置に戻る。ユーザとしては、このような区切り位置の前後では、この区切り位置に戻るのではなく、その前の区切り位置に戻るのが好ましい。したがって、ユーザが２度も同じ「もう一度」と、繰り返し述べるといったことが必要がないので、ユーザをいらいらさせることもない。また、ボタンを押すのと異なり、音声認識手段の認識誤差が生じる虞があるが、ユーザが２度述べる必要がないので、認識誤差の影響を受けることを少なくすることができる。
【００１５】
（４）  前記ＯＳＤ画像出力手段は、前記区切り位置の前後の所定の再生位置で、前記特定のコマンドを表したＯＳＤ画像を出力し、該再生位置以外では、該ＯＳＤ画像の出力をしない。
【００１６】
この構成では、前記区切り位置の前後の所定の再生位置でしか、前記再度再生する旨の操作入力を表したＯＳＤ画像を出力しないので、再生するコンテンツの邪魔にならない。また、ユーザは、この表示を基にして、この区切り位置、例えばチャプタが終了しつつあることを知ることができるから、ユーザの便宜に供する。この場合に、ユーザが前記再度再生する旨のコマンドを音声で吹き込むと、制御手段は、その区切り位置の１つ前の区切り位置に戻って再生を開始するから、繰り返し学習するのに効果的である。
【発明の効果】
【００１７】
簡易な構成でありながら、必要な操作入力を指示する音声について認識精度を向上させることができ、ユーザの使い勝手を向上させることができる。
【発明を実施するための最良の形態】
【００１８】
図１、図２を用いて、この発明の実施形態であるＤＶＤレコーダ１の構成について説明する。図１は、ＤＶＤレコーダ１と、これと同時に使用する周辺の装置を表す図である。図２は、ＤＶＤレコーダ１内部の主要部の構成を示すブロック図である。
【００１９】
ＤＶＤレコーダ１の外には、マイク１０１、表示装置１１０、スピーカ１１１を備える。ユーザ１０４は、マイク１０１にＤＶＤレコーダ１の操作を指示するコマンドの音声を吹き込む。表示装置１１０は、ＤＶＤレコーダ１内部で処理された映像信号の映像を表示する。スピーカ１１１は、ＤＶＤレコーダ１内部で処理された音声信号を音声に変換して放出する。
【００２０】
また、表示装置１１０は、この映像に重ねて、ＤＶＤレコーダ１の操作を音声で指示するコマンド（以下単にコマンドという）を表示する。このコマンドは、再生するコンテンツの進行に応じて表示されるものであり、「もう一度」９１、「次へ」９２、「最初から」９３などを表示する。ＤＶＤレコーダ１は、マイク１０１から吹き込まれた音声のコマンドを認識してこのコマンドに対応する各種動作の制御を行う。
【００２１】
図２に示すように、ＤＶＤレコーダ１は、映像信号を処理する信号系統である入力部１２、符号化部１３、記録／読取部１４、デコーダ１５、出力部１７と、録画予約に用いるタイマー１９と、操作部６を備えている。
【００２２】
入力部１２には、アナログ形式の映像信号、音声信号が入力される。アンテナ（不図示）で受信されたアナログ形式のテレビ放送信号や、ＶＨＳテープのドライブから入力されたアナログ形式の映像信号、音声信号を入力する。
【００２３】
符号化部１３は、入力部１２で入力したアナログ形式の映像信号および音声信号をデジタル信号に変換して、これらをエンコードする。符号化部１３は、このエンコードしたデータを記録／読取部１４に出力する。
【００２４】
記録／読取部１４は、符号化部１３が生成したデータをＤＶＤ１００に記録する処理や、ＤＶＤ１００に記録されているタイトルの記録データを読み取る処理を行う。記録／読取部１４は、光ディスク記録／読取部１４１とハードディスクドライブ１４２（ＨＤＤ１４２と略す）とを備える。
【００２５】
光ディスク記録／読取部１４１は、ＤＶＤ１００にレーザ光を照射し、その反射光を検出するピックアップヘッド（不図示）や、ＤＶＤ１００に照射しているレーザ光の照射位置を制御するフォーカスサーボ制御やトラッキングサーボ制御等を行うサーボ制御部（不図示）等を有している。データの記録時には、記録／読取部１４は、ＤＶＤ１００に照射するレーザ光を、ＤＶＤ１００に記録する記録データに基づいて変調する記録制御を行う。また、ＤＶＤ１００に記録されているデータを読み取って増幅したＲＦ信号をデコーダ１５に入力する。また、光ディスク記録／読取部１４１は、記録／読取部１４が読み取ったＲＦ信号から、映像データ、および音声データを抽出する。
【００２６】
ＨＤＤ１４２は、符号化部１３でエンコードされたデータをハードディスク１４３（ＨＤ１４３と略す）に記録する。また、ＨＤＤ１４２は、ＨＤ１４３に記録されたデータを読み取って、デコーダ１５に送る。
【００２７】
デコーダ１５は記録／読取部１４で読み取ったデータをデコードし、デコードした映像データ、および音声データをＤ／Ａ変換して、ＯＳＤ合成部１６に入力する。
【００２８】
ＯＳＤ合成部１６（オンスクリーンディスプレイ）は、本体の設定情報等各種の情報を表示する映像信号を生成する。またデコーダ１５から映像信号が出力されている場合には、この映像信号と合成する。もちろん、ＯＳＤを表示しない状態にすることもできる。
【００２９】
出力部１７は、読取信号処理部１５で処理された記録データをＤ／Ａ変換して、再生信号を出力する。出力部１７には、映像を表示する表示装置１１や、音声を放出するスピーカ１２が接続されている。出力部１７は、読取信号処理部１５から入力された映像データに基づく映像信号、音声信号を同期させて出力する。タイマー１９は、時間を測定するものであり、録画指示するタイミングを測定するのに用いる。
【００３０】
制御部２は、ＣＰＵ、制御データ格納用のＲＯＭ４、ＲＡＭ５を備え、操作部６で受け付けた入力に基づいて、以上で示した各部の動作を制御する。ＲＯＭ４には、各種プログラムが記録されている。例えば、音声認識プログラム４１、認識文字表示プログラム４２が記録されている。また、ＲＡＭ５は、ＲＯＭ４内部のプログラムで計算した結果を一時的に記憶するものであり、マイク１０１、入力部１２、符号化部１３を介して入力した音声データ５１を記憶する。
【００３１】
操作部６は、装置本体に対する入力操作を受け付ける。操作部６は、複数の操作キーや、図示していないリモコン装置から送信されてきた装置本体に対する制御コードを受信するリモコン受信部を有している。操作部６は、ユーザにより操作された操作キーに応じた入力を受け付け、これらに対応したコードや、リモコン受信部で受信した制御コードを制御部９に伝達する。例えば操作部６は、録画（即ち、映像信号のＤＶＤ１００への記録）の指示や、録画の予約の指示入力を受け付ける。
【００３２】
次に、図３を用いて、ＤＶＤレコーダ１の画面の表示例について説明する。図３（Ａ）は、表示装置１１０の画面表示例を表しており、英会話のコンテンツを表示している。図３（Ｂ）は、各種コマンドが有効である範囲と、このコマンドを認識した場合のコンテンツの再生する移動先を示している。このコンテンツを再生中に画面の端に、音声認識プログラム４１が受け付けることができるコマンドを表示している。音声認識プログラム４１は、ここで表示されたもの以外は判断しない。したがって、音声認識プログラム４１や制御部２のハードウェアを簡易に構成でき、認識精度を向上させることができる。また、迅速に認識できるから、制御部２は迅速に応答することができ、ユーザをいらいらさせることを軽減できる。
【００３３】
図３（Ｂ）において、開始から、終了までの水平の直線はコンテンツの時間を表しており、このコンテンツは、チャプタ１〜４が付されている。図中チャプタ２〜４は、チャプタの先頭位置を表している。また、矢印の先は、コマンドである「もう一度」９１、「次へ」９２、「最初から」９３を認識した場合の移動先を表し、コの字型の範囲は、コマンドが有効である範囲を表している。
【００３４】
「もう一度」９１は、チャプタ（図３ではチャプタ２）の区切りをはさんで所定範囲の時間帯（例えば１分ずつとする）で有効であり、このコマンドを認識すると、その前のチャプタ（図３ではチャプタ２）の先頭に戻る。これによりユーザは、英会話のチャプタ１のコンテンツを最初から繰り返し視聴することができ、学習効果を高めることができる。また、区切り位置の後の所定時間（例えば１分）においても、再度再生させる旨の操作入力を表したＯＳＤ画像に対応する音声を認識した場合には、その区切り位置に戻るのではなく、その区切り位置の１つ前の区切り位置に戻る。ユーザとしては、このような区切り位置の前後では、この区切り位置に戻るのではなく、その前の区切り位置に戻るのが好ましい。したがって、ユーザが２度も同じ「もう一度」９１と、繰り返し述べるといったことが必要がないので、ユーザをいらいらさせることもない。また、ボタンを押すのと異なり、音声認識手段の認識誤差が生じる虞があるが、ユーザが２度述べる必要がないので、認識誤差の影響を受けることを少なくすることができる。
【００３５】
「次へ」９２は、所定のチャプタの最初からそのチャプタの終了直前まで有効であり、この「次へ」９２を認識したときは、現在のチャプタ（図３では、チャプタ２の直後からチャプタ３の直前まで）から、次のチャプタ（図３ではチャプタ３）の先頭に移動する。「最初から」９３は、コンテンツの開始直後から終了までの間で有効であり、この間に「最初から」９３のコマンドを認識すると、コンテンツの再生位置を開始位置に移動させる。
【００３６】
また、「停止」９４を認識したときは、制御部２は、再生を停止する。再生が停止されている状態では、「停止」９４の代わりに「再生」が表示され、再生させる旨のコマンドを受け付ける。
【００３７】
なお、図３（Ｂ）では、特定のチャプタについて移動先を図示しているが、いずれのチャプタにおいても同様にコマンドを認識して、所定のチャプタに移動する。また、「もう一度」９１が適用される範囲をチャプタの区切りをはさんで所定範囲の時間帯、例えば１分ずつとしたが、チャプタの区切りの前については、その直前のチャプタ（図２であればチャプタ２）開始直後の全範囲とすることもできる。
【００３８】
図４のフロー図を用いて、ＤＶＤレコーダ１の再生処理について説明する。この処理は、制御部２が音声認識プログラム４１の実行した場合に動作させるフローであり、ユーザにより所定のコンテンツが再生されるか再生される待機状態か、再生が停止されている状態で行う。また、コンテンツが再生されている場合には、この再生と並行して実行する。
【００３９】
ＳＴ１では、マイク１０１から入力した音声信号の冒頭の信号レベルが所定の閾値以上であるか判断する。ＳＴ１の判断で、マイク１０１から入力した音声信号の冒頭の信号レベルが所定の閾値以上でなければ（ＳＴ１でのＮＯ）、このフローは待機状態となる。この信号レベルが所定の閾値以上であれば（ＳＴ１のＹＥＳ）、ＳＴ２に移動する。
【００４０】
ＳＴ２で、制御部２は、符号化した音声信号の録音を開始する。具体的には、入力部１２、符号化部１３を動作させ、符号化部１３から出力した音声データ５１をＲＡＭ５に記憶させる。
【００４１】
ＳＴ３で、現在表示装置１１０に表示しているコマンドを音声信号にしたモデル音声と録音した音声パターンと比較して、類似度を判定する。図３の例では、「もう一度」９１、「次へ」９２、「最初から」９３、「停止」９４を表示しているから、これらのパターンのうち音声データ５１に最も近いものを選択し、類似度を計算する。この計算は公知の方法を用いることができる。
【００４２】
ＳＴ４で、ＳＴ３で比較した類似度が所定の閾値以上であるか判断する。ＳＴ４で、ＳＴ３で比較した類似度が所定の閾値以上であれば（ＳＴ４のＹＥＳ）、ＳＴ６で、制御部２はＳＴ２で記憶した音声データ５１のコマンドに対応する所定の動作を指示し、ＳＴ１に戻り、次のコマンドを受け付ける待機状態になる。ＳＴ３で比較した類似度が所定の閾値以上でなければ（ＳＴ４のＮＯ）、コマンドでない音声がマイク１０１に収音されたと判断でき、ＳＴ５で、録音した音声データ５１を消去してＳＴ１へ戻る。
【００４３】
なお、ＳＴ３、ＳＴ４では、類似度を判断したが、それ以外にも、公知の音声認識により、表示装置１１０に表示したコマンドと、ＳＴ２で録音した音声データ５１を比較してもよい。
【００４４】
さらに、図３の例では、常時、「もう一度」９１、「次へ」９２、「最初から」９３のコマンドを画面に表示するとしたが、「もう一度」９１については、チャプタの区切り前後の所定の時間の範囲だけ表示するようにしてもよい。これにより、画面がふさがっている面積を減らすことができる。また、ユーザは、この表示を基にして、この区切り、例えばチャプタが終了しつつあることを知ることができるから、ユーザの便宜に供する。この場合に、ユーザが「もう一度」９１のコマンドを音声で吹き込むと、制御部２は、区切り前後のチャプタの１つ前のチャプタに戻って再生を開始するから、繰り返し学習するのに効果的である。
【００４５】
以上の実施形態について補足する。
以上の実施形態では、ＤＶＤレコーダ１として説明したが、必ずしも映像信号を記録するための構成は必要でない。
【００４６】
また、ＤＶＤ１００、ＨＤ１４１ａに記録された映像信号と共に、所定の制御信号を入力するように映像信号がフォーマットされていれば、その信号に対応するコマンドを表示させてもよい。例えばゴルフのスイングに伴って、スイングが終了した時点で制御信号が発せられ、「スローモーション」という表示を表示装置１１０に出力し、このコマンドの音声を収音した場合には、予め定めた遅い再生速度で再度、再生するようにしてもよい。
【００４７】
また、以上では、図３で英会話の学習を例にとって説明したが、体操や、ゴルフの映像など手がふさがっている場合に、胸につけたマイク１０１から音声を入力するなどの応用例も可能である。また、このような例に限らず、コンテンツの進行に伴って所定の動作の実行の指示を受け付ける場合に、この実施形態のＤＶＤレコーダ１を応用できる。
【００４８】
なお、以上の実施形態では、チャプターごとに「もう一度」９１、「次へ」９２、「最初から」９３としたが、ユーザがマークした再生位置や、ビデオファイルが複数あって連続再生可能な場合の各ファイルの終了、開始位置であってもよい。
【図面の簡単な説明】
【００４９】
【図１】第１実施形態のＤＶＤレコーダの使用形態を表す図
【図２】第１実施形態のＤＶＤレコーダの構成図
【図３】第１実施形態のＤＶＤレコーダの画面の表示例
【図４】第１実施形態の音声認識処理のフロー図
【符号の説明】
【００５０】
１−ＤＶＤレコーダ、  １２−入力部、  １３−符号化部、
１４−記録／読取部、  １４１−光ディスク記録／読取部、
１４１ａ−ハードディスク（ＨＤ）、  １４２−ＨＤＤ、
１５−デコーダ、  １６−ＯＳＤ合成部、  １７−出力部、  １９−タイマー、
２−制御部、  ３−ＲＯＭ、  ４１−音声認識プログラム、
４２−認識文字表示プログラム、  ５−ＲＡＭ、  ５１−音声データ
６−操作部、９１−「もう一度」、  ９２−「次へ」、  ９３−「最初から」
９４−「停止」、  １００−ＤＶＤ、  １０１−マイク、  １０４−ユーザ、
１１０−表示装置、  １１１−スピーカ
【図１】
2008158266.tif 000003
【図２】
2008158266.tif 000004
【図３】
2008158266.tif 000005
【図４】
2008158266.tif 000006