(57)【要約】【課題】所定の言語の音声信号及び字幕を伴う動画信号を記録したディスクを語学学習用として有効に活用することのできる映像音声再生装置を提供する。【解決手段】所定の言語の音声信号及び字幕を伴う動画信号を記録したディスク１を再生する映像音声再生手段と、前記映像音声再生手段が再生した前記所定の言語に対応する字幕を含む映像信号を表示する表示手段１７及び前記映像音声再生手段が再生した音声信号を出力する音声出力手段１８と、前記映像音声再生手段が再生した音声信号をストリーミング録音すると共に利用者が発生した音声信号を録音することのできる音声録音手段１１，１２と、前記音声録音手段がストリーミング録音した音声信号を再生すると共に前記利用者が発声した音声信号の録音信号を再生することのできる音声再生手段１４を備えた。【選択図】        図１
2004320547.tif 000002
【特許請求の範囲】
【請求項１】
所定の言語の音声信号及び字幕を伴う動画信号を記録したディスクを再生する映像音声再生手段と、
前記映像音声再生手段が再生した前記所定の言語に対応する字幕を含む映像信号を表示する表示手段及び前記映像音声再生手段が再生した音声信号を出力する音声出力手段と、
前記映像音声再生手段が再生した音声信号をストリーミング録音すると共に利用者が発生した音声信号を録音することのできる音声録音手段と、
前記音声録音手段がストリーミング録音した音声信号を再生すると共に前記利用者が発声した音声信号の録音信号を再生することのできる音声再生手段を備えたことを特徴とする映像音声再生装置。
【請求項２】
所定の言語音声信号及び字幕を伴う動画を記録したディスクを再生する映像音声再生手段と、
前記映像音声再生手段が再生した前記所定の言語に対応する字幕を含む映像信号を表示する表示手段及び前記映像音声再生手段が再生した音声信号を出力する音声出力手段と、
前記映像音声再生手段が再生した音声信号をストリーミング録音すると共に利用者が発生した音声信号を録音することのできる音声録音手段と、
前記音声録音手段がストリーミング録音した音声信号を再生すると共に前記利用者が発声した音声信号の録音信号を再生することのできる音声再生手段を備え、
前記動画信号の再生の一時停止時に前記字幕内容に対応するストリーミング録音内容を再生することを特徴とする映像音声再生装置。
【請求項３】
所定の言語の音声信号を伴う動画を記録したディスクを再生する映像音声再生手段と、
前記映像音声再生手段が再生した前記所定の言語に対応する字幕を含む映像信号を表示する表示手段及び前記映像音声再生手段が再生した音声信号を出力する音声出力手段と、
前記映像音声再生手段が再生した音声信号をストリーミング録音すると共に利用者が発声した音声信号を録音することのできる音声録音手段と、
前記音声録音手段がストリーミング録音した音声信号を再生すると共に前記利用者が発声した音声信号の録音信号を再生することのできる音声再生手段を備え、
前記動画信号の再生の一時停止時に前記字幕内容に対応するストリーミング録音内容を再生すると共に、利用者が発声した音声信号の録音内容を再生することを特徴とする映像音声再生装置。
【請求項４】
請求項１ないし請求項３の何れか１記載の映像音声再生装置において、
前記映像音声再生装置は着脱自在の記録媒体を備え、該記録媒体に前記映像音声再生手段が再生した音声信号あるいは前記利用者が発声した音声信号を記録することを特徴とする映像音声再生装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は映像音声再生装置に係り、特に所定の言語の音声信号及び字幕を伴う動画信号を記録したディスクを再生する映像音声再生装置に関する。
【０００２】
【従来の技術】
近年、英会話等の語学学習が盛んになり、種々の学習装置や学習方法が採用されている。中でもランダムアクセスが容易にできるディスク状記録媒体とその再生装置を用いた語学学習が盛んに行われるようになってきた。
【０００３】
ディスク状記録媒体としては、例えば映画等の動画をＤＶＤディスクにディジタル記録したディジタルムービーソフトが国内、欧米、アジア等で数多く販売されており、今後ますます増加するものと予測される。
このような各国の母国語で記録された映像ソフトにはネイティブな会話がふんだんに含まれている。このため、このような映像ソフトは語学学習を行うための活きた教材としては非常に有効である。また、このような映像ソフトは、内容を変更することなく、著作権の問題に影響されることなく、教材用として最小限のコストで利用できることが望ましい。
【０００４】
特許文献１には、原ディジタルムービーソフト自体を改変することなく、別途制作された語学学習補助ソフトを追加し、該語学学習補助ソフトをパーソナルコンピュータで再生する語学学習システムが開示されている。
【０００５】
このシステムでは、原ディジタルムービーソフトの言語字幕及びそのテキストデータ、あるいは代表的な場面の特徴等を含んだ必要事項を記憶すると共に前記必要事項に含まれている前記原ディジタルムービーソフトのアドレスを記憶した専用の付属語学学習補助ソフトを作製し、更に、前記原ディジタルムービーソフトの内容と前記語学学習補助ソフトの機能を関連付けした専用のブラウザソフトを用い、該ブラウザソフトによって形成されるメニュー画面を操作して所望の語学学習を行うようにしている。
【０００６】
【特許文献１】
特開２００１−２２２６５号公報
【０００７】
【発明が解決しようとする課題】
前記従来技術によれば、前記原ディジタルムービーソフトを改変することなく、語学学習を行うことができる。しかしながらこのシステムでは、別途、専用の語学学習補助ソフトを制作しなければならない。また、この語学学習補助ソフトのそれぞれを機能的に関連付けて作動せしめるためのブラウザソフトが必要となり、システムが複雑になる。
【０００８】
本発明はこれらの問題点に鑑みてなされたもので、所定の言語の音声信号及び字幕を伴う動画信号を記録したディスクを語学学習用として有効に活用することのできる映像音声再生装置を提供する。
【０００９】
【課題を解決するための手段】
本発明は、上記の課題を解決するために次のような手段を採用した。
【００１０】
所定の言語の音声信号及び字幕を伴う動画信号を記録したディスクを再生する映像音声再生手段と、前記映像音声再生手段が再生した前記所定の言語に対応する字幕を含む映像信号を表示する表示手段及び前記映像音声再生手段が再生した音声信号を出力する音声出力手段と、前記映像音声再生手段が再生した音声信号をストリーミング録音すると共に利用者が発生した音声信号を録音することのできる音声録音手段と、前記音声録音手段がストリーミング録音した音声信号を再生すると共に前記利用者が発声した音声信号の録音信号を再生することのできる音声再生手段を備える。また、前記ストリーミング録音した音声信号あるいは前記利用者が発声した音声信号の録音信号の再生（繰り返し再生を含む）は前記動画信号の再生の一時停止時（字幕再生時を含む）に行う。これにより、前記ディスクを語学学習用として有効に利用することができる。
【００１１】
【発明の実施の形態】
以下、本発明の実施形態を添付図面を参照しながら説明する。図１は、本発明の実施形態にかかる映像音声再生装置を説明する図である。図１に示すように、映像音声記録再生装置は、キー操作入力及び動作表示を行うためのキー操作表示部３、液晶モニタ等からなるディスプレイ部１７、及びスピーカ部１８を具備している。利用者はキー操作表示部３を操作することによって光ディスク１から記録データを再生する。記録データは、映像データ、サブピクチャー（副映像）データ（字幕データ等を含む）及び音声データを含み、これらのデータは、ビデオ信号及びオーディオ信号に分離して復調される。ディスプレイ部１７は、映像信号をもとに映像を再生し、スピーカ部１８は、オーディオ信号をもとに音声を再生する。
【００１２】
光ディスク装置は、図１に示されるように、光ディスク１、ディスクドライブ部２、キー操作表示部３、システムＣＰＵ部４、リモコン受信部５、システムＲＯＭ／ＲＡＭ部６、システムプロセッサ部７、データメモリ部９、ビデオデコーダ部１３、オーディオデコーダ部１４、サブピクチャー（副映像）デコーダ部１５、Ｄ／Ａ変換及びデータ再生処理部１６、及びＯＳＤ作成処理部２２から構成される。
【００１３】
システムプロセッサ部７は、システムタイムクロック（ＳＴＣ）７Ａ及びレジスタ７Ｂを備え、また、ビデオデコーダ部１３、オーディオデコーダ部１４、及びサブピクチャーデコーダ部１５は、同様にシステムタイムクロック（ＳＴＣ：Ｓｙｓｔｅｍ  Ｔｉｍｅ  Ｃｌｏｃｋ）１３Ａ、１４Ａ、１５Ａを備えている。
【００１４】
次に、前記サブピクチャー（副映像）データについて説明する。ＤＶＤビデオディスクは、映像データをＭＰＥＧエンコードして記録する（これを主映像データという）以外に、ビットマップデータを圧縮して（ランレングス）記録することがあり、これをサブピクチャー（副映像）データと呼ぶ。サブピクチャーデータはデータ形式の制限から、ディスク再生に際して付加的に使用されるもので、メニュー及びサブタイトル（字幕）のデータとしての使用に大別でき、マルチランゲージ対応、各種画面表示対応（レターボックス等）などに使用されている。
【００１５】
また、ディスクドライブ部２から送出されるデータストリームは、同時刻の映像・音声・サブピクチャーなどのデータが、別々に分かれて順次送られるため、これらのデータを分離後に時間合わせをして再生する必要がある。例えば、ＭＰＥＧ２データデコードに際しては、Ｉ、Ｐ、Ｂの各ピクチャーを再生する（元の各コマの差分情報から元の画像（コマ）を作成する）ため、あるいは再構成する（時間的な動きを予測した情報を送るために、各コマが、時間的に元の順序で並んでいない場合に時間順に再構成する）ため、３フレーム分の容量のメモリ（データメモリ部９）を使用している。
【００１６】
図示しないバッファメモリからビデオビットストリームのみを取り出し、ビデオデコーダ部１３によりで元に戻された映像データは、一旦データメモリ部９に送られる。データメモリ部９では、前記ビットストリーム内にあるビデオプレゼンテーションタイムスタンプ（ＰＴＳ：各コマの表示時刻情報）をもとに、前記該ＰＴＳが前記ＳＴＣに一致した時、前記映像データを前記データメモリ９から読み出して出力側へ送り出す。
【００１７】
Ｄ／Ａ変換及びデータ再生処理部１６は、マルチアスペクト変換、映画ソースに対するフレームレート（３−２プルダウン）変換、Ｉ，Ｐピクチャのみを再生する可変速再生、字幕表示の選択、表示位置の指定等のプレーヤ機能を実現する。
【００１８】
オーディオ及びサブピクチャーの各ビットストリームは、それぞれ専用のデコーダ（オーディオデコーダ部１４、サブピクチャーデコーダ部１５）で処理され、更にオーディオ信号は、Ｄ／Ａ変換及びデータ再生処理部１６内のＤ／Ａコンバータによって複数チャネルのアナログ音声系（スピーカ部１８、音声出力部２０）に変換される。また、サブピクチャー信号はシステムＣＰＵ部４の制御により、ユーザコマンドに従って字幕情報などがビデオ信号に合成されて、ディスプレイ部１７及びビデオ出力部１９に出力される。
【００１９】
また、システムＣＰＵ部４により制御されるキャラクタジェネレータにより構成されるメニュー画面等を作成するＯＳＤ作成処理部２２を有し、ＯＳＤ作成処理部２２はシステムＣＰＵ部４からの選択画面用の文字コードによりキャラクタジェネレータを用いて対応する文字パターンを発生し、メニュー画面等を含むＯＳＤ信号を作成しＤ／Ａ変換及び再生処理回路１６に供給する。
【００２０】
Ｄ／Ａ変換及び再生処理回路１６は受信したＯＳＤ信号を文字パターンにより作成されたメニュー画面に対応するアナログ信号としての映像信号に変換して、ディスプレイ部１７に供給する。これによりディスプレイ部１７にはメニュー画面等の選択画面の映像が表示される。ＯＳＤ作成処理部２２で作成した前記ＯＳＤ信号は、光ディスク１からの映像信号及び字幕等のサブピクチャー信号と合成（スーパーインポーズ）し、あるいは独立して表示する。
【００２１】
利用者がキー操作表示部３、あるいはリモコン受信部５と赤外線による光通信により接続されている遠隔操作装置としてのリモコン送信機２３を操作することによって光ディスク１から記録データ、即ち、映像データ、サブピクチャー（副映像）データ及び音声データの再生を指示すると、再生データは光ディスク装置内でオーディオ（音声）信号及びビデオ信号に変換されてディスプレイ部１７及びスピーカ部１８で映像及び音声として再生される。
【００２２】
図２は、１シーンに係る音声データを記録する処理を説明する図である。まず、光ディスク１を再生し、再生データをもとに、映画などの字幕及びマルチ言語音声が記録された光ディスク１であるか否かを判断し、字幕及びマルチ言語音声が記録された光ディスクでない場合は、音声データバッファ２４の記録内容をクリアして処理を終了する（ステップＫ１，Ｋ２）。字幕及びマルチ言語音声が記録された光ディスクであると判断した場合はデコードした音声データを順次音声データバッファ２４に格納する。すなわち、光ディスク１からの音声信号をオーディオデコーダ部１４でデコードした後、各字幕のセンテンス毎にこれに相当する音声を音声データバッファ２４に順次格納する（ストリーミング録音という）（ステップＫ１，Ｋ３）。次に操作者により再生動作が一時停止されたか否かを判断する。一時停止されると、前記ストリーミング録音は、一時停止した場面の音声データを音声データバッファ２４に格納した後、停止する（ステップＫ５）。
【００２３】
次に、利用者が、自己が発声した音声信号を録音することを指示したか（録音ボタンＢを操作したか）否かを判定する。録音ボタンＢを操作すると、マイクなどの音声入力部８からの利用者の音声データをＡ／Ｄ変換し、音声データメモリ１１Ｂに格納する（ステップＫ８，Ｋ９）。録音ボタンＢの操作がなされない場合は再生動作の一時停止時に音声データバッファ２４に格納されている音声データを音声データメモリ１１Ａに格納する（ステップＫ５，Ｋ６，Ｋ７）。
【００２４】
図３は、複数シーンに係る音声データを記録する場合の処理を説明する図である。また、図４は、音声データを格納するメモリの構成を説明する図であり、図４（１）はメモリを固定長に設定した場合の例、図４（２）はメモリを可変長に設定した場合の例を示す。図４において、Ｍ１はディスクナンバー、Ｍ２はタイトル名（作者名などの情報を含む）、Ｍ３はシーンナンバー、Ｍ４はチャプターあるいはタイムコードからなるアドレス情報、Ｍ５はディスクから再生した音声データ、  Ｍ６は利用者の音声した音声データである。また、Ｍ７はシーン毎の映像データファイル、音声データファイルなどのデータがメモリ上のどこに保存されているかを管理するデータテーブル、Ｍ８はディスクから再生した音声データであり、格納した音声データの記録容量（バイト数）を保存することができる。Ｍ９は利用者の音声した音声データであり、格納した音声データの記録容量（バイト数）を保存することができる。
【００２５】
図３において、まず、光ディスク１を再生し、現在使用しているディスクのタイトル名（Ｍ２）などの識別情報によりディスクナンバー（Ｍ１）を設定し、この情報をデータメモリカード１２あるいは内蔵するメモリ等のメモリに格納する（ステップＴ１）。次いでシーン毎にシーンナンバー（Ｍ３）をディスクから再生した音声データ（Ｍ５）を登録する順に設定し、前記音声データ（Ｍ５）をディスクのアドレス情報（Ｍ４）と共に前記メモリカード１２あるいは内蔵するメモリ等に格納する（ステップＴ２〜Ｔ５）。また、録音ボタンＢを操作して、利用者の音声した音声データ（Ｍ６）を録音する場合は、音声データ（Ｍ６）に前記音声データ（Ｍ５）と同一シーンナンバー（Ｍ３）を付与してメモリに格納する（ステップＴ６，Ｔ７）。
【００２６】
図５は、格納した音声データの再生処理を説明する図である。例えば、複数ディスクの複数のシーンに係る音声データを着脱可能なデータメモリカード１２に格納しておくことにより、複数のディスクの複数のシーンに係る音声データの再生が可能となる。
【００２７】
まず、メモリカードに格納した音声データを再生するか否かを判断し、メモリカードに格納した音声データを再生する場合は、使用する光ディスクのディスクナンバー、及びシーンナンバーの入力を待つ（ステップＳ１〜Ｓ３）。ディスクナンバー及びシーンナンバーの入力を検出するとこれらの番号をもとに前記シーンナンバーに相当するシーンを静止画表示する。このとき字幕を表示することができる（ステップＳ４，Ｓ５）。次いで格納しておいた音声データ１（ディスクから再生した音声データＭ５あるいはＭ８）及び音声データ２（利用者の音声した音声データＭ６あるいはＭ９）を音声データメモリ１１Ａ及び１１Ｂに格納する。なお、図２に示すように、１シーンに係る音声データを記録した場合においては、音声データメモリ１１Ａ及び１１Ｂに格納した音声データ１及び音声データ２をそのまま利用することができる。
【００２８】
次に、音声データ２（利用者の音声した音声データＭ６あるいはＭ９）を再生するか音声データ１（ディスクから再生した音声データＭ５あるいはＭ８）を再生するかを判断（音声再生ボタンＢが操作されたか音声再生ボタンＡが操作されたかを判断）し、音声再生ボタンＢが操作された場合は音声データ２を再生し、音声再生ボタンＡが操作された場合は音声データ１を再生する（ステップＳ７，Ｓ９，Ｓ８）。次にリピート再生するか否かを判断しリピート再生する場合はステップＳ７に戻る（ステップＳ１０）。
【００２９】
以上説明したように、本実施形態によれば、  所定の言語を用いた動画がディスクにディジタル記録された動画ソフトを再生する光ディスク装置と、該動画ソフトの言語字幕の表示が可能な表示手段と、動画ソフトの言語字幕に対応した音声を出力する音声出力手段と、この音声ストリームをデコードし、再生しながらリアルタイムに録音するストリーミング録音手段を備えた映像音声再生装置を備える。利用者は再生を一時停止し、映像をポーズした状態で音声再生ボタンを操作すると、予め録音された画面表示内容（字幕表示）に対応した音声を再生することができる。
【００３０】
また、マイク等、利用者の発声した音声信号を入力する音声データ入力手段と、前記音声信号入力手段から入力した音声信号を前記映像音声再生装置の音声データ記録領域に格納する手段と備える。利用者は前記動画ソフトの再生中、あるいは一時停止時に前記動画ソフトの映像及び言語字幕を静止画表示した状態で、該言語字幕対応した音声、及び前記音声データ記録領域に記録された音声（利用者の発声した音声）の少なくともどちらか一方あるいは両方の音声を繰り返し再生することができる。
【００３１】
すなわち、光ディスクから再生した音声データをストリーミング録音し、ストリーミング録音した音声データを、映像をポーズした状態で音声再生ボタンを操作して再生することができる。このため、利用者は字幕を見ながらストリーミング録音した音声、例えばネイティブな英語を繰り返し聞くことができる。更に、前記マイク等を介して入力した自己の発声と前記ネイティブな英語とを対比しながら交互にあるいは同時に聴取することができる。
【００３２】
また、前記映像音声再生装置に着脱式のデータメモリカードを備え、このメモリカードに音声データを記録することができる。更にこのメモリカードにディスクナンバー、シーンナンバー、アドレス情報等を備えることにより、複数ディスク、複数シーンの音声データを記録することができる。
【００３３】
また、ですプレイ部として液晶ディスプレイ等のフラットディスプレイを用い該ディスプレイにスピーカを内蔵することにより装置を可搬型とすることができる。更に光ディスク等のデジタルソースをアナログ信号化せずに、デジタル信号のまま、処理可能となりより高画質化を図ることが可能となる。
【００３４】
【発明の効果】
以上説明したように本発明によれば、所定の言語の音声信号及び字幕を伴う動画信号を記録したディスクを語学学習用として有効に活用することのできる映像音声再生装置を提供することができる。
【図面の簡単な説明】
【図１】本発明の実施形態にかかる映像音声再生装置を説明する図である。
【図２】１シーンに係る音声データを記録する処理を説明する図である。
【図３】複数シーンに係る音声データを記録する場合の処理を説明する図である。
【図４】音声データを格納するメモリの構成を説明する図である。
【図５】格納した音声データの再生処理を説明する図である。
【符号の説明】
１  光ディスク
２  ディスクドライブ部
３  キー操作表示部
４  システムＣＰＵ部
５  リモコン受信部
６  システム用ＲＯＭ・ＲＡＭ部
７  システムプロセッサ部
８  音声入力部
９  データメモリ部
１１  音声データメモリ部
１２  データメモリカード
１３  ビデオデコーダ部
１４  オーディオデコーダ部
１５  サブピクチャーデコーダ部
１３Ａ  １４Ａ  １５Ａ，７Ａ  システムタイムクロック
１６  Ｄ／Ａ変換及びデータ再生処理部
１７  ディスプレイ部
１８  スピーカ部
１９  ビデオ出力部
２０  音声出力部
２１  メモリカードインタフェース
２２  ＯＳＤ作成処理部
２３  リモコン送信機
２４  音声データバッファ
【図１】
2004320547.tif 000003
【図２】
2004320547.tif 000004
【図３】
2004320547.tif 000005
【図４】
2004320547.tif 000006
【図５】
2004320547.tif 000007