(57)【要約】【課題】本発明は、主映像、音声、副映像からなるマルチメディアデータを、任意の場所から再生する場合に、副映像が表示されないことで、ユーザがこうむる不利益を解消することを目的とする。【解決手段】本発明は、主映像、音声、副映像からなるマルチメディアデータと、マルチメディアデータを管理するための管理情報が記録された記録メディアを再生する場合に、マルチメディアデータ内の副映像の情報を記憶領域に記憶し、マルチメディアデータの任意の場所から再生する場合に、前記記憶領域に記憶した副映像の情報を使用することを特徴とする。本発明により、副映像が記録されている記録メディア上の位置や、マルチメディアデータの再生開始位置によらず、常に副映像を正しく表示することができ、ユーザが常に副映像を正しく操作することが可能なマルチメディアデータ再生機器を提供することができる。【選択図】図１
2007288635.tif 000002
【特許請求の範囲】
【請求項１】
主映像、音声、副映像からなるマルチメディアデータと、マルチメディアデータを管理するための管理情報が記録された記録メディアを再生する場合に、
記録メディア上に記録された副映像を検出する機能を有する副映像検出部と、
副映像検出部で検出した副映像の情報と、前記副映像と同期して再生する主映像と音声を特定するための情報として副映像の表示開始時間と表示終了時間を記憶する副映像情報記憶領域とを有することを特徴とするマルチメディアデータ再生機器。
【請求項２】
前記副映像情報記憶領域に、前記副映像検出部で検出した副映像の情報と、前記副映像と同期して再生する主映像と音声を特定する情報として副映像の表示開始時間と表示終了時間を記憶する条件として、前記副映像を表示する時間の長さを使用することを特徴とする請求項１に記載のマルチメディアデータ再生機器。
【請求項３】
前記副映像情報記憶領域に、前記副映像検出部で検出した副映像の情報と、前記副映像と同期して再生する主映像と音声を特定する情報として副映像の表示開始時間と表示終了時間を記憶する条件として、前記副映像に対するユーザ操作の可否に関する情報を使用することを特徴とする請求項１に記載のマルチメディアデータ再生機器。
【請求項４】
主映像、音声、副映像からなるマルチメディアデータと、マルチメディアデータを管理するための管理情報が記録された記録メディアの任意の場所から再生する場合に、前記副映像情報記憶領域に記憶した、副映像の情報と、前記副映像と同期して再生する主映像と音声を特定する情報としての副映像の表示開始時間と表示終了時間を使用することを特徴とする請求項１に記載のマルチメディアデータ再生機器。
【請求項５】
主映像、音声、副映像からなるマルチメディアデータと、マルチメディアデータを管理するための管理情報が記録された記録メディアを再生する場合に、記録メディア上に記録された副映像を検出する副映像検出機能を有し、前記副映像検出機能で検出した副映像の情報と、前記副映像と同期して再生する主映像と音声を特定するための情報として副映像の表示開始時間と表示終了時間を記憶することを特徴とするマルチメディアデータ再生方法。
【請求項６】
前記副映像検出機能で検出した副映像の情報と、前記副映像と同期して再生する主映像と音声を特定するための情報として副映像の表示開始時間と表示終了時間を記憶する条件として、前記副映像を表示する時間の長さを使用することを特徴とする請求項５に記載のマルチメディアデータ再生方法。
【請求項７】
前記副映像検出機能で検出した副映像の情報と、前記副映像と同期して再生する主映像と音声を特定するための情報として副映像の表示開始時間と表示終了時間を記憶する条件として、前記副映像に対するユーザ操作の可否に関する情報を使用することを特徴とする請求項５に記載のマルチメディアデータ再生方法。
【請求項８】
主映像、音声、副映像からなるマルチメディアデータと、マルチメディアデータを管理するための管理情報が記録された記録メディアの任意の場所から再生する場合に、前記マルチメディアデータ再生方法で記憶した、前記副映像の情報と、前記副映像と同期して再生する主映像と音声を特定する情報としての副映像の表示開始時間と表示終了時間を使用することを特徴とする請求項５に記載のマルチメディアデータ再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、主映像と音声と副映像からなるマルチメディアデータの再生機器、および再生方法に関するものである。
【背景技術】
【０００２】
主映像、音声、副映像からなるマルチメディアデータとマルチメディアデータを管理するための管理情報を記録した記録メディアにおいて、管理情報で記録位置やサイズの管理を行う最小のデータ単位は、一定再生時間の主映像、音声、副映像をまとめた単位であり、主映像、音声、副映像のそれぞれのデータに関して、記録メディア上の記録位置、およびサイズの情報は、管理情報のサイズの制約から、管理情報として記録メディア上には記録されていない。例えば、特許文献１参照。
【０００３】
図２を使いＤＶＤ―Ｖｉｄｅｏを例に説明する。
【０００４】
ＤＶＤ−Ｖｉｄｅｏの管理情報である（２０１）のビデオ・タイトルセット情報（ＶＴＳＩ）中には、（２０２）のＤＶＤ−Ｖｉｄｅｏディスク内の主映像、音声、副映像からなるビデオタイトルセットタイトル・ビデオオブジェクトセット（ＶＴＳＴＴ_ＶＯＢＳ）を管理するための情報が記録されている。
（２０１）のＶＴＳＩで管理できる最小のデータ単位は、（２０３）のビデオオブジェクトユニット（ＶＯＢＵ）と呼ばれる主映像、音声、副映像からなく０．４から１．２秒の再生時間を持つデータであり、（２０４）のビデオタイトルセット・ビデオオブジェクトユニット・アドレス（ＶＴＳ_ＶＯＢＵ_ＡＤ）に（２０３）の各ＶＯＢＵのＤＶＤ−Ｖｉｄｅｏディスク上の記録位置が記載されている。
【０００５】
したがって、（２０４）のＶＴＳ_ＶＯＢＵ_ＡＤによって、（２０３）の各ＶＯＢＵの先頭位置を検索することはできるが、（２０３）の各ＶＯＢＵ内に記録されている（２０５）の主映像データ、（２０６）の音声データ、（２０７）の副映像データのそれぞれの先頭位置を（２０１）のＶＴＳＩの情報を使って直接検索することはできない。
【特許文献１】特開平８−３３９６６５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
前記背景技術に記載のとおり、主映像、音声、副映像からなるマルチメディアデータとマルチメディアデータを管理するための管理情報を記録した記録メディアにおいて、管理情報で記録位置やサイズの管理を行う最小のデータ単位は、一定再生時間の主映像、音声、副映像をまとめた単位であり、主映像、音声、副映像のそれぞれのデータに関して、記録メディア上の記録位置、およびサイズの情報は、管理情報として記録メディア上には記録されていないため、ユーザ指定の任意の位置から再生した場合に、副映像が表示されない場合がある。
【０００７】
図３を使ってＤＶＤ−Ｖｉｄｅｏを例に説明する。
（３０１）のＶＯＢＵ＃１に記録された（３０４）の副映像情報は、（３０１）のＶＯＢＵ＃１から表示を開始し、（３０２）の副映像を表示する2番目のＶＯＢＵ＃２を経て、（３０３）のＶＯＢＵ＃Ｎまで、（３０５）の副映像表示区間の間表示を行う。
【０００８】
しかし、（３０６）のユーザ操作による再生開始位置から再生する場合、（３０４）の副映像情報を取得することができないため、本来であれば（３０７）の副映像が表示できない区間が発生する。
【０００９】
また、近年ＤＶＤ−Ｖｉｄｅｏに代表される記録メディアのインタラクティブ化が進んでおり、副映像によりユーザ操作が可能なメニュー画面を形成するメディアが作成されている。（３０４）の副映像がユーザ操作可能な副映像である場合、（３０７）の副映像が表示できない区間は、副映像が表示されないだけでなく、副映像のユーザ操作もできなくなる。近年増加しているインタラクティブなメディアにおいて、ユーザ操作ができる副映像情報が表示されないことは、ユーザに重要な問題である。
【００１０】
本発明は、主映像、音声、副映像からなるマルチメディアデータを、任意の場所から再生する場合に、副映像が表示されないことで、ユーザがこうむる不利益を解消することを目的とする。前記ユーザの不利益とは、長時間副映像が表示されないことや、ユーザ操作が可能な副映像が表示されないことでユーザ操作ができなくなることを指す。
【課題を解決するための手段】
【００１１】
本発明は、主映像、音声、副映像からなるマルチメディアデータと、マルチメディアデータを管理するための管理情報が記録された記録メディアを再生する場合に、マルチメディアデータ内の副映像の情報を記憶領域に記憶し、マルチメディアデータの任意の場所から再生する場合に、前記記憶領域に記憶した副映像の情報を使用することを特徴とする。
【発明の効果】
【００１２】
本発明では、副映像が記録されている記録メディア上の位置や、マルチメディアデータの再生開始位置によらず、常に副映像を正しく表示することができ、ユーザが常に副映像を正しく操作することが可能なマルチメディアデータ再生機器を提供することができる。
【発明を実施するための最良の形態】
【００１３】
副映像が記録されている記録メディア上の位置や、再生が開始される位置によらず、常に副映像を正しく表示することができ、ユーザが常に副映像を正しく操作可能できるマルチメディアデータ再生機器を、最低限の記憶領域で実現した。
（実施の形態１）
図１に、本実施形態におけるマルチメディアデータの再生機器を示す。
（１０１）の記録メディア上に記録された、主映像、音声、副音声からなるマルチメディアデータと、マルチメディアデータを管理するための管理情報は、（１０２）の読込部で読み込まれる。次に（１０３）の検出部により、（１０２）の読込部で読み込まれたマルチメディアデータが、主映像か音声か副映像かの検出が行われる。（１０３）の検出部で副映像が検出されなかった場合は、読み込んだマルチメディアデータは（１０４）の出力部へ転送され、そのまま映像、音声として出力する。（１０３）の検出部で副映像が検出された場合、検出された副映像の情報が（１０５）のシステム制御部に通知される。（１０５）のシステム制御部は、通知された副映像の情報と、前記副映像と同期して再生する主映像と音声を特定するための副映像の表示開始時間と表示区間を、（１０６）の記憶領域に記憶する。（１０６）の記憶領域に情報が記憶された副映像は、主映像、音声と同様に（１０２）の読込部から（１０４）の出力部へ転送され、映像として出力される。
【００１４】
また、図１記載のマルチメディアデータ再生機器は、（１０７）のユーザ入力手段からの入力に従い、記録メディア上の任意の場所から再生を行う場合に、（１０１）の記録メディアから（１０２）の読込部へ管理情報を読み込み、（１０５）のシステム制御部において、（１０７）のユーザ入力手段により指定された記録メディア上の任意の場所の時間情報を特定する。（１０５）のシステム制御部は、（１０６）の記憶領域から、前記処理により求めた時間情報において、同期して再生すべき副映像の情報が記録されていないか検索を行う。（１０６）の記憶領域に、同期して再生すべき副映像の情報がない場合は、（１０７）のユーザ入力手段により指定された記録メディア上の任意の場所から（１０２）の読込部へマルチメディアデータを読み込み、（１０４）の出力部へ転送し、映像、音声を出力する。（１０６）の記憶領域に、同期して再生すべき副映像の情報がある場合は、（１０１）の記録メディアから（１０２）の読込部へ、（１０６）の記憶領域に記憶されていた副映像の情報に該当する副映像のみを読み込み、（１０４）の出力部へ転送する。
【００１５】
次に、（１０７）のユーザ入力手段により指定された記録メディア上の任意の場所から（１０２）の読込部へマルチメディアデータを読み込み、（１０４）の出力部へ転送をすることで、（１０４）の出力部から、先に読み込んだ副映像と一緒に、映像、音声が出力され副映像が正しく表示される。
【００１６】
図４に図１記載の（１０６）の記憶領域に記憶する情報の詳細を示す。
【００１７】
図１の（１０３）の検出部で副映像が検出され、図１の（１０３）の検出部から図１の（１０５）のシステム制御部に通知された副映像の情報は、図１の（１０５）のシステム制御部により、図１の（１０６）の記憶領域に、図４に記載されている形式で記憶される。図１の（１０６）の記憶領域内には、（４０１）の副映像情報が複数個記録される。（４０１）の副映像情報内には、副映像と同期して再生すべき主映像、音声を特定するための情報である（４０２）の副映像表示開始時間と表示終了時間と、副映像の記録メディア上の記録位置を特定するための情報である（４０３）の副映像先頭アドレスと、副映像の記録メディア上のデータ量を特定するための情報である（４０４）の副映像サイズが記録される。
【００１８】
図１の（１０７）のユーザ入力手段からの入力に従い、図１の（１０１）の記録メディア上の任意の場所から再生を行う場合は、図１の（１０１）の記録メディアから図１の（１０２）の読込部へ管理情報を読み込み、図１の（１０５）のシステム制御部において、図１の（１０７）のユーザ入力手段により指定された記録メディア上の任意の場所の時間情報を特定する。図１の（１０５）のシステム制御部は、図１の（１０６）の記憶領域から、前記処理により求めた時間情報において、同期して再生すべき副映像の情報が記録されていないかを（４０２）の表示開始／終了時間を調べることで検索する。前記処理により求めた時間情報が（４０２）の表示開始／終了時間内にある（４０１）の副映像情報があれば、（４０３）の副映像先頭アドレスと（４０４）の副映像サイズを元に、図１の（１０１）の記録メディアから図１の（１０２）の読込部へ、該当する副映像のみを読み込み、図１の（１０４）の出力部へ転送する。
【００１９】
次に、図１の（１０７）のユーザ入力手段により指定された記録メディア上の任意の場所から図１の（１０２）の読込部へマルチメディアデータを読み込み、図１の（１０４）の出力部へ転送をすることで、図１の（１０４）の出力部から、先に読み込んだ副映像と一緒に、映像、音声が出力され副映像が正しく表示される。
【００２０】
図５に副映像の情報を図１の（１０６）の記憶領域に図４の（４０１）の副映像情報を記憶する処理の詳細なシーケンスを示す。
（Ｓ５０１）では、図１の（１０１）の記録メディアから図１の（１０２）のデータ読込部へマルチメディアデータを読み込む。
（Ｓ５０２）では、（Ｓ５０１）で読み込んだマルチメディアデータ内のストリームＩＤを使用して、図１の（１０３）の検出部で読み込んだマルチメディアデータが主映像か音声か副映像かの判別を行う。
（Ｓ５０３）では、（Ｓ５０２）の結果、図１の（１０２）の読込部に読み込まれたマルチメディアデータが副映像ではない場合は（Ｓ５０８）に遷移し、副映像の場合は（Ｓ５０４）に遷移する。
（Ｓ５０４）では、図１の（１０３）の検出部でマルチメディアデータ内から副映像の表示開始時間と表示終了時間を取得して副映像の表示区間を求め、（Ｓ５０５）へ遷移する。
（Ｓ５０５）では、（Ｓ５０４）で求めた副映像の表示区間が１５秒以上かどうかを判別し、１５秒以上だった場合は、（Ｓ５０７）へ遷移し、１５秒より小さい場合は（Ｓ５０６）に遷移する。
（Ｓ５０６）では、図１の（１０２）の読込部に読み込まれたマルチメディアデータから、図１の（１０３）の検出部で、副映像がユーザ操作可能かの判別情報を検出し、図１の（１０２）の読込部に読み込まれた副映像がユーザ操作可能であれば、（Ｓ５０７）に遷移し、ユーザ操作不可能であれば（Ｓ５０８）へ遷移する。
（Ｓ５０７）では、図１の（１０３）の検出部で検出した副映像の表示開始／終了時と先頭位置とサイズを図１の（１０６）の記憶領域へ記憶する。その際、副映像の表示開始／終了時と先頭位置とサイズは、図４の（４０１）の副映像情報内の（４０２）の表示開始／終了時間、（４０３）の副映像先頭アドレス、（４０４）の副映像サイズの形態で記憶する。
（Ｓ５０８）では、図１の（１０２）の読込部から図１の（１０４）の出力部へマルチメディアデータを転送し、映像、音声として出力する。
【００２１】
以上の（Ｓ５０１）から（Ｓ５０８）の処理で、副映像の情報を図１記載の（１０６）の記憶領域に、図４の（４０１）の副映像情報の形態で記憶することができる。
【００２２】
次に、図６は、図１の（１０７）のユーザ入力手段からの入力に従い、図１の（１０１）の記録メディア上の任意の場所から再生を行う処理の詳細シーケンスを示す。
（Ｓ６０１）では、図１の（１０７）のユーザ入力手段でユーザからの入力を受け付ける。
（Ｓ６０２）では、図１の（１０１）の記録メディアから図１の（１０２）の読込部へ管理情報の読み込みを行う。
（Ｓ６０３）では、（Ｓ６０１）においてユーザ入力により指定された記録メディア上の任意の場所の時間を、（Ｓ６０２）において図１の（１０２）の読込部に読み込んだ管理情報を用いて、図１の（１０５）のシステム制御部において特定する。
（Ｓ６０４）では、（Ｓ６０３）で特定された再生開始時間と、図１の（１０６）の記憶領域に記憶されている図４の（４０１）の副映像情報の図４の（４０２）の表示開始／終了時間から、（Ｓ６０３）で特定した再生開始時間において、同期して再生すべき副映像の情報がないか検索を行う。
（Ｓ６０５）では、（Ｓ６０４）の副映像の情報の検索結果、図１の（１０６）の記憶領域に、（Ｓ６０３）で特定した再生開始時間において、同期して再生すべき副映像の情報がない場合は（Ｓ６０７）へ遷移し、同期して再生すべき副映像の情報がある場合は（Ｓ６０６）へ遷移する。
（Ｓ６０６）では、図１の（１０６）の記憶領域から、図４の（４０３）の副映像先頭アドレスと、図４の（４０４）の副映像サイズをもとに、図１の（１０１）の記録メディアから、図１の（１０２）の読込部へ、（Ｓ６０３）で特定した再生開始時間において、同期して再生すべき副映像を読み込み、図１の（１０４）の出力部でデータ転送を行う。
（Ｓ６０７）では、（Ｓ６０３）で特定した再生開始時間から図１の（１０２）の読込部へマルチメディアデータを読み込み、図１の（１０２）の読込部から図１の（１０４）の出力部へマルチメディアデータを転送し、映像、音声を出力する。
【００２３】
以上の（Ｓ６０１）から（Ｓ６０７）の処理で、図１の（１０７）のユーザ入力手段からの入力に従い、図１の（１０１）の記録メディア上の任意の場所から再生を行う場合でも、図１の（１０６）の記憶領域の情報を使うことで、常に副映像を表示することができる。
（実施の形態２）
実施の形態１において、図１の（１０６）の記憶領域には、図４の（４０１）の副映像情報として、図４の（４０２）の副映像表示開始時間と表示終了時間と、副映像の記録メディア上の記録位置を特定するための情報である図４の（４０３）の副映像先頭アドレスと、副映像の記録メディア上のデータ量を特定するための情報である図４の（４０４）の副映像サイズを記憶したが、図４の（４０３）の副映像先頭アドレスと、図４の（４０４）の副映像サイズの代わりに、副映像情報として副映像の実データを記憶しても、実施の形態１と同様の効果を得ることができる。
【００２４】
図７に実施の形態２における図１の（１０６）の記憶領域に記憶する情報の詳細を示す。（７０１）は副映像情報であり、（７０１）の副映像情報内には、（７０２）の副映像表示開始時間と表示終了時間と、（７０３）の副映像の表示に必要な情報を含む、副映像の実データを記憶する。
【００２５】
図１の（１０６）の記憶領域に、図４の（４０３）の副映像先頭アドレスと、図４の（４０４）の副映像サイズの代わりに（７０３）の副映像の実データを記憶することで、図１記載の（１０７）のユーザ入力手段からの入力に従い、図１の（１０１）の記録メディア上の任意の場所から再生を行う場合に、図６記載の（Ｓ６０６）の処理で、図１の（１０６）の記憶領域から、図４の（４０３）の副映像先頭アドレスと、図４の（４０４）の副映像サイズをもとに、図１の（１０１）の記録メディアから、図１の（１０２）の読込部へ、（Ｓ６０３）で特定した再生開始時間において、同期して再生すべき副映像を読み込む処理が不要になるため、処理の簡略化が図れるが、図４の（４０３）の副映像先頭アドレスと、図４の（４０４）の副映像サイズに比べ、（７０３）の副映像の実データの方が、記憶に必要な領域が大きくなるため、実施の形態１よりも、図１の（１０６）の記憶領域のサイズを大きくする必要がある。
【産業上の利用可能性】
【００２６】
本発明にかかるマルチメディアデータ再生機器、および再生方法は、主映像、音声、副映像からなるマルチメディアデータと、マルチメディアデータを管理するための管理情報が記録された記録メディアを再生する場合に、マルチメディアデータ内の副映像情報を記憶領域に記憶し、マルチメディアデータの任意の場所から再生する場合に、前記記憶領域に記憶した副映像情報を使用することによって、記録メディア上の副映像が記録されている位置や、マルチメディアデータの再生開始位置によらず、常に副映像を正しく表示することができ、ユーザが常に副映像を正しく操作することが可能な状態を提供することが必要な用途にも適用できる。
【図面の簡単な説明】
【００２７】
【図１】本発明の実施形態１におけるマルチメディアデータ再生機器の構成図
【図２】従来マルチメディアデータ再生機器でのマルチメディアデータ管理方法の説明図
【図３】従来マルチメディアデータ再生機器で任意の場所から再生した場合の副映像表示状態の説明図
【図４】本発明の実施形態１における記憶領域への副映像情報の記憶形態の説明図
【図５】本発明の実施形態１における副映像情報の記憶処理フローチャート
【図６】本発明の実施形態１における副映像情報の読み出し処理フローチャート
【図７】本発明の実施形態２における記憶領域への副映像情報の記憶形態の説明図
【符号の説明】
【００２８】
１０１    記録メディア
１０２    読込み部
１０３    検出部
１０４    出力部
１０５    システム制御部
１０６    記憶領域
１０７    ユーザ入力手段
２０１    ビデオ・タイトルセット情報（ＶＴＳＩ）
２０２    ビデオタイトルセットタイトル・ビデオオブジェクトセット（ＶＴＳＴＴ_ＶＯＢＳ）
２０３    ビデオオブジェクトユニット（ＶＯＢＵ）
２０４    ビデオタイトルセット・ビデオオブジェクトユニット・アドレス（ＶＴＳ_ＶＯＢＵ_ＡＤ）
２０５    主映像データ
２０６    音声データ
２０７    副映像データ
３０１    副映像を表示する１版目のＶＯＢＵ（ＶＯＢＵ＃１）
３０２    副映像情報
３０３    副映像を表示する２番目のＶＯＢＵ（ＶＯＢＵ＃２）
３０４    副映像を表示する最後のＶＯＢＵ（ＶＯＢＵ＃Ｎ）
３０５    副映像表示区間
３０６    ユーザ操作による再生開始位置
３０７    副映像が表示できない区間
４０１    副映像情報
４０２    副映像表示開始時間と表示終了時間
４０３    副映像先頭アドレス
４０４    副映像サイズ
Ｓ５０１    マルチメディアデータの読み込み処理
Ｓ５０２    主画像、音声、副映像情報の判別処理
Ｓ５０３    副映像情報の有無の判別処理
Ｓ５０４    副映像の表示区間の算出処理
Ｓ５０５    副映像の表示区間の長さの判別処理
Ｓ５０６    副映像のユーザ操作の可否の判別処理
Ｓ５０７    副映像情報の記憶処理
Ｓ５０８    マルチメディアデータの転送処理
Ｓ６０１    ユーザ入力受付処理
Ｓ６０２    管理情報読込み処理
Ｓ６０３    再生開始位置の算出処理
Ｓ６０４    再生開始位置で必要な副映像の検索処理
Ｓ６０５    再生開始位置で必要な副映像の有無の判別処理
Ｓ６０６    副映像情報読み出し処理
Ｓ６０７    マルチメディアデータの読込みと転送処理
７０１    副映像情報
７０２    副映像表示開始時間と表示終了時間
７０３    副映像の実データ
【図１】
2007288635.tif 000003
【図２】
2007288635.tif 000004
【図３】
2007288635.tif 000005
【図４】
2007288635.tif 000006
【図５】
2007288635.tif 000007
【図６】
2007288635.tif 000008
【図７】
2007288635.tif 000009