(57)【特許請求の範囲】
【請求項１】
第１の映像情報の符号化データを復号する第１の復号手段と、
第２の映像情報の符号化データを復号する第２の復号手段と、を有し、
前記第１の映像情報に同期して前記第２の映像情報を表示装置へ出力可能な再生装置であって、
前記第２の映像情報の画面上のサイズは、前記第１の映像情報の画面上のサイズより小さく、
前記第２の映像情報は分割して表示され、
前記第１の映像情報および第２の映像情報を用いて表示映像を形成する表示映像形成手段と、
該表示画面形成手段を制御する制御手段と、
を備えることを特徴とする再生装置。
【請求項２】
請求項１に記載の再生装置であって、
前記第２の映像情報の画面上のサイズは、前記第１の映像情報の画面上のサイズに対して所定の割合以下であることを特徴とする再生装置。
【請求項３】
請求項１に記載の再生装置であって、
前記第２の映像情報の複数の分割領域の位置情報に関する補助情報を解析する補助情報解析手段を備え、
前記制御手段は、前記補助情報を用いて前記表示映像形成手段に指示を与えることによって、前記第２の映像情報を分割して表示するよう制御することを特徴とする再生装置。
【請求項４】
請求項３に記載の再生装置であって、
前記補助情報は、前記補助情報を適用する適用時刻情報を有し、
本再生装置は、
映像の復号及び表示の基準時刻を示す基準時刻カウンタと、
前記適用時刻情報と前記基準時刻カウンタとを比較する比較手段と、有し、
前記制御手段は、前記比較手段の出力結果に基づいて、前記補助情報を用いて前記表示映像形成手段に指示を与えることによって、第２の映像情報の各分割領域の表示位置を制御することを特徴とする再生装置。
【請求項５】
請求項１乃至請求項４のいずれかに記載の再生装置において、
前記表示画面形成手段は前記第１の映像情報を格納する第１の記憶手段と、前記第２の映像情報を格納する第２の記憶手段と、を有し、
前記第１の記憶手段と、前記第２の記憶手段の出力は画素単位で不透明度を切り替えて
、合成することが可能なことを特徴とする再生装置。
【請求項６】
請求項１乃至請求項５のいずれかに記載の再生装置において、
前記第１の復号手段及び前記第２の復号手段は、単一の復号手段により形成されることを特徴とする再生装置。
【請求項７】
請求項１乃至請求項６のいずれかに記載の再生装置において、
前記第１の復号手段及び前記第２の復号手段は、ソフトウェアにより実現されることを特徴とする再生装置。
【請求項８】
第１の映像情報の符号化データ及び第２の映像情報の符号化データを復号し、
前記第１の映像情報に同期して前記第２の映像情報を表示装置へ出力可能な再生方法であって、
前記第２の映像情報の画面上のサイズは、前記第１の映像情報の画面上のサイズより小さく、
前記第２の映像情報は分割して表示されるものとし、
前記第１の映像情報および第２の映像情報を用いて表示映像を形成することを特徴とする再生方法。
【請求項９】
第１の映像情報及び第２の映像情報を記録する記録方法であって、
前記第２の映像情報の複数の分割領域の位置情報に関する補助情報を作成し、
前記作成された補助情報を前記第２の映像情報とともに記録し、
前記第２の映像情報の画面上のサイズは、前記第１の映像情報の画面上のサイズより小さく、
表示画面上で第１の映像情報と第２の映像情報を同期するよう記録することを特徴とする記録方法。
【請求項１０】
請求項９に記載の記録方法であって、
前記第２の映像情報の画面上のサイズは、前記第１の映像情報の画面上のサイズに対して所定の割合以下であることを特徴とする記録方法。
【請求項１１】
第１の映像情報及び第２の映像情報を受信する受信部と、
前記第１の映像情報の符号化データを復号する第１の復号手段と、
前記第２の映像情報の符号化データを復号する第２の復号手段と、
前記第１の映像情報に同期して前記第２の映像情報を表示する表示部と、を有し、
前記第２の映像情報の画面上のサイズは、前記第１の映像情報の画面上のサイズより小さく、
前記第２の映像情報は分割して表示され、
前記第１の映像情報および第２の映像情報を用いて表示映像を形成する表示映像形成手段と、
を備えることを特徴とする映像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録媒体からデータを再生する再生方法、再生装置及び映像表示装置に関し、特にピクチャインピクチャ機能の実現に関する。また、ピクチャインピクチャ機能に対応する記録媒体、該記録媒体へデータを記録する記録方法に関する。
【背景技術】
【０００２】
ピクチャインピクチャに関連する背景技術は、以下の特許文献１に開示されている。
具体的には、「ＢＤ−ＲＯＭにおいて、ピクチャインピクチャ機能や壁紙表示機能を実現する」（特許文献１の要約の課題）ため、「それぞれ動画、字幕およびグラフィクスを表示するプレーン１０、１１および１２に対して、動画を表示する第２ビデオプレーン５０を追加する。第２ビデオプレーン５０およびビデオプレーン１０の出力は、スイッチ５１により画素単位で選択される。第２ビデオプレーン５０に縮小動画データを格納し、スイッチ５１を縮小動画データの表示位置に対応して画素単位で切り替え制御することで、ビデオプレーン１０の動画データに対して第２ビデオプレーン５０の縮小動画データが子画面表示される。ビデオプレーン１０に、動画データの代わりに壁紙画像データを格納することで、恰も縮小動画データの背景に壁紙が表示されているかのような表示画面が得られる」（特許文献１の要約の解決手段）ようにすることの開示がある。
【０００３】
【特許文献１】特開２００５−１２３７７５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
特許文献１では、さらに具体的に、複数のビデオプレーンあるいは複数のフレームバッファを用い、画素単位に所望の出力を選択することにより、ピクチャインピクチャ機能を実現している。また特に映像データに主眼を置いた場合、これらを実現するプレーヤデコーダとして、単一のＭＰＥＧビデオデコーダにより２本の動画ストリームをデコードするような形で、その構成が示されている。
【０００５】
ここで実際のプレーヤとしてのハード構成を考慮した場合、単一のビデオデコーダで２本の動画ストリームのデコードを行うには、夫々を時分割で処理する必要がある。同期再生考慮も必要なピクチャインピクチャ機能としては、その処理量はデコードすべき動画ストリームの符号化方式や符号化レート、扱う画像サイズ等によって大きく変動する。つまりプレーヤとしてピクチャインピクチャ機能が実現可能かどうかは、デコーダの処理能力に依存し、特にＰＣでの再生環境を考慮した場合、動画や音声のデコードを始めとする各処理は、その一部あるいは大部分をソフトウェアにより実行することも考えられるため、可能な処理量は動作周波数等のＣＰＵ能力に依存することになる。
【０００６】
特許文献１では、再生中の映像（第１映像と呼ぶ）とピクチャインピクチャとして子画面で表示する映像（第２映像と呼ぶ）の夫々に用いられるビデオプレーンのサイズは異なるものではなく、特に夫々の画像サイズ等も限定されていなかった。つまりピクチャインピクチャ機能を実現する際の処理量等については特に考慮されていなかった。
【０００７】
本発明は係る点に鑑みてなされたものであって、その目的はピクチャインピクチャ機能の実現において、その処理負荷の軽減までを考慮した再生装置、再生方法、記録方法、映像表示装置及び記録媒体を提供することにある。
【課題を解決するための手段】
【０００８】
上記目的は、特許請求の範囲に記載の発明により解決される。
【発明の効果】
【０００９】
本発明による再生装置、再生方法、記録方法、映像表示装置及び記録媒体によれば、再生装置の処理量を軽減することができる。
【発明を実施するための最良の形態】
【００１０】
以下、図面を用いて本発明の実施形態について説明する。
【実施例１】
【００１１】
図１に本発明の第１の実施例である再生装置のブロック図を示す。１０１は光ディスク、１０２はローカルストレージ、１０３はＰＩＤフィルタ、１０４はビデオデコーダ１、１０５はビデオデコーダ２、１０６はグラフィクスデコーダ１、１０７はグラフィクスデコーダ２、１０８表示映像形成部、１０９は補助情報解析部、１１０は基準時刻カウンタ部、１１１は制御部、１１２は比較部である。
【００１２】
光ディスク１０１及びローカルストレージ１０２には、第1映像情報及び第２映像情報、さらに字幕情報やメニュー情報といったグラフィクス情報、またそれらに付随する補助情報が格納されている。特にどのデータが光ディスク１０１あるいはローカルストレージ１０２のどちらに格納されているかは限定しないが、本実施例では説明を簡単にするため、第1映像情報、字幕情報、メニュー情報とそれに付随する補助情報が光ディスク１０１に、第２映像情報とそれに付随する補助情報がローカルストレージ１０２に格納されている場合について説明する。また本実施例では、第１映像情報、第２映像情報とも、ＨＤサイズの画像データであるものとする。なお通常第１映像情報及び第２映像情報には音声情報が多重化されているが、本発明の主眼は映像の表示方法にあるので、映像情報の扱いを中心に説明する。
【００１３】
光ディスク１０１及びローカルストレージ１０２に記録されている符号化データ（ストリーム）は例えばＭＰＥＧ２システムの形態により、パケット化され、多重化された状態で記録されている。
【００１４】
まず光ディスク１０１から読み出されたストリームは、ＰＩＤフィルタ１０３においてＰＩＤ（パケットＩＤ）に応じてその送り先が振り分けられる。第１映像の動画ストリームは、ビデオデコーダ１（１０４）に入力される。ビデオデコーダ１（１０４）では入力された動画ストリームの復号が行われ、その結果である第１映像が表示映像形成部１０８に出力される。またストリームが字幕情報の場合には、そのストリームはグラフィクスデコーダ１（１０６）に入力される。グラフィクスデコーダ１（１０６）では入力された字幕情報ストリームに応じて必要なレンダリングを行い、その結果であるグラフィクス情報が表示映像形成部１０８に出力される。同様にＰＩＤフィルタに入力されたストリームがメニュー情報等である場合には、そのストリームはグラフィクスデコーダ２（１０７）に入力される。グラフィクスデコーダ２（１０７）では入力されたメニュー情報等のストリームに応じて必要なＧＵＩ部品等が用意され、その結果であるグラフィクス情報が表示映像形成部１０８に出力される。
【００１５】
ローカルストレージ１０２から読み出された第２映像の符号化データは、やはりＰＩＤフィルタ１０３により振り分けられ、ビデオデコーダ２（１０５）に入力される。ビデオデコーダ２（１０５）では入力された符号化データの復号が行われ、その結果である第２映像が表示映像形成部１０８に出力される。
【００１６】
基準時刻カウンタ部１１０は、復号を行う基準時刻をカウントし、ビデオデコーダ１（１０４）、ビデオデコーダ２（１０５）、グラフィクスデコーダ１（１０６）、グラフィクスデコーダ２（１０７）、表示映像形成部１０８、比較部１１２に対し基準時刻を出力する。
【００１７】
ビデオデコーダ１（１０４）、ビデオデコーダ２（１０５）、グラフィクスデコーダ１（１０６）、グラフィクスデコーダ２（１０７）は、基準時刻カウンタ部１１０から出力された前記基準時刻に基づき復号処理を行う。これにより、第１映像情報及び第２映像情報、さらに字幕情報やメニュー情報等を同期化して復号処理を行うことが可能である。
【００１８】
さらに光ディスク１０１あるいはローカルストレージ１０２から補助情報が読み出される。本実施例ではピクチャインピクチャ機能の実現の観点から、ローカルストレージ１０２から第２映像情報に付随する補助情報が読み出されることになる。読み出された補助情報は、補助情報解析部１０９に送られる。補助情報解析部１０９では、補助情報の解析を行い、第２映像の有効領域情報、及びそれらの適用時刻情報を抽出する。抽出された有効領域情報は制御部１１１に送られ、また抽出された適用時刻情報は比較部１１２に送られる。
比較部１１２では、前記適用時刻情報および、基準時刻カウンタ１１０から入力された基準時刻の比較を行い、比較結果を制御部１１１に対し出力する。
【００１９】
制御部１１１では、比較部１１２から入力された比較の結果が「一致」を示した時点で、表示映像形成部１０８に対し、補助情報解析部１０９から入力された有効領域情報を用いて、第２映像の表示に関する指示を与える。
【００２０】
表示映像形成部１０８では、第１映像情報と第２映像情報、及び前記グラフィクス情報により出力映像の画面を合成する。その際、制御部１１１からの指示内容に基づき、第２映像情報の合成を行う。
【００２１】
ここで表示映像形成部１０８の動作について、図２を用いてもう少し詳細に説明する。
図２は、表示映像形成部１０８の構成の一例を示した図である。２０１は第１ビデオプレーン、２０２は第２ビデオプレーン、２０３はプレゼンテーショングラフィクスプレーン、２０４はインタラクティブグラフィクスプレーン、２０５、２０６、２０８、２０９、２１１、２１２は乗算器、２０７、２１０、２１３は加算器である。なお図１に対応する部分には同一の符号を付してある。
【００２２】
本実施例で特徴的となるのは、第２ビデオプレーン２０２に格納される第２映像情報の有効領域が限定されている点と、その有効領域情報が別途乗算器２０５及び２０６に入力される点である。これら有効領域の限定や、有効領域情報が適用されない場合は、基本的に従来の構成と同様になる。本実施例での特徴点を示すために、まず前述の従来例にも示されているピクチャインピクチャの基本的な表示形態について、図３を合わせて用いることにより説明する。
ビデオデコーダ１（１０４）から出力された第１映像情報は第１ビデオプレーン２０１に格納される。またビデオデコーダ２（１０５）から出力された第２映像情報は第２ビデオプレーン２０２に格納される。ここで図３に示す通り、第１ビデオプレーン２０１及び第２ビデオプレーン２０２とも、ＨＤサイズであるのに対して、第２映像情報は、映像としてのＨＤサイズの解像度を持つが、有効領域はＳＤサイズであり、第２ビデオプレーン２０２の一部にのみ、映像が貼り付けられている場合を示している。
【００２３】
第２ビデオプレーン２０２は第１ビデオプレーン２０１より表示オーダーで手前に配置される。映像出力時には、夫々のビデオプレーンから画素単位にデータが読み出され、不透明度α１（この場合は１か０）が乗算器２０５及び２０６に適用されることにより、図３の表示映像３０１が出力されることになる。つまりこの場合は第２ビデオプレーン２０２に格納されたＳＤサイズの矩形領域内で不透明度α１＝１になり、それ以外でα１＝０となる。乗算器２０５及び２０６の出力は加算器２０７で加算された後、乗算器２０８及び２０９で不透明度α２が適用されて、加算器２１０においてプレゼンテーショングラフィックスプレーン２０３に格納された字幕情報との合成が行われる。さらに加算器２１０の出力は、乗算器２１１及び２１２で不透明度α３が適用されて、加算器２１３においてインタラクティブグラフィックスプレーン２０４に格納されたメニュー情報等との合成が行われ、最終的な表示映像が出力される。字幕情報やメニュー情報の合成については、前述の従来例において説明されており、本実施例では特に出力例は図示しない。
【００２４】
次に第２映像情報として単にＨＤサイズの映像が使用された場合について、図４を用いて説明する。図４の第２ビデオプレーン２０２に示す通り、第２映像情報は通常のＨＤサイズとなっている。第１ビデオプレーンと第２ビデオプレーンの出力は、ＨＤサイズの全領域に亘って不透明度α１が評価され、最終的に表示映像４０１が出力される。α１の決定に関しては、輝度あるいは色差成分が所定の値以下（あるいは以上）である画素は全てα１＝０とするような処理が行われる。この画素成分による不透明度の決定手法は、画像構成の手法として一般的（例えばクロマキー等）であるため、その詳細については説明を省略する。
【００２５】
このように第２映像情報にＨＤサイズの映像が使用された場合、ビデオデコーダ２（１０５）では常にＨＤサイズのデコード能力が必要になり、前述のようにビデオデコーダ１（１０４）と合わせて処理量が非常に多くなる場合が考えられる。
【００２６】
そこで本実施例では、図５に示すように第２映像情報の有効領域を制限する。図５（ａ）に示すようにコンテンツ作成者は、第２映像情報として必要な領域のみが示されるような形で映像を符号化し、合わせて図５（ｂ）に示すように有効領域の領域情報を生成するようにする。例えば有効領域の合計値をＨＤサイズの１／６以下と制限することにより、ＨＤサイズで符号化するとしても、符号化の実効値はＳＤサイズとなる。
【００２７】
具体的に例えば第２映像情報をＭＰＥＧ２ビデオ形式で符号化する場合について、簡単に説明する。図６に示すようにＭＰＥＧ２ビデオ形式では、映像の各フレームは時間的・空間的な相関が取られ、差分値が符号化される。相関が取られる単位は、輝度と色差からなる所定単位（マクロブロック）であり、１フレーム内では無効領域はスキップマクロブロック（符号量が最小）となるように符号化すればよい。
【００２８】
しかしそのまま第２映像情報として再生しても、無効領域が必ずしも前期不透明度の決定手法により正しく合成されるとは限らないため、前記図５（ｂ）に示される有効領域情報を図２の不透明度α１の決定要素として、乗算器２０５及び２０６に入力するようにする。乗算器２０５及び２０６では、前記有効領域情報に応じて、有効領域以外、つまり無効領域ではα１＝０とし、常に第１映像情報が表示されるようにする。また有効領域内では、前記不透明度決定手法（クロマキー等）を別途適用するものとする。
【００２９】
以上のように本実施例によれば、第２映像情報はＨＤサイズとして有効領域がＨＤサイズの所定割合以下となるように符号化し、再生時には有効領域情報も用いて第１映像情報と第２映像情報の合成を行うことが可能なため、ピクチャインピクチャ機能を実行中でもデコーダの処理量を軽減することができ、所望の画像合成を実現することができる。
【００３０】
なお本実施例においては、基本的に第２映像情報の無効領域の符号化結果のわずかな変動までを考慮して、その状態に拠らず有効領域情報を利用し、無条件に無効領域の不透明度を０とするような場合について述べたが、例えば無効領域を均一の状態で符号化できるような場合であれば、符号化時の有効領域の割合制限により、復号後の第２映像情報の全領域に対して前述の不透明度決定手法（クロマキー等）を適用し、所望の効果を得ることも可能である。また本実施例では第２映像をＭＰＥＧ２ビデオ形式で符号化する場合について述べたが、有効領域に重点的に符号を割り当てて符号化できるような方式であれば、その形式は限定されるものではない。
【実施例２】
【００３１】
次に本発明の第２の実施例について説明する。
本実施例による再生装置のブロック図は、図１と同様であるため、詳細な説明は省略する。第１の実施例と異なるのは、第２映像情報がＳＤサイズであり、第１映像情報の画面上のサイズより小さいという点である。第１の実施例でも述べた通り、第２映像情報がＳＤサイズであれば、ＨＤサイズの場合と比べてそれだけでビデオデコーダの処理量を軽減することができる。しかしＳＤサイズの場合、第２ビデオプレーン２０２の使用領域が限定されてしまい、複数の子画面を異なる場所に合成するなどということができない。
【００３２】
そこで本実施例では図７（ａ）に示すように第２映像情報を例えば４分割し、夫々の領域に異なる人物を配置するなどして、映像としてはＳＤサイズのものとして符号化を行う。また図７（ｂ）に示すように分割した夫々の領域を、最終的に第１映像情報の表示上、どの位置に配置するかがわかるような位置情報及び適用タイミングを生成し、これも提供するようにする。つまり図１の補助情報解析部１０９では前記分割領域の位置情報及び適用タイミングを補助情報から抽出し、これを制御部１１１を介して表示映像形成部１０８に入力する。
【００３３】
図８はこの場合の表示映像形成部１０８の構成の一例を示したものである。なお図２と同様な部分には、同一符号を付けて詳細な説明を省略する。制御部１１１から出力された分割領域の貼り付け位置情報は、位置補正部８０１に入力される。第２ビデオプレーン２０２から読み出された画素単位のデータは、位置補正部８０１において前記位置情報に応じて位置補正が行われた後、不透明度の適用、及び加算が行われる。
【００３４】
図９に、この場合の具体例を示す。第２映像情報はＳＤサイズで符号化されており、領域が４分割されている。第２映像情報はビデオプレーン２０２上ではＳＤサイズのままだが、位置補正部８０１により、領域単位に表示位置が補正され、最終的に９０１のような任意の場所に所望の小領域を表示するような、ピクチャインピクチャ機能としての表示映像の出力を得ることができる。
【００３５】
以上のように本実施例によれば、第２映像情報をＳＤサイズとして処理量を制限しながら、ピクチャインピクチャ機能としては複数の位置に子画面を表示することができる。
【００３６】
本実施例において、位置補正部８０１は第２ビデオプレーン２０２の後段に配置するような構成としたが、位置補正部を第２ビデオプレーン２０２の前段に配置しても同様の効果を得ることができる。この場合デコードされた第２映像情報は、位置補正がなされた上で第２ビデオプレーン２０２に格納されることになる。
【実施例３】
【００３７】
次に本発明の第３実施例について説明する。
本実施例は、実施例１及び実施例２の再生装置で再生する記録媒体へ映像情報を記録する記録装置に関するものである。
【００３８】
図１０は、本実施例の記録装置のブロック図を示したものである。１００１は、アナログ入力端子であり、カメラや他機器などから第２の映像情報を入力されるアナログ入力端子である。なお、ここでは、アナログの情報を入力されるものであるが、これに限定されず、デジタルの情報を入力されるものであっても良い。１００２は、放送された、又はネットワークから送信された第1の映像情報を入力されるデジタル入力端子である。１００３は、アナログ入力端子１００１から出力されたアナログ情報をデジタル情報に変換するA/D変換手段であるが、第２の映像情報が入力された時からデジタル信号である場合には変換を行わない。１０１１は、第２の映像情報の有効領域情報及び適用時刻情報を作成する補助情報作成手段である。１００４は、デジタルの第２の映像情報をエンコードするエンコーダである。１００５は、エンコードされた第２の映像情報、又はデジタル入力端子１００２から出力された第１の映像情報かを選択する映像情報選択手段である。１００６は、記録する媒体を選択する媒体選択手段である。１００９は光ディスク、１０１０はハードディスクなどのローカルストレージである。１００７はユーザからの指示を受け付けるユーザＩ／Ｆである。１００８は本記録装置全体を制御する制御部である。なお、制御部１００８は、再生部１０１２の制御部１１１と共通になっていても良い。１０１２は、実施例１や実施例２で記載した再生側の動作を行う再生部であり、表示映像形成手段１０８などを有する。表示映像形成手段１０８は、アナログ入力端子１００１より入力された第２の映像情報及びデジタル入力端子１００２より入力された第１の映像情報が入力され、補助情報作成手段１０１１で作成された有効領域情報及び適用時刻情報を用いて表示画面上で表示する映像を合成する。
【００３９】
本実施例では、第２の映像情報の有効領域情報及び適用時刻情報を作成して、第２の映像情報とともに記録媒体へ記録することが特徴である。このようにすることで実施例１や実施例２に対応した記録媒体を作成できる。また、有効領域ではない無効領域のデータ容量は、小さいので、制御部１００８の負担を軽くすることができる。さらに、この記録媒体からピクチャインピクチャとして映像を再生する時に、制御部１１１の負担を軽減することができる。
【００４０】
なお、第１の映像情報は、デジタル入力端子１００２から出力されたデジタルの情報であったが、これに限らず、第２の映像情報のようにアナログで入力されて、A/D変換手段でアナログからデジタルに変換されるものであっても良い。
【００４１】
また、第１の映像情報と第２の映像情報を同時に記録するようにしていたが、第１の映像情報が記録された後に、記録媒体から該第１の映像情報の再生に合わせて、第２の映像情報を入力して記録するようにしても良い。また、逆に第２の映像情報を記録された後に、記録媒体から該第２の映像情報の再生に合わせて、第１の映像情報を入力して記録するようにしても良い。
【００４２】
さらに、第１の映像情報と第２の映像情報が補助情報とともに多重化された情報を受信した場合に、第２の映像情報の有効領域の範囲を大きくしたり小さくしたり、範囲の位置を変えたりするときには、補助情報を分離し、その補助情報に含まれている有効領域情報や適用時刻情報を変更して再多重化して記録する。また、第２の映像情報及び補助情報が実施例１の形式であった場合に、実施例２の形式に変更したり、逆に実施例２の形式であった場合に、実施例１の形式に変更して、記録することも実施例の一つである。
【００４３】
以上のように、実施例において、ピクチャインピクチャとして再生される前記第２映像は、ＨＤサイズとして符号化されており、その有効領域は画像全体に対して所定の割合以下に収まるものとし、合わせて該第２映像による動画ストリームは前記有効領域の領域情報及びそれらの適用タイミング情報といった補助情報を伴うものとする。再生方法及び再生装置は前記補助情報解析手段を有し、再生時には抽出された領域情報に応じ、適当なタイミングで前記第２映像における前記有効領域以外の無効領域に透明化の効果を施すように構成する。
【００４４】
また、ピクチャインピクチャとして再生される実施例２の第２映像は、ＳＤサイズとして符号化されており、該第２映像による動画ストリームは分割領域の貼り付け位置情報及びそれらの適用タイミング情報といった補助情報を伴うものとする。再生方法及び再生装置は、前記補助情報の解析手段を有し、前記第２映像がＳＤサイズとして符号化されている場合には抽出された位置情報に応じて、適当なタイミングで前記第２映像の所定分割領域を、第１映像に重ね合わせるようにして表示するような構成とする。
【００４５】
ピクチャインピクチャとして再生される第２映像がＨＤサイズとして符号化されている場合には、実質的にその有効領域は画像全体の所定領域以下に抑えられており、画質を維持しつつ、符号化レートを低く抑えることが可能となる。再生時には無効領域は透明化の効果が施されるため、ピクチャインピクチャとして有効領域以外で第１映像の表示が隠されることはない。
【００４６】
また、再生方法及び装置によれば、ピクチャインピクチャとして再生される第２映像がＳＤサイズとして符号化されている場合には、該第２映像による動画ストリームは分割領域の位置情報を伴うので、再生時にピクチャインピクチャとして複数の小領域画像を、所望の位置に表示することが可能となる。第１映像がＨＤサイズであっても、第２映像はＳＤサイズとして符号化されているため、符号化レート、処理量を軽減することが可能である。
【００４７】
これまでの実施例では、再生方法、再生装置、記録方法及び記録装置について記載してきたが、実施例１乃至実施例３のいずれかに対応した記録媒体も実施例の１つである。このような記録媒体を用いることで、再生処理の負担を軽減することができる。
【００４８】
また、補助情報として有効領域情報と適用時刻情報の両方を用いる例を実施例として記載したが、静止画適用の際には、適用時刻情報を用いなくても良いことは言うまでもない。
【００４９】
また、第２の映像情報の有効領域の解像度のサイズは、第１の映像情報の解像度のサイズに対して所定の割合以下となるようにしていたが、再生処理の負担を軽減という観点から、第２の映像情報の有効領域の解像度のサイズは、第１の映像情報の解像度のサイズに対して小さくなれば良いことは言うまでもない。しかしながら、所定の割合以下とした方が、再生装置の設計上簡単である。
【００５０】
また、第１の映像情報は放送、ネットワークから送信されてきたもの、第２の映像情報はカメラなどの他機器、放送、ネットワークから送信されてきたものであったが、これに限定されるものではない。例えば、光ディスク１００９やローカルストレージ１０１０から再生されたものであってもよく、編集して同じ記録媒体へ記録する場合、別の記録媒体へ記録する場合も実施例の１つである。
【００５１】
また、第１の映像情報及び第２の映像情報を受信する受信部と、第１の映像情報及び第２の映像情報を表示する表示部と、をも備え、実施例１や実施例２の再生装置に対応した映像表示装置も実施例の１つである。
【図面の簡単な説明】
【００５２】
【図１】実施例の再生装置のブロック図。
【図２】本発明の実施例１による表示映像形成部の構成の一例を示す図。
【図３】ピクチャインピクチャ機能の基本イメージ。
【図４】第２映像情報がＨＤサイズである場合のピクチャインピクチャ機能を示す図。
【図５】第２映像情報の有効領域制限の一例。
【図６】映像データの符号化を説明するための図。
【図７】第２映像情報の分割の一例。
【図８】本発明の第２の実施例による表示映像形成部の構成の一例を示す図。
【図９】第２映像情報がＳＤサイズである場合のピクチャインピクチャ機能を示す図。
【図１０】実施例３の記録装置のブロック図。
【符号の説明】
【００５３】
１０１ … 光ディスク
１０２ … ローカルストレージ
１０３ … ＰＩＤフィルタ
１０４ … ビデオデコーダ１
１０５ … ビデオデコーダ２
１０６ … グラフィクスデコーダ１
１０７ … グラフィクスデコーダ２
１０８ … 表示映像形成部
１０９ … 補助情報解析部
１１０ … 基準時刻カウンタ部
１１１ … 制御部
１１２ … 比較部
２０１ … 第１ビデオプレーン
２０２ … 第２ビデオプレーン
２０３ … プレゼンテーショングラフィクスプレーン
２０４ … インタラクティブグラフィクスプレーン
２０５，２０６、２０８、２０９、２１１、２１２ … 乗算器
２０７、２１０、２１３ … 加算器
【図１】
0004534975.tif 000002
【図２】
0004534975.tif 000003
【図３】
0004534975.tif 000004
【図４】
0004534975.tif 000005
【図５】
0004534975.tif 000006
【図６】
0004534975.tif 000007
【図７】
0004534975.tif 000008
【図８】
0004534975.tif 000009
【図９】
0004534975.tif 000010
【図１０】
0004534975.tif 000011