(57)【要約】【課題】  ＭＰＥＧストリームを記録／再生するカメラ一体型記録再生装置において、１３９４を介してデジタルＴＶ等に接続した場合、特殊再生画像やＯＳＤ付加画像を表示できるようにする。【解決手段】  撮影時には、ＭＰＥＧ符号化部３によりＰＳ形式で符号化したストリームを記録メディア５に記録し、再生時には、ＰＳ形式をＭＰＥＧ復号化部８により復号化すると共に、復号化された画像にＯＳＤ１１及びミキサー１０により静止画情報を合成した後、ＭＰＥＧ符号化部３によりＴＳ形式に符号化し、１３９４入出力部１２を介してデジタルＴＶに表示する。【選択図】        図１
2005322977.tif 000002
【特許請求の範囲】
【請求項１】
画像及び音声を入力し、ＭＰＥＧの多重化方式であるプログラムストリーム（ＰＳ）形式とトランスポートストリーム（ＴＳ）形式を選択的に符号化するＭＰＥＧ符号化手段と、前記ＰＳ及びＴＳ形式を選択的に復号化するＭＰＥＧ復号化手段と、復号化した画像に付加情報を合成する付加情報合成手段と、前記ＰＳ及びＴＳ形式のデータを外部とやり取りするデジタルインタフェース手段とを具備し、撮影時には前記符号化手段により符号化したストリームを記録媒体に記録し、再生時には前記ストリームを前記復号化手段により復号化すると共に、復号化された画像に前記付加情報合成手段により付加情報を合成した後、前記符号化手段によりＴＳ形式で符号化し、前記デジタルインタフェース手段を介してデジタルＴＶに表示することを特徴とするカメラ一体型記録再生装置。
【請求項２】
画像及び音声を入力し、ＭＰＥＧの多重化方式であるプログラムストリーム（ＰＳ）形式とトランスポートストリーム（ＴＳ）形式を選択的に符号化するＭＰＥＧ符号化手段と、前記ＰＳ及びＴＳ形式を選択的に復号化するＭＰＥＧ復号化手段と、ＪＰＥＧ符号化手段と、ＪＰＥＧ復号化手段と、動画像に静止画情報を合成する静止画合成手段と、前記ＰＳ及びＴＳ形式のデータを外部とやり取りするデジタルインタフェース手段とを具備し、撮影時には、前記ＭＰＥＧ符号化手段により符号化されたストリーム或いは前記ＪＰＥＧ符号化手段により符号化された圧縮静止画データを記録媒体に記録し、記録したストリーム或いは圧縮静止画データを再生する場合には、前記ストリームを前記ＭＰＥＧ復号化手段により復号化すると共に、前記圧縮静止画データを静止画情報として前記ＪＰＥＧ復号化手段により復号化し、前記静止画合成手段により当該静止画情報を復号された動画に合成した後、前記ＭＰＥＧ符号化手段によりＴＳ形式で符号化し、前記デジタルインタフェース手段を介してデジタルＴＶに表示することを特徴とするカメラ一体型記録再生装置。
【請求項３】
前記デジタルインタフェース手段を介してテジタル放送チューナー又はデジタル放送レコーダにデータを出力することを特徴とする請求項１又は２に記載のカメラ一体型記録再生装置。
【請求項４】
前記ストリームはＰＳ形式で記録媒体に記録されており、前記デジタルインタフェース手段にデジタル放送と関連しない電子機器が接続された場合には、前記記録媒体に記録されたコンテンツを記録したままの形式で前記デジタルインタフェース手段を介して入出力することを特徴とする請求項１又は２に記載のカメラ一体型記録再生装置。
【請求項５】
外部から前記デジタルインタフェース手段を介してＴＳ形式のストリームを入力する際に、前記ＭＰＥＧ復号化手段により復号し、前記ＭＰＥＧ符号化手段でＰＳ形式に符号化して前記記録媒体に記録することを特徴とする請求項１又は２に記載のカメラ一体型記録再生装置。
【請求項６】
撮影時には、前記ＭＰＥＧ符号化手段とＭＰＥＧ復号化手段との同時動作を禁止することを特徴とする請求項１又は２に記載のカメラ一体型記録再生装置。
【請求項７】
前記ＭＰＥＧ符号化手段により符号化されたＴＳ形式のストリームは、以前のＰＳ形式に比べて十分高いレートで符号化されていることを特徴とする請求項４に記載のカメラ一体型記録再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、光ディスクやハードディスク或いはメモリカード等を記録媒体とし、符号化した動画像及び音声の記録或いは再生を行うカメラ一体型記録再生装置に関するものである。
【背景技術】
【０００２】
従来のカメラ一体型記録再生装置（以後、カムコーダと略記）の記録媒体としてテープ媒体が多く用いられてきたが、最近では、これに代わる媒体として、光ディスクやハードディスク或いはメモリカードが注目されている。これは、媒体自体の記録密度が向上した点とＭＰＥＧ符号化方式等動画の圧縮技術の進歩によるところが大きい。
【０００３】
これら新しい記録媒体の特徴として、ランダムアクセスが可能な点が挙げられる。即ち、目的の映像を一瞬にして表示したり、早送りや巻き戻しをしないですぐ録画を開始したりすることが可能である。更に、映像信号以外の静止画や音声、プログラム等複数のコンテンツを混在して記録再生及び管理することができる。
【０００４】
一方、カムコーダの再生画像の表示装置としては、従来は一般的なテレビが主流であり、ビデオ、オーディオともにアナログ的に接続している。近年はデジタル放送に対応したデジタルＴＶが普及しつつあり、デジタルインタフェース（ＤＩＦ）を備えているため、ＤＩＦケーブル一本の接続でビデオ及びオーディオの再生が可能になっている。このＤＩＦはＩＥＥＥ１３９４（以後１３９４と略記）と呼ばれ、ＭＰＥＧストリームを伝送できる。これら従来のカムコーダに関連する技術としては、例えば、特開２００１−１１１８７７号公報（特許文献１）、特開２０００−０４１２０９号公報（特許文献２）等がある。
【特許文献１】特開２００１−１１１８７７号公報
【特許文献２】特開２０００−０４１２０９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
１３９４で伝送できるＭＰＥＧストリームはトランスポートストリーム（ＴＳ）と呼ばれる放送等伝送向けのフォーマットであり、記録媒体向けのプログラムストリーム（ＰＳ）とは異なったフォーマットとなっている。また、ＭＰＥＧストリーム中には、ＴＳ、ＰＳいずれの場合にもタイムスタンプと呼ばれる１枚の画像を復号するタイミング情報（ＤＴＳ：Decoding Time Stamp）と画像を表示すべきタイミング情報（ＰＴＳ：Presentation Time Stamp）が含まれている。更に、ＭＰＥＧ符号化方式は可変長の符号化方式であるため、デコーダに互換性を持たせる目的でバッファ量の制御が細かく規定されている。
【０００６】
このため、１３９４を介してカムコーダとデジタルＴＶを接続した場合には、以下のような問題があった。
【０００７】
（１）まず、サーチ再生等の特殊再生及びプレイリスト再生画像の出力が難しい。即ち、通常再生と異なる速度でストリームを再生したり、幾つかのストリームの一部を切り出して繋ぎ合わせると、タイムスタンプに矛盾が生じるので、ＤＴＳやＰＴＳを再計算して付け直す必要がある。また、デコーダでのバッファ制御にも矛盾が生じるので、オーバーフローやアンダーフローしないようにストリームの出力タイミングを調整する（バッファシミュレーションと呼ぶ）必要がある。
【０００８】
（２）また、ＧＵＩ、ＯＳＤを付加して表示できない。即ち、カムコーダ本体の表示器（ＬＣＤ：液晶パネル、ＥＶＦ：ビューファインダ）には、カムコーダの操作を補助するためのＧＵＩ（グラフィカルユーザーインターフェース）やＯＳＤ（オンスクリーンディスプレイ）がある。例えば、日付、録画／再生モード、サーチ再生速度、媒体の空き容量、サムネイル一覧といったものである。こういった情報は、記録の際に直接画像に重ねて記録しないことが多い（付随情報として記録し、再生時に必要に応じて重ねる）ため、再生時に１３９４に接続したＴＶに表示することができない。
【０００９】
（３）次に、外部入力記録時に時間情報を付加して記録する必要がある。即ち、１３９４を介して外部から入力されたＭＰＥＧストリームを媒体に記録する場合には、ストリーム本体と共にパケットを受信した時刻を記録する必要がある。これは、１３９４上でＴＳパケットがアイソクロナスチャネル（約１２５μｓのサイクル期間中の所定部分）と呼ばれるジッタを含むチャネルで間欠的に伝送されており、これを記録した後再生する場合には、伝送パケットの出力タイミングを入力時と同じタイミングに再現させるためである。１３９４上でのタイミング情報はＭＰＥＧ規格では規定されておらず、この情報を各ＴＳパケット毎に挿入した場合は規格外のＭＰＥＧストリームとなる。この代表的な例がＤ−ＶＨＳであり、記録時にはパケットタイミング情報をパケット毎に記録し、ストリームの再生（出力）時にこのタイミング情報を取り除くことで規格に合った元のＴＳに戻している。
【００１０】
（４）更に、ＭＰＥＧ−ＴＳ以外のコンテンツの出力ができない。即ち、ＭＰＥＧ−ＴＳ以外、例えば、ＪＰＥＧ符号化による静止画等であるが、１３９４（アイソクロナス伝送）に規定されていないためＴＶに表示できない。従って、静止画とＭＰＥＧ画像の組み合わせや、音声をバックにした静止画のスライドショー等も表示できない。
【００１１】
本発明の目的は、上述のようなＤＩＦを介してデジタルＴＶ等に接続する場合の問題点を解決することが可能なカメラ一体型記録再生装置を提供することにある。
【課題を解決するための手段】
【００１２】
本発明のカメラ一体型記録再生装置は、上記課題を解決するため、画像及び音声を入力し、ＭＰＥＧの多重化方式であるプログラムストリーム（ＰＳ）形式とトランスポートストリーム（ＴＳ）形式を選択的に符号化するＭＰＥＧ符号化手段と、前記ＰＳ及びＴＳ形式を選択的に復号化するＭＰＥＧ復号化手段と、復号化した画像に付加情報を合成する付加情報合成手段と、前記ＰＳ及びＴＳ形式のデータを外部とやり取りするデジタルインタフェース手段とを具備し、撮影時には前記符号化手段により符号化したストリームを記録媒体に記録し、再生時には前記ストリームを前記復号化手段により復号化すると共に、復号化された画像に前記付加情報合成手段により付加情報を合成した後、前記符号化手段によりＴＳ形式で符号化し、前記デジタルインタフェース手段を介してデジタルＴＶに表示することを特徴とする。
【００１３】
また、本発明のカメラ一体型記録再生装置は、画像及び音声を入力し、ＭＰＥＧの多重化方式であるプログラムストリーム（ＰＳ）形式とトランスポートストリーム（ＴＳ）形式を選択的に符号化するＭＰＥＧ符号化手段と、前記ＰＳ及びＴＳ形式を選択的に復号化するＭＰＥＧ復号化手段と、ＪＰＥＧ符号化手段と、ＪＰＥＧ復号化手段と、動画像に静止画情報を合成する静止画合成手段と、前記ＰＳ及びＴＳ形式のデータを外部とやり取りするデジタルインタフェース手段とを具備し、撮影時には、前記ＭＰＥＧ符号化手段により符号化されたストリーム或いは前記ＪＰＥＧ符号化手段により符号化された圧縮静止画データを記録媒体に記録し、記録したストリーム或いは圧縮静止画データを再生する場合には、前記ストリームを前記ＭＰＥＧ復号化手段により復号化すると共に、前記圧縮静止画データを静止画情報として前記ＪＰＥＧ復号化手段により復号化し、前記静止画合成手段により当該静止画情報を復号された動画に合成した後、前記ＭＰＥＧ符号化手段によりＴＳ形式で符号化し、前記デジタルインタフェース手段を介してデジタルＴＶに表示することを特徴とする。
【発明の効果】
【００１４】
本発明によれば、ＤＩＦを介してデジタルＴＶ等に表示する場合に、従来不可能であったプレイリストやサーチ再生画像、カムコーダ本体の表示器に表示されるＧＵＩやＯＳＤを付加した画像、ＭＰＥＧ以外の静止画や音声等を出力することが可能となる。また、外部から入力されるＴＳ形式の画像もパケットタイミング情報等を付加することなく記録メディアに記録することができる。
【発明を実施するための最良の形態】
【００１５】
次に、発明を実施するための最良の形態ついて図面を参照して詳細に説明する。図１は本発明によるカメラ一体型記録再生装置（カムコーダ）の一実施形態の構成を示すブロック図である。カメラ１は、レンズ、ＣＣＤを含みズーム、フォーカス、アイリス等撮像系と撮像系から得られた画像をＡＤ変換し、高画質化のための各種カメラ信号処理部を含むブロックである。図中には示していないが、音声信号の入力部（いわゆるマイク）もこのブロックに属しており、ＡＤ変換によりデジタル化された音声データが画像データと共にスイッチ２を介してＭＰＥＧ符号化部３に供給される。
【００１６】
スイッチ２はＭＰＥＧ符号化する画像を選択するスイッチであり、カメラ１からの画像とＯＳＤが付加された画像とを選択する。
【００１７】
ＭＰＥＧ符号化部３は、画像と音声信号を入力し、これらを圧縮符号化し多重化したストリームを出力する。大きくは画像の符号化部、音声の符号化部及び符号化後の画像と音声を多重化する多重化部から構成されている。
【００１８】
画像の符号化部は、動き検出を用いたフレーム間／フレーム内予測を行い量子化した後、可変長符号化を行う。音声の符号化部には、ＭＰＥＧ Layer２、ＡＣ−３（Dolby Digital）、ＭＰＥＧＡＡＣといった幾つかの符号化方式があり、通常はＤＳＰ（Digital Signal Processor）を使用し、ファームウエアを入れ替えることで複数の符号化方式に対応する。多重化部は符号化された画像と音声を多重化して１本のストリームとするが、背景技術で述べたようにＰＳとＴＳの２種類の多重化方法があってコントローラ１５からの指示により選択できる。
【００１９】
記録処理部４は、ＭＰＥＧ符号化されたストリームにエラー訂正符号を付加し、媒体に記録するために必要な変調等を行う。ディスク媒体使用時において、振動等によりピックアップがトラッキングを外れ、一時的に書き込みができなくなった場合に備え、メモリにデータのバッファリングを行う機能（ショックプルーフと呼ぶ）を持つこともある。
【００２０】
記録メディア５は、光ディスクやハードディスク或いはメモリカードといったカムコーダでは新しい媒体である。もちろん従来のテープ媒体でもよい。
【００２１】
再生処理部６は、媒体から読み出した信号に対し、復調、エラー訂正処理を行う。記録処理部４と同様にショックプルーフ機能を持つ場合もある。
【００２２】
スイッチ７は、媒体からの読み出し信号と外部機器からの入力信号を切り替えるスイッチであり、選択した信号をＭＰＥＧ復号化部８に送る。
【００２３】
ＭＰＥＧ復号化部８は、ＰＳ或いはＴＳである入力ストリームから画像と音声を分離し、画像の復号化部と音声の復号化部に供給し、画像と音声の圧縮符号化を元に戻す。入力ストリームがＰＳであるかＴＳであるかは、コントローラ１５から指示する。
【００２４】
スイッチ９は、カメラ１とＭＰＥＧ復号化部８からの信号を切り替えるスイッチである。カメラ撮影時はカメラ１を選択し、記録済み画像の再生時はＭＰＥＧ復号化部８を選択する。ミキサー１０は、画像信号にＯＳＤ１１で作成したグラフィックや文字情報等の付加情報をミックスする。ミックスする方法には、１００％ＯＳＤ情報で置き換えたり、ある一定の比率で加算する方法があり、後者の場合は文字の背景が半透明で画像が薄く見えるような効果になる。
【００２５】
ＯＳＤ１１は、画像にオーバーレイするためのメモリの一種で、コントローラ１５からの指示で文字情報を保持したり、ユーザーとの対話を補助するＧＵＩを提供する。文字情報としては、日付、時間、録画／再生モード、サーチ再生速度、媒体の空き容量等がある。ＧＵＩとしては、記録済みの各画像ファイルをサムネイル一覧で表示し、カーソルで選択した画像が再生できるといったメニュー画面が代表的な例である。
【００２６】
文字情報とグラフィックとは別プレーンのＯＳＤメモリを持ち、独立してミックスできるようにする。また、カムコーダには、液晶表示パネル（ＬＣＤ）、ビューファインダ（ＥＶＦ）、外部出力（Ｌｉｎｅ  Ｏｕｔ）等複数の出力があり、それぞれに異なるＯＳＤを表示する場合があるので、各出力に対応してＯＳＤのメモリプレーンを複数枚持つことがある。
【００２７】
１３９４入出力部１２は、デジタルＴＶやデジタル放送チューナー或いはデジタル放送レコーダと接続するためのインタフェースであり、リアルタイムのアイソクロナス伝送をサポートする。デジタルＴＶやデジタル放送チューナー或いはデジタル放送レコーダと接続する場合、伝送するストリームはＴＳに限定される。また、デジタルＴＶ等が接続されたことを検出し、コントローラ１５に通知する。
【００２８】
次に、記録動作について説明する。図２は図１の構成において記録を行う場合の信号の流れを太線で示している。また、太線で示すブロックはその機能が動作していることを示す。更に、ＭＰＥＧ符号化部３に入力されるＰＳとＴＳの選択信号は選ばれている側に下線を引いて示す。通常の記録動作の場合、ＭＰＥＧ符号化部３には、ＰＳが指示されカメラ画像はＰＳに符号化されて記録メディア５に記録される。
【００２９】
カメラ画像は同時にスイッチ９を通り、ＯＳＤ１１上の文字やグラフィック情報がミキサー１０で付加されてＬＣＤやＥＶＦに出力される。ＯＳＤ情報としては、記録モードであるか、記録メディアの空き容量、電池残量、ズーム時にはズーム倍率情報、その他カメラ情報等がグラフィカルに表示される。もちろん、好みによりこれらの表示を消すことも可能である。
【００３０】
次に、再生動作について説明する。図３は同様に再生時の信号の流れを示す。また、太線で示すブロックはその機能が動作していることを示す。更に、ＭＰＥＧ復号化部８に入力されるＰＳとＴＳの選択信号は選ばれている側に下線を引いて示す。この場合、記録メディア５にはＰＳで記録されているので、ＭＰＥＧ復号化８にはＰＳが指示される。復号化された画像信号はスイッチ９を通り、ＯＳＤ１１の情報がミキサー１０で付加されてＬＣＤやＥＶＦに表示される。ＯＳＤ情報としては、再生モードであるか、記録メディアの空き容量、電池残量、その他が必要に応じて表示される。
【００３１】
ここでいう再生には、通常の再生以外に複数の画像ファイルの一部または全部を連続的に再生するプレイリスト再生やサーチ再生も含まれている。この場合、背景技術で述べたバッファのオーバーフローやアンダーフローの問題があるが、蓄積系のメディアでは原理的にオーバーフローは発生せず（必要以上のデータの読み出しを中断すればよい）、メディアの再生速度の高速化とＭＰＥＧ復号の高速化及びデータの先読み機能（ショックプルーフ）を持つことでアンダーフローも回避できる。また、タイムスタンプの矛盾については、再生画像信号が途切れない点を優先し、ＰＴＳ等を手当てすることにより１３９４出力を行わず、ＬＣＤやＥＶＦに表示するだけであれば、大きな問題なく再生可能である。
【００３２】
この様子を図面を用いて説明する。図４はプレイリスト再生を行う場合の説明図である。図４（ａ）に示す２つのＭＰＥＧファイル（ｆｉｌｅ１、ｆｉｌｅ２）を図中の矢印に従って連続的に再生するものとする（ｆｉｌｅ１のＩ、Ｂ、Ｂ、Ｐ、Ｂからｆｉｌｅ２のＰ、Ｂ、Ｂ、Ｐ、Ｂ、Ｂ）。図中のＩ、Ｐ、Ｂはそれぞれフレーム内符号化ピクチャ、片方向フレーム間符号化ピクチャ、双方向符号化ピクチャを示す。また、Iピクチャから次のIピクチャの直前までのピクチャグループをＧＯＰと呼ぶ。
【００３３】
図４において、ｆｉｌｅ１の最後のＢピクチャにはＰＴＳ−１、続くｆｉｌｅ２の先頭のＰピクチャにはＰＴＳ−２がタイムスタンプとして付加されているが、これらのファイルはもともと異なる時間に撮影されたファイルであり、タイムスタンプ同士に関連はなく連続もしていない。ここでいう「連続」とは、各ピクチャを表示する間隔が約１／３０秒であるから、隣り合うピクチャ間のＰＴＳの差  が１／３０秒となっていることを指す。
【００３４】
図４（ｂ）はＭＰＥＧ復号化部８に入力されるストリームを示す。ｆｉｌｅ２のデータが再生対象のＰピクチャからでなく、それ以前のＩピクチャから供給されているのは、Ｐピクチャを復号するためにＩピクチャが必要なためである。Ｐピクチャにつづく２つのＢピクチャは、この例の場合は不要なので供給しなくてもよい。このストリームから画像を途切れなく再生するためには幾つかの工夫が必要であり、これを以下に示す。
【００３５】
（１）記録メディアの高速な読み出し
再生に必要なピクチャデータ量より余分のデータ（図中のＩＢＢに相当）が必要であり、通常の再生動作よりも高速な読み出しが要求される。
【００３６】
（２）充分なメモリ
余分なデータを先読みしておく必要があり、それを保持するためのメモリである。ディスクカムコーダ等では、振動による画像の途切れを防ぐために、ショックプルーフメモリを持つことが多く、これを流用する。
【００３７】
（３）高速なＭＰＥＧ復号化
図４の例では、ｆｉｌｅ１の最後のＢピクチャを復号した後、同じ時間でＩ及びＰピクチャを復号しなければならないので、２倍程度の高速な復号が必要である。
【００３８】
（４）ＰＴＳのすげ替え
ｆｉｌｅ２の先頭のＰＴＳ−２はＰＴＳ−１に連続とはならないので、これ以降のＰＴＳは無視してＰＴＳ−１に１／３０秒づつ加えた値を新しいＰＴＳとして使用する。
【００３９】
以上の要件を満たすことで、プレイリストの再生が可能となる。
【００４０】
図５はサーチ再生を行うための説明図である。一般的なサーチ再生は、図５（ａ）に示すように各ＧＯＰの先頭のＩピクチャをジャンプしながら拾い読みして、Ｉピクチャのみを表示することで行う。もし、ＧＯＰが１５枚のピクチャから構成される場合には、１５倍速の高速サーチが実現できる。
【００４１】
図５（ｂ）はＭＰＥＧ復号化部８に入力されるストリームを示す。本来必要なのはＩピクチャに相当するストリームだけであるが、図中の斜線部は無効なデータを示している。これは、ＭＰＥＧストリームが可変長サイズなのに対し、ディスク等の記録メディアにおいてはアクセスの単位がセクタという固定長サイズであり、特に高速なアクセスの場合はデータの扱いをこのセクタの整数倍とした方が都合が良いためである。
【００４２】
実際の斜線部のデータはＩピクチャに後続するＢピクチャデータの一部である。このようなストリームが入力されるため、ＭＰＥＧ復号化部８では斜線部のデータをスキップすることにより、Ｉピクチャを連続的に表示することができ、サーチ再生が実現できる。この場合にも、図４で説明したようなＰＴＳのすげ替えが必要なのはもちろんである。
【００４３】
以上の再生動作で述べた図４（ｂ）、或いは図５（ｂ）のようなストリームは正規のＭＰＥＧストリームではなく、また、ＴＳ形式でもないため、１３９４から外部に出力することはできない。
【００４４】
次に、ＤＩＦ出力について説明する。図６は１３９４を介してデジタルＴＶやデジタル放送チューナー（或いはデジタル放送レコーダ）に接続し、テレビ画面に再生画像を表示する場合の信号の流れを示す。図２、図３の場合と同様に太線で示すブロックはその機能が動作していることを示す。更に、ＭＰＥＧ符号化部３やＭＰＥＧ復号化部８に入力されるＰＳとＴＳの選択信号は選ばれている側に下線を引いて示す。まず、記録メディア５から再生されたＰＳ信号は再生処理部６を経てＭＰＥＧ復号化され、ＯＳＤ１１の情報がミキサー１０で付加されてＬＣＤやＥＶＦに表示される。ここまでは、図３の再生時と全く同様である。
【００４５】
もし、１３９４入出力部１２にデジタルＴＶ等が接続された場合には、これを検出してコントローラ１５に通知され、以下の動作を行うように指示が出される。ＬＣＤやＥＶＦに表示される信号は、同時にスイッチ２を通してＭＰＥＧ符号化部３に送られ、今度はＴＳに符号化される。ＴＳ信号は１３９４入出力部１２から出力されてデジタルＴＶ等に表示される。プレイリストやサーチ画或いはＯＳＤが付加された画像であっても、再符号化を行うため規格を満足したＴＳが得られ、問題なく１３９４に出力が可能となる。
【００４６】
通常の記録再生と異なる点は、ＭＰＥＧ符号化部３とＭＰＥＧ復号化部８が同時に動作する点と、ＭＰＥＧ符号化部３がＰＳではなくＴＳで符号化を行っている点である。なお、音声は図示していないが、画像と並行に同様の経路で運ばれ、ＭＰＥＧ復号化、符号化も行う。以上の動作により、デジタルＴＶ上には、カムコーダ側のＬＣＤやＥＶＦとまったく同じ画像を表示することができる。
【００４７】
次に、ＤＩＦ入力について説明する。図７は１３９４を介して外部からＴＳ形式のストリームを入力し、記録する場合の信号の流れを示す。また、同様に太線で示すブロックはその機能が動作していることを示す。更に、ＭＰＥＧ符号化部３やＭＰＥＧ復号化部８に入力されるＰＳとＴＳの選択信号は選ばれている側に下線を引いて示す。３９４入出力部１２にデジタルＴＶやデジタル放送チューナー或いはデジタル放送レコーダが接続されたことを検出し、図示しない録画ボタンが押されたら、コントローラ１５からの指示により以下のような動作を行う。
【００４８】
まず、１３９４入出力部１２から入力されたＴＳはスイッチ７を通してＭＰＥＧ復号化部８に入力され復号される。今度はＴＳなのでＭＰＥＧ復号化部８にはＴＳを指示する。復号された画像信号はスイッチ９を通して必要に応じＯＳＤ１１がミキサー１０で付加された後、ＬＣＤ、ＥＶＦに表示され、スイッチ２を通してＭＰＥＧ符号化部３でＰＳとされ、記録処理部４で記録メディア５に記録される。符号化以降はカメラ画像の記録時と全く同様である。
【００４９】
ＭＰＥＧ符号化部３とＭＰＥＧ復号化部８は同時に動作するが、ＴＳ出力の場合と丁度反対で、符号化がＰＳで復号化がＴＳで行う。背景技術で述べたようにＴＳを記録する場合は再生時のために入力パケットのタイミング情報を付加して記録しておく必要があったのに比べ、この方法ではタイミング情報は一切記録する必要がない。
【００５０】
次に、静止画対応について説明する。図８は動画だけでなく静止画も扱う場合の構成と信号の流れを示す。構成としては図1と比べてＪＰＥＧ符号化部１３とＪＰＥＧ復号化部１４が追加されている。ＪＰＥＧ符号化部１３はカメラ１で撮影された静止画を圧縮して圧縮静止画データとし、ＪＰＥＧ復号化部１４は圧縮静止画データをもとの静止画に復号する。
【００５１】
信号の流れは再生時のものを示しているが、記録時はカメラ１からの動画及び静止画信号がそれぞれＭＰＥＧ符号化部３及びＪＰＥＧ符号化部１３で符号化され、記録処理部４を通してそれぞれ記録メディア５に記録される。記録メディア５上にはＭＰＥＧファイル（ＰＳ）とＪＰＥＧファイルが混在することになる。動画の再生経路に関しては上述したので、ここでは静止画についてのみ説明する。
【００５２】
記録メディア５から再生されたＪＰＥＧファイルは再生処理部６を介してＪＰＥＧ復号化部１４に入力される。復号された静止画はＯＳＤ１１のメモリに保持され、ミキサー１０で動画にオーバーレイされる。その後、上述のようにスイッチ２を通してＭＰＥＧ符号化部３に送られ、ＴＳに符号化される。ＴＳ信号は１３９４入出力部１２からデジタルＴＶ等に出力される。オーバーレイの方法としては、背景が静止画でウィンドウ内に動画を表示するとか、その逆の場合、或いは動画、静止画とも全画面表示で時間的に切り換える等のバリエーションが可能である。また、ＭＰＥＧを音声のみとし、音声をバックに静止画を次々にスライドショーしていくような応用も考えられる。
【００５３】
次に、アシンクロナス伝送について説明する。以上の説明では１３９４を介して接続する機器として、デジタルＴＶやデジタル放送チューナー或いはデジタル放送レコーダを挙げたが、他に接続する機器として代表的なものにパーソナルコンピュータ（ＰＣ）や同じ１３９４を装備するカムコーダ等が考えられる。ＰＣと接続する主な目的は、カムコーダ内の動画ファイル等のコンテンツをＰＣに取り込み、編集を行ったり他のメディアに保存すること等である。カムコーダ同士を接続する主な目的はダビングである。
【００５４】
図９はこれらの機器を接続する場合の説明図を示す。１３９４の伝送方式にはアイソクロナス伝送とアシンクロナス伝送の２種類があり、これまで述べてきたアイソクロナス伝送がリアルタイム性を重視しているのに対し、アシンクロナス伝送はすべてのコンテンツをファイルとして扱い非同期に伝送する特徴がある。ＰＣやカムコーダを接続する場合は、後者のアシンクロナス伝送が好ましい。
【００５５】
というのは、リアルタイムの制約がないため高速な伝送が可能な点と、ＰＣもカムコーダもＭＰＥＧ動画をＰＳ形式で扱うため、わざわざＴＳ形式に変換する必要がないからである。従って、図９において、記録メディア５上のコンテンツは、ＭＰＥＧ複号化部を経由せず再生処理部或いは記録処理部を通して直接１３９４の入出力を行う（図中、太線の経路）。但し、図示しないが画像をモニタする等の目的でＭＰＥＧ復号化部を動作させてもよい。なお、アシンクロナス伝送では、すべてのコンテンツをファイルとして扱うためＭＰＥＧ以外のコンテンツも区別なく伝送が可能である。また、ＰＣやカムコーダをＤＩＦに接続した場合においても、図６及び図７で説明したアイソクロナス伝送を行うことは可能である。
【００５６】
なお、図６のような１３９４出力動作を行う場合、ＭＰＥＧ符号化及び復号化を同時に行うため消費電力が増加する問題があるが、デジタルＴＶや放送チューナー或いはデジタル放送レコーダと接続する場合には、撮影時とは異なり電源アダプタを使用できるので電池切れを心配する必要はない。撮影時には、電池切れを考慮してＭＰＥＧ符号化と復号化の同時動作を禁止してもよい。
【００５７】
また、符号化を２回（撮影時と１３９４出力時）行うことによる画質劣化が懸念されるが、これは、１３９４出力時に十分高い符号化レートを用いて再符号化することで、最低限の画質劣化に抑えることができる。できればＭＰＥＧ規格で定められた最大符号化レート１５Ｍｂｐｓで画像を符号化すればよいが、少なくとも最初の符号化レートよりも十分高い符号化レートで符号化することが好ましい。１３９４に接続されるデジタルＴＶ等は、もともとデジタル放送で使用される高レートのストリームを復号できる能力を備えている。
【００５８】
なお、上述の実施形態では、記録メディアにＰＳで符号化された画像信号を記録しているが、これはＴＳで符号化された画像信号でも良い。この場合、記録メディアから再生されたストリームはＴＳで復号化され、復号化された画像信号にグラフィックや文字情報等の付加情報が合成され、再びＴＳで復号化され出力されることとなる。
【図面の簡単な説明】
【００５９】
【図１】本発明の一実施形態を示すブロック図である。
【図２】記録動作時の信号の流れを説明する図である。
【図３】再生動作時の信号の流れを説明する図である。
【図４】プレイリスト再生を行う場合の説明図である。
【図５】サーチ再生を行う場合の説明図である。
【図６】１３９４を介してデジタルＴＶやデジタル放送チューナーに接続し、テレビ画面に再生画像を表示する場合の信号の流れを説明する図である。
【図７】１３９４を介して外部からＴＳ形式のストリームを入力し記録する場合の信号の流れを説明する図である。
【図８】本発明の動画と静止画に対応する実施形態を示すブロック図である。
【図９】ＤＩＦのアシンクロナス伝送動作を説明する図である。
【符号の説明】
【００６０】
１  カメラ
２  スイッチ
３  ＭＰＥＧ符号化部
４  記録処理部
５  記録メディア
６  再生処理部
７  スイッチ
８  ＭＰＥＧ復号化部
９  スイッチ
１０  ミキサー
１１  ＯＳＤ
１２  １３９４入出力部
１３  ＪＰＥＧ符号化部
１４  ＪＰＥＧ復号化部
１５  コントローラ
【図１】
2005322977.tif 000003
【図２】
2005322977.tif 000004
【図３】
2005322977.tif 000005
【図４】
2005322977.tif 000006
【図５】
2005322977.tif 000007
【図６】
2005322977.tif 000008
【図７】
2005322977.tif 000009
【図８】
2005322977.tif 000010
【図９】
2005322977.tif 000011