(57)【要約】【課題】複数の編集を組み合わせた編集を行う。【解決手段】記録再生部５１は、記録媒体に記録されているコンテンツデータとファイル記憶部５８に記憶されている再生パラメータを再生する。再生パラメータには、コンテンツデータに基づく画像に対して施された編集を再現するための加工データが含まれている。１つのコンテンツデータに対して複数の編集が施された場合、複数の加工データが再生パラメータには含まれている。切り替え指示部５７は、再生パラメータを切り替える指示を行う。再生パラメータが切り替えられることにより、異なるコンテンツに切り換えられたかのようなコンテンツがユーザに提供される。本発明は、所定の記録媒体を再生する再生装置に適用できる。【選択図】図４
2008311808.tif 000002
【特許請求の範囲】
【請求項１】
第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御する再生制御手段と、
前記再生制御手段により再生が制御されているパラメータを、他のパラメータに切り替える指示を出す指示手段と、
前記指示手段により切り替えが指示され、前記再生制御手段により再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成する編集手段と
を備える情報処理装置。
【請求項２】
前記指示手段は、前記複数のパラメータの数により、前記パラメータを切り替えるタイミングを設定する
請求項１に記載の情報処理装置。
【請求項３】
前記指示手段は、再生制御手段により再生されているパラメータが、途切れたとき、他のパラメータに切り替える指示を出す
請求項１に記載の情報処理装置。
【請求項４】
前記指示手段は、前記パラメータに付随している優先度に関する情報を参照し、優先度の高い順に切り替える
請求項１に記載の情報処理装置。
【請求項５】
第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御し、
再生が制御されているパラメータを、他のパラメータに切り替える指示を出し、
前記パラメータの切り替えが指示され、再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成する
ステップを含む情報処理方法。
【請求項６】
第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御し、
再生が制御されているパラメータを、他のパラメータに切り替える指示を出し、
前記パラメータの切り替えが指示され、再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成する
ステップを含む処理をコンピュータに実行させるプログラム。
【請求項７】
第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御し、
再生が制御されているパラメータを、他のパラメータに切り替える指示を出し、
前記パラメータの切り替えが指示され、再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成する
ステップを含む処理を実行するコンピュータが読み取り可能なプログラムが記録されている記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法、プログラム、および記録媒体に関し、特に、簡便に映像の切り替えを行えることができるようにする情報処理装置、情報処理方法、プログラム、および記録媒体に関する。
【背景技術】
【０００２】
図１は、複数のコンテンツを切り替えることにより１本のコンテンツを生成する場合のシステムの一例の構成を示す図である。ここでは、コンテンツが３本の場合を例に挙げて説明する。
【０００３】
図１に示したシステムは、記録媒体１−１乃至１−３、再生装置２−１乃至２−３、スイッチャー３、記録装置４、および記録媒体５を含む構成とされている。記録媒体１−１乃至１−３は、それぞれコンテンツデータを記録している。記録媒体１−１乃至１−３に記録されているコンテンツデータは、それぞれ異なるコンテンツデータである。
【０００４】
再生装置２−１乃至２−３は、それぞれ、装着された記録媒体１−１乃至１−３を再生し、スイッチャー３に再生されたコンテンツデータを供給する。スイッチャー３は、供給された３本のコンテンツデータのうち、１本のコンテンツデータを選択し、記録装置４に供給する。記録装置４は、装着されている記録媒体５に、供給されたコンテンツデータを記録する。
【０００５】
このようにして、記録媒体１−１乃至１−３にそれぞれ記録されているコンテンツデータのなかから、選択されたコンテンツデータが、記録媒体５に記録される。よって、記録媒体５には、記録媒体１−１乃至１−３にそれぞれ記録されているコンテンツデータが組み合わされたコンテンツデータが記録される。
【０００６】
記録媒体１−１乃至１−３にそれぞれ記録されているコンテンツデータは、ビデオカメラなどにより撮影された映像などである。例えば、ビデオカメラにおいては、撮像によって得られた画像（画像データ）が、例えば、DV(Digital Video)方式やMPEG(Moving Picture Experts Group)方式で符号化され、テープやディスクなどの記録媒体に記録される。
【０００７】
また、ビデオカメラには、一般に、ズーム機能が設けられている。ズーム機能によれば、撮像によって得られる画像の画角（画像に映る範囲の画角）（倍率）を変更することができる。即ち、例えば、ユーザがズームイン操作を行って撮影すれば、被写体をクローズアップ（拡大）した狭い画角の画像を得ることができ、ユーザがズームアウト操作を行って撮影すれば、広い範囲が映った広角の画像を得ることができる。
【０００８】
ところで、従来のビデオカメラにおいては、撮像を行って画像を出力する撮像手段が１つしか設けられていないため、上述のようなズーム操作（ズームイン操作、ズームアウト操作）によって、画像の画角を変更することはできるが、異なる画角の画像を同時に得ることはできなかった。
【０００９】
そこで、２つの撮像手段を有し、例えば、画角の狭い画像と、画角の広い画像とを同時に得ることができるビデオカメラが提案されている（例えば、特許文献１参照）。
【特許文献１】特開2004-282296号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
記録媒体１−１乃至１−３にそれぞれ異なるコンテンツデータを記録させる場合、例えば、ビデオカメラで、３回撮影を行うことで、３本のコンテンツデータが取得された。このことは、複数のコンテンツデータを取得したいときには、複数回の撮影を行わなくてはならないことを意味していた。
【００１１】
また、例えば、１つの画面で、複数の注目したい被写体があり、その被写体毎に撮影を行い、コンテンツデータを取得する場合、複数のビデオカメラで、それぞれの被写体を撮影することで、コンテンツデータが取得された。このことは、同時に複数の被写体を別々に撮影したいときには、複数のビデオカメラが必要であることを意味していた。
【００１２】
また、ビデオカメラなどで撮像された画像を編集するには、オリジナルの画像データを再生させながら、各種の処理を加える操作を実行し、処理結果となる画像を別の記録媒体に記録させるといったリニア編集が主流であった。また、このようなリニア編集の場合、オリジナルの画像データがCOPY ONCEの場合、記録媒体に記録したものを再生し、さらに編集した映像については記録できなかった。
【００１３】
本発明は、このような状況に鑑みてなされたものであり、複数の被写体の画像を、簡便に取得でき、編集できるようにする。
【課題を解決するための手段】
【００１４】
本発明の一側面の情報処理装置は、第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御する再生制御手段と、前記再生制御手段により再生が制御されているパラメータを、他のパラメータに切り替える指示を出す指示手段と、前記指示手段により切り替えが指示され、前記再生制御手段により再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成する編集手段とを備える。
【００１５】
前記指示手段は、前記複数のパラメータの数により、前記パラメータを切り替えるタイミングを設定するようにすることができる。
【００１６】
前記指示手段は、再生制御手段により再生されているパラメータが、途切れたとき、他のパラメータに切り替える指示を出すようにすることができる。
【００１７】
前記指示手段は、前記パラメータに付随している優先度に関する情報を参照し、優先度の高い順に切り替えるようにすることができる。
【００１８】
本発明の一側面の情報処理方法は、第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御し、再生が制御されているパラメータを、他のパラメータに切り替える指示を出し、前記パラメータの切り替えが指示され、再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成するステップを含む。
【００１９】
本発明の一側面のプログラムは、第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御し、再生が制御されているパラメータを、他のパラメータに切り替える指示を出し、前記パラメータの切り替えが指示され、再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成するステップを含む処理をコンピュータに実行させる。
【００２０】
本発明の一側面の記録媒体は、第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御し、再生が制御されているパラメータを、他のパラメータに切り替える指示を出し、前記パラメータの切り替えが指示され、再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成するステップを含む処理を実行するコンピュータが読み取り可能なプログラムが記録されている。
【００２１】
本発明の一側面の情報処理装置および方法、プログラム、並びに記録媒体においては、第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータが選択的に切り替えられ、その切り替えられたパラメータで、第１の画像に対して編集が加えられ、第２の画像が生成される。
【発明の効果】
【００２２】
本発明の一側面によれば、複数の被写体の画像を、簡便に取得できる。また、取得された複数の画像を、簡便に編集できる。
【発明を実施するための最良の形態】
【００２３】
以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書または図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書または図面に記載されていることを確認するためのものである。従って、明細書または図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
【００２４】
本発明の一側面の情報処理装置（例えば、図４の再生装置１２）は、第１の画像に対して加えられた複数の編集を、それぞれ再現する複数のパラメータから、１つのパラメータの再生を制御する再生制御手段（例えば、図４の再生パラメータ処理部５４）と、前記再生制御手段により再生が制御されているパラメータを、他のパラメータに切り替える指示を出す指示手段（例えば、図４の切り替え指示部５７）と、前記指示手段により切り替えが指示され、前記再生制御手段により再生が制御されたパラメータで、前記第１の画像に対して編集を加え、第２の画像を生成する編集手段（例えば、図４の画像抽出部５２）とを備える。
【００２５】
以下に、本発明の実施の形態について図面を参照して説明する。
【００２６】
図２は、本発明を適用したシステムの一実施の形態の構成を示す図である。記録媒体１１には、ユーザが撮影した画像（動画像）やテレビジョン放送の番組などの画像データが記録されている。再生装置１２は、記録媒体１１に記録されている画像データを再生する。再生された画像は、表示装置１３に供給され、ユーザに提供される。
【００２７】
記録媒体１１は、本発明の実施の形態においてはどのような媒体でも良い。例えば、CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)などでも良いし、ビデオテープなどでも良い。また本実施の形態においては、記録媒体１１は、再生装置１２に対して着脱可能な記録媒体であり、その記録媒体１１から、読み出される画像データに基づく画像が再生されるとして説明を続けるが、例えばインターネットなどで構成される伝送媒体を介して、画像データが取得され、その画像データに基づく画像が再生されるような形態も、本発明に含まれる。
【００２８】
再生装置１２は、記録媒体１１に記録されている画像データを再生する機能を有する。表示装置１３は、例えば、ＣＲＴ（Cathode Ray Tube）やＬＣＤ（Liquid Crystal Display）などで構成され、再生装置１２からの画像を表示する。
【００２９】
ここで、図２に示したシステムにおいて扱われるデータについて説明を加える。記録媒体１１には、コンテンツデータ２１が記録されている。再生装置１２には、ファイル２２が記憶されている。記録媒体１１に記録されているコンテンツデータ２１のみが再生された場合、通常の画像がユーザ側に提供される。記録媒体１１に記録されているコンテンツデータ２１と再生装置１２に記録されているファイル２２内のデータがともに再生された場合、通常の画像に対して何らかの編集（加工）が加えられた画像がユーザ側に提供される。
【００３０】
ファイル２２には、図３に示すように、複数の再生パラメータ３０―１乃至３０−Ｎが含まれている。再生パラメータ３０―１乃至３０−Ｎはそれぞれ、コンテンツデータ２１を再生することにより得られるオリジナルの画像に対し、ユーザが加えた編集を施すためのデータである。このように、本実施の形態においては、コンテンツデータ２１そのものに、ユーザが加えた編集結果を書き込んだりしないため、換言すれば、コンテンツデータ２１自体を編集することはないので、オリジナルの画像をそのまま残すことができる。
【００３１】
なお、以下の説明において、再生パラメータ３０−１乃至３０−Ｎを、個々に区別する必要がない場合、単に、再生パラメータ３０と記述する。他の記載も同様とする。
【００３２】
また、ユーザは、オリジナルの画像に対して、複数の編集を別々に施すことが可能である。すなわち、ユーザは、オリジナルの画像に対して、複数のファイル２２、再生パラメータ３０、または加工データ３２を生成させることが可能とされている。
【００３３】
例えば、コンテンツデータ２１自体を編集してしまうと、オリジナルの画像が失われるとともに、次に、他の編集を施す場合には、既に施した編集の上に行うことになる。しかしながら本実施の形態においては、複数の編集を施したとしても、その編集を再現するためのデータは、異なるデータとして保存されるため、それぞれの編集の結果を、別々に確認することができるとともに、後述するような処理により、複数の編集結果が切り替えられることによる画像の変化などの効果も確認することが可能となる。
【００３４】
また、１つのコンテンツデータ２１に対して、複数の加工データ３２を付けることが可能なので、例えば、１つの画像に複数の被写体が写っており、その被写体毎に抽出された画像を生成したいような場合、被写体が抽出される編集を被写体毎に行えば、被写体毎に加工データ３２が生成され、１つのコンテンツデータ２１から、複数の被写体毎の画像を取得することが可能となる。
【００３５】
再生パラメータ３０は、図３に示すように、同期特徴量３１と加工データ３２を含む構成とされている。なおここでは、再生パラメータ３０に同期特徴量３１と加工データ３２が含まれるとして説明を続けるが、同期特徴量３１と加工データ３２が、関連付けられて記憶されていれば（ファイル２２内に管理されていれば）処理は行えるため、再生パラメータ３０に含まれるというデータ構造でなくても良い。
【００３６】
再生パラメータ３０−１には、同期特徴量３１―１と加工データ３２−１が含まれている。また、再生パラメータ３０−２には、同期特徴量３１―２、加工データ３２−２、加工データ３２−３が含まれている。再生パラメータ３０−Ｎには、同期特徴量３１―Ｎと加工データ３２−Ｍが含まれている。
【００３７】
同期特徴量３１は、１フィールド毎または１フレーム毎に生成される。ここでは、１フレーム毎に生成されるとして説明を続ける。
【００３８】
同期特徴量３１は、コンテンツデータ２１のどのフレームに関する再生パラメータ３０であるのかを示す情報である。同期特徴量３１は、コンテンツデータ２１が再生されたとき、その再生されたフレームから抽出された特徴量である。後述するように、コンテンツデータ２１が再生されたとき、その再生されたフレームから特徴量が抽出され、抽出された特徴量と一致する同期特徴量３１があるか否かが判断され、一致したと判断されたとき、そのフレームに対して、加工データ３２で示される編集が施される。
【００３９】
同期特徴量３１は、コンテンツを構成するフレームの所定のフレームと同期を取るためのデータである。換言すれば、同期特徴量３１は、コンテンツを構成するフレームのうち、どのフレームに対する加工データ３２であるかを判断するときに用いらら得るデータである。
【００４０】
再生パラメータ３０−２には、同期特徴量３１―２、加工データ３２−２、加工データ３２−３が含まれている。この場合、１つの同期特徴量３１―２に、２つの加工データ３２−２と加工データ３２−３が関連付けられている。この場合、加工データ３２−２に基づく編集が施された画像と、加工データ３２−３に基づく編集が施された画像とは、同じフレームからの画像であっても、異なる画像となる。
【００４１】
再生パラメータ３０−１は、１つの同期特徴量３１―１に対して、１つの加工データ３２―１が関連付けられているが、このような場合、１フレームに対して、１つの編集が行わた状態であることを示している。再生パラメータ３０−２は、１つの同期特徴量３１−２に対して、２つの加工データ３２−２と加工データ３２−３が関連付けられているが、このような場合、１フレームに対して、異なる２つの編集が行われた状態であることを示している。
【００４２】
このように１つの同期特徴量３１には、１つの加工データ３２が関連付けられている場合と、複数の加工データ３２が関連付けられている場合とがあり、その関連付けられている加工データ３２の数は、１つのフレームに対して施された編集の数に相当する。
【００４３】
このように、再生パラメータ３０には、コンテンツを構成するフレームと同期するための同期特徴量３１と、同期されたフレームに対して施されている編集を再現するための加工データ３２が含まれる。
【００４４】
１つのコンテンツデータ２１に基づく映像は、複数のフレームから構成されているため、１つのコンテンツデータ２１には、複数の再生パラメータ３０が生成されることになる。複数の再生パラメータ３０を、そのまま記憶するようにしても良いが、図３に示すように、ファイル化して記憶する方が、管理しやすくなると考えられる。そこで例えば、上記したように１つのコンテンツデータ２１に対して、１ファイルが生成されるようにしても良い。
【００４５】
図３に示すように、例えば、ファイル２２には、再生パラメータ３０−１や再生パラメータ３０−２が含まれる。このファイル２２は、コンテンツデータ２１に対応する再生パラメータ３０を含むファイルであるとする。図示はしていないが、ファイル２２と異なるファイル２２’は、ファイル２２とは異なるコンテンツデータに対するファイルである。
【００４６】
次に、このような再生パラメータ３０をコンテンツデータ２１とともに再生する再生装置１２の構成について説明する。図４は、再生装置１２の内部構成例を示す図である。
【００４７】
再生装置１２は、記録再生部５１、画像抽出部５２、信号処理部５３、再生パラメータ処理部５４、操作部５５、再生パラメータ記憶部５６、切り替え指示部５７、およびファイル記憶部５８を含む構成とされている。
【００４８】
記録再生部５１は、例えば、ユーザによる操作部５５の操作に応じて、記録媒体１１からコンテンツデータ２１を再生して、画像を画像抽出部５２に供給する。
【００４９】
以下の説明において、コンテンツデータ２１が再生されることにより取得される画像を、通常画像を記述し、その通常画像に対して、加工データ３２に基づく編集が加えられた画像を抽出画像と記述する。ここでは、編集として、通常画像の一部分が拡大された画像を表示するような編集が行われる場合を例に挙げて説明をする。すなわち、編集として、通常画像の一部分が抽出され、拡大されて表示されるような編集が行われる場合を例に挙げて説明する。
【００５０】
図４の説明に戻り、画像抽出部５２は、再生パラメータ処理部５４から供給される再生パラメータ３０に基づいて、記録再生部５１から供給される通常画像から一部の領域の画像を抽出し、その抽出した抽象画像を、信号処理部５３に出力する。
【００５１】
即ち、再生パラメータ３０（に含まれる加工データ３２）は、通常画像上の長方形状の領域を表す情報としての、例えば、その長方形状の領域の横および縦の長さと、通常画像上における左上の点の座標とを含んでおり、画像抽出部５２は、再生パラメータ３０に基づいて、そこに含まれる情報が表す長方形状の領域（以下、適宜、抽出ウインドウという）を特定する。そして、画像抽出部５２は、通常画像から、抽出ウインドウ内の画像を、抽出画像として抽出し、信号処理部５３に供給する。
【００５２】
信号処理部５３は、再生パラメータ処理部５４から供給される再生パラメータ３０に基づいて、画像抽出部５２から供給される抽出画像に信号処理を施し、表示装置１３（図２）に供給する。これにより、表示装置１３では、信号処理部５３で信号処理が施された抽出画像が表示される。
【００５３】
再生パラメータ処理部５４は、ファイル記憶部５８から供給される再生パラメータ３０を、画像抽出部５２および信号処理部５３に供給する。また、再生パラメータ処理部５４は、ユーザによる操作部５５の操作に応じて、再生パラメータ３０を生成し、画像抽出部５２および信号処理部５３に供給する。さらに、再生パラメータ処理部５４は、ファイル記憶部５８から供給される再生パラメータ３０、または操作部５５の操作に応じて生成した再生パラメータ３０を、再生パラメータ記憶部５６に供給して記憶させる。また、再生パラメータ処理部５４は、再生パラメータ記憶部５６に記憶された再生パラメータ３０を読み出し、ファイル記憶部５８に供給して、記憶させる。
【００５４】
再生パラメータ記憶部５６は、再生パラメータ処理部５４から供給される再生パラメータを一時記憶する。操作部５５は、記録媒体１１に記録されたコンテンツデータ２１（通常画像）の再生や編集などを指令するときに、ユーザによって操作され、その操作に対応した操作信号を、記録再生部５１または再生パラメータ処理部５４に供給する。
【００５５】
切り替え指示部５７は、再生パラメータを切り替える指示を、再生パラメータ処理部５４に出力する。再生パラメータが切り替えられることにより、異なる画像が、ユーザに提供されることになる。
【００５６】
なお、図４においてファイル記憶部５８は、再生装置１２に含まれる構成としたが、ファイル記憶部５８を、再生装置１２に対して着脱可能な記録媒体で構成し、再生装置１２には、その記録媒体が着脱されるドライブなどが含まれる構成とされるようにしても良い。このように、ファイル記憶部５８を記録媒体で構成することで、他の再生装置に、その記録媒体を装着し、他の装置でファイル２２を再生させることが可能となる。
【００５７】
次に、図５を参照して、図４の画像抽出部５２の処理について説明する。
【００５８】
例えば、ユーザの操作が、通常画像内の所定の画像を拡大して表示させるという操作であった場合、再生パラメータ３０には、通常画像における抽出画像に対応する領域を表す情報を含む加工データ３２が含まれている。そして、その加工データ３２が表す領域が抽出ウインドウとして、図５に示すように設定され、通常画像から、抽出ウインドウ内の画像を抽出画像として抽出して表示される。このような処理が行われることにより、通常画像内に表示されている所定の画像が拡大された状態で、表示装置１３に表示される。
【００５９】
ユーザが、ズームインに相当する編集を行った場合、その編集によって得られる通常画像の画角は狭くなり、通常画像に対応する領域は、図５においてＲ1やＲ2で示すようにサイズの小さな領域になり、抽出ウインドウも、通常画像のサイズよりも小さいものとなる。
【００６０】
このように、抽出ウインドウのサイズは一定であるとは限らないため、画像抽出部５２において、そのような抽出ウインドウを用いて、通常画像から抽出される抽出画像の画素数は一定であるとは限らない。
【００６１】
一方、表示装置１３は、所定の画素数の画像を表示するので、画像抽出部５２では、通常画像から抽出した抽出画像を、表示装置１３で表示可能な所定の画素数の画像に変換する必要がある。ある画素数の抽出画像を、他の画素数の抽出画像に変換する画像変換処理としては、画素を補間することにより行う処理が一例としてあげられる。
【００６２】
次に、図６のフローチャートを参照して、図４の再生装置１２の動作について説明する。まず、再生装置１２の基本的な動作について説明する。ここで、基本的な動作とは、図３の再生パラメータ３０−１のように、１つの同期特徴量３１―１に、１つの加工データ３２−１が関連付けられているようなときであるとする。
【００６３】
ユーザが操作部５５を操作して、再生装置１２の電源をオンにすると、ステップＳ２１において、再生パラメータ処理部５４は、再生装置１２の動作モードが再生モードであるかどうかを判定する。
【００６４】
ここで、再生装置１２の動作モードとしては、例えば、記録媒体１１に記録された画像を再生する再生モードと、画像を編集する編集モードとがある。再生装置１２の動作モードは、例えば、ユーザが操作部５５を操作することによって選択（設定）することができる。
【００６５】
ステップＳ２１において、再生装置１２の動作モードが再生モードであると判定された場合、ステップＳ２２に進み、再生モードの処理が開始される。
【００６６】
再生モードの処理では、まずステップＳ２２において、再生パラメータ処理部５４により、記録媒体１１に記録された画像を再生するのに用いるファイル２２が選択される。
【００６７】
ここで、ファイル２２には上記したように、通常画像（この場合、コンテンツデータ２１）に対して生成された一連の再生パラメータ３０が含まれている。また、そのファイル２２は、ファイル記憶部５８に記憶されている。ファイル記憶部５８には、１以上のファイル２２を記憶することができ、ステップＳ２２では、その１以上のファイル２２から、画像の再生に用いるファイル２２が選択される。
【００６８】
即ち、例えば、再生パラメータ処理部５４は、ファイル記憶部５８に記憶されているファイル２２のファイル名を認識する。ファイル名としては、コンテンツデータ２１が取得（撮影や録画などにより記録媒体１１に記録された）された日時でも良いし、ユーザにより付けられた名前などでも良い。さらに、再生パラメータ処理部５４は、信号処理部５３を制御することにより、ファイル記憶部５８に記憶されているファイル名の一覧を、そのうちのいずれか１つの選択を促すメッセージとともに、表示装置１３に表示させる。
【００６９】
ユーザが、表示装置１３に表示されたファイル名の一覧を見て、操作部５５を操作することにより、ファイル名の一覧から、１つのファイル名を選択すると、ステップＳ２２において、再生パラメータ処理部５４は、そのファイル名によって特定されるファイル２２を、画像の再生に用いるファイル２２として選択する。
【００７０】
その後、ステップＳ２２からステップＳ２３に進み、再生パラメータ処理部５４は、記録再生部５１を制御することにより、記録媒体１１に記録されたコンテンツデータ２１の再生を開始させるとともに、ファイル記憶部５８に記憶されているファイル２２の再生を開始する。これにより、記録媒体１１からは、コンテンツデータ２１が再生され（読み出され）、コンテンツデータ２１が、画像抽出部５２に供給されるとともに、ファイル記憶部５８からファイル２２（ファイル２２に含まれる再生パラメータ３０）が、再生パラメータ処理部５４に供給される。
【００７１】
ここで、上述したように、再生パラメータ３０は、フレーム毎に存在しうる。通常画像の再生は、特に指定されない限り、再生パラメータ３０が存在する時間的に最も前のフレームから開始される。
【００７２】
再生パラメータ処理部５４は、ステップＳ２３においてファイル２２に含まれる再生パラメータ３０の再生を開始する。これにより、記録再生部５１からの再生パラメータ３０の供給が開始されると、その再生パラメータ３０の、画像抽出部５２および信号処理部５３への供給が開始され、ステップＳ２４に処理が進められる。
【００７３】
ステップＳ２４において、画像抽出部５２は、記録再生部５１から供給される通常画像からの、再生パラメータ処理部５４から供給される再生パラメータに基づく抽出画像の抽出を開始する。
【００７４】
即ち、記録再生部５１から画像抽出部５２に対して、通常画像が、例えばフレーム単位で供給され、画像抽出部５２は、記録再生部５１から供給される通常画像のフレームを、順次、注目フレームとして、その注目フレームから抽出画像を抽出し、信号処理部５３に供給する。
【００７５】
具体的には、画像抽出部５２は、再生パラメータ処理部５４から供給される再生パラメータ３０のうち、注目フレームに対する再生パラメータ３０（以下、適宜、対応パラメータという）が存在する場合、注目フレームから、対応パラメータに含まれる情報によって特定される抽出ウインドウ内の画像を抽出画像として抽出し、さらに、必要に応じて、画素数を変換する画像変換処理を行って、信号処理部５３に供給する。
【００７６】
また、画像抽出部５２は、再生パラメータ処理部５４から供給される再生パラメータ３０の中に、注目フレームの対応パラメータが存在しない場合、注目フレームより前の、対応パラメータが存在するフレームのうちの、注目フレームに最も近いフレームの対応パラメータ２２に基づいて、注目フレームから抽出画像を抽出するようにしても良い。または、対応パラメータが存在しないということは、編集が施されていない場合であるので、通常画像を出力するようにしても良い。
【００７７】
ステップＳ２４の処理後は、ステップＳ２５に進み、信号処理部５３は、画像抽出部５２から供給される抽出画像（のフレーム）に対する、再生パラメータ処理部５４から供給される再生パラメータ（対応パラメータ）に基づく信号処理を開始する。
【００７８】
即ち、信号処理部５３は、画像抽出部５２から供給される抽出画像に対して、再生パラメータ処理部５４から供給される再生パラメータ３０に含まれる情報が表す内容の信号処理を施し、表示装置１３に供給する。
【００７９】
以上のように、再生モードの処理では、ファイル２２に含まれる再生パラメータ３０に基づいて、通常画像から抽出画像が抽出され、さらに、再生パラメータ３０に基づいて、抽出画像に信号処理が施されるので、いわば、そのファイル２２の再生パラメータ３０に対応した画像コンテンツ（画像のストリーム）が、表示装置１３に表示される。
【００８０】
ステップＳ２５の処理後、ステップＳ２６に進み、再生パラメータ処理部５４は、操作部５５が、ユーザによって、再生を停止するように操作（停止操作）されたかどうかを判定する。ステップＳ２６において、停止操作が行われていないと判定された場合、ステップＳ２３に戻り、以下、同様の処理が繰り返される。
【００８１】
また、ステップＳ２５において、停止操作が行われたと判定された場合、ステップＳ２７に進み、再生パラメータ処理部５４は、記録再生部５１、画像抽出部５２、および信号処理部５３を制御することにより、ステップＳ２３で開始した通常画像と再生パラメータの再生、ステップＳ２４で開始した抽出画像の抽出、およびステップＳ２５で開始した抽出画像に対する信号処理を全て停止させる。そして、ステップＳ２１に戻り、以下、同様の処理が繰り返される。
【００８２】
一方、ステップＳ２１において、再生装置１２の動作モードが再生モードでないと判定された場合、ステップＳ２８に進み、再生パラメータ処理部５４は、再生装置１２の動作モードが編集モードであるかどうかを判定する。ステップＳ２８において、再生装置１２の動作モードが編集モードでないと判定された場合、ステップＳ２１に戻り、以下、同様の処理が繰り返される。
【００８３】
また、ステップＳ２８において、再生装置１２の動作モードが編集モードであると判定された場合、ステップＳ２９に進み、以下、編集モードの処理が行われる。
【００８４】
編集モードの処理では、ステップＳ２９において、記録再生部５１は、記録媒体１１に記録されたコンテンツデータ２１の再生を開始する。これにより、記録媒体１１からは、コンテンツデータ２１が再生され（読み出され）、通常画像が、画像抽出部５２に供給される。
【００８５】
または、ステップＳ２９において、再生パラメータ処理部５４により、編集の、いわば基準とするコンテンツデータ２１を再生するのに用いる再生パラメータ３０（ファイル２２）（再生用セット）を、例えば、ステップＳ２２における場合と同様に選択する。そして、再生パラメータ処理部５４は、ステップＳ２３における場合と同様に、記録再生部５１を制御することにより、コンテンツデータ２１と再生用セットの再生を開始させる。これにより、記録媒体１１からは、コンテンツデータ２１が再生され（読み出され）、通常画像が、画像抽出部５２に供給されるとともに、ファイル記憶部５８から再生用セットの再生パラメータが、再生パラメータ処理部５４に供給される。
【００８６】
再生パラメータ処理部５４は、再生用セットの再生パラメータ３０の再生が開始され、これにより、記録再生部５１からの再生パラメータ３０の供給が開始されると、その再生パラメータ３０の、画像抽出部５２、信号処理部５３、および再生パラメータ記憶部５６への供給を開始し、ステップＳ３０に進む。
【００８７】
再生装置１２は、コンテンツデータ２１のみを再生し、通常画像を提供することが可能である。よって、ユーザは、記録媒体１１に記録されているコンテンツデータ２１を再生させ、その再生にともない提供される通常画像に対して編集を加えることが可能とされている。
【００８８】
また、再生装置１２は、コンテンツデータ２１とファイル２２に含まれる再生パラメータ３０を再生することにより、編集された通常画像をユーザに提供することが可能である。よって、ユーザは、コンテンツデータ２１と再生パラメータ３０を再生させ、その再生にともない提供される編集された通常画像に対して、さらに編集を加えることが可能とされている。
【００８９】
通常画像に対して編集を加えるか、編集画像に対してさらに編集を加えるかは、例えば、ステップＳ２２の処理と同じように、ユーザにファイル名を選択させることで決定されるようにしても良い。ファイル名を選択させるようにした場合、通常画像に対して編集を加えるためのファイル名も表示される。
【００９０】
ここでは、通常画像に対して編集が加えられる場合を例に挙げて説明を続ける。
【００９１】
ステップＳ３０において、再生パラメータ処理部５４は、ユーザが、編集を指令するように、操作部５５を操作したかどうかを判定する。ステップＳ３０において、編集操作が行われていないと判定された場合、即ち、ユーザが、編集を指令するように、操作部５５を操作していないと判定された場合、ステップＳ３１をスキップして、ステップＳ３２に進む。
【００９２】
また、ステップＳ３０において、編集操作が行われたと判定された場合、即ち、ユーザが、編集を指令するように、操作部５５を操作したと判定された場合、ステップＳ３１に進み、再生パラメータ処理部５４は、その編集操作が行われたときに注目フレームであった通常画像の注目フレームの対応パラメータとして、その編集操作に応じた再生パラメータ（新たな再生パラメータ）（以下、適宜、編集パラメータともいう）を生成し、画像抽出部５２、信号処理部５３、および再生パラメータ記憶部５６に供給する。
【００９３】
従って、この場合、画像抽出部５２では、通常画像から、再生パラメータ処理部５４からの編集パラメータに含まれる情報によって特定される抽出ウインドウ内の画像が、抽出画像として抽出され、信号処理部５３では、画像抽出部５２から供給される抽出画像に対して、再生パラメータ処理部５４から供給される編集パラメータに含まれる情報が表す内容の信号処理を施し、表示装置１３に供給する。その結果、表示装置１３では、編集操作に従って編集された画像が表示される。
【００９４】
さらに、再生パラメータ記憶部５６は、再生パラメータ処理部５４から供給される編集パラメータを記憶する。このとき、注目フレームから特徴量が抽出され、その特徴量と関連付けられて、編集パラメータが生成され記憶される。後述する処理において、ファイル記憶部５８に、編集パラメータが記憶される場合、特徴量は、同期特徴量３１として記憶され、編集に関して生成されたパラメータは、加工データ３２として、同期特徴量３１と関連付けられて記憶される。
【００９５】
なお、編集対象とされている通常画像（コンテンツデータ２１）に関する再生パラメータ３０が既にある場合には、その再生パラメータ３０に含まれる同期特徴量３１が読み出され、再生パラメータ記憶部５６に記憶される。そして、その同期特徴量３１に関連付ける処理で、新たな編集に関するパラメータが関連付けられて、編集パラメータが生成され、記憶される。
【００９６】
ステップＳ３１において、編集パラメータが、画像抽出部５２、信号処理部５３、および再生パラメータ記憶部５６に供給された後は、ステップＳ３２に処理が進められ、再生パラメータ処理部５４は、操作部５５が、ユーザによって、再生を停止するように操作（停止操作）されたかどうかを判定する。ステップＳ３２において、停止操作が行われていないと判定された場合、ステップＳ３０に戻り、同様の処理が繰り返される。
【００９７】
また、ステップＳ３２において、停止操作が行われたと判定された場合、ステップＳ３３に進み、再生パラメータ処理部５４は、記録再生部５１、画像抽出部５２、および信号処理部５３を制御することにより、通常画像の再生、画像の抽出、および抽出画像に対する信号処理を全て停止させる。
【００９８】
ステップＳ３４において、再生パラメータ処理部５４は、再生パラメータ記憶部５６に記憶された再生パラメータの集合であるパラメータセットを、ファイル記憶部５８に新たに記憶（保存）するかどうかを判定する。
【００９９】
即ち、再生パラメータ処理部５４は、信号処理部５３を制御することにより、新たなパラメータセットを保存するかどうかを問い合わせる問い合わせメッセージを、表示装置１３に表示させ、その問い合わせメッセージに対して、ユーザが操作部５５を操作するのを待って、再生パラメータ記憶部５６に記憶された新たなパラメータセットを、ファイル記憶部５８に記憶するかどうかを判定する。
【０１００】
ステップＳ３４において、再生パラメータ記憶部５６に記憶された新たなパラメータセットを、ファイル記憶部５８に記憶すると判定された場合、即ち、問い合わせメッセージに対して、ユーザが、新たなパラメータセットを記憶するように、操作部５５を操作した場合、ステップＳ３５に進み、再生パラメータ処理部５４は、再生パラメータ記憶部５６に記憶されている新たなパラメータセットを読み出し、その新たなパラメータセットを、ファイル記憶部５８に記憶させる。
【０１０１】
また、ステップＳ３４において、再生パラメータ記憶部５６に記憶された新たなパラメータセットを、ファイル記憶部５８に記憶しないと判定された場合、即ち、問い合わせメッセージに対して、ユーザが、新たなパラメータセットを記憶しないように、操作部５５を操作した場合、ステップＳ３５をスキップして、ステップＳ３６に進み、再生パラメータ処理部５４は、再生パラメータ記憶部５６に記憶された新たなパラメータセットを削除（消去）して、ステップＳ２１に戻り、以下、同様の処理が繰り返される。
【０１０２】
なお、編集モードの処理においてファイル記憶部５８に記憶された新たなパラメータセットは、再生用セットとして選択することができ、従って、その新たなパラメータセットの再生パラメータに対応した画像コンテンツを、表示装置１３に表示することが可能となる。
【０１０３】
また、図６のフローチャートにしたがった処理は、操作部５５が、ユーザによって電源をオフにするように操作されると終了する。
【０１０４】
以上のように、ユーザが編集操作を行うことにより、その編集操作に応じて、編集パラメータ（新たな再生パラメータ）が生成され、その編集パラメータに基づいて、抽出処理や信号処理が行われる。従って、ユーザは、所望の編集を簡便に行うことができ、ユーザにとって最適な画像を提供することができる。
【０１０５】
さらに、記録媒体１１に記録されているコンテンツデータ２１（通常画像）に対しては、複数のパラメータセット（加工データ３２）が存在しても良く、従って、ユーザは、様々な編集操作を行って、様々なパラメータセットを生成することにより、その様々なパラメータセットそれぞれに対応した、様々な画像コンテンツを制作することができる。
【０１０６】
ここで、編集モードのときに、ユーザが指定する編集が、追尾ズームである場合について説明を加える。上記したように、ユーザは、編集として通常画像の一部分を拡大するという編集を行うことができる。まず拡大について、図７Ａ乃至図７Ｃを参照して説明する。
【０１０７】
図７Ａは、表示装置１３に写し出されている画像の一例を示している。図７Ａに示した画像は、家と人が写し出されている画像である。このような画像が表示されているときに、ユーザが人の顔をよく見たいと思い、人の顔の画像を拡大する。その拡大、すなわち所定の画像の拡大が指示されたときに、拡大する画像の範囲がユーザにより設定される。
【０１０８】
図７Ｂは、ユーザにより、画像内の人の顔の部分に、拡大の画枠７１が設定された状態を示している。図７Ｂに示した例の場合、人の顔の画像の部分に、画枠７１が設定されている。このように画枠７１が設定されると、表示装置１３に、画枠７１が設定された範囲内の画像のみが表示される。すなわちこの場合、図７Ｂに示す通常画像が表示装置１３に表示されるときであっても、拡大が指示されているので、図７Ｃに示すように、表示装置１３には、人の顔の画像が表示される。
【０１０９】
このような拡大に関する操作を、ユーザがフレーム毎に行い、フレーム毎に再生パラメータ３０が生成されるようにはしなくても良いように、追尾ズームという機能がある。図８Ａ乃至Ｅを参照して追尾ズームについて説明する。
【０１１０】
追尾ズームとは、ユーザがズーム機能を使用する際のアシスト機能である。このアシスト機能は、ユーザにより、操作部５５が操作されてズームして追いかけたい対象に追尾点が合わせられ指定されると、その対象を追いかけるような処理をしながら（追尾するような処理をしながら）ズーム処理を継続する機能である。追尾ズームを処理するアプリケーションによっては、追尾ズーム中にズーム画枠が変更できるように構成されていたり、追尾点が変更できるように構成されていたりする。
【０１１１】
図８Ａは、表示装置１３に写し出されている画像の一例を示している。図８Ａに示した画像は、家と人が写し出されている画像である。このような画像が表示されているときに、ユーザが人の顔をよく見たいと思い、人の顔の画像に対してズームをかけ、さらに、その人の顔を常に拡大状態で表示されるように設定する。すなわち、この場合、人の顔に追尾ズームが設定される。
【０１１２】
所定の画像が拡大された状態で、その画像が追尾されて表示されるように指示された場合、拡大する画像の中心とその範囲がユーザにより設定される。図８Ｂは、ユーザにより、画像内の人の顔の部分に、ズームの画枠８１が設定された状態を示している。この画枠８１は、追尾点８２を中心とした所定の大きさに設定されるようにしても良いし、ユーザによりその大きさが設定されるようにしても良い。
【０１１３】
図８Ｂに示した例の場合、人の顔の画像の部分に、追尾点８２が設定され、人の顔の全体が含まれるような画枠８１が設定されている。このように追尾点８２や画枠８１が設定されると、表示装置１３に、画枠８１が設定された範囲内の画像のみが表示される。このとき、追尾点が画面中心となり、ズーム画枠（ズーム率）に従ってズームされる。すなわちこの場合、図８Ｃに示すように、表示装置１３には、人の顔の画像が表示される。
【０１１４】
さらに、この画面内の人が、移動した場合、拡大された状態が維持されながら、追尾されるので、例えば、図８Ｄに示したような画像が表示装置１３に表示される。図８Ｃと図８Ｄを比較するに、図８Ｄには、図８Ｃには表示されていなかった家の一部分が表示されている。図８Ｄに示した画像は、追尾ズームが設定されていないときには、図８Ｅに示した画像が表示装置１３に表示されるときの画像である。
【０１１５】
図８Ｅは、説明のために図示したのであり、実際の処理ではユーザが指定しない限りユーザに提供される画像ではなく、追尾ズーム中に追尾点とズーム画枠を入力画像に表示した画である。図８Ｂの画像に対して、図８Ｅの画像では、人が図中斜め左下に移動している。追尾対象が移動した場合、追尾ズームは、その対象を追いかけながら（追尾して）ズーム処理を行うため、図８Ｄに示したような画像が、ユーザに提供される。
【０１１６】
よって、追尾ズームの処理が行われている間は、あたかも撮影したその場でカメラを動かして対象を追いかけたような画像が得られる。
【０１１７】
このような追尾ズームという編集が、ステップＳ３０において指定された場合、ステップＳ３１においては、追尾ズームの処理で、追尾されている画像の通常画像内での位置に関する情報（例えば、追尾点８２が位置する座標の情報）と、その大きさに関する情報（例えば、画枠８１に関する情報）のうち、少なくとも一方を含む編集パラメータ（再生パラメータ３０）が生成される。
【０１１８】
追尾ズームが停止されるまで、ステップＳ３０とステップＳ３１の処理が繰り返されることにより、再生パラメータ３０が生成し続けられる。すなわちユーザは、追尾ズームの設定を一度行うだけで、再生パラメータ３０が生成し続けられる。
【０１１９】
このようにして生成された再生パラメータ３０と、通常画像のコンテンツデータ２１が再生されることにより、ユーザは、追尾ズームされている編集後の通常画像を閲覧することができる。すなわち、通常画像からユーザにより指示された画像が抽出され、拡大された画像が、ユーザに提供される。
【０１２０】
さらに、編集として追尾ズームが指定されているときのことについて説明を続ける。例えば、図９に示すような通常画像が、表示装置１３に表示されるようなコンテンツデータ２１が再生されているときを例に挙げて説明を続ける。
【０１２１】
図９に示した通常画像には、人物１０１、人物１０２、および人物１０３が表示されている。ユーザが、人物１０１に対して追尾ズームを実行したい場合、図１０に示すように、人物１０１を囲むような画枠１２１が設定される（以下の説明においては、追尾点の設定については省略して説明する）。この画枠１２１のアスペクト比は、表示装置１３の画枠と同一のアスペクト比である。この画枠１２１で追尾ズームの処理が実行されると、図１１に示すように、人物１０１のみが拡大されて表示されている画像が、ユーザに提供される。
【０１２２】
ユーザが、人物１０２に対して追尾ズームを実行したい場合、図示はしないが、人物１０１に対して画枠を設定した場合と同様にして画枠を設定する。人物１０２に対して画枠が設定され、その設定された画枠で追尾ズームが実行された場合、人物１０２のみが拡大されて表示されている画像が、ユーザに提供される。
【０１２３】
さらに、ユーザが、人物１０３に対しても同様に追尾ズームの処理を実行させることができる。ユーザが人物１０３に対して追尾ズームを実行したい場合、図示はしないが、人物１０１に対して画枠を設定した場合と同様にして画枠を設定する。人物１０３に対して画枠が設定され、その設定された画枠で追尾ズームが実行された場合、人物１０３のみが拡大されて表示されている画像が、ユーザに提供される。
【０１２４】
このように、例えば、通常画像に人物１０１、人物１０２、および人物１０３が表示されているような通常画像に対して、人物１０１、人物１０２、または人物１０３に、別々に追尾ズームの処理を実行させることが可能である。このような場合、別々に編集が行われて、別々の加工データ３２が生成され、記録媒体１１に記録される。
【０１２５】
図１２を参照し、このように、１つの通常画像に対して、３つの編集が行われたときに生成されるパラメータについて説明する。ファイル１５１には、再生パラメータ１６０−１乃至１６０−Ｎが含まれる。再生パラメータ１６０−１には、同期特徴量１６１−１に加工データ１７１−１、加工データ１７２−１、および加工データ１７３−１が関連付けられて含まれている。同様に、再生パラメータ１６０−２には、同期特徴量１６１−２に加工データ１７１−２、加工データ１７２−２、および加工データ１７３−２が関連付けられて含まれている。同様に、再生パラメータ１６０−Ｎには、同期特徴量１６１−Ｎに加工データ１７１−Ｎ、加工データ１７２−Ｎ、および加工データ１７３−Ｎが関連付けられて含まれている。
【０１２６】
再生パラメータ１６０−１に関連付けられている加工データ１７１−１、加工データ１７２−１、および加工データ１７３−１のうち、加工データ１７１−１は、人物１０１に対して追尾ズームの編集が行われたときに生成されたデータであり、加工データ１７２−１は、人物１０２に対して追尾ズームの編集が行われたときであり、加工データ１７３−１は、人物１０３に対して追尾ズームの処理が行われたときにそれぞれ生成されたデータである。このように、１つのフレームに対して３つの編集が行われたときには、１つの同期特徴量１６１に対して、３つの加工データ１７１，１７２，１７３が関連付けられる。
【０１２７】
例えば、図９に示したような画像（フレーム）に対して、加工データ１７１−１に基づく編集が行われると、図１１に示したような人物１０１が拡大された画像が表示装置１３に表示される。加工データ１７２−１に基づく編集が行われると、図示はしないが、人物１０２が拡大された画像が表示装置１３に表示される。また、加工データ１７３−１に基づく編集が行われると、図示はしないが、人物１０３が拡大された画像が表示装置１３に表示される。
【０１２８】
コンテンツデータ２１に基づく映像は、複数のフレームから構成されており、例えば、Ｎ枚のフレームから構成されている場合、図１２に示したように、Ｎ個の再生パラメータ１６０−１乃至１６０−Ｎが、コンテンツデータ２１に対応するファイル１５１に含まれる。
【０１２９】
このように、３つの加工データ１７１、加工データ１７２、および加工データ１７３が存在するときに、上記したように、それぞれ別に再生することも可能であり、別々に再生される場合、１つの同期特徴量に１つの加工データが関連付けられているときの再生に関する処理と、基本的に同様に行われ、１つの同期特徴量に１つの加工データが関連付けられているときの再生に関する処理については、上記したように行われるので、ここではその説明を省略する。
【０１３０】
次に、１つの同期特徴量に３つの加工データが関連付けられているとき、すなわち、図１２に示したようなファイル１５１がコンテンツデータ２１とともに再生されるときの処理について説明する。またここでは、１つの同期特徴量に３つの加工データが関連付けられているときを例に挙げて説明するが、３つの加工データが関連付けられているときに、本発明が限定されることを示しているのではなく、複数の加工データが関連付けられているときでも、以下に説明するような処理と同様の処理により、処理することが可能である。
【０１３１】
１つの同期特徴量に、複数の加工データが関連付けられている場合、換言すれば、１フレームに複数の編集が施されている場合、加工データを切り替えることで、異なる編集結果による画像を得ることができる。そこで、１つの同期特徴量に、複数の加工データが関連付けられている場合、加工データを切り替えることで、ユーザに、あたかも異なるコンテンツが次々と提供されているようなコンテンツを提供することができるようにする。
【０１３２】
まず図１３を参照し、コンテンツデータ２１と加工データ１７１乃至１７３の関係について説明する。図１３に示すように、コンテンツデータ２１は、時刻Ｔ０から時刻Ｔ１までの長さを有するコンテンツのデータであるとする。換言すれば、コンテンツデータ２１を再生することより得られるコンテンツは、（時刻Ｔ１―時刻Ｔ０）時間の長さのコンテンツであるとする。
【０１３３】
このコンテンツデータ２１が再生されると、図９に示したような人物１０１乃至１０３が表示されているような画像がユーザに提供されるとする。そして、人物１０１乃至１０３のそれぞれに対して、追尾ズームの処理が実行されたことにより、加工データ１７１乃至１７３が生成されたとする。すなわち、図１２に示したようなファイル１５１がコンテンツデータ２１とともに、記録媒体１１に記録されているとする。
【０１３４】
人物１０１に関わる加工データ１７１を、時間的に並べた場合、図１３に示したように、時刻Ｔ０から時刻Ｔ１まで存在しているとする。ここで、加工データ１７１には時間に関するデータは含まれていない。よって、加工データ１７１を時間的に並べた場合とは、コンテンツデータ２１に基づくコンテンツを構成するフレームを、時間順に並べ、その時間順に並べられたフレームに関する同期特徴量１６１を、フレームと同じ順序で並べた場合であることを意味する。
【０１３５】
人物１０１は、コンテンツデータ２１に基づくコンテンツの時刻Ｔ０から時刻Ｔ１までの各フレームに表示されるため、各フレームに加工データ１７１が存在している。同様に、人物１０２も、コンテンツデータ２１に基づくコンテンツの時刻Ｔ０から時刻Ｔ１までの各フレームに表示されるため、各フレームに加工データ１７２が存在している。さらに同様に、人物１０３も、コンテンツデータ２１に基づくコンテンツの時刻Ｔ０から時刻Ｔ１までの各フレームに表示されるため、各フレームに加工データ１７３が存在している。
【０１３６】
このように、加工データ１７１乃至１７３が途切れることなく存在しているとき、その加工データ１７１乃至１７３をどのようなタイミングで、どのように切り替えるかについて、図１４Ａと図１４Ｂを参照して説明する。
【０１３７】
図１４Ａに示した例では、コンテンツの時間を、加工データの数で等分し、順次再生する場合を示している。すなわち、コンテンツデータ２１に基づくコンテンツは、時刻Ｔ０から時刻Ｔ１まであり、加工データが３個あるので、この時刻Ｔ０から時刻Ｔ１までの時間を３等分する。ここでは、時刻ｔ０から時刻ｔ１、時刻ｔ１から時刻ｔ２、および、時刻ｔ２から時刻ｔ３に３等分されたとする。
【０１３８】
コンテンツの時刻Ｔ０からは、加工データ１７１の時刻ｔ０から時刻ｔ１までの間に存在する加工データ１７１が、コンテンツデータ２１と共に再生される。よって、時刻Ｔ０からの（時刻ｔ１−時刻ｔ０）の時間は、人物１０１のみが拡大されて表示される画像が、ユーザに提供される。
【０１３９】
次に、（時刻ｔ１−時刻ｔ０）の時間が経過した後は、時刻ｔ１から時刻ｔ２までの間に存在する加工データ１７２が、コンテンツデータ２１と共に再生される。よって、人物１０１のみが拡大されて表示される画像から、人物１０２のみが拡大されて表示される画像に切り替えられ、そのような画像が、（時刻ｔ２―時間ｔ１）の時間だけ、ユーザに提供される。
【０１４０】
さらに、（時刻ｔ２−時刻ｔ１）の時間が経過した後は、時刻ｔ２から時刻ｔ３までの間に存在する加工データ１７３が、コンテンツデータ２１と共に再生される。よって、人物１０２のみが拡大されて表示される画像から、人物１０３のみが拡大されて表示される画像に切り替えられ、そのような画像が、（時刻ｔ３―時間ｔ２）の時間だけ、ユーザに提供される。
【０１４１】
図１４Ｂに示した例では、コンテンツの時間を、加工データの数で等分し、順次再生する点は、図１４Ａと同じであるが、その再生する箇所が異なる。まず、コンテンツの時刻Ｔ０からは、時刻ｔ０から時刻ｔ１までの間に存在する加工データ１７１が、コンテンツデータ２１と共に再生される。よって、時刻Ｔ０からの（時刻ｔ１−時刻ｔ０）の時間は、人物１０１のみが拡大されて表示される画像が、ユーザに提供される。
【０１４２】
次に、（時刻ｔ１−時刻ｔ０）の時間が経過した後は、時刻ｔ０から時刻ｔ１までの間に存在する加工データ１７２が、コンテンツデータ２１と共に再生される。よって、人物１０１のみが拡大されて表示される画像から、人物１０２のみが拡大されて表示される画像に切り替えられ、そのような画像が、（時刻ｔ１―時間ｔ０）の時間だけ、ユーザに提供される。
【０１４３】
さらに、（時刻ｔ１−時刻ｔ０）の時間が経過した後は、時刻ｔ０から時刻ｔ１までの間に存在する加工データ１７３が、コンテンツデータ２１と共に再生される。よって、人物１０２のみが拡大されて表示される画像から、人物１０３のみが拡大されて表示される画像に切り替えられ、そのような画像が、（時刻ｔ１―時間ｔ０）の時間だけ、ユーザに提供される。
【０１４４】
このように、等間隔で画像が切り替わるようにしても良い。また、このように、等間隔に画像が切り替わるようにしたとき、どの順序で加工データの再生が行われるかは、ユーザにより指定されるようにしても良いし、予め設定されているようにしても良い。予め設定されている場合、例えば、加工データが生成された順に再生されるなどと設定されている。また、各加工データに優先度を付け、その優先度に基づいて、再生される順が設定されるようにしても良い。
【０１４５】
図１４Ａに示したような再生は、人物１０１から人物１０２へ、人物１０２から人物１０３へと画像が切り替わり、その時間的な関係は、連続したものとなっている。よって、ユーザは、一連の時間の流れのなかで、人物１０１、人物１０２、人物１０３が、それぞれどのような行動をしていたかなどを、確認することが可能となる。
【０１４６】
例えば、コンテンツデータ２１がバスケットボールの試合を撮影したコンテンツであるような場合、人物１０１からのパスを受け取った人物１０２に画像が切り替わり、さらに人物１０２から人物１０３に画像が切り替わるような時間的に連続した映像を、ユーザに提供することが可能となる。
【０１４７】
図１４Ｂに示した再生は、図１４Ａと同じく、人物１０１から人物１０２へ、人物１０２から人物１０３へと画像が切り替わるが、その時間的な関係は、連続したものではなく、同じ時間内での画像となっている。よって、ユーザは、所定の同じ時間内で、人物１０１、人物１０２、人物１０３が、それぞれどのような行動をしていたかなどを、確認することが可能となる。
【０１４８】
例えば、コンテンツデータ２１がバスケットボールの試合を撮影したコンテンツであるような場合、人物１０１からのドリブルやパスをしていたときに、人物１０２は、どのような位置でどのような動きをしていたか、また、人物１０３は、どのような位置でどのような動きをしていたかなどがわかる映像を、所定の同じ時間内での画像を切り替えることで、ユーザに提供することが可能となる。
【０１４９】
なお、ここでは、再生パラメータ１６０に含まれる加工データの数に応じて、コンテンツの時間が等分されるとして説明したが、他の方法で等分される（時間配分される）ようにしても良い。例えば、５分毎（５分分のフレーム数毎）に切り替わるというように、所定の時間単位で切り替えられるようにしても良いし、その所定の時間単位自体をユーザが設定できるようにしても良い。
【０１５０】
また、例えば、ランダムな間隔で加工データ（画像）が切り替えられるようにしても良い。
【０１５１】
これらの時間に関する設定（切り替えに関する設定）は、ユーザにより設定されるようにすることが可能である。
【０１５２】
次に、図１５を参照し、他の切り替え方法について説明する。上述したように、加工データは、１フレーム毎に生成され、編集が施されたフレームに対して生成される。このことを換言するならば、編集が施されていないフレームには、加工データが生成されない。
【０１５３】
例えば、図９の画像において、人物１０２が、途中から画像内に入ってきて、途中で画像外にでていくような場合、人物１０２に関する加工データ１７２は、途中から存在し、途中で無くなるようなデータとなる。このように、図１４に示した例のように、加工データが必ずしも、コンテンツの初めから最後まで生成され、存在するとは限らず、図１５に示すような例のように生成される場合もある。
【０１５４】
図１５を参照するに、コンテンツデータ２１に基づくコンテンツが、時刻Ｔ０から時刻Ｔ１まで存在するとき、人物１０１の加工データ１７１は、時刻ｔ０（時刻Ｔ０）から時刻ｔ２までと、時刻ｔ３から時刻ｔ６（時刻Ｔ１）まで存在している。人物１０２の加工データ１７２は、時刻ｔ１から時刻ｔ５まで存在している。人物１０３の加工データ１７３は、時刻ｔ４から時刻ｔ６（時刻Ｔ１）まで存在している。ここで、時刻ｔ０（時刻Ｔ０）＜時刻ｔ１＜時刻ｔ２＜時刻ｔ３＜時刻ｔ４＜時刻ｔ５＜時刻ｔ６（時刻Ｔ１）の関係を満たすとする。
【０１５５】
例えば、追尾ズームの編集が行われたときの加工データであった場合、人物１０１は、時刻ｔ０から時刻ｔ２までの間、画像内に存在したが、時刻ｔ２で一旦画像外に出たために加工データ１７１が生成されず、その後、時刻ｔ３になったときに、再度画像内に入ってきたため、時刻ｔ３から時刻ｔ６まで加工データ１７１が生成されたことを示している。
【０１５６】
同様に、人物１０２は、時刻ｔ１から画像内に存在し、時刻ｔ５で画像外に出たため、時刻ｔ１から時刻ｔ５までの間、画像内に存在したことになり、そのために、時刻ｔ１から時刻ｔ５まで加工データ１７２が生成されたことを示している。
【０１５７】
さらに同様に、人物１０３は、時刻ｔ４から時刻ｔ６（時刻Ｔ１）までの間、画像内に存在したので、時刻ｔ４から時刻ｔ６まで加工データ１７３が生成されたことを示している。
【０１５８】
このように、加工データ１７１乃至１７３が生成された場合、その加工データ１７１乃至１７３をどのようなタイミングで、どのように切り替えるかについて、図１６Ａや図１６Ｂを参照して説明する。
【０１５９】
図１６Ａは、再生されている加工データがなくなったときに、他の加工データに切り替えられる例を示している。すなわち、コンテンツデータ２１に基づくコンテンツは、時刻Ｔ０から時刻Ｔ１まであるが、そのうち、時刻Ｔ０（時刻ｔ０）の時点で加工データがあるのは、人物１０１の加工データ１７１であるので、この時点では、加工データ１７１が選択される。
【０１６０】
なお、再生が開始される時点で、複数の加工データが存在しているような場合には、その中からランダムに選択されるようにしても良いし、何らかの選択するためのルールに基づいて選択されるようにしても良いし、ユーザにより指定されるようにしても良い。
【０１６１】
時刻Ｔ０からコンテンツデータ２１が再生されると、加工データ１７１も再生される。加工データ１７１は、時刻t２になると存在しないため、時刻t２になると、加工データの切り替えが実行される。よって、時刻t０から時刻t２までは、加工データ１７１が再生される。
【０１６２】
時刻t２の時点では、加工データ１７２が存在するため、加工データ１７２に切り替えられる。加工データ１７２は、時刻t５になると存在しないため、時刻t５になると、加工データの切り替えが実行される。よって、時刻t２か時刻t５までは、加工データ１７２が再生される。
【０１６３】
時刻t５の時点では、加工データ１７１と加工データ１７３が存在するため、加工データ１７１または加工データ１７３に切り替えられる。このような場合、既に再生された加工データよりも、まだ再生されていない加工データがあった場合、その再生されていない加工データを、優先的に選択するようなルールを設けても良い。または、他のルールにより選択されるようにしても良い。さらに、例えば、加工データ毎に優先順位が予め付けられており、その優先順位を比較することで、優先順位が高い方を選択するようなルールでも良い。
【０１６４】
ここでは、再生されていない加工データがあった場合には、その加工データが他の加工データよりも優先されて再生されるとして説明を続ける。このようなルールである場合、図１６Ａに示した例では、加工データ１７３の方が選択される。よって、時刻t５か時刻t６までは、加工データ１７３が再生される。
【０１６５】
図１６Ｂは、再生されている加工データとは別の加工データが、新たに存在したときに、その新たに存在する他の加工データに切り替えられ例を示している。すなわち、コンテンツデータ２１に基づくコンテンツは、時刻Ｔ０から時刻Ｔ１まであるが、そのうち、時刻Ｔ０（時刻ｔ０）の時点で加工データがあるのは、人物１０１の加工データ１７１であるので、ここでは、加工データ１７１が選択される。
【０１６６】
この場合も、再生が開始される時点で、複数の加工データが存在しているような場合には、その中からランダムに選択されるようにしても良いし、何らかの選択するためのルールに基づいて選択されるようにしても良いし、ユーザにより指定されるようにしても良い。
【０１６７】
時刻Ｔ０からコンテンツデータ２１が再生されると、加工データ１７１も再生される。時刻t１になると新たに加工データ１７２が存在する。この場合、時刻ｔ０から時刻ｔ１までは、加工データ１７１しか存在しておらず、加工データ１７１が再生されているが、時刻ｔ１になると、加工データ１７２も存在する。このような場合、加工データ１７１から加工データ１７２に、再生される加工データが切り替えられる。よって、時刻t０から時刻t１までは、加工データ１７１が再生される。
【０１６８】
このように、再生されている加工データが再生されている途中で、存在し始めた加工データに、加工データが切り替えられる。
【０１６９】
時刻t３になると、加工データ１７１が再度存在するようになる。また時刻ｔ３の時点では、再生されている加工データ１７２と、再度存在するようになった加工データ１７１以外は存在していない。よって、時刻ｔ３において、加工データ１７２から加工データ１７１に、再生される加工データが切り替えられる。よって、時刻t１から時刻t３までは、加工データ１７２が再生される。
【０１７０】
なお、既に再生したことがある加工データは、他の加工データがあるときには再生しないという設定を設けることも可能であり、このような設定がされている場合には、時刻ｔ３になっても、加工データ１７１に切り替えられることなく、加工データ１７２の再生が継続される。
【０１７１】
時刻t４になると、加工データ１７３が新たに存在するようになる。よって、時刻ｔ４において、加工データ１７１から加工データ１７３に、再生される加工データが切り替えられる。よって、時刻t３から時刻t４までは、加工データ１７１が再生される。そして、時刻ｔ４から時刻ｔ６までは、加工データ１７３が再生される。
【０１７２】
図１６Ａを参照して説明したように、再生している加工データがなくなったときに、他の加工データに切り替えられるような場合、ユーザに提供される画像は、例えば、画像から出て行く人物の代わりに、画像に入ってきた人物が写し出されるに切り替えられるような画像となる。
【０１７３】
図１６Ｂを参照して説明したように、所定の加工データが再生されているときに、新たな加工データに加工データが切り替えられるような場合、ユーザに提供される画像は、例えば、画像内に入ってきた人物に、画像が切り替えられるような画像となる。
【０１７４】
このように、加工データを切り替えるタイミングを変えることで、ユーザに提供される画像の特徴が異なる。よって、ユーザに、加工データを切り替えることで、異なる特徴の画像を提供することが可能となる。
【０１７５】
なお、図１４や図１６を参照して説明した切り換えの仕方において、複数の加工データが存在したときに、どの加工データに切り替えるかは、上記した仕方の他に、各加工データに優先度を付け、複数の加工データが存在した際には、優先度を比較し、優先度の高い加工データが選択されるように設定されていても良い。
【０１７６】
このように、複数の加工データが切り替えられて再生されるときであり、再生モードのときの再生装置１２の処理について、図１７のフローチャートを参照して説明する。
【０１７７】
ステップＳ６１において、再生パラメータ処理部５４は、記録媒体１１に記録されたコンテンツデータ２１を再生するのに用いるファイルを、ファイル記憶部５８から選択する。この場合、ファイル記憶部５８には、図１２に示したようなファイル１５１が記憶されているとする。
【０１７８】
ユーザは、表示装置１３に表示されたファイル名の一覧を見て、操作部５５を操作することにより、ファイル名の一覧から、１つのファイル名を選択すると、ステップＳ６１において、再生パラメータ処理部５４は、そのファイル名によって特定されるファイル１５１を、画像の再生に用いるファイル１５１として選択する。
【０１７９】
ステップＳ６２において、再生パラメータ処理部５４は、ファイル記憶部５８に記憶されているファイル１５１に含まれる再生パラメータ１６０を読み出す。そして、再生パラメータ処理部５４は、読み出された再生パラメータ１６０のうち、複数の加工データを含む再生パラメータ１６０があるか否かを判断する。図１２に示したファイル１５１の場合、例えば、再生パラメータ１６０−１には、加工データ１７１−１乃至１７３―１が含まれているため、ステップＳ６２においては、複数の加工データが含まれている（１つの同期特徴量１６１に対して複数の加工データが関連付けられている）と判断される。
【０１８０】
例えば、図３に示したように、ファイル２２に含まれている再生パラメータのうち、再生パラメータ３０−１には加工データ３２−１しか含まれていないが、再生パラメータ３０−２には、加工データ３２−２と加工データ３２−３が含まれている場合がある。再生パラメータは、フレーム毎に生成されるため、また、編集されたフレームにだけ生成されるため、図３に示したように、１つの加工データ３２−１を含む再生パラメータ３０−１と２つの加工データ３２−２，３２−３を含む再生パラメータ３０−２が、１つのファイル２２内に存在することがある。
【０１８１】
よって、再生パラメータ処理部５４は、ステップＳ６２の処理を実行するとき、例えば、先頭の再生パラメータ１６０を参照するだけで判断を行うのではなく、複数の再生パラメータ１６０を参照して判断する。または、ファイル１５１に、複数の加工データを含むファイルであるか否を示すフラグを設け、そのフラグを参照することにより、ステップＳ６２における判断が行われるようにしても良い。
【０１８２】
ステップＳ６２において、１つの同期特徴量に複数の加工データは関連付けられていないと判断された場合、ステップＳ６３に処理が進められる。この場合、１つの加工データだけが１つの同期特徴量に関連付けられていると判断されたときであり、図６のフローチャートを参照して説明した再生モードのときの処理（ステップＳ２３乃至Ｓ２６）と同様であるので、ここではその説明を省略する。
【０１８３】
一方、ステップＳ６２において、１つの同期特徴量に複数の加工データが関連付けられていると判断された場合、ステップＳ６７に処理が進められる。ステップＳ６７において、加工データが選択される。この加工データの選択は、例えば、ステップＳ６１において、ファイルが選択されたのと同様の処理によりに行うことが可能である。
【０１８４】
ステップＳ６７において、加工データが選択されると、ステップＳ６８に処理が進められる。ステップＳ６８において、選択された加工データの切り替えが指示されたか否かが判断される。選択された加工データの切り替えが指示されるときには、複数の加工データが、ステップＳ６７の処理で選択されたことを意味し、選択された加工データの切り替えが指示されないときには、１つの加工データが、ステップＳ６７の処理で選択されたことを意味する。
【０１８５】
ステップＳ６８において、加工データの切り替えは指示されていないと判断された場合、換言すれば、１つの加工データが選択されたと判断されるときには、ステップＳ６３に処理が進められ、それ以降の処理が実行される。
【０１８６】
一方、ステップＳ６８において、加工データの切り替えが指示されたと判断された場合、ステップＳ６９に処理が進められる。ステップＳ６９において、切り替えのルールが選択される。例えば、図１４Ａを参照して説明したことをルール１とし、図１４Ｂを参照して説明したことをルール２とし、図１６Ａを参照して説明したことをルール３とし、図１６Ｂを参照して説明したことをルール４としたとき、ステップＳ６９において、ルール１乃至４のうちのいずれかのルールが選択される。
【０１８７】
ルールの選択は、ユーザにより行われ、ユーザからの指示に基づきルールが設定されるようにしても良い。また、何らかの条件を設け、その条件が満たされるときに所定のルールが選択されるようにしても良い。さらには、ここでは、ルール１乃至４のように、複数のルールがあるとして説明を続けるが、１つのルールしか設けず、ステップＳ６９の処理を省略する処理の流れとすることも可能である。
【０１８８】
ここでは、複数のルールが設けられており、ステップＳ６９において１つのルールが選択されるとして説明を続ける。ステップＳ６９において、加工データの切り替えに関するルールが選択されると、ステップＳ７０に処理が進められる。
【０１８９】
ステップＳ７０において、通常画像と再生パラメータの再生が開始される。すなわち、記録媒体１１に記録されたコンテンツデータ２１とファイル記憶部５８に記憶されているファイル１５１の再生が開始される。これにより、記録媒体１１からは、コンテンツデータ２１が再生され（読み出され）、コンテンツデータ２１が、画像抽出部５２に供給されるとともに、ファイル記憶部５８からファイル１５１（ファイル１５１に含まれる再生パラメータ１６０）が、再生パラメータ処理部５４に供給される。
【０１９０】
ここで、上述したように、再生パラメータ３０は、フレーム毎に存在しうる。通常画像の再生は、特に指定されない限り、再生パラメータ１６０が存在する時間的に最も前のフレームから開始される。
【０１９１】
再生パラメータ処理部５４は、ファイル１５１に含まれる再生パラメータ１６０の再生を開始する。これにより、記録再生部５１からの再生パラメータ１６０の供給が開始される。また、再生パラメータ処理部５４は、切り替え指示部５７に、読み出された再生パラメータ１６０に含まれる加工データ１７１乃至１７３を供給する。切り替え指示部５７は、供給された加工データ１７１乃至１７３を参照しながら、ステップＳ６９において選択されたルールに基づき、加工データの切り替えのタイミングを判断する。
【０１９２】
ステップＳ７１において、選択された加工データに基づき、通常画像から、画像が抽出される。記録再生部５１から画像抽出部５２に対し、例えばフレーム単位で通常画像が供給され、画像抽出部５２は、記録再生部５１から供給される通常画像のフレームを、順次、注目フレームとして、その注目フレームから、再生パラメータ処理部５４を介して供給された画枠のサイズで、抽出画像を抽出し、信号処理部５３に供給する。
【０１９３】
ステップＳ７２において、信号処理部５３は、画像抽出部５２から供給される抽出画像（のフレーム）に対する、再生パラメータ処理部５４から供給される再生パラメータ（対応パラメータ）に基づく信号処理を開始する。
【０１９４】
ステップＳ７３において、切り替え指示部５７は、切り替えのタイミグであるか否かを判断する。ステップＳ６９において選択された切り替えに関するルールに基づき、処理されているフレームや加工データ１７１乃至１７３を参照し、加工データの切り替えのタイミグであるか否かが判断される。例えば、図１６Ｂを参照するに、時刻ｔ１のときであると、処理対象のフレームや、再生パラメータ１６０を参照することにより判断される場合、ステップＳ７３において切り替えのタイミングであると判断される。
【０１９５】
ステップＳ７３において、切り替えのタイミグであると判断された場合、ステップ７４に処理が進められ、切り替え指示部５７の指示により、再生パラメータ処理部５４は、再生パラメータ１６０に含まれる加工データを、その時点で再生されている加工データから、他の加工データに切り替える。切り替えられた加工データで、ステップＳ７０以下の処理が繰り返される。
【０１９６】
一方、ステップＳ７３において、切り替えのタイミングではないと判断された場合、ステップＳ７５に処理が進められる。ステップＳ７５において、再生パラメータ処理部５４は、操作部５５が、ユーザによって、再生を停止するように操作（停止操作）されたかどうかを判定する。ステップＳ７５において、停止操作が行われていないと判定された場合、ステップＳ７０に戻り、以下、同様の処理が繰り返される。
【０１９７】
ステップＳ７５において、停止操作が行われたと判定された場合、ステップＳ７６に処理が進められ、再生パラメータ処理部５４は、記録再生部５１、画像抽出部５２、信号処理部５３、および切り替え指示部５７を制御することにより、再生パラメータの再生、抽出画像の抽出、抽出画像に対する信号処理、加工データの切り替えのタイミングであるか否かの判断などの処理を停止させる。
【０１９８】
ステップＳ７０乃至Ｓ７５の処理は、加工データの切り替えに関わる処理以外は、基本的に、ステップＳ６３乃至Ｓ６６の処理と同様に行われる。
【０１９９】
ステップＳ７７において、再生パラメータ処理部５４は、再生パラメータ記憶部５６に記憶された再生パラメータの集合であるパラメータセットを、ファイル記憶部５８に新たに記憶（保存）するかどうかを判定する。この場合、パラメータセットは、切り替え指示部５７により切り替えられた結果であり、複数の加工データを連続的に、切り替えて組み合わせたものである。
【０２００】
即ち、再生パラメータ処理部５４は、信号処理部５３を制御することにより、新たなパラメータセットを保存するかどうかを問い合わせる問い合わせメッセージを、表示装置１３に表示させ、その問い合わせメッセージに対して、ユーザが操作部５５を操作するのを待って、再生パラメータ記憶部５６に記憶された新たなパラメータセットを、ファイル記憶部５８に記憶するかどうかを判定する。
【０２０１】
ステップＳ７７において、再生パラメータ記憶部５６に記憶された新たなパラメータセットを、ファイル記憶部５８に記憶すると判定された場合、即ち、問い合わせメッセージに対して、ユーザが、新たなパラメータセットを記憶するように、操作部５５を操作した場合、ステップＳ７８に進み、再生パラメータ処理部５４は、再生パラメータ記憶部５６に記憶されている新たなパラメータセットを読み出し、その新たなパラメータセットを、ファイル記憶部５８に記憶させる。
【０２０２】
また、ステップＳ７７において、再生パラメータ記憶部５６に記憶された新たなパラメータセットを、ファイル記憶部５８に記憶しないと判定された場合、即ち、問い合わせメッセージに対して、ユーザが、新たなパラメータセットを記憶しないように、操作部５５を操作した場合、ステップＳ７８をスキップして、ステップＳ７９に進み、再生パラメータ処理部５４は、再生パラメータ記憶部５６に記憶された新たなパラメータセットを削除（消去）して、ステップＳ６１に戻り、以下、同様の処理が繰り返される。
【０２０３】
以上のように、加工データを切り替えることにより、コンテンツに対して別々に施した編集を切り替え、あたかも新たな編集を施したかのようなコンテンツをユーザに提供することが可能となる。
【０２０４】
また、１つのコンテンツデータ２１を再生することで、複数の異なる編集が行われた編集結果を組み合わせることが可能となる。換言すれば、複数のコンテンツを再生し、切り替えることにより、１本のコンテンツを生成したかのような処理を、１つのコンテンツを再生するだけで行うことが可能となる。よって、複数の記録媒体や、複数の再生装置がなくても、複数のコンテンツを再生し、つなぎ合わせたかのようなコンテンツを取得することができるようになり、システムの構成を簡略化し、コストを低減することが可能となる。
【０２０５】
［記録媒体について］
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
【０２０６】
図１８は、上述した一連の処理をプログラムにより実行するパーソナルコンピュータのハードウェアの構成の例を示すブロック図である。
【０２０７】
コンピュータにおいて、CPU（Central Processing Unit）３０１，ROM（Read Only Memory）３０２，RAM（Random Access Memory）３０３は、バス３０４により相互に接続されている。
【０２０８】
バス３０４には、さらに、入出力インターフェース３０５が接続されている。入出力インターフェース３０５には、キーボード、マウス、マイクロホンなどよりなる入力部３０６、ディスプレイ、スピーカなどよりなる出力部３０７、ハードディスクや不揮発性のメモリなどよりなる記憶部３０８、ネットワークインタフェースなどよりなる通信部３０９、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア３１１を駆動するドライブ３１０が接続されている。
【０２０９】
以上のように構成されるコンピュータでは、CPU３０１が、例えば、記憶部３０８に記憶されているプログラムを、入出力インターフェース３０５及びバス３０４を介して、RAM３０３にロードして実行することにより、上述した一連の処理が行われる。
【０２１０】
コンピュータ（CPU３０１）が実行するプログラムは、例えば、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)等）、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア３１１に記録して、或いは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供される。
【０２１１】
そして、プログラムは、リムーバブルメディア３１１をドライブ３１０に装着することにより、入出力インターフェース３０５を介して、記憶部３０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部３０９で受信し、記憶部３０８にインストールすることができる。その他、プログラムは、ROM３０２や記憶部３０８に、あらかじめインストールしておくことができる。
【０２１２】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、或いは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０２１３】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【０２１４】
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０２１５】
【図１】従来のシステムの一例の構成を示す図である。
【図２】本発明を適用したシステムの一実施の形態の構成を示す図である。
【図３】ファイルについて説明する図である。
【図４】再生装置の内部構成例を示す図である。
【図５】画像の抽出について説明するための図である。
【図６】再生装置の動作について説明するフローチャートである。
【図７】ズームについて説明するための図である。
【図８】追尾ズームについて説明するための図である。
【図９】表示装置に表示される画像の一例である。
【図１０】表示装置に表示される画像の一例である。
【図１１】表示装置に表示される画像の一例である。
【図１２】ファイルについて説明するための図である。
【図１３】加工データの切り替えについて説明するための図である。
【図１４】加工データの切り替えについて説明するための図である。
【図１５】加工データの切り替えについて説明するための図である。
【図１６】加工データの切り替えについて説明するための図である。
【図１７】再生装置の動作について説明するフローチャートである。
【図１８】記録媒体について説明するための図である。
【符号の説明】
【０２１６】
１１  記録媒体，  １２  再生装置，  １３  表示装置，  ２１  コンテンツデータ，  ２２  ファイル，  ３１  同期特徴量，  ３２  加工データ，  ５１  記録再生部，  ５２  画像抽出部，  ５３  信号処理部，  ５４  再生パラメータ処理部，  ５５  操作部，  ５６  再生パラメータ記憶部，  ５７  切り替え指示部，  ５８  ファイル記憶部，  １５１  ファイル，  １６１  同期特徴量，  １７１  加工データ，  １７２  加工データ
【図１】
2008311808.tif 000003
【図２】
2008311808.tif 000004
【図３】
2008311808.tif 000005
【図４】
2008311808.tif 000006
【図５】
2008311808.tif 000007
【図６】
2008311808.tif 000008
【図７】
2008311808.tif 000009
【図８】
2008311808.tif 000010
【図９】
2008311808.tif 000011
【図１０】
2008311808.tif 000012
【図１１】
2008311808.tif 000013
【図１２】
2008311808.tif 000014
【図１３】
2008311808.tif 000015
【図１４】
2008311808.tif 000016
【図１５】
2008311808.tif 000017
【図１６】
2008311808.tif 000018
【図１７】
2008311808.tif 000019
【図１８】
2008311808.tif 000020