(57)【要約】【課題】  復号処理の負荷の増大を防止しつつ、一つの動画データの注目領域のシーンをユーザに提示する。【解決手段】  符号化対象の動画像を構成するフレーム画像を順次入力し、入力したフレーム画像を予め設定した複数のタイルに分割し、各タイル毎に符号化する符号化部と、符号化部により符号化された動画データを記録媒体に記録する記録部とを有し、さらに、フレーム画像において、予め設定された特徴を有する注目領域を検出し、それがいずれのタイルにあるのかを判定する判定部と、この判定部で注目領域が判定された場合、当該注目領域を含むタイルについては、当該タイル内のみを参照する画面内符号化を行うように前記符号化部を制御する制御部とを有する。【選択図】  図１
2015037223.tif 000002
【特許請求の範囲】
【請求項１】
符号化対象の動画像を構成するフレーム画像を順次入力し、入力したフレーム画像を予め設定した複数のタイルに分割し、各タイル毎に符号化する符号化手段と、
前記符号化手段により符号化された動画データを記録媒体に記録する記録手段とを有する画像処理装置であって、
前記フレーム画像において、予め設定された特徴を有する注目領域を判定する判定手段と、
該判定手段で注目領域が判定された場合、当該注目領域を含むタイルについては、当該タイル内のみを参照する画面内符号化を行うように前記符号化手段を制御する制御手段と
を有することを特徴とする画像処理装置。
【請求項２】
さらに、前記記録媒体に記録された符号化動画像データを復号する復号手段と、
復号された動画データを再生する再生手段とを有し、
前記復号手段は、前記注目領域を含むタイルの符号化データのみを復号することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記符号化手段は、所定フレーム毎に前記注目領域を含むタイルを画面内予測符号化方式で符号化することを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記記録手段は、前記注目タイルを含むタイルに関する情報を、前記符号化手段により符号化された動画データとともに記録することを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項５】
前記符号化手段は、順次入力するフレーム画像を時間階層符号化し、注目領域を含むタイルを含むフレームを、時間階層において最下層のフレームとして符号化することを特徴とする前記請求項１乃至４のいずれか１項に記載の画像処理装置。
【請求項６】
記録媒体に記録された符号化動画像データを復号する復号手段と、
復号された動画データを再生する再生し、表示する再生手段とを有し、
前記復号手段は、前記符号化動画像データに含まれる注目領域を示す情報をさらに読み出し、
前記再生手段は、前記注目領域を示す情報に基づいて、前記動画データに含まれる前記注目領域を含むタイルのみを再生し、表示することを特徴とする画像処理装置。
【請求項７】
注目領域を有するタイルのみを表示することを特徴とする前記請求項６記載の画像処理装置。
【請求項８】
前記復号手段は、複数の符号化動画像データを復号し、
前記再生手段は、前記複数の符号化動画像データそれぞれの注目領域を含むタイルを、一覧表示することを特徴とする前記請求項６又は７に記載の画像処理装置。
【請求項９】
符号化対象の動画像を構成するフレーム画像を順次入力し、入力したフレーム画像を予め設定した複数のタイルに分割し、各タイル毎に符号化する符号化工程と、
前記符号化工程により符号化された動画データを記録媒体に記録する記録工程とを有する画像処理装置の制御方法であって、
前記フレーム画像において、予め設定された特徴を有する注目領域を判定する判定工程と、
該判定工程で注目領域が判定された場合、当該注目領域を含むタイルについては、当該タイル内のみを参照する画面内符号化を行うように前記符号化工程を制御する制御工程と
を有することを特徴とする画像処理装置の制御方法。
【請求項１０】
記録媒体に記録された符号化動画像データを復号する復号工程と、
復号された動画データを再生する再生し、表示する再生工程とを有し、
前記復号工程は、前記符号化動画像データに含まれる注目領域を示す情報をさらに読み出し、
前記再生工程は、前記注目領域を示す情報に基づいて、前記動画データに含まれる前記注目領域を含むタイルのみを再生し、表示することを特徴とする画像処理装置の制御方法。
【請求項１１】
コンピュータが読み込み実行することで、前記コンピュータに、請求項９に記載の方法の各工程を実行させるためのプログラム。
【請求項１２】
コンピュータが読み込み実行することで、前記コンピュータに、請求項１０に記載の方法の各工程を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は動画像の符号化技術に関するものである。
【背景技術】
【０００２】
撮像装置だけでなく、最近では携帯型通信装置でも、撮像部を有し、動画像を撮影及び記録することが可能になっている。動画像データはそのままでは情報量が大きいので、一般に、記録媒体に記録する際には圧縮符号化を行う。
【０００３】
記録媒体には、複数の動画像データが記録し得るが、その中の１つを再生する際には、各動画データの「サムネイル画像」と呼ばれる代表画像を画面上に表示させるのが一般的である。ユーザは、そのサムナイル画像を見て、目的とする動画像の選択、再生を指示でることになる。
【０００４】
さらに一つの動画データについては、検索性を向上させるために、たとえば、特許文献１では、記憶装置に格納された動画のビットストリーム領域をｎ個のサブ領域に分割し、サブ領域に含まれる再生開始点のデータを読み出して多重化して出力している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００１−２４３２２８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１の技術では、各再生開始点の画像、すなわちｎフレーム分の画像を再生しなければならず、復号処理の負荷が大きいという問題があった。
【０００７】
そこで、本発明は、復号処理の負荷の増大を防止しつつ、一つの動画データの注目領域のシーンをユーザに提示する技術を提供しようとするものである。
【課題を解決するための手段】
【０００８】
この課題を解決するため、例えば本発明の画像処理装置は以下の構成を備える。すなわち、
符号化対象の動画像を構成するフレーム画像を順次入力し、入力したフレーム画像を予め設定した複数のタイルに分割し、各タイル毎に符号化する符号化手段と、
前記符号化手段により符号化された動画データを記録媒体に記録する記録手段とを有する画像処理装置であって、
前記フレーム画像において、予め設定された特徴を有する注目領域を判定する判定手段と、
該判定手段で注目領域が判定された場合、当該注目領域を含むタイルについては、当該タイル内のみを参照する画面内符号化を行うように前記符号化手段を制御する制御手段とを有する。
【発明の効果】
【０００９】
本発明によれば、復号処理の負荷の増大を防止しつつ、一つの動画データの注目領域のシーンをユーザに提示する技術を提供することが可能になる。
【図面の簡単な説明】
【００１０】
【図１】本実施形態における画像処理装置の基本構成図。
【図２】本実施形態における符号化復号化処理部の概略図。
【図３】本実施形態における符号化処理部の概略図。
【図４】本実施形態におけるタイル分割の例を示す図。
【図５】本実施形態における記録時のる時間階層符号化の概要を説明するための図。
【図６】本実施形態における１フレーム画像の例を示す図。
【図７】本実施形態における再生表示時の表示例を示す図。
【図８】本実施形態における再生時における時間階層構造を示す図。
【図９】本実施形態における復号化処理部の概略図。
【図１０】本実施形態における再生時の一覧表示例を示す図。
【図１１】本実施形態における符号化処理手順を示すフローチャート。
【発明を実施するための形態】
【００１１】
以下、図面を参照して本発明の実施形態を詳細に説明するが、この発明は以下の実施の形態に限定されない。なお、以下の実施の形態は特許請求の範囲に係る発明を限定するものでなく、また実施の形態で説明されている特徴の組み合わせの全てが発明の解決手段に必須のものとは限らない。
【００１２】
なお、本実施形態において説明される各機能ブロックは必ずしも個別のハードウェアである必要はない。すなわち、例えばいくつかの機能ブロックの機能は、１つのハードウェアにより実行されても良い。また、いくつかのハードウェアの連係動作により１つの機能ブロックの機能または、複数の機能ブロックの機能が実行されても良い。また、各機能ブロックの機能は、ＣＰＵがメモリ上に展開したコンピュータプログラムにより実行されても良い。
【００１３】
［実施形態１］
本実施形態では、画像処理装置として、撮像装置を例にとって説明を行うが、本発明の適用範囲は、画像信号を圧縮符号化することができる装置であればどのような装置であってもよい。たとえば、携帯型通信装置、コンピュータであってもよい。
【００１４】
まず、実施形態１の概要であるが、本実施形態１では動画を符号化することができる撮像装置において、図４のように、画像を複数の領域に分割（タイル分割）して符号化を行う（図示のＴ１乃至Ｔ９がタイルである）。そして、動画符号化の際に、所定フレーム毎（実施形態では２フレーム中に１フレームの割合）で、注目領域を含むタイルを画面内予測符号化方式に従って符号化する。そして、再生時には、注目領域のみを含む領域を単独で、２倍速で再生することで、動画の全貌をユーザが容易にかつ短時間に把握できるようにする。
【００１５】
図１に示す装置は、本実施形態１における撮像装置であり、ここでは記録機能と再生機能のどちらも有するビデオカメラとする。
【００１６】
撮像装置１００は、撮像部１１０と、画像処理部１１１と、音声入力部１２０と、音声処理部１２１と、音声出力部１２２と、符号化復号化処理部１３０と、表示部１４０と、表示制御部１４１と、記録再生部１５０と、通信部１６０を有する。さらに、撮像装置１００は、注目領域検出部１７０、並びに装置全体の制御を司るＣＰＵ１０１と、ＲＡＭ１０２と、ＲＯＭ１０３と、操作部１０４とを備える。また、本装置には、脱着可能な記録媒体１５１が接続可能となり、記録再生部１５０はこの記録媒体１５１へ記録、並びに記録された動画像を再生することになる。
【００１７】
ＣＰＵ１０１は、操作部１０４によるユーザ操作及び動作状態に従い、撮像装置１００の全体的な動作を制御する。
【００１８】
操作部１０４は、装置１００に付随するボタンやタッチパネル等による入力装置であり、その操作を示す信号はＣＰＵに供給される。操作部１０４は、撮影時には、撮影モードや撮影パラメータの選択、撮影の開始および停止、ズーム操作等に使用される。また再生時には、再生モードの選択、再生画像の選択、再生の開始及び停止等に使用される。
【００１９】
画像入力部１１０は、例えば複数のレンズやＣＣＤ（Charge-Coupled Device）で構成された撮像部、または外部機器などの出力画像を入力可能なＩＦ部である。画像入力部１１０により順次入力された画像（映像）は、画像処理部１１１にて所定形式のデジタル映像データに変換され、ドライバなどの表示制御部１４１を介して液晶パネルなどで構成される表示部１４０へ表示される。
【００２０】
音声入力部１２０はマイク等で構成され、音声入力部１２０より入力された音声は、音声処理部１２１にてデジタル信号に変換され、スピーカ等で構成される音声出力部１２２によって出力される。
【００２１】
記録時は、画像処理された画像及び音声処理された音声は、符号化復号化処理部１３０により符号化処理され、記録可能なフォーマットに変換される。画像符号化として、ＨＥＶＣなどが知られている。記録可能なフォーマットに変換された画像及び音声は、記録・再生部１５０によりハードディスク等の記録媒体１５１に記録される。
【００２２】
再生時は、記録媒体１５１に記録された符号化動画像データ及び音声データは、記録・再生部１５０により読み出され、符号化復号化処理部１３０により復号化処理され、表示及び出力可能なフォーマットに変換される。
【００２３】
ＲＡＭ１０２は、各々処理部で処理された画像および音声、または情報データを一時格納する為のメモリである。
【００２４】
注目領域検出部１７０は、１フレームの画像内における注目領域を検出する。本実施形態では人間の顔領域を注目領域とする。顔領域検出方法としては、様々な方法が提示されているが、画像内の肌色データを抽出することによって画像中の人物の顔を検出するものとする。
【００２５】
符号化復号化処理部１３０を図２に示す。符号化復号化処理部１３０は、注目タイル判定部２００と、符号化処理部３００と、復号化処理部４００とを含む。
【００２６】
本実施形態における符号化処理部３００についての記録時と再生時の処理について説明する。
【００２７】
［記録時の処理］
図３を用いて符号化処理部３００について詳しく説明する。入力画像がフレーム単位に対象画像メモリ３０１に入力され一旦保存される。その後、符号化順に符号化処理単位ブロックが予測部３０３に入力される。
【００２８】
予測部３０３では、隣接するフレームの画像を用いる動き予測と、同じ画面内のデータのみを用いるイントラ予測を選択して処理することが可能である。動き予測を用いる場合は、参照画像メモリ３０２に動き予測を用いた符号化時の参照画像データが保存されており、対象画像メモリ３０１からのブロック画像と、参照画像メモリ３０２からの参照ブロック画像との間でブロックマッチングを取り、符号化効率を示すコスト関数によるコスト値の最も小さい参照ブロックを算出し、その参照ブロックの位置を動きベクトル位置して決定する。予測部３０３は、動きベクトル位置の参照ブロック画像と処理対象ブロック画像との差分データとしての動き予測結果を、減算器に順次提供する。イントラ予測を用いる場合は、対象画像メモリ３０１から、符号化対象ブロック画像と同じフレームで同じタイル内の、既に符号化済みの領域から参照ブロックを求め、イントラ予測を行い、コスト値が減算器に順次提供される。つまり、イントラ予測に用いられるブロック画像は、符号化対象のブロックが存在するタイル内からだけで導出する。これは、符号化対象のブロック画像のタイルを単独で復号するためである。
【００２９】
このようにして決定した予測モードの予測結果である差分データはＤＣＴ／量子化部３０４に送られる。ＤＣＴ／量子化部３０４は、差分データに対して離散コサイン変換を行い、その後、量子化処理を行う。量子化された変換係数はエントロピー符号化部３０５、またローカルデコード画像作成のため逆ＤＣＴ／量子化部３０６に送られる。エントロピー符号化部３０５は、量子化後の変換係数に対してジグザグスキャン、オルタネートスキャン等を用い、可変長符号化を行う。これに対して、予測部３０３からの予測モードや動きベクトル等の符号化方式情報が付加され、符号化データが生成される。逆ＤＣＴ／量子化部３０６では、入力された変換係数に対して逆量子化を行い、ローカルデコード用の変換係数を生成した後、逆離散コサイン変換を行い、差分画像を生成する。生成された差分画像は予測部３０３が用いた予測ブロック画像と加算され、ブロック画像が生成される。このブロック画像はデブロッキングフィルタ部３０７にてデブロッキングフィルタがかけられ、ＳＡＯ３０８（サンプルアダプティブオフセット）にて歪曲を減らす処理がなされ、参照画像メモリ３０２に格納される。
【００３０】
さて、上記のようにして、符号化処理を行っている過程で、注目タイル判定部２００は、前述した注目領域検出部１７０より得られた注目領域情報から、現フレームが着目領域についてイントラ符号化するタイミングであり、なおかつ、現フレーム中の符号化処理対象のブロック画像が、注目領域（実施形態では人間の顔）を有するタイル内にあるのと判定したとき、その旨の信号を予測部３０３に供給する。
【００３１】
予測部３０３は、現フレームが対象フレームであり、かつ、符号化対象のブロック画像が注目領域を有するタイル内にあることを示す信号を受信した場合、その符号化対象のブロック画像をイントラ予測のみを用いて符号化処理を行う。なお、注目領域が複数のタイルに跨って存在している場合には、注目領域が一番多く含むタイルを、上記の着目領域を有するタイルとして決定する。
【００３２】
本実施形態では、符号化対象の画像を予め固定で分割し、タイル毎に符号化・復号化処理を行う。本実施形態では図４に示すように画像（１フレーム）を３×３の９等分のタイルＴ１乃至Ｔ９に分割する。実施形態１では図示のごとく、水平１９２０画素×垂直１０８０画素で構成されるものとする。よって、１つのタイルは６４０×３６０の画角となり、各々タイル分割する座標も図４の通りとなる。
【００３３】
また、符号化方法としては、時間的な階層を用いた時間階層符号化処理を行う。時間的階層の概念図を図５に示す。時間順序で階層符号化を行うことにより、指定した階層ＩＤ（Ｔｅｍｐｏｒａｌ ＩＤ）以下の階層のみ復号することで、時間順序で一部の画像のみを抽出して復号が可能である。例えば、６０ｆｐｓの動画データを２階層で符号化を行った場合、時間階層符号化の最下層であるＴｅｍｐｏｒａｌ ＩＤ＝０のみを復号すると３０ｆｐｓの動画データを、Ｔｅｍｐｏｒａｌ ＩＤ＝０と１の両方を復号すると、６０ｆｐｓの動画データとして復号することが可能である。
【００３４】
本実施形態では、注目領域の検出処理および注目タイルを決定する処理を行うフレーム画像は、時間的階層における一番低いレート（Ｔｅｍｐｏｒａｌ ＩＤ＝０）のみとする。
【００３５】
次に、イントラ予測を用いた注目タイルがどのタイルであるかの位置情報を格納する方法について述べる。ＨＥＶＣでは、動画像符号化処理そのものを扱うビデオ符号化レイヤＶＣＬ（Ｖｉｄｅｏ Ｃｏｄｉｎｇ Ｌａｙｅｒ）と、符号化された情報を伝送・蓄積する下位システムとの間に、ネットワーク抽象レイヤＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ ）というレイヤが規定されている。ＮＡＬは、ＮＡＬヘッダとＶＣＬで生成されたＲＢＳＰ（Ｒａｗ Ｂｙｔｅ Ｓｅｑｕｅｎｃｅ Ｐａｙｌｏａｄ）の２つから構成されるＮＡＬユニットと呼ばれる単位で対応付けされる。ＮＡＬヘッダには、ＮＡＬユニットの種類の識別子と、時間的階層の識別子が格納され、続いてＲＢＳＰに実際の符号化データが格納される。
【００３６】
ＮＡＬユニットは主に映像符号化データを搬送するが、これ以外の種類としてＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ  Ｅｎｈａｎｃｅｍｅｎｔ  Ｉｎｆｏｍａｔｉｏｎ）がある。このＳＥＩは、動画符号化レイヤＶＣＬの復号に直接関係ない付加情報である。このＳＥＩには、ユーザ定義で使用可能なユーザデータＳＥＩ（ｕｓｅｒ ｄａｔａ ＳＥＩ）が用意されている。ユーザデータＳＥＩには、未登録ユーザデータＳＥＩと、ＩＴＵ−Ｔ勧告Ｔ．３５に従って登録された登録ユーザデータＳＥＩがある。ここでは、未登録ユーザデータＳＥＩを利用して注目タイル位置情報を付加する。図６の６０１は、ある１フレームの画像を示す。６０２は注目領域検出部１７０によって検出された顔領域である。この情報より、注目タイル判定部２００によって、タイルＴ５に注目領域が含まれている注目タイルと判定され、タイルＴ５はイントラ予測を用いて符号化処理される。注目タイルがタイルＴ５であるという情報は、ＳＥＩのユーザデータＳＥＩに格納される。ある１フレームの画像内に注目領域が存在しない場合は、注目タイル判定及び位置情報の負荷処理を行わないものとする。
【００３７】
以上実施形態１における符号化処理を説明したが、ＣＰＵ１０１の処理手順を図１１のフローチャートに従って説明する。
【００３８】
まず、Ｓ１にて、１フレーム分の画像データを入力する。そして、Ｓ２にて、所定のタイミングにあるか否かを判定する。実施形態では、２フレームの周期で、注目領域のイントラ画面内符号化を行うので、そのタイミングになっているか否かを判定することになる。該当するタイミングになっていると判定された場合、処理はＳ３に進み、入力したフレーム内の注目領域（実施形態では人間の顔）の検出処理を行う。そして、Ｓ４にて、検出した注目領域を含むタイルを、画面内符号化するタイルとして決定する。そして、Ｓ５にて、符号化処理を実行する。なお、Ｓ２にて、所定タイミングではないと判断した場合には、全タイルについて通常の符号化を行うことになる。この後、Ｓ６にて、符号化処理の終了の指示（記録停止指示）があったか否かを判定し、否の場合にはＳ１以降の処理を繰り返す。
【００３９】
［再生時の処理］
再生時の表示の概念図を図７に示す。記録媒体１５１から選択された動画データが符号７０１に示すように再生されると共に、注目領域７０２に示すＰｉｎＰ（Picture In Picture)で表示されるものとする。また、選択された動画データに含まれる注目画像を全て表示した場合、ＰｉｎＰ表示を終了するものとする。
【００４０】
図８に再生時に使用する画像の時間的階層構造の構成図を示す。同図（ａ）は通常再生する動画であり、記録時の更新フレームレートと同じレートにて復号され再生される。同図（ｂ）は注目画像であり、再生時の更新フレームレートと同じレートにて、注目タイルのみ復号される。結果、注目画像が通常再生動画像に比べて早送りに再生表示される。
【００４１】
図９を用いて復号化処理部４００について説明する。復号化処理部４００は、復号画像メモリ４０１と通常再生処理部４１０と注目画像処理部４２０とを含む。
【００４２】
通常再生処理部４１０は、通常再生する用の復号化処理部である。入力される符号化データはエントロピー復号化部４１１にて算術復号化によって２値化データへ変換される。逆ＤＣＴ／量子化部４１２では、逆量子化・逆直交変換処理により残差信号を復元し、予測画像信号と残差信号とを加算して画像データを復元する。その後、デブロッキング部４１３にて、デブロッキングフィルタ処理と歪補正であるサンプルアダプディブオフセット（ＳＡＯ）処理をＳＡＯ部４１４にて施し、復号画像メモリ４０１の通常再生用画像領域に格納される。その後、垂直・水平同期信号を付加し、映像信号として出力する。
【００４３】
一方、注目画像処理部４２０では、注目ブロック画像を含む注目タイル用の復号化処理部である。エントロピー復号化部４２１、及び、逆ＤＣＴ／量子化部４２２を経て、注目ブロック画像の差分ブロック画像が生成されると、注目タイル内の既に復号を終えている中から、ベクトルで示されたブロック画像を抽出し、差分ブロック画像を加算することで、注目ブロック画像を生成する。このあと、サンプルアダプディブオフセット（ＳＡＯ）処理をＳＡＯ部４２３にて施し、復号画像メモリ４０１の注目画像用領域に格納される。その後、垂直・水平同期信号を付加し、映像信号として出力する。この時、注目画像として復号する画像は、注目タイルのみであり、復号する更新レートとしては、通常再生する時のフレーム更新レートにて処理を行い注目画像として出力する。復号処理された通常再生画像と注目画像を画像処理部にて合成処理し、表示部１４０にて表示される。
【００４４】
注目タイルがどこであるかは、画像ヘッダであるＮＡＬユニット内のＳＥＩ情報を参照する。１画像内に注目タイルが存在しない場合は復号処理を行わず、次の画像のヘッダを参照し、注目タイルの存在有無を確認する。
【００４５】
本実施形態では、注目領域として顔領域を用いたが、フォーカスエリア、顔認証エリア、ユーザ設定エリアなどでも良く、上記例によって本発明は限定されない。また、本実施形態では、１フレームを９分割固定としたが、ユーザが任意に設定してもよく、これに限定しない。さらに、本実施形態では、記録時の時間的階層を２階層として説明したが、これに限定しない。
【００４６】
本実施形態では、記録時の注目タイル判定対象として、時間的階層の一番低いレートの全ての画像に対して行ったが、これに限定しない。例えば、時間的階層の一番低いレートの画像のうち、１画像おきなどの一定間隔にて判定処理を行ってもよい。この場合、判定処理が行われなかった画像には、注目タイルが存在しないという扱いで処理を行う。
【００４７】
本実施形態では、１画像内に注目領域が存在しない場合は、記録時に注目タイル判定及び位置情報の負荷処理を行わないとしたが、記録時に画像の中心のタイルなど、予め指定したタイルを注目タイルとして処理を行ってもよい。
【００４８】
本実施形態では、再生時において存在する注目タイルを全て復号化して表示するとしたが、１注目タイルおきなどの一定間隔にて符号化して表示するとしてもよい。
【００４９】
［実施形態２］
実施形態２では、再生時における別の表示方法について説明する。本実施形態２では、再生時に注目タイルのみを順次復号化し順次再生する。再生処理としては、図９の注目画像処理部４２０のみが実施形態１と同様に動作し、注目画像データを出力する。その後、画像処理部１１１にて拡大処理がなされ、表示部１４０にて注目画像データのみが順次表示される。この時の最大拡大率は表示１４０にて表示可能な画角とし、拡大率はユーザが任意に設定可能である。
【００５０】
［実施形態３］
実施形態３では、再生時における別の表示方法について説明する。本実施形態３では、記録媒体に保存された複数の動画像それぞれの注目タイルのみを、順次復号化し並べて再生表示することで、それぞれの動画像を一覧表示する。再生処理としては、図９の注目画像処理部４２０のみが実施形態１と同様に動作し、注目画像データを出力する。その後、画像処理部にて一覧表示する上での１画像画角に拡大または縮小処理がなされ、一覧表示用画像としてＲＡＭ１０２へ一旦記録される。その後、表示部１４０にて注目タイルの一覧表示を表示する。図１０に注目タイルの一覧表示イメージを示す。図中、符号１００１が表示部１４０で表示する画角であり、１００２が注目タイルのみを復号し一覧表示したものである。
【００５１】
（その他の実施例）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【図１】
2015037223.tif 000003
【図２】
2015037223.tif 000004
【図３】
2015037223.tif 000005
【図４】
2015037223.tif 000006
【図５】
2015037223.tif 000007
【図６】
2015037223.tif 000008
【図７】
2015037223.tif 000009
【図８】
2015037223.tif 000010
【図９】
2015037223.tif 000011
【図１０】
2015037223.tif 000012
【図１１】
2015037223.tif 000013