(57)【要約】【課題】シーンに相当するビデオコンテンツについての検索一覧表示に関して、これまでよりも高い一覧性、検索性を有し、ユーザにとっても利便性、有用性の高められたものを提供する。【解決手段】選択されたシーンのビデオコンテンツについて、その再生時間経過により変化するビットレートを認識する。シーン内インデックス画像のデータをビデオコンテンツから抜き出すのにあたり、そのための時間間隔（抽出時間間隔）について、ビットレートが一定未満の区間では抽出時間間隔Ｔｍ１を設定し、一定以上の区間では、Ｔｍ１より短い抽出時間間隔Ｔｍ２を設定する。そして、この抽出時間間隔設定により抜き出したとされるシーン内インデックス画像を、ビデオコンテンツの再生時間進行に対応する配列順により配列させるようにしてシーン内インデックス領域に貼り付ける画像処理を実行する。【選択図】図１０
2008311847.tif 000002
【特許請求の範囲】
【請求項１】
指定が行われた再生時間に対応する単位動画像データにおける画内容を抽出したものに相当する抽出静止画像データを取得する静止画情報取得手段と、
上記静止画情報取得手段により、それぞれが異なる再生時間に対応して抽出した複数の抽出静止画像データの画像を、単位動画像データの再生時間経過に従って所定の態様により配列表示させた画内容を有する、単位動画像内一覧画像としての表示用画像データを生成する表示画像生成処理手段と、
上記単位動画像データの再生時間経過に応じたビットレートを認識するビットレート認識手段と、
上記複数の抽出静止画像データについての、再生時間が前後関係にある２つの上記抽出静止画像データが対応する再生時間の間隔である抽出時間間隔のそれぞれを、認識した上記ビットレートに基づいて決定するようにされた抽出時間間隔設定手段と、
決定された上記抽出時間間隔に基づいて、上記静止画情報取得手段が抽出する上記複数の抽出静止画像データごとに対応する再生時間を指定する再生時間指定手段と、
を備えることを特徴とする表示制御装置。
【請求項２】
上記単位動画像データは、所定の再生単位が連続して形成されるものとされ、
上記ビットレート認識手段は、
単位動画像データに対応して設けられる管理情報に含まれる、上記再生単位ごとのデータサイズを示す情報を少なくとも利用して、上記再生時間経過に応じたビットレートを認識するようにされている、
ことを特徴とする請求項１に記載の表示制御装置。
【請求項３】
上記ビットレート認識手段は、
単位動画像データに対応して設けられる管理情報に含まれる、再生時間経過に応じたビットレートの変化を示し得る内容を有するビットレート変化情報を少なくとも利用して、上記再生時間経過に応じたビットレートを認識するようにされている、
ことを特徴とする請求項１に記載の表示制御装置。
【請求項４】
上記表示画像生成処理手段は、
上記単位動画像内一覧画像において配列表示される複数の抽出静止画データの画像について、上記抽出時間間隔に基づいて設定した分類が反映された所定の表示態様が得られるようにして、上記単位動画像内一覧画像としての表示用画像データを生成する、
ことを特徴とする請求項１に記載の表示制御装置。
【請求項５】
上記表示画像生成処理手段は、
上記単位動画像内一覧画像において、上記複数の抽出静止画データの画像が配列表示される領域の背景画について、上記分類ごとに異なる所定色となるようにして、上記単位動画像内静止画配列画像としての表示用画像データを生成する、
ことを特徴とする請求項４に記載の表示制御装置。
【請求項６】
上記表示画像生成処理手段は、
上記複数の抽出静止画像データの画像について、上記分類ごとに異なる所定の表示サイズとなるようにして、上記単位動画像内一覧画像としての表示用画像データを生成する、
ことを特徴とする請求項４に記載の表示制御装置。
【請求項７】
上記表示画像生成処理手段は、
再生時間上で前後となる抽出静止画像データの画像についての配列位置間の距離が、上記分類ごとに異なるものとなるようにして、上記単位動画像内一覧画像としての表示用画像データを生成する、
ことを特徴とする請求項４に記載の表示制御装置。
【請求項８】
指定が行われた再生時間に対応する単位動画像データにおける画内容を抽出したものに相当する抽出静止画像データを取得する静止画情報取得手順と、
上記静止画情報取得手順により、それぞれが異なる再生時間に対応して抽出した複数の抽出静止画像データの画像を、単位動画像データの再生時間経過に従って所定の態様により配列表示させた画内容を有する、単位動画像内一覧画像としての表示用画像データを生成する表示画像生成処理手順と、
上記単位動画像データの再生時間経過に応じたビットレートを認識するビットレート認識手順と、
上記複数の抽出静止画像データについての、再生時間が前後関係にある２つの上記抽出静止画像データが対応する再生時間の間隔である抽出時間間隔のそれぞれを、認識した上記ビットレートに基づいて決定する抽出時間間隔設定手順と、
決定された上記抽出時間間隔に基づいて、上記静止画情報取得手順が抽出する上記複数の抽出静止画像データごとに対応する再生時間を指定する再生時間指定手順と、
を実行することを特徴とする表示制御方法。
【請求項９】
指定が行われた再生時間に対応する単位動画像データにおける画内容を抽出したものに相当する抽出静止画像データを取得する処理を実行させる静止画情報取得制御手順と、
上記静止画情報取得制御手順により、それぞれが異なる再生時間に対応して抽出した複数の抽出静止画像データの画像を、単位動画像データの再生時間経過に従って所定の態様により配列表示させた画内容を有する、単位動画像内一覧画像としての表示用画像データを生成させる表示画像生成処理手順と、
上記単位動画像データの再生時間経過に応じたビットレートを認識するビットレート認識手順と、
上記複数の抽出静止画像データについての、再生時間が前後関係にある２つの上記抽出静止画像データが対応する再生時間の間隔である抽出時間間隔のそれぞれを、認識した上記ビットレートに基づいて決定する抽出時間間隔設定手順と、
決定された上記抽出時間間隔に基づいて、上記静止画情報取得手順により抽出する上記複数の抽出静止画像データごとに対応する再生時間を指定する再生時間指定手順と、
を表示制御装置に実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示デバイスの表示画面部位に対して画像を表示出力させるための表示制御を実行する表示制御装置とその方法に関する。また、このような表示制御装置が実行するプログラムに関する。
【背景技術】
【０００２】
例えば記憶媒体に記憶されている動画像コンテンツについての検索一覧表示を行う手法として、タイトル単位若しくはチャプタ単位に相当するサムネイル画像やアイコンを配列表示させることが、広く行われている。また、このような検索一覧表示は、サムネイル画像などとして表示されたタイトル、チャプタを選択することにより、その選択されたタイトル、チャプタからの再生を開始させるようにされたＧＵＩ(Graphical User Interface)として構成されていることが通常である。例えば、特許文献１には、このような技術として、動画撮影が可能な撮像装置（インテリジェントビデオカメラ）において、これまでに撮影記録したシーンにつき１つの代表画像を生成し、これらの代表画像（アイコン）を１画面上に表示させるものが開示されている。
なお、上記の「シーン」とは、撮像装置による動画記録の開始から終了までに対応して得られる動画像コンテンツの単位を指すものであり、他に「カット」「ショット」などともいわれる。
【０００３】
しかし、上記のような動画像コンテンツの一覧表示では、１シーンにつき、そのシーン内から抽出した或る１フレーム分相当の１枚のサムネイル画像のみを提示するものであるために、各シーンの中身の内容をユーザが把握しにくく、この点で、動画像コンテンツを検索する手法としては決して使い易いものであるとはいえない。一般に、撮像装置により撮影記録されるシーンの記録時間長は、数秒程度から数十分程度とかなりばらつくが、上記の問題は、シーンが長尺になるほど顕著になる。
【０００４】
そこで、特許文献２のようにして、検索一覧表示として、一連（１シーン分）の動画像から時系列に沿って所定タイミング(所定の一定時間間隔)で抽出した複数のインデックス画像（サムネイル画像）を、上記の時系列に沿わせるようにして配列表示させる技術が考え出されている。
このような検索一覧表示であれば、１シーン内から抜き出したとされる静止画像が一定時間間隔ごとに時系列で提示されることとなるので、シーン内の内容を把握することが可能となる。また、この検索一覧表示において選択したサムネイル画像が対応する再生時間位置からのシーン再生、即ちシーン途中からの再生を行うことも可能になる。このようにして、特許文献２に記載される技術によっては、シーン内における画内容の検索、一覧が可能となるものであり、この点で、動画像コンテンツの一覧性、検索性の向上が図られているものである。
【０００５】
【特許文献１】特開平１０−２８２５０号公報
【特許文献２】特開平６−１５３１５７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
そして本発明としては、上記特許文献２に代表されるようなシーンに相当する動画像情報内についての検索一覧表示に関して、これまでと比較しても、さらに高い一覧性、検索性を有し、ユーザにとっても利便性、有用性の高められたものを提供することを目的とする。
【課題を解決するための手段】
【０００７】
そこで本発明は上記した課題を考慮して、表示制御装置として次のように構成する。
つまり、指定が行われた再生時間に対応する単位動画像データにおける画内容を抽出したものに相当する抽出静止画像データを取得する静止画情報取得手段と、この静止画情報取得手段により、それぞれが異なる再生時間に対応して抽出した複数の抽出静止画像データの画像を、単位動画像データの再生時間経過に従って所定の態様により配列表示させた画内容を有する、単位動画像内一覧画像としての表示用画像データを生成する表示画像生成処理手段と、単位動画像データの再生時間経過に応じたビットレートを認識するビットレート認識手段と、上記複数の抽出静止画像データについての、再生時間が前後関係にある２つの上記抽出静止画像データが対応する再生時間の間隔である抽出時間間隔のそれぞれを、認識したビットレートに基づいて決定するようにされた抽出時間間隔設定手段と、決定された抽出時間間隔に基づいて、静止画情報取得手段が抽出する上記複数の抽出静止画像データごとに対応する再生時間を指定する再生時間指定手段とを備えることとした。
【０００８】
上記構成にあって、単位動画像データは、シーンといわれる動画像単位に相当する。そして、本願発明の下で得られる単位動画像内一覧画像は、１つの単位動画像データにおける異なる再生時間から抽出するようにして取得した静止画像を時系列に沿って（単位動画像データの再生時間経過に対応させるようにして）配列させた態様を持つ。そのうえで、この単位動画像内一覧画像において配列表示される静止画像は、その元となる単位動画像データの再生時間経過に応じたビットレートに基づいて設定された抽出時間間隔により、その単位動画像データにおけるしかるべき再生時間から抽出したものとなるようにされている。つまり、本願発明の単位動画像内一覧画像において時系列に従って配列表示される静止画像の間隔は、元の単位動画像データのビットレートに応じて変化するようにして提示される。
ここで、単位動画像データのビットレートの高低は、画像の変化の大小に対応するものであり、一般に画像の変化が大きいほど、画像内容としての重要性、注目度は高まってくるものであるとみることができる。即ち、本願発明による単位動画像内一覧画像としては、単位動画像データにおける画内容の重要性、注目度に応じて、時系列で配列表示される静止画像の間隔が変化するようにされているといえる。
【発明の効果】
【０００９】
このようして、単位動画像データにおける画内容の重要性、注目度に応じて、時系列で配列表示される静止画像の間隔が変化するようにされていることで、本願発明による単位動画像内一覧画像についての検索性、一覧性は、例えば静止画像の間隔が一定とされているこれまでのものと比較して格段に向上されることになる。
【発明を実施するための最良の形態】
【００１０】
図１は、本願発明を実施するための最良の形態（以下、実施の形態という）としての装置である、ビデオカメラ装置１の構成例を示すブロック図である。
この図において、先ず、光学系部１１は、レンズ光学系、フォーカス機構、ズーム機構、絞り(アイリス)機構などを備えて成り、入射された光を撮像光として撮像部１２が備えるものとされる撮像素子(光電変換素子)の受光面に結像させる。
また、ここでの光学系部１１におけるフォーカス機構、ズーム機構、絞り機構の駆動は、マイクロプロセッサ１７による制御に応じて、カメラ制御部１３が上記各機構に駆動信号を出力するによって行われるものとしている。
【００１１】
撮像部１２は、例えばＣＭＯＳセンサ、ＣＣＤ(Charge Coupled Device)などの撮像素子を備えて成り、上記のようにして受光面にて受光した撮像光についての光電変換を行う。そして、受光面にて受光された撮像光に応じて蓄積された電荷を、例えば、マイクロプロセッサ１７の制御に応じてカメラ制御部１３から出力されるタイミング信号に応じた、しかるべきタイミングで順次出力するようにされる。これにより、所定の画素数サイズによる撮像画像に対応した電気信号を出力する。このようにして出力された信号は、カメラ信号処理部１４に対して入力される。
【００１２】
カメラ信号処理部１４では、上記のようにして撮像部１２から入力される電気信号について、例えばＣＤＳ(Correlated Double Sampling)処理、ＡＧＣ(Automatic Gain Control)処理などの波形成形を行ったうえでデジタル信号に変換し、記録再生処理回路１５に出力する。
【００１３】
記録再生処理回路１５では、カメラ信号処理部１４から出力されたデジタル信号を入力して、記録信号処理を実行する。例えば所定方式による圧縮符号化をはじめとして、所定の動画像記録フォーマットに対応した記録用ビデオ信号データを生成するようにされる。そして、このようにして生成されるビデオ信号データをＨＤＤ１６に書き込んで記録する。この結果、ＨＤＤ１６には、撮像により得られたビデオコンテンツのデータが記憶保存されるようにして管理されることになる。また、撮像装置による撮影記録の開始から終了までの間に得られた動画像は、シーン（あるいはカット、ショット）などともいわれるが、上記のようにしてＨＤＤ１６に記録されるビデオコンテンツとしても、このシーン単位により管理される。即ち、原則としては、シーン単位のビデオコンテンツのデータが所定形式の動画像ファイルとしてファイルシステムにより管理される。ただし、１シーンの記録時間が非常に長尺になって、１動画ファイルにおける最大データ量、若しくは最大時間を越えた場合には、複数の動画像ファイルに分割して、これら複数の動画像ファイルを１シーン相当のビデオコンテンツとして管理するようにされる。
【００１４】
また、記録再生処理回路１５は、撮影記録モード時においては表示部２０に対してスルー画を表示させるための処理も実行するようにされる。スルー画とは、そのときに光学系部１１により撮像しているとされる画像のことをいうもので、ユーザは、表示部２０に表示されるスルー画を見ることで撮影されている画内容を確認することができる。このスルー画表示のためには、記録再生処理回路１５は、カメラ信号処理部１４から入力したデジタル信号を利用して、表示部２０による画像表示に適合した解像などを有するスルー画用のビデオ信号を生成し、このスルー画用ビデオ信号を重畳処理部１９を介して表示部２０に対して出力する。
【００１５】
また、記録再生処理回路１５は、ＨＤＤ１６に記憶保存されたビデオコンテンツのデータを読み出して、記録信号処理に対応した復号処理などを実行して動画像としてのビデオ信号を再生することも可能とされる。このようにして再生されたビデオ信号は、例えばマイクロプロセッサ１７の制御に応じて、重畳処理部１９を介して表示部２０に対して出力することで、この表示部２０にて画像として表示させることができるようになっている。
なお、実際のビデオコンテンツとしては、ビデオ信号とともに、少なくとも、このビデオ信号とリップシンクするようにして再生されるべきオーディオ信号も含む構造を有するものであるが、ここでは、説明を簡単なものとすることの便宜上、このオーディオ信号についての記録再生処理についての構成の図示及び説明は省略する。
【００１６】
マイクロプロセッサ１７は、例えばＣＰＵ、ＲＯＭ、ＲＡＭなどを有して構成されるもので、例えば内部のＲＯＭに記憶されるプログラムを実行することにより、ビデオカメラ装置１における各種の制御を実行する。これにより、ビデオカメラ装置１としての各種の動作が得られることとなる。
【００１７】
ＯＳＤ(On Screen Display)処理部１８及び重畳処理部１９は、表示部２０に対して、そのときのビデオカメラ装置１の動作に応じた各種のＧＵＩ(Graphical User Interface)としての画像を表示させるために備えられる。
ＧＵＩ画像を表示させるべきとき、マイクロプロセッサ１７は、ＯＳＤ(On Screen Display)処理部１８により、そのＧＵＩ画像としての画内容を有する表示用ビデオ信号（表示用画像データ）を生成させ、この表示用ビデオ信号を重畳処理部１９に対して出力させる。重畳処理部１９では、ＯＳＤ処理部１８から出力される表示用ビデオ信号を表示部２０に出力するが、この際、そのＧＵＩ画像が、例えばスルー画や再生画像上に重畳させるべきものである場合には、記録再生処理回路１５から入力されてくるスルー画や再生画像などのビデオ信号に、ＧＵＩ画像の表示用ビデオ信号を重畳、合成し、この合成後のビデオ信号を表示部２０に出力するようにされる。
【００１８】
操作部２１は、ビデオカメラ装置１本体に備えられるハードウェアキー、ボタンなどの各種操作子と、この操作子に対する操作に応じた操作信号をマイクロプロセッサ１７に出力する操作信号出力部位を一括して示しているものとされる。例えば、この操作部２１における操作子としては、写真撮影時に操作されるシャッターボタン、撮影モードなどを選択する操作子、パラメータのアップ／ダウンを行うための操作子などが含まれる。また、特にこの図においては、操作部２１を成す操作子として、ホームキー２１ａ、及びフィルムロールキー２１ｂが示されている。ホームキー２１ａを操作することによっては、ホームメニューといわれる大元のメニュー画面としてのＧＵＩ画像を表示部２０に表示させることができる。また、フィルムロールキー２１ｂを操作することによっては、後述するフィルムロールインデックス画面としてのＧＵＩ画像を表示部２０に表示させることができる。
【００１９】
また、本実施の形態のビデオカメラ装置１では、上記操作部２１としてのキー、ボタンのほかに、操作入力部として、タッチパネル２１Ａを備える。このタッチパネル２１Ａは、実際においては、表示部２０の表示画面と一体化される態様で設けられる。即ち、本実施の形態のビデオカメラ装置１では、ＧＵＩ画像が表示された表示部２０の画面上に対して直接指を振れるなどの操作が可能なＧＵＩを提供するものである。なお、ＧＵＩの内容によっては、表示部２０に表示されるＧＵＩ画像に対する操作が、操作部２１における所定のキー、ボタンに対する操作により行われるようにされてもよいものである。
【００２０】
上記の構成から分かるように、ビデオカメラ装置１では、ＨＤＤ１６に対して、撮像記録により得たビデオコンテンツを記憶保存させることが可能とされている。ここでＨＤＤは、ランダムアクセスが可能なもののうち、現状においてはＧＢ（ギガバイト）クラスでの大容量を技術的、コスト的に容易に実現できる記憶媒体の１つであり、従って、圧縮符号化データを主体とするビデオコンテンツデータとしても多数を記憶保存することが可能となる。
このようにして多数のビデオコンテンツが記憶可能であることを考慮すると、ビデオカメラの機能として、記憶保存されたビデオコンテンツに関する一覧表示機能を与えて、その検索性が高められるようにすることが、ユーザにとっての利便性向上などを求めた場合には好ましくなってくる。そこで、本実施の形態のビデオカメラ装置１も、ＧＵＩの一機能として、このようなビデオコンテンツに関しての一覧・検索表示機能を実装するものである。つまり、ビデオカメラ装置１は、表示部２０の表示画面上に対して、ＨＤＤ１６に記憶保存されたビデオコンテンツを対象として、一覧・検索を行うことのできるＧＵＩ画像を表示するものである。また、ランダムアクセスが可能な記憶媒体に対応しては、このような一覧・検索画像上でのコンテンツの再生操作を行えるようにされたものが一般的であるが、本実施の形態としても、一覧・検索画面上でのコンテンツの再生操作が可能なようにされる。
【００２１】
図２により、本実施の形態のビデオカメラ装置１における一覧・検索画面の表示に関連した操作態様例について説明する。
ここで、例えば本実施の形態のビデオカメラ装置１が撮影待機モードにあるとする。撮影待機モード下では、ビデオカメラ装置１は、図２（ａ）に示すようにして、表示部２０の表示画面部２０Ａ上にて、そのときに光学系部１１により撮影しているとされる画像であるいわゆるスルー画を表示させる動作を実行しながら、撮影記録開始操作を待機している状態にある。そして、例えばこの状態の下で撮影記録の開始を指示する操作（撮影開始操作）が行われたとすれば、その操作タイミング以降において撮影記録が開始される。この撮影記録は、撮影記録の終了を指示する撮影終了操作が行われるまで実行される。なお、確認のために述べておくと、前述もしたように、本実施の形態のＨＤＤ１６に記憶保存される１単位のビデオコンテンツは、原則、上記の撮影開始操作から撮影終了操作までに対応する撮影記録により得られる動画像データ（ファイル）の単位に相当するものであって、この単位は、映像内容としては、シーン、カット、ショットなどともいわれるものとなる。なお、本実施の形態では、この単位名称については、以降、「シーン」で統一する。
【００２２】
ここで、本実施の形態のビデオカメラ装置１により表示するスルー画の画像内においては、図２（ａ）に示されているようにして、画面内ホームボタンＢｔ１が表示されるようになっている。なお、この場合には画面内ホームボタンＢｔ１の画像を、表示画面部２０Ａにおける左上に位置させているが、他の位置において表示させるようにして構わない。
上記のホームボタンＢｔ１は、ホームメニューの画面に移行させる操作を行うためのボタンとして機能する。ユーザが、タッチパネル２１Ａに対する操作として、このスルー画面上におけるホームボタンＢｔ１の表示位置に触れる操作を行ったとされると、図２（ａ）から図２（ｂ）への遷移として示すようにして、表示画面部２０Ａは、これまでのスルー画表示から、ホームメニューの画面表示に移行することになる。
【００２３】
また、先に図１にて説明したように、本実施の形態のビデオカメラ装置１の本体には、ハードウェアの操作子の１つとして、ホームキー（ハードウェアホームキー）２１ａが設けられている。このホームキー２１ａを操作することによっても、同じく、図２（ａ）から図２（ｂ）への遷移として示すようにして、表示画面部２０Ａは、これまでのスルー画表示から、ホームメニューの画面表示に移行することができる。
【００２４】
図２（ｂ）に示されるホームメニューは、タッチパネル操作が可能とされるＧＵＩとしてのメニュー画面のうちで、その大元となるものである。従って、このホームメニューから操作を始めてしかるべきメニュー画面へと辿っていくようにすることで、ユーザは、ビデオカメラ装置１についての各種多様な操作を行うことが可能とされる。
【００２５】
ここでは、図２（ｂ）のホームメニューの画面において、ボタン画像として、先ず、クローズボタンＢｔ２が表示されている。
このクローズボタンＢｔ２に対するタッチパネル上での押し操作（タッチパネル押操作）を行った場合には、現在表示中のホームメニュー画面が閉じられて、今回のホームメニュー画面の表示前に表示されていた画面に戻るようにされる。この場合には、図２（ｂ）から図２（ａ）への遷移として示すように、撮影待機モード下でのスルー画表示に切り換わる。
【００２６】
また、ホームメニュー画面においては、さらに、通常インデックスボタンＢｔ１１、フィルムロールインデックスボタンＢｔ１２、プレイリストボタンＢｔ１３が表示されている。
通常インデックスボタンＢｔ１１に対するタッチパネル押操作を行った場合には、ここでは図示していないが、表示画面部２０Ａにおいて、この図２（ｂ）のホームメニュー画面から、通常インデックス画像の表示に移行する。また、フィルムロールインデックスボタンＢｔ１２に対するタッチパネル押操作を行った場合には、図２（ｂ）から図２（ｃ）への遷移へと示すようにして、フィルムロールインデックス画面の表示に移行する。
また、本実施の形態では、ビデオカメラ装置１の本体に対して、ハードウェアキーのひとつであるフィルムロールキー２１ｂが設けられている。本実施の形態では、フィルムロールインデックス画面以外の他の何らかの表示を行っている状態の下で、このフィルムロールキー２１ｂを操作することによっても、フィルムロールインデックス画面への表示の切り換えが行われるようになっている。図２においては、フィルムロールキー２１ｂの操作に応じて、図２（ａ）のスルー画、図２（ｂ）のホームメニュー画面、あるいは図２（ｄ）のシーン再生画面からフィルムロールインデックス画面に移行できることを示している。これにより、後述するようにして本実施の形態において特徴となるフィルムロールインデックス画面への表示切り換えを、例えばタッチパネル操作により行うような場合よりも、直接的に、迅速に行える。
また、プレイリストボタンＢｔ１１に対する操作を行った場合には、ここでは図示していないが、表示画面部２０Ａにおいて、プレイリスト画面に表示が切り換わることになる。プレイリスト画面は、例えばＨＤＤ１６に記憶されているビデオコンテンツについての、ユーザが作成したプレイリストを提示する画面とされる。
【００２７】
上記の説明において挙げられた「通常インデックス画面」と「フィルムロールインデックス画面」は、本実施の形態のビデオカメラ装置１において表示可能なビデオコンテンツの一覧・検索画面とされる。
先ず「通常インデックス画面」は、その表示態様例についての図示は省略するが、ＨＤＤ１６に記憶保存されているビデオコンテンツ（動画像ファイル）について、これらをビデオコンテンツ単位主体で提示するようにされた表示態様の一覧・検索画面をいう。この「通常インデックス画面」では、１つのビデオコンテンツ（シーン）につき１つのサムネイル画像が対応するようにされ、これらのサムネイル画像が、予め設定されたソート順に従って配列表示される。つまり、シーンのリストを、シーンごとに対応したサムネイル画像により示すようにされる。そして、例えば、ユーザが通常インデックス画面に表示されているサムネイル画像のうちから、或る１つのものを選択決定するための所定操作を行ったとされると、ビデオカメラ装置１は、この選択決定されたサムネイル画像が対応するビデオコンテンツの再生を開始するようにされる。
【００２８】
これに対して、図２（ｃ）に示される「フィルムロールインデックス画面」は、詳細については後述するが、ＨＤＤ１６に記憶保存されているビデオコンテンツのうちから選択した１つのビデオコンテンツについて、そのシーンにおける内容を、再生時間経過に応じて或る時間タイミングから抜き出すようにして抽出した画像内容を持つサムネイル画像の配列によって示すようにされる。フィルムロールインデックス画面における「フィルムロール」との名称は、１つのシーンを１つのフィルムロールと捉えたうえで、上記のサムネイル画像の表示態様が、あたかも、このフィルムロールを拡げてコマの内容を見ているイメージと重なることに由来する。
そして、このフィルムロールインデックス画面において表示されているサムネイル画像のうちから、或る１つのものを選択決定するための所定操作を行ったとされると、ビデオカメラ装置１は、この選択決定されたサムネイル画像が対応する再生時間から、そのビデオコンテンツの再生を開始する。つまり、１つのビデオコンテンツにおける中途位置からの再生を開始させることができる。
【００２９】
上記したことによれば、上記「通常インデックス画面」、「フィルムロールインデックス画面」としての一覧・検索画面において配列されるサムネイル画像は、前者にあっては、ＨＤＤ１６に記録されるビデオコンテンツの単位に対応した索引、見出しであると捉えることができ、後者にあっては、１ビデオコンテンツ（１シーン）としての開始時間から終了時間までの間において設定した再生時間位置ごとに対応した索引、見出しであると捉えることができる。上記２つの一覧・検索画面の名称全体における「インデックス画面」との名称部分は、索引、見出しを提示する画面であるということに由来したものである。また、以降においては、インデックス画面上において、個々の索引、見出しとして機能するサムネイル画像については、インデックス画像ともいうことにする。
【００３０】
次に、図３を参照して、表示画面部２０Ａにおいて表示されるフィルムロールインデックス画面の表示態様例と、その機能動作例について説明しておくこととする。この図３に示されるフィルムロールインデックス画面は、例えば図２（ｃ）に示される内容を拡大したものとされる。
先ず、このフィルムロールインデックス画面内の領域は、先ず、大きくは、シーン単位インデックス領域ＡＲ１、シーン内インデックス領域ＡＲ２から成るものとされる。
シーン単位インデックス領域ＡＲ１においては、ＨＤＤ１６に記憶保存されているビデオコンテンツ（シーン）単位に対応したインデックス画像（サムネイル画像）であるシーン単位インデックス画像が、縦方向に沿って、所定のソート順に従って配列されるようにして表示される。この場合には、シーン単位インデックス領域ＡＲ１においては、３つのシーン単位インデックス画像（Ｐ１、Ｐ２、Ｐ３）が表示されることとなっており、そのうえで、中央に位置させたシーン単位インデックス画像Ｐ２が、選択中にあるシーン（ビデオコンテンツ）を示しているものとされる。選択すべき（中央に位置させるべき）シーン単位インデックス画像、即ちビデオコンテンツ（シーン）を他のものに変更するときには、送りボタンＢｔ３１と戻りボタンＢｔ３２に対して適宜タッチパネル押操作を行うようにされる。この送りボタンＢｔ３１、戻りボタンＢｔ３２に対する操作ごとに、シーン単位インデックス画像が１つずつ、順次、上方向あるいは下方向にスクロールされ、これに応じて、中央に位置するシーン単位インデックス画像が切り換わっていく。また、シーン単位インデックス領域ＡＲ１においては、シーン単位インデックス画像が配列される領域の左側に沿ってスクロールバーＢｒ１が表示される。このスクロールバーＢｒ１におけるノブの位置により、現在、シーン単位インデックス領域ＡＲ１において表示されているシーン単位インデックス画像が、全体においてどのあたりの順序にあるものなのかが示される。また、ノブに対するタッチパネル上でのドラッグ操作をスクロールバーＢｒ１に沿って行うことで、送りボタンＢｔ３１、戻りボタンＢｔ３２を操作する場合よりも、大きな単位移動量でもってシーン単位インデックス画像をスクロールさせることができる。
【００３１】
次に、シーン内インデックス領域ＡＲ２においては、上記シーン単位インデックス領域ＡＲ１において選択されているシーン（選択シーン）、即ち（シーン単位インデックス領域ＡＲ１において中央に配置されるシーン単位インデックス画像Ｐ２が対応するシーン（ビデオコンテンツ）についての、その内容が下記のようにして表示される。
この場合のシーン内インデックス領域ＡＲ２においては、シーン内インデックス領域ＡＲ２を３つの行領域clm1、clm2、clm3に分割するようにしたうえで、先ず、行領域clm1において左から右にかけて順に、シーン内インデックス画像Ｐ１０１、Ｐ１０２、Ｐ１０３を配置し、次の行領域clm2において左から右にかけて順に、シーン内インデックス画像Ｐ１０４、Ｐ１０５、Ｐ１０６、Ｐ１０７を配置し、さらに次の行領域clm3において左から右にかけて順に、シーン内インデックス画像Ｐ１０８、Ｐ１０９、Ｐ１１０を配置している。これは、シーン内インデックス画像が、Ｐ１０１、Ｐ１０２、Ｐ１０３・・・Ｐ１０９、Ｐ１１０の順で配列されていることを表している。
そして、これらのシーン内インデックス画像Ｐ１０１〜Ｐ１１０は、選択シーンの再生時間進行（再生時間経過）に従って、後述する時間間隔により或る再生時間に対応して表示される画像内容を、その選択シーンから抽出するようにして生成したサムネイル画像であり、その配列順も、選択シーンの再生時間進行に従ったものとなっている。
【００３２】
また、行領域clm1におけるシーン内インデックス画像Ｐ１０１（即ち、表示中のシーン内インデックス画像のうちで、最も早い再生時間に対応するもの）の左側には、送りボタンＢｔ４１が配置され、行領域clm3におけるシーン内インデックス画像Ｐ１１０（即ち、表示中のシーン内インデックス画像のうちで、最も遅い再生時間に対応するもの）の右側には、戻しボタンＢｔ４２が配置されている。シーンの時間長にもよるがシーン内インデックス領域ＡＲ２において表示されるインデックス画像は、通常、そのシーンにて得られるシーン内インデックス画像のうちの一部の再生区間にて得られるものが表示されている。これら送りボタンＢｔ４１、戻しボタンＢｔ４２に対してタッチパネル押操作を行うことで、シーン再生時間を先へ進める、あるいは遡るようにして、シーン内インデックス画像を１つずつ送る、あるいは戻していくことができる。
また、シーン内インデックス領域ＡＲ２の下側においては、横方向に延びるスクロールバーＢｒ２が配置されている。このスクロールバーＢｒ２のノブをドラッグ操作することにより、送りボタンＢｔ３１、戻りボタンＢｔ３２を操作する場合よりも、大きな単位移動量でもってシーン内インデックス画像を送り・戻しさせることができる。
【００３３】
上記の説明から理解されるようにして、シーン内インデックス領域ＡＲ２においては、選択シーン内の或る場面に対応する画内容を持つシーン内インデックス画像が、シーン内容の時系列に沿うようにして配列表示される。この表示を見ることで、ユーザは、選択シーンの中の画像内容を容易に把握することが可能になる。なお、本実施の形態としては、シーン内インデックス領域ＡＲ２において配列される、再生時間が前後となるシーン内インデックス画像を抜き出したとされる再生時間の間隔設定に特徴を有し、これによりフィルムロールインデックス画面としての機能性が向上されるのであるが、この点については後述する。
【００３４】
また、フィルムロールインデックス画面においては、クローズボタンＢｔ２と、関連機能ボタンＢｔ３が配置されている。
クローズボタンＢｔ２をタッチパネル押操作することによっては、これまでのフィルムロールインデックス画面の表示を消去して、フィルムロールインデックス画面の表示前の状態に戻すようにされる。例えば、ホームメニュー画面から今回のフィルムロールインデックス画面の表示に切り換わったのであれば、ホームメニュー画面に戻ることになる。
関連機能ボタンＢｔ３は、そのときに表示されている画面に関連した設定項目、メニュー画面などにジャンプさせるための操作を行うボタンである。フィルムロールインデックス画面が表示されている下で関連機能ボタンＢｔ３を操作した場合には、例えば、図５により後述するようにして、フィルムロールインデックス画面に関連した所定項目についての設定を行うための操作画面（関連メニュー画面）に移行することになる。
【００３５】
そして、例えばユーザが、シーン内インデックス領域ＡＲ２に表示されているシーン内インデックス画像の１つに対するタッチパネル押操作（選択決定操作）を行ったとされると、ビデオカメラ装置１は、選択シーンについて、今回の選択決定操作により指定されたシーン内インデックス画像が対応する再生時間からの中途再生を開始するようにされる。これに伴って、表示画面部２０Ａにおいては、図２（ｃ）から図２（ｄ）への遷移として示すようにして、選択シーンを再生表示する画内容のシーン再生画面に切り換わることになる。また、確認のために述べておくと、図２（ｄ）の再生画面に切り換わったときには、今回の選択決定操作により指定されたシーン内インデックス画像と同じ内容の画の表示から始まるものである。
【００３６】
図２（ｄ）に示されるシーン再生画面上には、ソフトウェアボタンとして、戻るボタンＢｔ１４、シーン単位送りボタンＢｔ２５、シーン単位戻しボタンＢｔ２６、再生開始／一時停止ボタンＢｔ２１、停止ボタンＢｔ２２、早送りボタンＢｔ２３、早戻しボタンＢｔ２４、関連機能ボタンＢｔ３が表示されている。ユーザは、シーン単位送りボタンＢｔ２５、シーン単位戻しボタンＢｔ２６、再生開始／一時停止ボタンＢｔ２１、停止ボタンＢｔ２２、早送りボタンＢｔ２３、早戻しボタンＢｔ２４に対するタッチパネル押操作により、シーン（ビデオコンテンツ）について、ユーザの意図するようにして再生を行わせることができる。
また、戻るボタンＢｔ１４を操作すれば、今回のシーン再生画面の表示に移行する前に表示されていた画面に戻るようにされる。先の説明のようにして、図２（ｃ）のフィルムロールインデックス画面からシーン再生画面に切り換わったのであれば、フィルムロールインデックス画面に戻るようにされる。
また、シーン再生画面上に配置表示されている関連機能ボタンＢｔ３に対する操作を行った場合、図示は省略するが、シーン再生に関連した所定の設定項目、メニューなどが表示された操作画面に移行するようにされる。
【００３７】
上記のようにして、本実施の形態のビデオカメラ装置１は、表示画面部２０Ａに対して、スルー画、メニュー画面、シーン再生画面などのほか、インデックス画面として、フィルムロールインデックス画面の表示が行えるようにされている。
このフィルムロールインデックス画面内に表示されるシーン内インデックス画像としての静止画内容を、選択シーンとしての動画内容から抽出するのにあたり、最も順当であると考えられる手法は、予め一定時間長を設定しておくこととし、この一定時間長による間隔ごとに対応した再生時間位置から、順次、静止画内容を抽出するようにするものである。
しかし、このような手法を採った場合、例えば同じような場面が長時間続くようなシーン内区間では、フィルムロールインデックス画面において、代わり映えのしないほぼ同じ画内容のシーン内インデックス画像ばかりが配列表示されてしまうことになる。すると、シーン内容を容易に把握可能にするという、フィルムロールインデックス画面としての主たる役割が充分に果たせなくなる場合がでてくる。
そこで、本実施の形態としては、シーン内インデックス画像をシーンから抜き出すタイミングについて、以降の説明のようにして設定することで、上記の問題を解決して、さらにこれまでよりも、使い易く、見やすいフィルムロールインデックス画面を提供するものである。
【００３８】
図３のシーン内インデックス領域ＡＲ２には、１０枚のシーン内インデックス画像Ｐ１０１〜Ｐ１１０を配列表示させた状態を示している。ここでは先ず、この図３に示されているシーン内インデックス画像Ｐ１０１〜Ｐ１１０を例に挙げ、これらを選択シーンから抜き出した時間タイミングをどのようにして決定しているのかについて、次の図４を参照して説明する。
【００３９】
先ず図４（ａ）には、選択シーンとしての動画像のストリームデータ（ビデオストリーム）を再生時間経過に沿ったバー形式により模式的に示している。このビデオストリームとしてのバーの左端に対応する時点ｔ０が、選択シーンとしてのビデオコンテンツの再生開始時間であり、以降、右方向に延びていくのに従い再生時間が経過していくことが表現される。
図４（ｂ）には、上記図４（ａ）に示されるビデオストリームについてのビットレートが、閾値ｔｈとともに示されている。本実施の形態のビデオカメラ装置１の記録再生処理回路では、ＨＤＤ１６に撮影記録される動画像としてのビデオコンテンツは、ＶＢＲ(Variable Bit Rate)により画像圧縮符号化が施されることとなっている。
周知のようにしてＶＢＲは、映像・音声などを圧縮符号化データに変換するエンコード方式の１つであり、映像の場合であれば、動きや色の変化が大きくなるのに応じて、より多くのビット量を割り当てるようにして圧縮符号化を行う方式である。即ち、画の動き量であるとか色彩の複雑さなどの画内容についての時間的、二次元的相関性に応じて、符号量を変化させる。これにより、画内容の変化の激しい映像区間では多くの符号量を割り当てて良好な画質を維持する一方、ビット量が少なくても画質劣化の少ない画内容の変化が乏しい映像区間では、少ない符号量を割り当てるようにするものである。これにより、一定以上の再生画質を維持しつつも、データサイズを必要最小限に抑えることができる。そして、このようなエンコードを行う結果、単位時間あたりのデータ量に相当するビットレートは、再生時間進行に応じて変化することとなる。このことを以て、かかるエンコード方式はＶＢＲといわれる。
図４（ｃ）には、図３に示したシーン内インデックス画像Ｐ１０１〜Ｐ１１０を、ビデオストリームから抜き出したとされる再生時間タイミングとの対応により示している。
【００４０】
この場合においては、先ず、選択シーンの再生開始時間である時点ｔ０において、ビデオストリームの先頭フレームに相当する静止画内容を抽出し、これを、一番目のシーン内インデックス画像Ｐ１０１として生成している。なお、ここでは、シーン単位インデックス領域ＡＲ１に配置されるシーン単位インデックス画像についても、対応するシーンのビデオストリームの先頭フレーム画像から生成するものとしており、図４（ｃ）においては、再生開始時間である時点ｔ０において、シーン内インデックス画像Ｐ１０１とともに、シーン単位インデックス画像Ｐ２も生成していることが示されている。
【００４１】
このビデオストリームの再生開始時間である時点ｔ０以降のビットレートを見てみると、ここでは、時点ｔ１に至るまでは、閾値ｔｈよりも低い状態あるものとされている。このようにして、ビデオストリームのビットレートが閾値ｔｈよりも低いときには、シーン内インデックス画像をビデオストリームから抜き出す時間間隔（抽出時間間隔）については、所定の時間長による第１抽出時間間隔Ｔｍ１を設定するようにされる。これにより、シーン内インデックス画像Ｐ１０１に続く２番目のシーン内インデックス画像Ｐ１０２を抜き出すべき再生時間（抽出再生時間）は、図示するようにして、時点ｔ０から第１抽出時間間隔Ｔｍ１が経過した時点となるものである。また、例えば２番目のシーン内インデックス画像Ｐ１０２の抽出再生時間においてもビットレートが閾値ｔｈより低かったことにより、続く３番目のシーン内インデックス画像Ｐ１０３の抽出再生時間も、シーン内インデックス画像Ｐ１０２の抽出再生時間から第１抽出時間間隔Ｔｍ１を経過した時点となっている。
【００４２】
そして、この場合には、３番目のシーン内インデックス画像Ｐ１０３の抽出再生時間よりも少し前のタイミングとなる時点ｔ１において、ビットレートが閾値ｔｈ以上となる状態に変化したものとされている。
本実施の形態では、このようにしてビットレートが閾値ｔｈ以上となると、シーン内インデックス画像をビデオストリームから抜き出す時間間隔について、上記第１抽出時間間隔Ｔｍ１よりも短い所定の時間長による第２抽出時間間隔Ｔｍ２を設定するようにされる。
これにより、先ず、４番目のシーン内インデックス画像Ｐ１０４の抽出再生時間については、３番目のシーン内インデックス画像Ｐ１０３の抽出再生時間から第２抽出時間間隔Ｔｍ２を経過した時点を設定するようにされる。
そして、ビットレートが閾値ｔｈ以上となる状態は、上記の時点ｔ１から時点ｔ２まで継続しており、この間、抽出時間間隔としては、第２抽出時間間隔Ｔｍ２が設定され続けることになる。これに応じて、ここでは、上記の４番目のシーン内インデックス画像Ｐ１０４以降、７番目のシーン内インデックス画像Ｐ１０７まで、第２抽出時間間隔Ｔｍ２が経過した都度のタイミングで、シーン内インデックス画像の抽出を行うようにされている。
次に、ここでの時点ｔ２は、７番目のシーン内インデックス画像Ｐ１０７の抽出再生時間に対して少し前となるタイミングとされており、この時点ｔ２を経過すると、ビットレートは再び閾値ｔｈより低くなり、或る期間、この状態を維持することになる。これに応じて、７番目のシーン内インデックス画像Ｐ１０７と、これに続く８番目のシーン内インデックス画像Ｐ１０８との間の抽出時間間隔は、第１抽出時間間隔Ｔｍ１に変更されることになる。また、ここでは図示していないが、図３おいて示されている、残る９番目、１０番目のシーン内インデックス画像Ｐ１０９、Ｐ１１０も、第１抽出時間間隔Ｔｍ１が経過した都度のタイミングで抽出再生時間が設定される。
つまり、本実施の形態では、選択シーンのビデオストリームのビットレートが一定以下である状態に対応させては、シーン内インデックス画像を抜き出す時間間隔（抽出時間間隔）を長めに設定し、上記ビットレートが一定以上である状態に対応させては、シーン内インデックス画像を抽出する時間間隔（抽出時間間隔）を短めに設定している、ということがいえる。
【００４３】
また、先にも述べたように、動画像データでは、ビットレートが高くなるほど、フレーム画像間の動き量が多くなり、ビットレートが低くなるほど、フレーム画像間の動き量が少なくなる。このことからすると、図４の処理は、動画における画の動き一定以上で相応に激しいとされるシーン内区間からは短い抽出時間間隔（Ｔｍ２）によりシーン内インデックス画像を抽出し、画の動きが一定以下で平板とされるシーン内区間からは長い抽出時間間隔（Ｔｍ１）によりシーン内インデックス画像を抽出しようとする処理である、とみることができる。
【００４４】
すると、上記図４の処理に従って抽出されたシーン内インデックス画像Ｐ１０１〜Ｐ１１０が配列された図３のシーン内インデックス領域ＡＲ２では、先ず、シーン内インデックス画像Ｐ１０１、Ｐ１０２、Ｐ１０３の各間において、長い抽出時間間隔Ｔｍ１に対応する再生時間間隔が設定され、次のシーン内インデックス画像Ｐ１０４〜Ｐ１０７の各間において、短い抽出時間間隔Ｔｍ２に対応する再生時間間隔が設定され、さらに続くシーン内インデックス画像Ｐ１０８〜Ｐ１１０の各間において、再び、長い方の抽出時間間隔Ｔｍ１に対応する再生時間間隔が設定されていることになる。
そのうえでさらに、先ず冒頭のシーン内インデックス画像Ｐ１０１、Ｐ１０２が対応する再生時間の画像は、選択シーン内において比較的に変化の少ないとされるシーン内区間に含まれ、シーン内インデックス画像Ｐ１０３〜Ｐ１０６が対応する再生時間の画像は、選択シーン内において比較的大きな動きがあるとされる次のシーン内区間に含まれ、さらに続くシーン内インデックス画像Ｐ１０７〜Ｐ１１０が対応する再生時間の画像は、選択シーン内において比較的に平板で変化の少ないとされる、さらに次のシーン内区間に含まれていることになる。
【００４５】
これまでにも述べたように、シーン内インデックス画像の配列順は、選択シーンの画内容の再生時間進行に従っているのであるが、上記のようにしてシーン内インデックス画像が表示されることで、先ず、画内容の変化の乏しいシーン内区間では、同じような画内容のインデックス画像が多数配列表示されてしまうような無駄が生じないことになる。その一方で、画内容の変化が大きなシーン内区間では、短い時間間隔でインデックス画像が抜き出されることになるので、これらのインデックス画像の配置により、画内容の大きな変化を時系列に従って表すことが可能となる。
このようにして、本実施の形態のフィルムロールインデックス画面としては、例えば単純に、シーン内インデックス画像の抽出時間間隔について適当な一定間隔とする場合と比較して、より、シーン内容についての把握がしやすいように配慮されているものである。これにより、フィルムロールインデックス画面の機能であるシーン内の内容についての一覧性（把握容易性）・検索性が向上されることになる。
【００４６】
そのうえで、さらに本実施の形態においては、シーン内インデックス領域ＡＲ２において、画内容の変化の少ないとされるシーン内区間と、画内容の変化が大きいとされるシーン内区間ごとに対応させて、その区分が示されるようにして表示を行うようにされる。
つまり、図３の場合であれば、行領域clm１、clm2、clm3の単位でシーン内インデックス領域ＡＲ２において、画内容の変化の少ないとされるシーン内区間が対応する領域部分は、先ず、シーン内インデックス画像Ｐ１０１、Ｐ１０２が配列されている部分と、シーン内インデックス画像Ｐ１０７〜Ｐ１１０が配列される部分となる。これらの領域部分を、第１レベル内容領域ＡＲ１１として区分する。ここでの第１レベルとは画内容の変化量が一定以下であることを指している。また、シーン内インデックス領域ＡＲ２において、画内容の変化の大きいとされるシーン内区間が対応する領域部分は、シーン内インデックス画像Ｐ１０３〜Ｐ１０６が配列されている部分となる。この領域部分は、画内容の変化量が一定以上である、即ち第２レベルであることに因み、第２レベル内容領域ＡＲ１２として区分する。
そして、これらの第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２とで、シーン内インデックス画像が配置されている行領域clm１、clm2、clm3ごとにおける背景について、互いに異なる所定の表示態様を与えるようにされる。例えば、その表示態様として、１つには、第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２とで、それぞれ異なる所定の背景色とすることが考えられる。また、それぞれ異なる明度を設定することも考えられる。また、背景の絵柄などをそれぞれ異なるものに変更することも考えられる。
このようにして、第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２とで、その背景の表示態様について異なる態様を与えるようにすることで、シーン内インデックス領域ＡＲ２におけるシーン内インデックス画像の配列により表現される選択シーンの時系列において、どの区間が動きが大きく、また、小さいのかを、ユーザは、容易に判断することが可能となるものである。これにより、フィルムロールインデックス画面でのシーン内容の一覧性・検索性はさらに向上されることになる。
【００４７】
また、ここで、フィルムロールインデックス画面における関連機能ボタンＢｔ３を操作した場合についての説明をしておくこととする。
先にも述べたようにして、関連機能ボタンＢｔ３は、そのときに表示されている操作画面などに対応・関連した他の機能操作などのための画面（例えばメニュー画面など）に即座に移行するために用意されるものであり、どのような画面に移行するのかは、上記操作画面の内容に応じて異なってくる。
そして、フィルムロールインデックス画面において配置される関連機能ボタンＢｔ３に対するタッチパネル押操作を行った場合には、例えば図５（ａ）から図５（ｂ）への遷移として示すようにして、表示画面部２０Ａは、フィルムロールインデックス画面対応の関連メニュー画面に移行するようにされる。
【００４８】
この図５（ｂ）に示される関連メニュー画面においては、ＨＤ／ＳＤ切替用ボタンＢｔ５１、時間間隔設定用ボタンＢｔ５２と、戻るボタンＢｔ１４が配置表示されている。なお、戻るボタンＢｔ１４を操作すれば、この関連メニュー画面が表示される前の状態である、図５（ａ）のフィルムロールインデックス画面に移行する。
次に、ＨＤ／ＳＤ切替用ボタンＢｔ５１は、本実施の形態のビデオカメラ装置１により記録再生するビデオ信号形式を、ＨＤ(High Definition)とＳＤ(Standard Definition)との間で切り換えるための操作画面に移行させるためのものとされる。
【００４９】
そして、時間間隔設定用ボタンＢｔ５２に対するタッチパネル押操作を行った場合には、図５（ｃ）に示す時間間隔設定画面に移行することになる。
この時間間隔設定画面には、図６に示すようにして、第１時間間隔設定領域ＡＲ２１と、第２時間間隔設定領域ＡＲ２２とが配置されている。
第１時間間隔設定領域ＡＲ２１は、ユーザが第１抽出時間間隔Ｔｍ１を変更設定することのできる操作画面領域である。この第１時間間隔設定領域ＡＲ２１においては、プラスボタンＢｔ６１、マイナスボタンＢｔ６２、設定時間表示ウィンドウｗｄ１、及び設定時間イメージアイコンIcn11が示されている。ユーザは、プラスボタンＢｔ６１、マイナスボタンＢｔ６２を適宜操作して、設定時間表示ウィンドウｗｄ１内に表示されている第１抽出時間間隔Ｔｍ１としての時間長を増減させ、自身が望む時間長を設定するようにされる。また、設定時間イメージアイコンIcn11は、コマが配列されたフィルムを模した態様を有し、設定された第１抽出時間間隔Ｔｍ１としての時間長に応じて、コマの前後の間隔（長さ）が変化して表示されるようになっている。この設定時間イメージアイコンIcn11により、ユーザは、自身が設定している第１抽出時間間隔Ｔｍ１としての時間長について視覚的なイメージとして把握することができる。
第２時間間隔設定領域ＡＲ２２は、ユーザが第２抽出時間間隔Ｔｍ２を変更設定することのできる操作画面領域であり、上記第１時間間隔設定領域ＡＲ２１と同様の配置態様により、プラスボタンＢｔ７１、マイナスボタンＢｔ７２、設定時間表示ウィンドウｗｄ２、及び設定時間イメージアイコンIcn12が示されている。そして、この第２時間間隔設定領域ＡＲ２２にあっても、プラスボタンＢｔ７１、マイナスボタンＢｔ７２を適宜操作して、設定時間表示ウィンドウｗｄ２内に表示されている第２抽出時間間隔Ｔｍ２としての時間長を増減させ、自身が望む時間長を設定することができる。また、設定時間イメージアイコンIcn12により、操作に応じて変更設定される第２抽出時間間隔Ｔｍ２の時間長が示される。
ただし、これまでの説明から理解されるように、第２抽出時間間隔Ｔｍ２と、第１抽出時間間隔Ｔｍ１の時間長の関係については、Ｔｍ２＜Ｔｍ１が成立していなければならない。このために、第１時間間隔設定領域ＡＲ２１と第２時間間隔設定領域ＡＲ２２に対する操作によっては、Ｔｍ２≧Ｔｍ１の関係となるような第１抽出時間間隔Ｔｍ１、第２抽出時間間隔Ｔｍ２の設定は行えないようにされている。
また、時間間隔設定画面内の戻るボタンＢｔ１４に対するタッチパネル押操作を行った場合には、図５（ｃ）から図５（ａ）への遷移として示すように、フィルムロールインデックス画面に移行するようにされている。つまり、この場合には、時間間隔設定画面が関連メニュー画面の階層化のメニュー画面であることにより、関連メニュー画面の表示前の状態に戻ることとしている。
【００５０】
続いて、本実施の形態のフィルムロールインデックス画面の形成にあたって、主に図３、図４により説明したようにして、抽出時間間隔を変更してシーン内インデックス画像の抽出を行うための技術構成例について説明を行っていくこととする。
【００５１】
フィルムロールインデックス画面は、そもそも、ＨＤＤ１６に記憶管理されているシーン単位相当のビデオコンテンツを対象として行われるものであるが、本実施の形態によるシーン内インデックス画像の抽出処理は、ＨＤＤ１６に記憶されるビデオコンテンツをどのような方式により管理しているのかにより、異なってくる部分がでてくる。
そこで、先ず、本実施の形態のビデオカメラ装置１による、ＨＤＤ１６に記憶されるビデオコンテンツについての管理態様例として、４例を挙げておくこととする。後において、これら４例に対応したシーン内インデックス画像の抽出処理についての説明を行う。
【００５２】
先ず、図７により、上記４例のうちの第１例となる、ビデオコンテンツの管理態様例を説明する。
図７においては、ＨＤＤ１６の記憶内容例を模式的に示している。この場合、ＨＤＤには、シーン単位に対応する単位動画データ（ファイル）である、ｎ個のビデオコンテンツ１〜ｎが記憶されているものとしている。そして、このビデオコンテンツのデータとともに、ビデオコンテンツ管理ファイルもＨＤＤ１６に記憶させているものである。
このビデオコンテンツ管理ファイルは、同じＨＤＤ１６に記憶されるビデオコンテンツの再生（ここでは通常再生、早送り、早戻しなどをはじめとする変則再生、また、プレイリスト再生などを総括して「再生」といっている）を管理するために必要なファイルであり、例えばその内容としては、図示するようにして、ＨＤＤ１６に記憶されるビデオコンテンツ１〜ｎのそれぞれに対応した管理情報部１〜ｎを有して形成されている。例えばビデオコンテンツ１についての再生管理を行うときには、ビデオコンテンツ管理ファイルにおける管理情報部１を利用することになる。
なお、実際において、このビデオコンテンツ管理ファイルのようにして、ビデオコンテンツ管理用のファイルを、ビデオコンテンツのファイルとは個別に持つようにされた規格・フォーマットとしては、ＡＶＣＨＤなどを挙げることができる。また、ＨＤＤではないが、ＤＶＤ−Ｖｉｄｅｏ、ＤＶＤ＋ＶＲ、ＤＶＤ−ＶＲに対して、標準信号形式（ＳＤ形式）により記録するような場合にも、このようなビデオコンテンツ管理用のファイルを記録することが行われている。
【００５３】
次に、第２例について説明する。
この第２例は、上記第１例にあるようなビデオコンテンツ管理ファイルを有さないフォーマットとなる。この場合には、ビデオコンテンツのデータストリーム内の拡張領域に対して、ビデオコンテンツ管理のための情報を埋め込むようにされる。このような第２例に対応するビデオコンテンツデータの構造例を図８に示す。
図８（ａ）には、ビデオコンテンツデータを、時系列に従ったデータ書込単位のシーケンスにより示している。例えばビデオカメラ装置１は、記録メディアであるＨＤＤ１６に対して、ビデオコンテンツのデータを書き込んで記録するのにあたり、記録再生処理回路１５にて、ビデオコンテンツの記録用データを生成して、これを一時的にバッファに蓄積していくようにされる。そして、このバッファに蓄積された或るまとまったサイズの記録用データの集合を、所定のタイミングで以て、一度に読み出してＨＤＤ１６に書き込むようにされる。ここでのデータ書込単位は、このバッファに蓄積されて一度に書き込まれるデータが対応するものであり、ここでは、データ書込単位はほぼ一定であるものとされる。
【００５４】
このデータ書込単位は、この場合には、図８（ｂ）に示すようにして、ＧＯＰ(Group Of Picture)のシーケンスにより成るものとされる。ＧＯＰは、周知のようにして、画像圧縮符号化処理により得られる１つの再生単位(圧縮・伸長単位)であり、これ自体で、独立して復調処理を行って、或る時間分の動画を正常に再生することができる。また、これも周知のようにして、ＧＯＰ内には、少なくとも１つのＩ(intra)ピクチャを含むようにされている。確認のために、Ｉピクチャは、他のＰ(Predictive)ピクチャ、Ｂ(Bi-directional Predictive)ピクチャなどのようにして、予測符号化により生成された画像ではなく、１つの独立したフレーム画像から生成される画像データである。
【００５５】
そして、この場合のＧＯＰ内の構造としては、図８（ｃ）に示すようにして、或る所定単位により分割されたビデオ(Video)データ、オーディオ(Audio)データ、及び、例えば先頭に配置される管理パック情報を含んで成るものとされる。この管理パック情報が、上記のデータストリーム内に埋め込んだビデオコンテンツ管理のための情報となる。例えば、個々の管理パック情報には、自身が含まれるＧＯＰに関する所要の管理情報を格納するようにされる。
この図８に示されるような方式は、実際においては、ＤＶＤ系以外で、例えばＨＤＤであるとか、フラッシュメモリによるリムーバブルメディアなどに対して、ＳＤ形式の動画像を記録するような場合に採用されている。
また、確認のために述べておくと、第１例として図７に示したビデオコンテンツは、図８から管理パック情報を省略した構造を有しているものであり、従って、第１例に対応するビデオコンテンツもＧＯＰの連続により形成されるものである。
【００５６】
また、先に本出願人は、上記図７、図８に示したビデオコンテンツ管理ファイルや管理パック情報とはさらに別の、コンテンツ管理用の情報 (以降、コンテンツＤＢファイルという)により、コンテンツ管理を行う技術を提案している。上記のビデオコンテンツ管理ファイルや管理パック情報が、ビデオコンテンツの再生管理を行うためのものであるのに対して、このコンテンツＤＢファイルは、コンテンツファイルの属性をはじめとする各種のメタデータであるとか、サムネイル画像を管理するものであり、これらのメタデータであるとかサムネイル画像を、例えばデータベース化するような形式で保持した情報単位とされる。例えば大容量のコンテンツファイルなどでは、コンテンツファイルに格納されるヘッダなどにアクセスして各種のメタデータを取得しようとすると、そのアクセスに時間がかかってしまうなどして効率的でない。そこで、コンテンツＤＢファイルを設けることとすれば、このコンテンツＤＢファイルにアクセスしてメタデータなどを取得することができ、メタデータなどに基づいたコンテンツ管理を効率的に行うことが可能となる。
【００５７】
そして、第３例としては、第１例のビデオコンテンツ管理ファイルを持つ管理態様に対して、さらにコンテンツＤＢファイルを持たせたものとなる。この第３例としてのＨＤＤ１６の記憶内容例を図９（ａ）に示す。
図９（ａ）においては、先ず、図７と同様にして、ビデオコンテンツ１〜ｎと、これらのビデオコンテンツに対応する管理情報部１〜ｎを有して形成されるビデオコンテンツ管理ファイルとがＨＤＤ１６にて記憶されている。そのうえで、ＨＤＤ１６には、さらにコンテンツＤＢファイルが記憶される。そして、このコンテンツＤＢファイルによっても、ビデオコンテンツ１〜ｎを対象として管理することが可能とされている。なお、コンテンツＤＢファイルの形式例などについては後述する。
【００５８】
また、第４例としては、先の第２例のようにしてビデオコンテンツ管理情報を備えない代わりに、データストリーム内に管理パック情報を埋め込む方式に、コンテンツＤＢファイルを持たせた態様とされる。この第４例に対応するＨＤＤ１６の記憶内容としては、例えば図９（ｂ）に示すようにして、ビデオコンテンツ１〜ｎとともに、コンテンツＤＢファイルが記憶されるものとなる。また、確認のために述べておくと、各ビデオコンテンツの構造は、図８と同様になるものであり、例えばＧＯＰなどの単位ごとに管理パック情報が埋め込まれる。
【００５９】
図１０のフローチャートは、先に図７に示した第１例のビデオコンテンツ管理を行う場合を前提として、本実施の形態のビデオカメラ装置１が実行するものとされる、フィルムロールインデックス画面内のシーン内インデックス領域ＡＲ２についての表示制御に関する処理手順例を示している。
なお、この図に示す処理は、マイクロプロセッサ１７において、例えばＣＰＵが、ＲＯＭ或いは不揮発性メモリなどに記憶されるプログラムを実行することで実現されるものとしてみることができる。また、このプログラムは、上記のようにして、例えばＲＯＭなどに対して製造時などに書き込んで記憶させるほか、リムーバブルの記憶媒体に記憶させておいたうえで、この記憶媒体からインストール(アップデートも含む)させるようにしてマイクロプロセッサ１７内の不揮発性の記憶領域に記憶させることが考えられる。また、ＵＳＢやＩＥＥＥ１３９４などのデータインターフェイス経由により、他のホストとなる機器からの制御によってプログラムのインストールを行えるようにすることも考えられる。さらに、ネットワーク上のサーバなどにおける記憶装置に記憶させておいたうえで、ビデオカメラ装置１にネットワーク機能を持たせることとし、サーバからダウンロードして取得できるように構成することも考えられる。この点については、以降説明する図１１、図１４、図１５のフローチャートについても同様である。
【００６０】
例えば、他の画面からフィルムロールインデックス画面に表示を移行させる操作、若しくは、フィルムロールインデックス画面が表示されている状態の下で、シーン単位インデックス領域ＡＲ１における選択シーンを変更する操作が行われて、シーン内インデックス領域ＡＲ２の表示内容を、選択シーンの変更に応じて変更すべきこととなったとされると、マイクロプロセッサ１７は、図１０のステップＳ１０１から始まる処理手順を実行するようにされる。
先ず、ステップＳ１００においては、ＨＤＤ１６に記憶されているビデオコンテンツ管理ファイルから、現在の選択シーンに対応するビデオコンテンツに対応する管理情報部を読み込んで取得するようにされる。
【００６１】
ここで、ビデオコンテンツ管理ファイルの管理情報部は、対応するビデオコンテンツに関しての各種の管理情報項目を備えて成るものとされるが、これらの管理情報項目のうちで、この図１０に示される処理が利用するものとしては、以降の説明からも理解されるように、ＧＯＰ単位のデータサイズを示すサイズ情報や、ビデオデータ(ストリーム)についての再生時間情報などとなる。
また、以降においては、上記ステップＳ１００により読み込んで取得した管理情報については、「取得管理情報部」ということにする。
【００６２】
次のステップＳ１０１においては、先ず、フィルムロールインデックス画面の表示用画像データに対する画像処理として、現在の選択シーンにおけるシーン先頭の画像内容を有するサムネイル画像データを取得して、これを、時系列に従っての配列順において最初となるシーン内インデックス画像として、シーン内インデックス領域ＡＲ２としての画像領域に貼り付けるようにされる。このようにして貼り付けられた画像は、図３との対応では、先ず、シーン先頭の画内容を示すものとされるシーン内インデックス画像Ｐ１０１に相当する。
なお、このシーン先頭のシーン内インデックス画像としてのサムネイル画像を得るのにあたっては、本実施の形態においては、シーン単位インデックス領域にＡＲ１において表示されている、選択シーンのシーン単位インデックス画像Ｐ２の基となるサムネイル画像データを流用すればよい。本実施の形態のビデオカメラ装置１においては、シーン単位インデックス画像は、シーン先頭の画内容をサムネイル画像化したものであるとしているからである。あるいは、選択シーンに対応するビデオコンテンツの先頭に対応するフレーム画像データ（例えばＩピクチャ）をＨＤＤ１６から読み出して、この画像データを基にして生成することとしてもよい。この場合には、例えば、ＨＤＤ１６に記憶されているビデオコンテンツの先頭の画像データ位置は、ステップＳ１０１により読み込んで取得した取得管理情報部の内容を参照することにより認識できるものとされる。
【００６３】
続くステップＳ１０２以降の手順が、図３に示される２番目以降の配列順のシーン内インデックス画像（Ｐ１０２以降）を得て表示させるための制御となる。
ステップＳ１０２においては、選択シーンに対応するビデオコンテンツを形成するとされるＧＯＰのシーケンスのうちから、先頭に位置するＧＯＰ（先頭ＧＯＰ）を参照ＧＯＰとする。参照ＧＯＰとは、これも以降の説明から理解されることであるが、現参照ＧＯＰ（正確には現参照ＧＯＰからシーン内インデックス画像として抽出されたＩピクチャ）を起点として次のシーン内インデックス画像を抽出するための抽出時間間隔として、第１抽出時間間隔Ｔｍ１と第２抽出時間間隔Ｔｍ２(図４参照)との何れを設定するのかを決定するために、その決定の根拠となるビットレートの値を取得する対象となるＧＯＰをいう。
【００６４】
ステップＳ１０３においては、取得管理情報部から、現在の参照ＧＯＰについてのサイズ（データ量）を示すサイズ情報 (sz_gop)を取得する。即ち、サイズ認識処理を実行する。なお、このステップＳ１０３が、ステップＳ１０２を実行した後の次の手順、つまり、ステップＳ１０３〜Ｓ１１３までによるループ処理における最初の処理となる場合には、先頭ＧＯＰのサイズ認識を実行することになる。
続くステップＳ１０４では、上記ステップＳ１０３により取得した参照ＧＯＰのサイズ情報(sz_gop)から、同じ参照ＧＯＰについてのビットレート(brate)を算出して取得する。本実施の形態のビデオコンテンツはＶＢＲによりエンコードされて記録されていることから、ＧＯＰのデータサイズとしても、そのＧＯＰの画内容の二次元的、再生時間的な相関関係が薄い（動きや色彩の変化が大きい）ほど、大きくなる。このことに基づけば、ＧＯＰのデータサイズから、そのＧＯＰに相当する映像区間において得られているとされるビットレートを一義的に求めることは可能とされる。例えば実際において、参照ＧＯＰのサイズ情報(sz_gop)から、同じ参照ＧＯＰについてのビットレート(brate)を求めるのにあたっては、予め用意したビットレート(brate)を求めるための関数、演算式におけるしかるべき項に対して(sz_gop)を代入して、演算を実行するように構成すればよい。あるいは、ＧＯＰのサイズとビットレートとについて一義的な相関性があることに基づいて、(sz_gop)と(brate)との対応を示すテーブル情報を作成して、これをマイクロプロセッサ１７に保持させておくようにした上で、このテーブル情報を参照して、ステップＳ１０３により得られたサイズ情報(sz_gop)に対応するビットレート(brate)を検索するようにしてもよい。
【００６５】
続くステップＳ１０５においては、上記ステップＳ１０４により取得した、参照ＧＯＰのビットレート(brate)を利用して、単位オフセット値(ut_offset)を決定する。
この単位オフセット値（ut_offset）は、例えば時間値として表されるもので、図４により説明した、第１抽出時間間隔Ｔｍ１、第２抽出時間間隔Ｔｍ２の何れか一方に相当する。即ち、図４によっても説明したとおりに、ステップＳ１０５では、例えばステップＳ１０４により取得した参照ＧＯＰのビットレート(brate)と、所定の閾値ｔｈとの比較を行い、ビットレート(brate)が閾値ｔｈ未満であれば、単位オフセット値（ut_offset）として第１抽出時間間隔Ｔｍ１に相当する値を決定し、ビットレート(brate)が閾値ｔｈ以上であれば、単位オフセット値（ut_offset）として第２抽出時間間隔Ｔｍ２に相当する値を決定するようにされる。
【００６６】
続くステップＳ１０６においては絶対オフセット値(absl_offset)を更新設定する。この絶対オフセット値(absl_offset)は、
absl_offset←absl_offset＋ut_offset・・・(式１)として表されるように、
これまでに設定されていた絶対オフセット値(absl_offset)に対して、上記ステップＳ１０５にて取得した単位オフセット値(ut_offset)を加算することにより得られるものである。そしてこの絶対オフセット値(absl_offset)は、選択シーンに対応するビデオコンテンツの再生開始時間（時刻）を起点とする再生時間のオフセット値をいうものとされる。
なお、今回のステップＳ１０６が、ステップＳ１００から処理を開始して最初の処理である場合には、これまでに設定されていた絶対オフセット値(absl_offset)については、再生開始時間に対応する０とする。
【００６７】
ステップＳ１０７においては、取得管理情報部を参照することにより、上記ステップＳ１０６により更新した絶対オフセット値(absl_offset)により示されるビデオコンテンツの再生時間の前後において、時間としてみて最も近い位置に在るとされるＩピクチャの位置を探索するようにされる。このときの探索結果であるＩピクチャの位置としては、例えばビデオコンテンツにおける再生時間により表現される。また、このステップＳ１０７にて探索されたＩピクチャは、シーン単位インデックス画像としてシーン内インデックス領域ＡＲ２内に貼付表示されるべきサムネイル画像データの基となるものである。
【００６８】
そして、ステップＳ１０８においては、ＨＤＤ１６に記録されている選択シーンのビデオコンテンツのストリームデータにおける、上記ステップＳ１０７により探索したＩピクチャの再生時間位置に対応するデータ位置にアクセスする。これにより、探索したＩピクチャの実データへのアクセスが行われたこととなる。そして、このアクセスしたＩピクチャのデータを読み出して取得するようにされる。
【００６９】
ステップＳ１０９においては、上記ステップＳ１０８により取得したＩピクチャのデータから、シーン内インデックス画像としての表示サイズに適合した画サイズによるサムネイル画像データを生成する、そして、ステップＳ１１０により、上記ステップＳ１０９により生成したサムネイル画像データを、シーン内インデックス領域ＡＲ２において、シーン内インデックス画像の配列順に従って決まる領域部分に対して貼り付けるようにして、フィルムロールインデックス画面としての表示用画像データについての画像処理を実行するようにされる。
【００７０】
ステップＳ１１１では、直前の上記ステップＳ１１０（最後のステップＳ１１０）の画像処理により貼り付けられたサムネイル画像データが、シーン内インデックス領域ＡＲ２においてシーン内インデックス画像を貼り付けるべき領域のうちで、配列順が最も後となる領域に貼り付けられたものであったか否かについて判別する。ここで先ず、肯定の判別結果が得られた場合には、これより以降において、シーン内インデックス領域ＡＲ２内にシーン内インデックス画像を貼り付けることのできる領域は無い、ということになる。
そこでこの場合には、シーン内インデックス画像を貼り付けるためのループ処理であるステップＳ１０３〜Ｓ１１３までの処理手順を抜け、ステップＳＳ１１４、Ｓ１１５の画像処理を実行する。なお、ステップＳ１１４、Ｓ１１５としての画像処理については後述する。
一方、ステップＳ１１１にて否定の判別結果が得られた場合には、ステップＳ１１２に進む。
【００７１】
ステップＳ１１２においては、最後のステップＳ１１０により貼り付けられたサムネイル画像データが、選択シーンから抜き出すべきインデックスデータのうちで、最後となるインデックスデータであるか否かについて判別する。
例えば、ステップＳ１０３〜Ｓ１１３までのループ処理を繰り返し実行している過程において、ステップＳ１０６にて得られる絶対オフセット値(absl_offset)が、ビデオストリームの終端位置に対して或る程度以上に近づいたとされると、ステップＳ１０７によっては、ビデオストリームにおける最後のＩピクチャが探索されることになる。ステップＳ１１２は、ステップＳ１０７により探索されたＩピクチャが、この最後のものであるのかを確認することにより判定結果を得ることができる。
【００７２】
ステップＳ１１２にて否定の判別結果が得られた場合には、未だ、インデックス領域ＡＲ２に対して貼り付けるべきインデックス画像が残っているということになる。そこで、この場合には、ステップＳ１１３の手順を実行する。
ステップＳ１１３においては、次のステップＳ１０３からのループ処理においての処理対象となる参照ＧＯＰについて、最後のステップＳ１０７により探索されたＩピクチャを含むＧＯＰが新たに設定されるようにして更新を行うようにされる。そして、ステップＳ１０３に戻るようにされる。
このようにして、図１０の手順にあっては、ステップＳ１０３〜Ｓ１１３によるループ処理が実行されることになるが、このループ処理は、結果的に、選択シーンに対応するビデオコンテンツについての再生時間経過に応じたビットレートを、その先頭（開始位置）から認識していくとともに、このようにして認識されたビットレートに応じて、ビデオコンテンツの開始位置から順に、シーン内インデックス画像としてのサムネイル画像データを抽出する再生時間を決めていく、という処理を含んでいるということがいえる。
【００７３】
一方、ステップＳ１１２にて肯定の判別結果が得られた場合には、以降においてインデックス領域ＡＲ２に貼り付けることのできるシーン内インデックス画像は無い、ということになる。そこで、この場合にも、ステップＳ１１１にて肯定の判別結果が得られた場合と同様に、ステップＳ１１４、Ｓ１１５の手順に移行することになる。
【００７４】
これまでに説明した処理を経たことによっては、シーン内インデックス領域ＡＲ２において表示されるべきインデックス画像としてのサムネイル画像データは、全て貼り付けが完了した状態にある。図３により前述したフィルムロールインデックス画面では、シーン内インデックス領域ＡＲ２において、第１レベル内容領域ＡＲ１１と、第２レベル内容領域ＡＲ１２の背景について、それぞれ異なる表示態様を与えるようにされる。
そこで、先ず、ステップＳ１１４では、第１レベル内容領域ＡＲ１１がシーン内インデックス領域ＡＲ２においてどの領域部分になるのかを特定した上で、この特定した領域部分の背景を、第１レベル内容領域ＡＲ１１に対応する態様の画内容とするための画像処理を実行するようにされる。
ここで、シーン内インデックス領域ＡＲ２において第１レベル内容領域ＡＲ１１となる領域部分は、図３の場合であれば、シーン内インデックス画像Ｐ１０１〜Ｐ１０３が配置された領域と、シーン内インデックス画像Ｐ１０６〜Ｐ１１０が配置された領域となる。これらのシーン内インデックス画像は、図４と図１０の処理とを照らし合わせてみると、ステップＳ１０５において設定された単位オフセット値 (ut_offset)が第１抽出時間間隔Ｔｍ１であるとして決定された段階時に設定されていた参照ＧＯＰ内から既に取得したＩピクチャに基づいて生成したシーン内インデックス画像であるという点で共通する。従って、ステップＳ１１４においては、このことに基づいて、第１レベル内容領域ＡＲ１１となる領域部分を特定することができる。
【００７５】
次のステップＳ１１５においては、上記ステップＳ１１４の処理に準じて、第２レベル内容領域ＡＲ１２がシーン内インデックス領域ＡＲ２においてどの領域部分になるのかを特定した上で、この特定した領域部分の背景を、第２レベル内容領域ＡＲ１２に対応する態様の画内容とするための画像処理を実行するようにされる。
なお、第２レベル内容領域ＡＲ１２内に表示されるシーン内インデックス画像は、ステップＳ１０５において設定された単位オフセット値(ut_offset)が第２抽出時間間隔Ｔｍ１であるとして決定された段階において設定されていた参照ＧＯＰ内から取得したＩピクチャに基づいて生成したものとなる。従って、ステップＳ１１５にあっても、このことに基づいて、第２レベル内容領域ＡＲ１２となる領域部分を特定することができる。
【００７６】
続いて、図１１のフローチャートにより、先に図８により説明した第２例のビデオコンテンツ管理を行う場合を前提とする、シーン内インデックス領域ＡＲ２についての表示制御に関する処理手順例について説明する。
この第２例の場合には、図８に示したように、第１例の場合のようにビデオコンテンツデータに対して独立にビデオコンテンツ管理ファイルは設けられておらず、その代わりに、ビデオコンテンツデータのストリームにおいてＧＯＰごとに管理パック情報を格納している（図８参照）。そこで、ステップＳ２００においては、ＨＤＤ１６に記録されているビデオコンテンツのうちで、現在の選択シーンに対応するビデオコンテンツのデータ(ファイル)における、ストリームの先頭にアクセスするようにされる。
【００７７】
次のステップＳ２０１においては、先のステップＳ１０１と同様にして、フィルムロールインデックス画面の表示用画像データに対する画像処理として、現在の選択シーンにおけるシーン先頭の画像内容を有するサムネイル画像データを取得して、これを、時系列に従っての配列順の最初となるシーン内インデックス画像として、シーン内インデックス領域ＡＲ２としての画像領域に貼り付けるようにされる。
この場合においては、ステップＳ２００にてビデオコンテンツの先頭にアクセスしている。そこで、ステップＳ２０１においては、さらに、ビデオコンテンツにおける先頭ＧＯＰに格納されている最初のＩピクチャにアクセスすることで、シーン先頭のシーン内インデックス画像（サムネイル画像）の基となる画像データを得ることができる。
【００７８】
この場合にも、続くステップＳ２０２以降の手順が、図３に示される２番目以降の配列順のシーン内インデックス画像（Ｐ１０２以降）を得て表示させるための制御となる。そして、ステップＳ２０２においては、選択シーンに対応するビデオコンテンツのストリームを形成するＧＯＰのうちで、先頭に位置するＧＯＰ（先頭ＧＯＰ）を参照ＧＯＰとして設定するようにされる。
【００７９】
ステップＳ２０３においては、現在の参照ＧＯＰ(現参照ＧＯＰ)内に格納される管理パック情報(現管理パック情報)の読み込みを行って、この現管理パック情報から、再生時間(時刻)を示す時間情報を取得する。つまり、現参照ＧＯＰの再生時間を認識するものである。
【００８０】
続くステップＳ２０４においては、現参照ＧＯＰについてのサイズ（データ量）認識を行うために、同じく、現管理パック情報から、サイズ情報 (sz_gop)を取得する。なお、このステップＳ２０４が、ステップＳ２０２を実行した後において最初に実行されたものである場合には、先頭ＧＯＰのサイズ認識を実行することになる。
【００８１】
次のステップＳ２０５では、例えばステップＳ１０４と同様にして、上記ステップＳ２０４により取得した現参照ＧＯＰのサイズ情報(sz_gop)から、現参照ＧＯＰについてのビットレート(brate)を求める。
【００８２】
ステップＳ２０６においては、上記ステップＳ２０５により取得した、ビットレート(brate)を利用して、目標オフセット値(trg_offset)を決定する。この場合の目標オフセット値(trg_offset)は、図１０のステップＳ１０５により決定される単位オフセット値(ut_offset)と同じ意義を有するものである。従って、目標オフセット値(trg_offset)の決定の仕方としては、図１０のステップＳ１０５と同様の処理を実行すればよい。
【００８３】
次のステップＳ２０７においては、上記ステップＳ２０６により決定された目標オフセット値(trg_offset)により示されるビデオコンテンツ上のデータ位置が、現データ書込単位内に存在するか否かについての判別を行う。つまり、現参照ＧＯＰ（厳密には現参照ＧＯＰからシーン内インデックス画像として抽出されたＩピクチャ）の再生時間から、目標オフセット値(trg_offset)分だけ再生時間を進行させたとするデータ位置が、現データ書込単位のなかに含まれているかどうかについて判別するものである。データ書込単位は、図８（ａ）（ｂ）の関係から理解されるように、ビデオコンテンツのストリームにおいて複数連続するＧＯＰにより形成される。
また、この判別処理としては、例えば先ず、目標オフセット値(trg_offset)により示されるビデオコンテンツ上のデータ位置について、ステップＳ２０３により取得した参照ＧＯＰの時間情報が示す再生時間に、目標オフセット値(trg_offset)を加算することで、ビデオコンテンツの再生開始時間を起点とした絶対再生時間を得るようにされる。そのうえで、ステップＳ２０３により取得した参照ＧＯＰの時間情報が示す再生時間と、上記の絶対再生時間との間のデータ区間において、データ書込単位の区切り位置が含まれるか否かを判別すればよい。また、ビデオコンテンツ上のデータ書込単位の区切り位置としての再生時間位置は、データ書込単位の各ＧＯＰ内に含まれるものとされる管理パケット内の参照情報から容易に特定される。
【００８４】
ステップＳ２０７において否定の判別結果が得られた場合には、目標オフセット値(trg_offset)により示されるビデオコンテンツ上のデータ位置は、再生時間としては、現データ書込単位よりも先のデータ書込単位に存在することになる。そこで、この場合には、ステップＳ２０８により、現データ書込単位に対して再生時間が次となるデータ書込単位の（先頭）アドレスにアクセスして、再度ステップＳ２０７による判別処理を行うようにされる。そして、ステップＳ２０７において肯定の判別結果が得られることとなったのであれば、ステップＳ２０９に進む。
【００８５】
ステップＳ２０９では、ＨＤＤ１６に記憶されている選択シーンに対応するビデオコンテンツのデータ上において、目標オフセット値が示すデータ位置に最も近いＧＯＰ（目標オフセット値が示すデータ位置を含むＧＯＰも含む）にアクセスする。次に、ステップＳ２１０により、このアクセスしたＧＯＰから所定規則に従って選択した１つのＩピクチャを取得する。そして、次のステップＳ２１１、Ｓ２１２によっては、図１０のステップＳ１０９、Ｓ１１０と同様に、取得したＩピクチャからサムネイル画像データを生成し、これをシーン内インデックス画像として、シーン内インデックス領域ＡＲ２内に対して配列順に従って貼り付ける画像処理を実行するようにされる。
【００８６】
ステップＳ２１２の後に実行する、ステップＳ２１３〜ステップＳ２１７までの手順は、図１０のステップＳ１１１〜１１５と同様となることから、ここでの説明は省略する。
【００８７】
続いては、図９（ａ）（ｂ）に示した、第３例、第４例としてのビデオコンテンツの管理態様例に対応したシーン内インデックス領域ＡＲ２の表示制御について説明する。第３例及び第４例では、ビデオコンテンツ管理ファイル、又は管理パック情報のほかに、コンテンツＤＢファイルによってもビデオコンテンツを管理する態様であるが、ここで先ず、本実施の形態としてのシーン内インデックス領域ＡＲ２の表示制御に関連して定義したコンテンツＤＢファイルの内容例について述べておくこととする。
【００８８】
先ず、ビデオコンテンツ管理ファイルが、本来はコンテンツの再生などの限定された機能に対応して管理することを主目的としたものであるのに対して、第３例、第４例の管理態様例において採用されるコンテンツＤＢファイルは、例えば管理情報として、各種多様のメタデータを主体とするもので、再生以外の多様で高度な管理が行えるようにすることを目的としている。そこで、本実施の形態としては、シーン内インデックス領域ＡＲ２の表示制御を行うことに対応させて、コンテンツＤＢファイルが有するビデオコンテンツごとの情報として、再生時間経過に応じて変化するビットレートを示し得る、ビットレート情報を定義する。コンテンツＤＢファイルにおけるコンテンツ単位の管理情報は、コンテンツのデータが新規に記録されたことに応じて、新規に作成されるようになっている。上記ビットレート情報についても、ビデオコンテンツ（撮像動画像データ）の記録時において、逐次ビットレートの情報を保持しておくようにして、このビデオコンテンツの記録が完了した段階では、このビデオコンテンツに対応して新規作成された管理情報に、ビットレート情報を格納しておくようにされる。これにより、コンテンツＤＢファイルを有する場合には、シーン内インデックス領域ＡＲ２の表示制御を実行するのにあたり、図１０、図１１のようにして、ＧＯＰのサイズ情報(sz_gop)の取得（ステップＳ１０３、Ｓ２０４）と、これに続く、ビットレートの算出（ステップＳ１０４、Ａ２０５）という複数段階の処理手順を踏むことなく、コンテンツＤＢファイルから直接読み出して取得できることになる。
なお、コンテンツＤＢファイルにどのようにしてビットレート情報を格納するのかについてであるが、例えば１つには、ＧＯＰごとに対応させてビットレートを格納することが考えられる。このようにすれば、ＧＯＰ単位でビットレートを認識することが可能であり、従って、高い精度、信頼性でもって、第１抽出時間間隔Ｔｍ１、Ｔｍ２の何れとするのかを決定することが可能となる。
しかしながら、ＧＯＰごとにビットレート情報を用意することとした場合、ビデオコンテンツが長尺である場合には、ビットレート情報のサイズが相当なものとなり、従って、コンテンツＤＢファイルとしても相当のサイズとなる可能性がでてくる。コンテンツＤＢファイルのサイズが大きすぎてしまうと、先ず、記憶媒体（ＨＤＤ１６）の容量の圧迫であるとか、コンテンツＤＢファイルの処理が重くなるなどの可能性が出てくる。
そこで、本実施の形態としては、１ビデオコンテンツごとのビットレート情報として、予め定めた一定量以上のビットレートの変化が生じたとされるタイミングごとに対応させて、このタイミングの再生時間と、そのときのビットレート値を少なくとも有して成る単位情報（ビットレート変化点情報）をコンテンツＤＢファイルに格納することとする。
【００８９】
ここで、図１２、図１３により、上記のビットレート情報を格納するようにされたコンテンツＤＢファイルの形式（フォーマット）例について説明しておくこととする。なお、これらの図に示す形式は、あくまでもその一例を模式的に示したものであり、この図に示した内容に基づいたものに限定されるべきものではない。
【００９０】
図１２には、コンテンツＤＢファイルのディレクトリ構造例を示している。
コンテンツＤＢファイルは、例えばファイルシステム上では、１つのファイル単位として扱われるのであるが、その実際の内容は、以降の説明から理解されるようにして、所定の管理情報内容が記述されるものとして定義された単位情報（ここでは、単位管理情報ということにする）に細分化できる構造を有している。これに伴い、コンテンツＤＢファイルのフォーマットでは、この図に示すようにして、単位管理情報をディレクトリ構造により管理することができる。
コンテンツＤＢファイルとしてのディレクトリ構成にあっては、先ず、図示するようにして、Contents_DB_Rootが置かれ、この直下のサブディレクトリとして、Original_RootとFavorite_Rootを置くことができるようにされている。Original_Rootは必須のディレクトリであり、その配下には、ビデオカメラ装置１により撮像して得られたコンテンツ（ビデオコンテンツ）に関するリストを、所定のディレクトリ分類（ここでは、撮影記録年月日）により格納して管理するようにされている。Favorite_Rootはオプションであり、その配下には、ＨＤＤ１６に記憶されているビデオコンテンツのうちから、例えばユーザが「お気に入り」として選択指定したものについての所定の単位管理情報を、所定のディレクトリ分類に従って格納する。
【００９１】
Original_Rootの配下においては、撮影記録年月日の分類によりビデオコンテンツのリストを格納することに対応して、例えばOriginal_Rootの直下には、撮影記録年月日に対応するディレクトリを配置することとしている。この図では、例として、ディレクトリ名「2007/3/1」のディレクトリと、ディレクトリ名「2007/3/5」のディレクトリとの２つのディレクトリが少なくとも置かれている場合を示している。これらのディレクトリ名が、そのディレクトリが対応する撮影記録年月日を示す。
そして、これらの撮影記録年月日のディレクトリに対して、その撮影記録年月日において撮影記録してＨＤＤ１６に保存されたとするビデオコンテンツについての単位管理情報を格納するようにされる。
先にも述べたように、単位管理情報としてはその定義内容に従った複数種類があるものとされるが、ここでは、本実施の形態のシーン内インデックス領域ＡＲ２の表示制御との対応を分かりやすくするために、単位管理情報については、ビットレート情報としての管理情報内容を有するもののみを示している。このビットレート情報を有する単位管理情報については、ビットレート対応単位管理情報ということにする。図においては、ディレクトリ名「2007/3/1」のディレクトリ以下のContent1、Content2に対して、それぞれ、タイトル名「Bitrate1」「Bitrate2」が付された、２つのビットレート対応単位管理情報を格納している。また、ディレクトリ名「2007/3/5」の以下のContent3に対して、タイトル名「Bitrate3」が付された１つのビットレート対応単位管理情報を格納している。
確認のために述べておくと、これらのタイトル名「Bitrate1」「Bitrate2」「Bitrate3」が付されたビットレート対応単位管理情報は、それぞれ、前述した、特定の１つのビデオコンテンツについての、ビットレート変化点情報を格納している。ビットレート変化点情報とは、前述したように、予め定めた一定量以上のビットレートの変化が生じたとされるタイミングごとに対応させて、このタイミングの再生時間と、そのときのビットレート値を有して成るものである。
【００９２】
また、コンテンツＤＢファイルでは、管理対象とするビデオコンテンツ（シーン）ごとに対応して生成した、シーンを代表する１つのサムネイル画像（シーン代表サムネイル）を管理できるようにされている。この図では、このシーン代表サムネイルをビットレート対応単位管理情報ごとに対応させて示しており、タイトル名「Bitrate1」「Bitrate2」「Bitrate3」のビットレート対応単位管理情報ごとに、シーン代表サムネイルthm1、thm2、thm3が対応付けられている。
なお、図１２のディレクトリ構造において、各ディレクトリ、単位管理情報（及びシーン代表サムネイル）ごとに示される＃１以降の番号は、ディレクトリ管理のために付されるディレクトリ番号とされる。
【００９３】
図１３は、上記図１２のディレクトリ構成に対応する、コンテンツＤＢファイルの実体的な内容例を模式的に示したものである。
この図に示されるようにして、コンテンツＤＢファイルは、先ずプロパティファイルが有るようにされたうえで、このプロパティファイルに管理されるものとして、メタデータファイルと、サムネイルファイルとを少なくとも有して成るものとされる。
先ず、プロパティファイルは、ファイルヘッダに続けて、スロットといわれる単位領域が配置されて形成される。このスロットは、それぞれが、図１２に例示したディレクトリ、単位管理情報ごとに対応する。図においては、スロットごとに、対応するディレクトリ番号を示している。
１つのスロットは、対応するディレクトリに対応する所定の管理情報内容として、ディレクトリ名、親子関係にあるディレクトリを指し示す情報のほか、そのディレクトリに配置される単位管理情報やサムネイル画像データとしての実データを格納する位置を示すポインタなどを格納する。
【００９４】
図１２によれば、例えばタイトル名「Bitrate1」のビットレート対応単位管理情報のディレクトリ番号は＃２１とされている。そこで、図１３に示すプロパティファイルにおいてディレクトリ番号＃２１に対応するスロットを参照すると、ここには、メタデータファイル内におけるタイトル名「Bitrate1」のビットレート対応単位管理情報の格納位置を示すポインタが格納されているものである。換言すれば、目的とするディレクトリの番号が対応しているスロットにアクセスして、ここに格納されるポインタを読み込むことで、図１２に示したディレクトリ構造を辿るようにして、目的とする単位管理情報としての実データにアクセスできる。
同様にして、メタデータファイル内のタイトル名「Bitrate2」のビットレート対応単位管理情報にアクセスするためには、プロパティファイル内のディレクトリ番号＃２２に対応するスロットからビットレート対応単位管理情報を示すポインタを取得するようにされる。
また、メタデータファイル内のタイトル名「Bitrate3」のビットレート対応単位管理情報にアクセスするためには、プロパティファイル内のディレクトリ番号＃２４に対応するスロットからビットレート対応単位管理情報をポインタを取得するようにされる。
【００９５】
また、ここでは、ビットレート対応単位管理情報に対応するプロパティファイル内のスロットに、対応するビデオコンテンツについてのシーン代表サムネイルのデータの所在を指し示すポインタも格納しているものとされる。例えば、プロパティファイル内のディレクトリ番号＃２１が対応するスロットには、１つの共通のビデオコンテンツに対応して、タイトル名「Bitrate1」のビットレート対応単位管理情報についてのメタデータファイル内の位置を示すポインタと、サムネイルファイル内におけるシーン代表サムネイルthm1の画像データの位置を示すポインタとを示すこととしているものである。
なお、この管理態様例は、あくまでも一例であって、これは例えば、共通のビデオコンテンツに対応するプロパティファイル内のスロットにより、ビットレート対応単位管理情報やシーン代表サムネイル画像データなどを一括して管理可能とされていることを示唆するものである。
【００９６】
図１４のフローチャートは、先に図９（ａ）に示した第３例としてのビデオコンテンツ管理態様例に対応する、シーン内インデックス領域ＡＲ２の表示制御のための処理手順を示している。
この図においては、先ず、ステップＳ３００により、図１０のステップＳ１００と同様にして、ＨＤＤ１６に記憶されているビデオコンテンツ管理ファイルから、現在の選択シーンに対応するビデオコンテンツに対応する管理情報部を読み込んで取得し、次のステップＳ３０１により、図１０のステップＳ１０１と同様にして、選択シーンにおいて先頭となるシーン内インデックス画像をシーン内インデックス領域ＡＲ２に貼り付けるための画像処理を実行する。
【００９７】
なお、この第３例の場合には、先に図１２、図１３により示したように、コンテンツＤＢファイルにより、ビデオコンテンツごとにシーン代表サムネイルとしてのサムネイル画像データを保持して管理するようにされている。そこで、このシーン代表サムネイルとして、シーンにおける最初のフレーム画像データから生成するものとしている場合には、先ず、フィルムロールインデックス画面のシーン単位インデックス領域ＡＲ１におけるシーン単位インデックス画像の表示のために、このシーン代表サムネイルの画像データを利用することができる。そのうえで、さらに、ステップＳ３０１により貼り付けるべき、先頭のシーン内インデックス画像にも、このシーン代表サムネイルの画像データを利用することが可能である。
【００９８】
ステップＳ３０２においては、コンテンツＤＢファイルから、選択シーンに対応するビットレート変化点情報を取得するようにされる。このためには、図１２、図１３による説明からも理解されるように、例えばコンテンツＤＢファイルのディレクトリを辿るようにしながら、メタデータファイル内の、選択シーンとしてのビデオコンテンツに対応するビットレート対応単位管理情報にアクセスするようにされる。そして、このビットレート対応単位管理情報の内容を取得することで、ビットレート変化点情報が得られるものとなる。
【００９９】
ステップＳ３０３においては、選択シーンに対応するビデオコンテンツを形成するとされるＧＯＰのシーケンスのうちから、先頭に位置するＧＯＰ（先頭ＧＯＰ）を参照ＧＯＰとする。
【０１００】
ステップＳ３０４においては、ビデオコンテンツ管理ファイルから、現参照ＧＯＰの単位に対応してその再生時間を示す再生時間情報(t_info)を取得する。
ステップＳ３０５においては、先のステップＳ３０２にて取得したビットレート変化点情報と、上記ステップＳ３０４により取得した現ＧＯＰについての再生時間情報(t_info)とを利用して、現参照ＧＯＰのビットレート(brate)を求めるようにされる。
ビットレート変化点情報は、ビットレートが一定量以上に変化したときの再生時間と、その変化後のビットレートが示される。そこで、ステップＳ３０５としては、例えば、ビットレート変化点情報にて示される再生時間を区切り位置として得られる時間区間のどこに再生時間情報(t_info)（即ちＧＯＰ）が位置するのかを認識するようにされる。また、この再生時間情報(t_info)が位置する時間区間内のビットレートを、その区間の始点と終点に対応した再生時間に対応付けられているビットレートから推定して求めるようにされる。このようにして求められたビットレートが、ステップＳ３０５にて求めるべきビットレート(brate)となる。
【０１０１】
ステップＳ３０６では、図１０のステップＳ１０５と同様に、ビットレート(brate)を利用して単位オフセット値(ut_offset)を求め、ステップＳ３０７により、図１０のステップＳ１０６と同様にして絶対オフセット値(absl_offset)を更新設定する。
さらに、ステップＳ３０８〜ステップＳ３１６までの手順についても、図１０のステップＳ１０７〜Ｓ１１５のそれぞれと同様の処理を実行するようにされる。
【０１０２】
図１５のフローチャートは、先に図９（ｂ）に示した第４例としてのビデオコンテンツ管理態様例に対応する、シーン内インデックス領域ＡＲ２の表示制御のための処理手順を示している。
この図においては、先ず、ステップＳ４００により、図１１のステップＳ２００と同様にして、ＨＤＤ１６に記録されているビデオコンテンツのうちで、現在の選択シーンに対応するビデオコンテンツのデータ(ファイル)における、ストリームの先頭にアクセスする。
ステップＳ４０１は、図１４のステップＳ３０１などと同様にして、選択シーンにおいて先頭となるシーン内インデックス画像をシーン内インデックス領域ＡＲ２に貼り付けるための画像処理を実行する。
【０１０３】
ステップＳ４０２、Ｓ４０３では、図１４のステップ３０２、Ｓ３０３と同様にして、コンテンツＤＢファイルから、選択シーンに対応するビットレート変化点情報を取得し、選択シーンに対応するビデオコンテンツを形成するとされるＧＯＰのシーケンスのうちから、先頭ＧＯＰを、参照ＧＯＰとして設定する。
【０１０４】
ステップＳ４０４においては、ＨＤＤ１６に記録されている現参照ＧＯＰとしての実データ内に格納される管理パック情報に格納されている再生時間情報から、現参照ＧＯＰの単位に対応してその再生時間を示す再生時間情報(t_info)を取得する。確認のために述べておくと、ここで取得される再生時間情報(t_info)は、図１４のステップＳ２０４にて取得する再生時間情報(t_info)と同じ意義内容を持つものである。
ステップＳ４０５においては、図１４のステップＳ３０５と同様にして、先のステップＳ４０２にて取得したビットレート変化点情報と、上記ステップＳ４０４により取得した現ＧＯＰについての再生時間情報(t_info)とを利用して、現参照ＧＯＰのビットレート(brate)を求めるようにされる。
【０１０５】
ステップＳ４０６では、図１１のステップＳ２０６の処理に準じて、ビットレート(brate)を利用して目標オフセット値(trg_offset)を求めるようにされる。次に、ステップＳ４０７、Ｓ４０８、Ｓ４０９により、図１１のステップＳ２０７、Ｓ２０８、Ｓ２０９と同様の処理によって、最終的に、ＨＤＤ上で、目標オフセット値が示すデータ位置に最も近いＧＯＰ（目標オフセット値が示すデータ位置を含むＧＯＰも含む）にアクセスする。
ステップＳ４１０〜Ｓ４１５までの手順は、例えば図１４のステップＳ２１０〜Ｓ２１５のそれぞれと同様の処理を実行する。
【０１０６】
なお、コンテンツＤＢファイルが設けられる場合において、そのファイルサイズの増加が許容される条件であれば、例えばＧＯＰ単位ごとのビットレートを示すビットレート情報を、ビデオコンテンツの記録に際してコンテンツＤＢファイルに予め格納しておき、このビットレート情報を参照して、シーン内インデックス領域ＡＲ２についての表示制御を行うように構成可能であることは、前述したとおりである。この場合には、ＧＯＰごとのビットレートの値を、コンテンツＤＢファイルを参照して直ちに認識できることから、その分、処理が効率的なものとなるという点で利点が生まれてくる。
このことに基づけば、コンテンツＤＢファイルに対して、予め、シーン内インデックス画像のサムネイル画像データを格納しておくような構成とすることも、本願発明の下では考えられるものであり、これまでの説明のようにしてシーン内インデックス領域の表示制御時においてシーン内インデックス画像のサムネイル画像データを生成する処理を実行する必要が無くなり、処理の効率化が図られる。このためには、先ず、動画（ビデオコンテンツ）の撮影記録時においては、圧縮符号化処理過程で即時的に得られるビットレートを閾値ｔｈと比較するようにする。そして、この比較結果に従って決まる抽出時間間隔（Ｔｍ１あるいはＴｍ２）ごとに、撮影により得られたビデオ信号から、シーン内インデックス画像としてのサムネイル画像データを生成して取得する。即ち、この場合には、本願発明における抽出静止画像データの取得を、ビデオコンテンツ（単位動画像データ）の記録時に対応させて実行するようにされる。そして、この動作を、撮像により得られたビデオコンテンツのＨＤＤ１６への書き込みと併行して実行するようにされる。そして、これらの生成したサムネイル画像データについて、例えば第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２の何れに属するのかを示す情報、対応する再生時間情報などをはじめとする所要の情報を付加して、コンテンツＤＢファイルに格納するようにされる。
【０１０７】
続いては、シーン内インデックス領域ＡＲ２における、シーン単位インデックス画像の配列表示に関する他の態様例について説明する。
図３に示されるフィルムロールインデックス画面のシーン内インデックス領域ＡＲ２においては、第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２とでその背景について異なる表示態様を与え、これにより、シーンにおける変化の大きな区間と小さな区間との区別についての視認性（視覚的弁別性）が高められるように配慮している。
しかしながら、第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２についての視覚的弁別性を向上させることを目的とするのであれば、このための表示態様としては、図３により説明したもの以外にも考えることができる。そこで、このような表示態様の他の例について、２例を変形例として挙げておくこととする。
【０１０８】
第１の変形例を、図１６に示す。
この図には、フィルムロールインデックス画面における、シーン内インデックス領域ＡＲ２を抜き出して示している。この図において、図３と同一部分については同一符号を付して説明を省略する。
この第１の変形例としては、第１レベル内容領域ＡＲ１１内に配列表示させるシーン単位インデックス画像と、第２レベル内容領域ＡＲ１２内に配列表示させるシーン単位インデックス画像とで、その表示サイズを変更するものである。
つまり、例えば図において、シーン単位インデックス画像Ｐ１０１と、シーン単位インデックス画像Ｐ１０３とに示されているように、第１レベル内容領域ＡＲ１１内のシーン内インデックス画像の表示サイズを、w1×h1により表し、第２レベル内容領域ＡＲ１２内のシーン内インデックス画像の表示サイズをw2×h2により表したとすると、w1×h1とw2×h2とで、互いに異なる所定値を設定するようにされる。そのうえで、この場合には、w1×h1に対してw2×h2が大きくなる関係となるようにしている。つまり、この場合においては、相対的に、第１レベル内容領域ＡＲ１１内に配列表示させるシーン単位インデックス画像を小さいサイズで表示し、第２レベル内容領域ＡＲ１２内に配列表示させるシーン単位インデックス画像を大きいサイズで表示するものである。ここで、第２レベル内容領域ＡＲ１２内のシーン単位インデックス画像のほうを大きいサイズで表示しているのは、第２レベル内容領域に対応するシーン内区間のほうが、第１レベル内容領域に対応するシーン内区間よりも、画像の変化が大きく、従って、ユーザにとっての重要度も高いものとして捉えられることに基づき、その重要度の高さが、表示サイズの大きさとして反映されるように配慮したものである。
そして、このような表示態様を採ることによっても、第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２とについての視覚的弁別性は向上することになる。
【０１０９】
図１７には、第２の変形例としてのシーン内インデックス領域ＡＲ２の表示態様例を示している。この図において、図３と、図１６と同一部分については同一符号を付して説明を省略する。
この第２の変形例では、第１レベル内容領域ＡＲ１１と第２レベル容量領域ＡＲ１２とで、シーン内インデックス画像が配列される間隔の距離（距離間隔）について、下記のようにして、互いに異なる長さを設定するようにされる。
ここで、図中のシーン内インデックス画像Ｐ１０９、Ｐ１１０に対応して示される長さＬ１は、それぞれのシーン内インデックス画像を四角形としてみた場合の対角線の交点間の距離であり、第１レベル内容領域ＡＲ１１内において設定される距離間隔を示すものとされる。同様に、シーン内インデックス画像Ｐ１０３、Ｐ１０４に対応して示される長さＬ２は、第２レベル内容領域ＡＲ１２内において設定される距離間隔を示す。そして、これらの距離間隔Ｌ１、Ｌ２についてはＬ１＞Ｌ２の関係が成立するようにして、それぞれの所定の長さを設定するようにされる。
これにより、シーン内インデックス領域ＡＲ２において配列されるシーン内インデックス画像間の距離は、相対的に、第１レベル内容領域ＡＲ１１のほうが長く、第２レベル内容領域ＡＲ１２のほうが短くなるのであるが、これは、シーン（ビデオコンテンツのストリーム）からシーン内インデックス画像を抜き出したとされる時間間隔（抽出時間間隔）の長短を反映しているものとしてみることができる。
このような表示態様を採ることによっても、第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２とについての視覚的弁別性が向上することになる。
【０１１０】
表示制御処理として、変形例の第１例としての表示態様を与えるためには、シーン内インデックス画像としてのサムネイル画像データを生成する処理（図１０のステップＳ１０９、図１１のステップＳ２１１、図１４のステップＳ３１１、図１５のステップ４１１）を実行するのにあたり、第１レベル内容領域ＡＲ１１内に配列させるべきものについては、表示画サイズw1×h1に対応する表示用の水平・垂直画素数によるものを生成し、第２レベル内容領域ＡＲ１２内に配列させるべきものについては、表示画サイズw2×h2に対応する表示用の水平・垂直画素数によるものを生成するようにすればよい。このようにして設定した表示用の水平・垂直画素数が、表示時においては、表示画サイズw1×h1、w2×h2の相違として反映されることになる。
また、第２例としての表示態様を与えるためには、シーン内インデックス画像として生成したサムネイル画像データをシーン内インデックス領域ＡＲ２内に貼り付ける画像処理（図１０のステップＳ１１０、図１１のステップＳ２１２、図１４のステップＳ３１２、図１５のステップ４１２）を実行する際に、第１レベル内容領域ＡＲ１１内に貼り付けていくときには、前回貼り付けたシーン内インデックス画像（サムネイル画像データ）の中心位置（対角線の交点となる位置）に対して、距離間隔Ｌ１だけ離れた位置に対応する画像領域部分に対して貼り付けるようにされる。また、同様にして、第２レベル内容領域ＡＲ１２内に貼り付けていくときには、前回貼り付けたサムネイル画像に対して、距離間隔Ｌ２だけ離れた位置に対応する画像領域部分に対して貼り付けるようにされる。
【０１１１】
なお、これまでの説明により、シーン内インデックス領域ＡＲ２における、第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２の視覚的弁別性を得る（高める）ための表示態様例としては、図３に示した背景の表示態様を変更する例と、上記の変形例における第１例と、第２例の３例を挙げたことになる。例えばこれら三者の表示態様は、何れか１つを採用してもよいし、何れか２つを選択して採用することとしてもよい。さらに、三者の全てを採用してもよい。
また、本願発明の下では、第１レベル内容領域ＡＲ１１と第２レベル内容領域ＡＲ１２の視覚的弁別性を得るための表示態様としては、上記の３例に限定されるべきものではなく、第１レベル内容領域ＡＲ１１内に配置されるべきものとして分類されるシーン内インデックス画像と、第２レベル内容領域ＡＲ１２内に配置されるべきものとして分類されるシーン内インデックス画像とを視覚的に区別可能なようにされていさえすればよいものである。
【０１１２】
また、本願発明にあっては、先ず、シーン内インデックス領域ＡＲ２において、ビットレートに応じて設定された抽出時間間隔によりビデオコンテンツのストリームから抜き出したものとされるシーン内インデックス画像が配列表示される態様を採る限り、フィルムロールインデックス画面における表示態様等の変更は適宜行われてよいものとされる。
【０１１３】
また、実施の形態にあっては、抽出時間間隔としては、１つの閾値ｔｈを基準とした、Ｔｍ１、Ｔｍ２による２段階としているが、２以上の閾値を設定することで、３段階以上が設定されるようにしてもよいものである。
【０１１４】
さらに、シーン内インデックス領域の表示制御としての処理手順についても、図１０、図１１、図１４、図１５のフローチャートにより説明した内容のみに限定されるべきではなく、実際に応じて適宜変更されてよい。
【０１１５】
また、実施の形態では、本願発明の構成をビデオカメラ装置に適用しているが、これ以外にも、例えば動画撮影機能を有するようにされたデジタルスチルカメラ、携帯電話などをはじめ、他の電子機器に対しても適用が可能である。
【図面の簡単な説明】
【０１１６】
【図１】本発明の実施の形態としてのビデオカメラ装置１の構成例を示すブロック図である。
【図２】本実施の形態のビデオカメラ装置における一覧・検索画面の表示に関連した操作に応じて表示画面部に表示される画像の内容例を示す図である。
【図３】実施の形態に対応するフィルムロールインデックス画面の表示内容例を示す図である。
【図４】シーン内インデックス画像についての抽出時間間隔の設定例を説明するための図である。
【図５】フィルムロールインデックス画面を基点とする、関連メニュー画面、時間間隔設定画面との間での遷移例を示す図である。
【図６】時間間隔設定画面の表示態様例を示す図である。
【図７】実施の形態としてのビデオコンテンツの管理態様例（第１例）を説明するための図である。
【図８】実施の形態としてのビデオコンテンツの管理態様例（第２例）を説明するための図である。
【図９】実施の形態としてのビデオコンテンツの管理態様例（第３例、第４例）を説明するための図である。
【図１０】第１例としてのビデオコンテンツの管理態様例に対応する、シーン内インデックス領域の表示制御のための処理手順例を示すフローチャートである。
【図１１】第２例としてのビデオコンテンツの管理態様例に対応する、シーン内インデックス領域の表示制御のための処理手順例を示すフローチャートである。
【図１２】シーン内インデックス領域の表示制御に対応してビットレート情報を格納させることとしたコンテンツＤＢファイルの形式例として、ディレクトリ構成を示す図である。
【図１３】シーン内インデックス領域の表示制御に対応してビットレート情報を格納させることとしたコンテンツＤＢファイルの形式例として、内部のファイル構成を示す図である。
【図１４】第３例としてのビデオコンテンツの管理態様例に対応する、シーン内インデックス領域の表示制御のための処理手順例を示すフローチャートである。
【図１５】第４例としてのビデオコンテンツの管理態様例に対応する、シーン内インデックス領域の表示制御のための処理手順例を示すフローチャートである。
【図１６】変形例として、シーン内インデックス領域における第１・第２レベル内容領域が視覚的に区分できるようにするための、他の表示態様例（第１例）を示す図である。
【図１７】変形例として、シーン内インデックス領域における第１・第２レベル内容領域が視覚的に区分できるようにするための、他の表示態様例（第２例）を示す図である。
【符号の説明】
【０１１７】
１  ビデオカメラ装置、１１  光学系部、１２  撮像部、１３  カメラ制御部、１４  カメラ信号処理部、１５  記録再生処理回路、１６  ＨＤＤ、１７  マイクロプロセッサ、１８  ＯＳＤ処理部、１９  重畳処理部、２０  表示部、２０Ａ  表示画面部、２１  ハードウェア操作部、２１Ａ  タッチパネル部、２１ａ  ホームキー、２１ｂ  フィルムロールキー、ＡＲ１  シーン単位インデックス領域、ＡＲ２  シーン内インデックス領域、ＡＲ１１  第１レベル内容領域、ＡＲ１２  第２レベル内容領域、Ｐ１〜Ｐ３シーン単位インデックス画像、Ｐ１０１〜Ｐ１１０  シーン内インデックス画像
【図１】
2008311847.tif 000003
【図２】
2008311847.tif 000004
【図３】
2008311847.tif 000005
【図４】
2008311847.tif 000006
【図５】
2008311847.tif 000007
【図６】
2008311847.tif 000008
【図７】
2008311847.tif 000009
【図８】
2008311847.tif 000010
【図９】
2008311847.tif 000011
【図１０】
2008311847.tif 000012
【図１１】
2008311847.tif 000013
【図１２】
2008311847.tif 000014
【図１３】
2008311847.tif 000015
【図１４】
2008311847.tif 000016
【図１５】
2008311847.tif 000017
【図１６】
2008311847.tif 000018
【図１７】
2008311847.tif 000019