(57)【特許請求の範囲】
【請求項１】
動画の画像データを処理するデータ処理装置において、
前記画像データを取得する取得手段と、
前記画像データの変化の程度を表す変化量を、ピクチャ単位で求める変化量算出手段と、
ピクチャの前記変化量に基づき、そのピクチャを表示するときの表示方法を表す表示タイプを、ピクチャ単位で決定する表示タイプ決定手段と、
前記ピクチャ単位の変化量および表示タイプが格納されたファイルを、前記画像データのメタデータが格納されたメタファイルとして作成するファイル作成手段と、
表示するピクチャを指定するときに操作されるピクチャ指定操作手段によって指定されているピクチャの前記表示タイプを取得する表示タイプ取得手段と、
ピクチャを、そのピクチャの表示タイプが表す表示方法で表示させる表示制御手段と
を備えるデータ処理装置。
【請求項２】
前記表示タイプは、ピクチャを表示するときの解像度、またはピクチャを表示するときの表示レートが異なる表示方法を表し、
前記表示制御手段は、ピクチャを、そのピクチャの表示タイプが表す解像度または表示レートで表示させる
請求項１に記載のデータ処理装置。
【請求項３】
前記変化量算出手段は、ピクチャの空間的な変化の程度を表す細かさ情報を、前記変化量として求め、
前記表示タイプ決定手段は、ピクチャの前記細かさ情報が、空間的な変化の程度が大であることを表す場合、そのピクチャの表示タイプを、高い解像度、または低い表示レートの高解像度／低表示レートタイプに決定する
請求項２に記載のデータ処理装置。
【請求項４】
前記変化量算出手段は、ピクチャの時間的な変化の程度を表す動き情報を、前記変化量として求め、
前記表示タイプ決定手段は、ピクチャの前記動き情報が、時間的な変化の程度が大であることを表す場合、そのピクチャの表示タイプを、低い解像度、または高い表示レートの低解像度／高表示レートタイプに決定する
請求項２に記載のデータ処理装置。
【請求項５】
前記表示タイプには、静止画での表示を表す静止画タイプもあり、
前記表示タイプ決定手段は、前記変化量が小さいピクチャの表示タイプを、静止画での表示を表す静止画タイプに決定し、
前記表示制御手段は、時系列のピクチャのうちの、静止画タイプのピクチャが連続する区間のピクチャが、前記ピクチャ指定操作手段によって指定されている場合、直前に表示されたピクチャを、再度表示させる
請求項２に記載のデータ処理装置。
【請求項６】
前記ピクチャ指定操作手段は、つまみの移動が可能なバーであり、
前記つまみの移動が可能な移動可能範囲を区分する各小区間には、ピクチャが時系列に割り当てられ、
前記表示制御手段は、前記つまみが位置する小区間に割り当てられているピクチャを表示させる
請求項１に記載のデータ処理装置。
【請求項７】
前記つまみが位置する小区間に割り当てられているピクチャの表示タイプに応じた周期で、前記つまみが移動したかを判定する移動判定手段をさらに備え、
前記表示制御手段は、前記移動判定手段において前記つまみが移動したと判定された場合、移動後の前記つまみが位置する小区間に割り当てられているピクチャを表示させる
請求項６に記載のデータ処理装置。
【請求項８】
前記つまみが位置する小区間に割り当てられているピクチャの表示タイプに応じた周期で、前記つまみが移動したかを判定する移動判定手段をさらに備え、
前記表示制御手段は、前記移動判定手段において前記つまみが移動していないと判定された場合、直前に表示されたピクチャを、再度表示させる
請求項６に記載のデータ処理装置。
【請求項９】
前記移動可能範囲は、前記変化量が大のピクチャが割り当てられる小区間ほど、区間長が大の小区間に区分される
請求項６に記載のデータ処理装置。
【請求項１０】
前記移動可能範囲の先頭の小区間から終わりの小区間にまでに割り当てる時系列のピクチャの範囲である割り当て範囲を指定するときに操作される範囲指定操作手段をさらに備え、
前記移動可能範囲の先頭の小区間から終わりの小区間にまでに、前記割り当て範囲の先頭のピクチャから終わりのピクチャまでが割り当てられる
請求項６に記載のデータ処理装置。
【請求項１１】
前記表示制御手段は、さらに、ピクチャの前記表示タイプを時系列に表すタイプ情報を、前記つまみが位置する小区間に割り当てられているピクチャの位置を表す位置情報とともに表示させる
請求項６に記載のデータ処理装置。
【請求項１２】
前記表示タイプ決定手段は、ピクチャの前記変化量と所定の閾値とを比較した比較結果に基づき、表示タイプを決定し、
前記表示制御手段は、さらに、ピクチャの前記変化量を時系列に表すグラフを、前記閾値を表す閾値情報とともに表示させる
請求項６に記載のデータ処理装置。
【請求項１３】
前記閾値情報は、ユーザの操作に応じて移動し、
前記表示タイプ決定手段は、ピクチャの前記変化量と、移動後の前記閾値情報が表す閾値とを比較した比較結果に基づき、表示タイプを決定し直す
請求項１２に記載のデータ処理装置。
【請求項１４】
前記表示制御手段は、
ピクチャの前記変化量を時系列に表すグラフ、および前記閾値情報とともに、ピクチャの前記表示タイプを時系列に表すタイプ情報をさらに表示させ、
前記表示タイプ決定手段において表示タイプが決定し直された場合、前記タイプ情報を表示し直させる
請求項１３に記載のデータ処理装置。
【請求項１５】
前記変化量算出手段は、ピクチャの空間的な変化の程度を表す細かさ情報と、ピクチャの時間的な変化の程度を表す動き情報とを、前記変化量として求め、
前記表示制御手段は、前記細かさ情報を時系列に表すグラフ、前記動き情報を時系列に表すグラフ、または、前記細かさ情報を時系列に表すグラフと、前記動き情報を時系列に表すグラフとの両方を表示させる
請求項１２に記載のデータ処理装置。
【請求項１６】
前記表示制御手段は、ピクチャの前記変化量を時系列に表すグラフ、および前記閾値情報とともに、前記移動可能範囲の先頭の小区間から終わりの小区間にまでに割り当てる時系列のピクチャの範囲である割り当て範囲を表す割り当て範囲情報を、さらに表示させ、
前記割り当て範囲情報は、ユーザの操作に応じて移動し、
前記移動可能範囲の先頭の小区間から終わりの小区間にまでに、前記割り当て範囲情報が表す前記割り当て範囲の先頭のピクチャから終わりのピクチャまでが割り当てられる
請求項１２に記載のデータ処理装置。
【請求項１７】
前記表示タイプのピクチャを表示するときのサイズがあらかじめ設定されており、
前記表示制御手段は、ピクチャを、そのピクチャの表示タイプについてあらかじめ設定されているサイズで表示させる
請求項１に記載のデータ処理装置。
【請求項１８】
動画の画像データを処理するデータ処理方法において、
前記画像データの変化の程度を表す変化量を、ピクチャ単位で求め、
ピクチャの前記変化量に基づき、そのピクチャを表示するときの表示方法を表す表示タイプを、ピクチャ単位で決定し、
前記ピクチャ単位の変化量および表示タイプが格納されたファイルを、前記画像データのメタデータが格納されたメタファイルとして作成し、
表示するピクチャを指定するときに操作されるピクチャ指定操作手段によって指定されているピクチャの前記表示タイプを取得し、
ピクチャを、そのピクチャの表示タイプが表す表示方法で表示させる
ステップを含むデータ処理方法。
【請求項１９】
動画の画像データの処理を、コンピュータに実行させるプログラムにおいて、
前記画像データの変化の程度を表す変化量を、ピクチャ単位で求める変化量算出手段と、
ピクチャの前記変化量に基づき、そのピクチャを表示するときの表示方法を表す表示タイプを、ピクチャ単位で決定する表示タイプ決定手段と、
前記ピクチャ単位の変化量および表示タイプが格納されたファイルを、前記画像データのメタデータが格納されたメタファイルとして作成するファイル作成手段と、
表示するピクチャを指定するときに操作されるピクチャ指定操作手段によって指定されているピクチャの前記表示タイプを取得する表示タイプ取得手段と、
ピクチャを、そのピクチャの表示タイプが表す表示方法で表示させる表示制御手段と
して、コンピュータを機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、データ処理装置およびデータ処理方法、並びにプログラムに関し、特に、例えば、いわゆるスクラブを含む変速再生を適切に行うことができるようにするデータ処理装置およびデータ処理方法、並びにプログラムに関する。
【背景技術】
【０００２】
近年、動画の画像データを扱うレコーダやビデオカメラ等のAV機器として、HD(High Definition)の画像データを扱うことができるものが、放送業界用、民生用を問わず実現されている。
【０００３】
かかるAV機器では、例えば、HDの画像データが、ロングGOP(Group Of Picture)(HD Long GOP)の単位でMPEG(Moving Picture Experts Group)2方式やMPEG IMX50方式等で符号化され、その結果得られる符号化データが、テープや、ハードディスク、光ディスクなどの記録媒体に記録される。また、AV機器では、記録媒体に記録された符号化データがMPEG復号され、その結果得られる画像データ（に対応する画像）が、ディスプレイに出力されて表示される。
【０００４】
ここで、ロングGOPは、例えば、１５以上のピクチャを1GOPとするGOPである。また、MPEG IMX50方式は、ビットレートの最大が50Mbpsの、MPEG2 4:2:2P@MLに準拠した符号化方式で、そのフォーマットは、SMPTE（Society of Motion Picture and Television Engineers)で認可され、SMPTE365MにType D-10フォーマットとして登録されている。なお、MPEG IMX50方式では、ピクチャは、すべてIピクチャとして符号化される。
【０００５】
ところで、AV機器としては、レコーダやビデオカメラの他、動画を編集を行う編集装置（コンピュータが実行することによって、コンピュータを編集装置として機能させる編集プログラム（ソフトウェア）を含む）がある。
【０００６】
動画の編集を行う編集装置は、一般に、ユーザ（編集者）が動画の内容を確認するためや、いわゆる編集点（イン点およびアウト点）を探すために、スクラブの機能を有している。
【０００７】
ここで、スクラブとは、ユーザが指定するピクチャであるフレームまたはフィールドの再生を意味する。ユーザによるピクチャの指定は、例えば、ユーザが、GUI（Graphical User Interface）としてのつまみを移動するなどの操作をすることにより行われる。
【０００８】
スクラブの機能を有する編集装置においては、例えば、つまみの位置によってフレームが指定され、そのフレームが再生される。従って、ユーザが、つまみをゆっくり動かす操作をすると、つまみ（の位置）によって指定されるフレームがゆっくり変化するので、いわゆるスロー再生が行われる。また、ユーザが、つまみを速く動かす操作をすると、つまみによって指定されるフレームが速く変化するので、いわゆる高速再生が行われる。さらに、ユーザが、つまみを動かさないと、つまみによって指定されるフレームは変化しないので、いわゆるスチル再生が行われる（ポーズ状態となる）。以上から、スクラブは、変速（特殊）再生の一種であるということができる。
【０００９】
なお、ランダムアクセス可能な第１の記録媒体に、高解像度の画像を記録するとともに、第２の記録媒体に、第１の記録媒体に記録された画像に対応する低解像度の画像を記録し、通常の再生では、第２の記録媒体に記録された低解像度の画像を表示し、一時停止時には、第１の記録媒体に記録された高解像度の画像を表示する技術が提案されている（例えば、特許文献１参照）。
【００１０】
【特許文献１】特開平11-331754号公報
【発明の開示】
【発明が解決しようとする課題】
【００１１】
ところで、例えば、符号化データが記録されたディスクを対象として、編集装置において、スクラブを行うときには、つまみによって指定されるフレームの符号化データが記録されているディスク上の位置にシークをし、ディスクから、符号化データを読み出し、さらに、符号化データを画像データに復号して、その画像データ（に対応する画像）をディスプレイに表示する必要がある。
【００１２】
従って、つまみによってフレームが指定されてから、そのフレームがディスプレイに表示されるまでに時間を要するので、ディスクに記録された符号化データが、例えば、HDの画像データを、ロングGOPの単位で符号化して得られるような高ビットレートのデータである場合には、編集装置（編集プログラムを実行するコンピュータ）の性能にもよるが、復号等の処理が間に合わず、つまみによって現在指定されているフレームと、ディスプレイに表示されているフレームとに大きなずれが生じ、ユーザに違和感（ストレス）を感じさせることがある。
【００１３】
一方、いわゆるノンリニア編集が一般的になっている現在では、動画の内容を容易に確認し、編集点を決定するための手段としてのスクラブの機能は、より重要性を増しており、ユーザが動画の内容をより詳しく、スムースに確認することができるようにするためのスクラブの機能が求められている。
【００１４】
本発明は、このような状況に鑑みてなされたものであり、スクラブ等の変速再生を適切に行うことができるようにするものである。
【課題を解決するための手段】
【００１５】
本発明の一側面のデータ処理装置、又は、プログラムは、動画の画像データを処理するデータ処理装置において、前記画像データの変化の程度を表す変化量を、ピクチャ単位で求める変化量算出手段と、ピクチャの前記変化量に基づき、そのピクチャを表示するときの表示方法を表す表示タイプを、ピクチャ単位で決定する表示タイプ決定手段と、前記ピクチャ単位の変化量および表示タイプが格納されたファイルを、前記画像データのメタデータが格納されたメタファイルとして作成するファイル作成手段と、表示するピクチャを指定するときに操作されるピクチャ指定操作手段によって指定されているピクチャの前記表示タイプを取得する表示タイプ取得手段と、ピクチャを、そのピクチャの表示タイプが表す表示方法で表示させる表示制御手段とを備えるデータ処理装置、又は、データ処理装置として、コンピュータを機能させるためのプログラムである。
【００１６】
本発明の一側面のデータ処理方法は、動画の画像データを処理するデータ処理方法において、前記画像データの変化の程度を表す変化量を、ピクチャ単位で求め、ピクチャの前記変化量に基づき、そのピクチャを表示するときの表示方法を表す表示タイプを、ピクチャ単位で決定し、前記ピクチャ単位の変化量および表示タイプが格納されたファイルを、前記画像データのメタデータが格納されたメタファイルとして作成し、表示するピクチャを指定するときに操作されるピクチャ指定操作手段によって指定されているピクチャの前記表示タイプを取得し、ピクチャを、そのピクチャの表示タイプが表す表示方法で表示させるステップを含むデータ処理方法である。
【００１７】
以上のような一側面においては、前記画像データの変化の程度を表す変化量が、ピクチャ単位で求められ、ピクチャの前記変化量に基づき、そのピクチャを表示するときの表示方法を表す表示タイプが、ピクチャ単位で決定されて、前記ピクチャ単位の変化量および表示タイプが格納されたファイルが、前記画像データのメタデータが格納されたメタファイルとして作成される。そして、表示するピクチャを指定するときに操作されるピクチャ指定操作手段によって指定されているピクチャの前記表示タイプが取得され、ピクチャが、そのピクチャの表示タイプが表す表示方法で表示される。
【００２５】
なお、プログラムは、記録媒体に記録することができる。
【発明の効果】
【００２６】
本発明の一側面によれば、スクラブ等の変速再生を適切に行うことが可能となる。
【発明を実施するための最良の形態】
【００５０】
以下、図面を参照して、本発明の実施の形態について説明する。
【００５１】
図１は、本発明を適用したデータ処理システム（システムとは、複数の装置が論理的に集合した物をいい、各構成の装置が同一筐体中にあるか否かは問わない）の一実施の形態の構成例を示している。
【００５２】
PC(Personal Computer)１は、各種のプログラムを実行することで、各種の処理を行う。ここで、PC１には、プログラムとして、OS(Operating System)と、動画の編集を行うためのソフトウェアである編集プログラムとが、少なくともインストールされている。PC１は、OSの制御の下、編集プログラムを実行することで、編集システム（編集装置）として機能する。
【００５３】
キーボード２およびマウス３は、PC1に対して、文字（列）やコマンド、その他の情報を入力するときに操作される。
【００５４】
ハードディスク（ドライブ）４は、いわゆる外付け型のハードディスクであり、図１では、PC1に接続されている。ハードディスク４は、PC１の制御の下、AV(Audio Visual)データ等を記録や再生を行う。ここで、ハードディスク４は、例えば、PC１において、動画の編集が行われる場合に、その動画のAVデータのリッピング(ripping)、即ち、AVデータをPC1で処理することができる形式のファイルとして保存すること等に使用することができる。
【００５５】
ドライブ５は、外付け型の、例えば、光ディスクドライブであり、光ディスク７の着脱が可能になっている。図１では、ドライブ５は、PC１に接続されており、PC１の制御の下、装着された光ディスク７に対するAVデータ等の記録や再生を行う。
【００５６】
カメラ（ビデオカメラ）６は、被写体を撮像し、その結果得られる動画のAVデータ（画像データとそれに付随する音声データ）を、カメラ６に着脱可能な光ディスク７や、図示せぬ磁気テープ、あるいは、半導体メモリなどの記録媒体に記録し、または、有線若しくは無線の伝送媒体を介して送信する。ここで、カメラ６は、動画の画像データとして、HDの画像データを出力する、いわゆるHDカメラであっても良いし、SD(Standard Definition)の画像データを出力する、いわゆるSDカメラであっても良い。
【００５７】
光ディスク７は、例えば、カメラ６に装着され、そこには、カメラ６で得られたAVデータ等が記録される。また、光ディスク７は、ドライブ５に装着され、そこに記録されたAVデータ等が再生される。光ディスク７としては、例えば、DVD(Digital Versatile Disc)や、プロフェッショナルディスク(Professional Disc)(R)などを採用することができる。
【００５８】
なお、プロフェッショナルディスクは、青紫色レーザによる高密度記録が可能な光ディスクで、そこには、本来記録したい動画のHDまたはSDの画像データの他、そのHDまたはSDの画像データよりも画素数を少なくする等してデータ量を少なくしたデータ（以下、適宜、プロキシデータという）と、そのHDまたはSDの画像データのメタデータとが記録される。
【００５９】
ここで、プロキシデータに対して、本来記録したい動画のHDまたはSDの画像データを、以下、適宜、本線データという。
【００６０】
また、プロフェッショナルディスクには、動画の画像データの他、その画像データに付随する音声データ（動画の音声データ）についても、本来記録したい動画の音声データの他、その音声データのデータ量を少なくしたデータが記録される。本線データというときは、本来記録したい動画のHDまたはSDの画像データの他、必要に応じて、本来記録したい動画の音声データ、またはそれらの画像データと音声データの両方を意味することとする。同様に、プロキシデータというときは、本線データとしての画像データのデータ量を少なくしたデータの他、必要に応じて、本線データとしての音声データのデータ量を少なくしたデータ、またはそれらの両方のデータを意味することとする。
【００６１】
次に、図２は、図１のPC１のハードウェアの構成例を示している。
【００６２】
バス２１には、CPU(Central Processing Unit)２２，ROM(Read Only Memory)２３，RAM(Random Access Memory)２４、ハードディスク２５、および入出力インタフェース３０が接続されている。
【００６３】
CPU２２は、プログラムを実行することにより、各種の処理を行う。ROM２３は、CPU２２が実行するプログラムや必要なデータを記憶している。RAM２４は、CPU２２が実行するプログラムや必要なデータを一時記憶する。ハードディスク（ドライブ）２５は、内蔵型のハードディスクで、CPU２２が実行するプログラムがインストールされ、また、必要なデータを記録する。
【００６４】
出力部２６は、LCD(Liquid Crystal Display)等のディスプレイ４１と、スピーカ４２等とで構成される。出力部２６は、入出力インタフェース３０に接続されており、入出力インタフェース３０から供給されるデータに対応する画像を表示するとともに、音声を出力する。
【００６５】
入力部２７は、キーボード２や、マウス３、図示せぬマイク（マイクロフォン）等で構成される。そして、入力部２７は、入出力インタフェース３０に接続されており、ユーザがキーボード２やマウス３を操作することにより、キーボード２やマウス３から供給される操作信号を、入出力インタフェース３０に出力する。
【００６６】
通信部２８は、例えば、ネットワークカード（LAN(Local Area Network)カード）や、ADSL（Asymmetric Digital Subscriber Line）モデム等のネットワークインタフェースで、図示せぬネットワークとの間の通信制御を行う。
【００６７】
ドライブ２９は、内蔵型のドライブで、リムーバブル記録媒体３１の着脱が可能となっている。ドライブ２９は、そこに装着されたリムーバブル記録媒体３１に対するデータの読み書きを行う。
【００６８】
入出力インタフェース３０は、バス２１と、出力部２６、入力部２７、通信部２８、ドライブ２９、その他の周辺機器それぞれとの間のインタフェースとして機能する。図２（図１）では、その他の周辺機器として、ハードディスク４とドライブ５とが、入出力インタフェース３０に接続されている。
【００６９】
リムーバブル記録媒体３１は、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどの、ドライブ２９に着脱可能な記録媒体である。
【００７０】
以上のように構成されるPC１では、例えば、CPU２２は、入出力インタフェース３０を介して、ユーザによって、入力部２７が操作等されることにより指令が入力されると、それにしたがって、ROM(Read Only Memory)２３に格納されているプログラムを実行する。あるいは、また、CPU２２は、外付けのハードディスク４や内蔵するハードディスク２５に格納（インストール）されているプログラム、衛星若しくはネットワークから転送され、通信部２８で受信されてハードディスク４や２５にインストールされたプログラム、または内蔵するドライブ２９に装着されたリムーバブル記録媒体３１や、外付けのドライブ５に装着された光ディスク７から読み出されてハードディスク４や２５にインストールされたプログラムを、RAM(Random Access Memory)２４にロードして実行する。これにより、CPU２２は、後述するフローチャートにしたがった処理、あるいは後述するブロック図の構成により行われる処理を行う。そして、CPU２２は、その処理結果を、必要に応じて、例えば、入出力インタフェース３０を介して、LCD(Liquid Crystal Display)等のディスプレイ４１や、スピーカ４２等で構成される出力部２６から出力、あるいは、通信部２８から送信、さらには、ハードディスク４や２５に記録等させる。
【００７１】
なお、CPU２２が実行するプログラムは、PC１に内蔵されている記録媒体としてのハードディスク２５やROM２３、あるいは、外付け型のハードディスク４に予め記録（インストール）しておくことができる。
【００７２】
あるいはまた、プログラムは、外付け型のドライブ５に着脱可能な光ディスク７や、内蔵型のドライブ２９に着脱可能なリムーバブル記録媒体３１に、一時的あるいは永続的に格納（記録）しておくことができる。このような光ディスク７や、リムーバブル記録媒体３１は、いわゆるパッケージソフトウエアとして提供することができる。
【００７３】
なお、プログラムは、上述したようなリムーバブル記録媒体３１等からPC１にインストールする他、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、PC１に無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、PC１に有線で転送し、PC１では、そのようにして転送されてくるプログラムを、通信部２８で受信し、内蔵するハードディスク２５等にインストールすることができる。
【００７４】
ここで、PC１がプログラムを実行することによって行う処理ステップは、必ずしも、後述するフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含むものである。
【００７５】
また、プログラムは、PC１だけにより処理されるものであっても良いし、複数のPC１によって分散処理されるものであっても良い。さらに、プログラムは、遠方のPCに転送されて実行されるものであっても良い。
【００７６】
上述したように、PC１には、OSと、動画の編集を行う編集プログラムとが、少なくともインストールされている。PC１（CPU２２）は、電源がオンにされると、OSを実行し、さらに、ユーザの操作に応じて、OSの制御の下、編集プログラムを実行する。これにより、PC１は、編集システムとして機能する。
【００７７】
編集システムとしてのPC１は、ユーザに、編集の対象である、いわゆる素材としての動画（画像）等を見せるために、その素材としての動画等を表示するウインドウを、ディスプレイ４１に表示させる。
【００７８】
図３は、素材としての動画等を表示するウインドウとしてのビューワ５１の構成例を示している。
【００７９】
ビューワ５１は、表示部５２、スクラブバー５３、タイムコード表示部５５、および操作部５６などで構成され、スクラブの機能を有している。
【００８０】
表示部５２は、ビューワ５１の上部から中央下部にかけて配置されており、動画（画像）を表示する。
【００８１】
スクラブバー５３は、動画を構成するピクチャのうちの、表示部５２に表示するピクチャを指定するときに操作される。ここで、スクラブバー５３は、スクラブつまみ５４を有し、そのスクラブつまみ５４の移動が可能な水平方向に延びるバーのGUI(Graphical User Interface)である。スクラブつまみ５４は、ユーザが操作すること等によって、スクラブバー５３に沿って移動させることができ、スクラブつまみ５４の位置に応じて、表示部５２に表示させるピクチャを指定することができる。
【００８２】
なお、ピクチャとは、フレームまたはフィールドを意味する。以下では、ピクチャとして、フレームを採用することとするが、ピクチャとしては、フィールドを採用することも可能である。
【００８３】
タイムコード表示部５５は、スクラブバー５３の下に設けられている。タイムコード表示部５５には、表示部５２に表示されているフレームのタイムコードが表示される。
【００８４】
操作部５６は、タイムコード表示部５５の下に設けられている。操作部５６は、動画の再生（表示部５２での画像の表示）を開始するときに操作される再生ボタンや、再生等を停止するときに操作される停止ボタン、早送りをするときに操作される早送りボタン等からなる。
【００８５】
次に、図４は、図１のカメラ６の構成例を示している。
【００８６】
カメラ６は、撮像部７１、画像処理部７２、マイク７３、音声処理部７４、AVファイル作成部７５、Fyファイル作成部７６、および記録部／通信部７７から構成される。
【００８７】
撮像部７１は、被写体を撮像することにより、SDまたはHDの画像データを取得して、画像処理部７２に供給する。即ち、撮像部７１は、例えば、CCD(Charge Coupled Device)や、CMOS(Complementary Metal Oxide Semiconductor)イメージャなどの光電変換素子と、その光電変換素子上に、光を集光するレンズ等の光学系で構成され、そこに入射する光を光電変換し、その光に対応する（ディジタル）画像データを、画像処理部７２に供給する。
【００８８】
画像処理部７２は、撮像部７１からの画像データに対して、ノイズを除去するノイズ除去処理等の必要な処理を施し、その処理後の画像データを、フレーム単位で、時系列に、AVファイル作成部７５とFyファイル作成部７６に供給する。
【００８９】
マイク７３は、撮像部７１で撮像が行われている間に入力される空気の振動としての音声を集音して、電気信号としての（ディジタル）音声データに変換し、音声処理部７４に供給する。
【００９０】
音声処理部７４は、マイク７３からの音声データに対して、ノイズ除去処理等の必要な処理を施し、その処理後の音声データを、時系列に、AVファイル作成部７５に供給する。
【００９１】
AVファイル作成部７５は、画像処理部７２からの時系列の画像データと、音声処理部７４からの時系列の音声データとを格納したAVファイルを作成し、記録部／通信部７７に供給する。
【００９２】
Fyファイル作成部７６は、画像処理部７２からの画像データの変化の程度を表す変化量を、フレーム単位で求める。また、Fyファイル作成部７６は、必要に応じて、フレームの変化量に基づき、そのフレームをビューワ５１（図３）で表示するときの表示方法を表す表示タイプを、ピクチャ単位で決定する。さらに、Fyファイル作成部７６は、フレーム単位の変化量と表示タイプとのうちのいずれか一方、または両方が格納されたファイル（以下、適宜、Fyファイルという）を、画像処理部７２からの時系列の画像データのメタデータが格納されたメタファイル（メタデータファイル）（の１つ）として作成し、記録部／通信部７７に供給する。
【００９３】
記録部／通信部７７は、AVファイル作成部７５から供給されるAVファイルと、Fyファイル作成部７６から供給される、そのAVファイルに対応するFyファイル、即ち、AVファイル作成部７５から供給されるAVファイルに格納された画像データから作成され、Fyファイル作成部７６から供給されるFyファイルとを、光ディスク７に記録し、または図示せぬ伝送媒体を介して送信する。
【００９４】
ここで、あるAVファイルfavと、そのAVファイルfavに対応するFyファイルfFyとには、例えば、互いに対応するファイルであることが分かるようなファイル名が付される。即ち、AVファイルfavと、そのAVファイルfavに対応するFyファイルfFyとのファイル名は、例えば、拡張子のみが異なるファイル名（拡張子が異なり、拡張子以外の部分が同一のファイル名）にされる。
【００９５】
次に、図５は、図４のAVファイル作成部７５の構成例を示している。
【００９６】
即ち、図５は、光ディスク７が、例えば、本線データとプロキシデータとの両方が記録されるプロフェッショナルディスクであるとした場合のAVファイル作成部７５の構成例を示している。
【００９７】
図５において、AVファイル作成部７５は、本線エンコーダ８１、プロキシエンコーダ８２、およびファイル作成部８３で構成されている。
【００９８】
本線エンコーダ８１は、本線画像エンコーダ８１Ｖと本線音声エンコーダ８１Ａとで構成される。
【００９９】
本線画像エンコーダ８１Ｖには、画像処理部７２（図４）から、本線データとしての画像データが供給される。本線画像エンコーダ８１Ｖは、画像処理部７２からの本線データとしての画像データを、例えば、MPEG2（例えば、MPEG IMX方式等）で符号化（エンコード）し、ファイル作成部８３に供給する。
【０１００】
本線音声エンコーダ８１Ａには、音声処理部７４（図４）から、音声データが供給される。本線音声エンコーダ８１Ａは、音声処理部７４からの音声データを、本線データとしての、例えば、AES(Audio Engineering Society)3方式の音声データに変換し、ファイル作成部８３に供給する。
【０１０１】
プロキシエンコーダ８２は、プロキシ画像エンコーダ８２Ｖとプロキシ音声エンコーダ８２Ａとで構成される。
【０１０２】
プロキシ画像エンコーダ８２Ｖには、画像処理部７２（図４）から、本線データとしての画像データが供給される。プロキシ画像エンコーダ８２Ｖは、画像処理部７２からの本線データとしての画像データの画素数を間引き、これにより、例えば、本線データより解像度（空間解像度）が低いプロキシデータとしての画像データを求める。さらに、プロキシ画像エンコーダ８２Ｖは、プロキシデータとしての画像データを、例えば、MPEG4で符号化し、ファイル作成部８３に供給する。
【０１０３】
プロキシ音声エンコーダ８２Ａには、音声処理部７４（図４）から、音声データが供給される。プロキシ音声エンコーダ８２Ａは、音声処理部７４からの音声データを、プロキシデータとしての、例えば、ITU-T（International Telecommunication Union, Telecommunication Standardization Sector） G.711 A-Law方式の音声データに変換し、ファイル作成部８３に供給する。
【０１０４】
ファイル作成部８３は、本線画像エンコーダ８１Ｖからの本線データとしての画像データ（の符号化データ）、本線音声エンコーダ８１Ａからの本線データとしての音声データ、プロキシ画像エンコーダ８２Ｖからのプロキシデータとしての画像データ、プロキシ音声エンコーダ８２Ａからのプロキシデータとしての音声データを、例えば、再生時間で約２秒分ずつ多重化し、その多重化によって得られるビットストリームが格納された所定のフォーマットのAVファイル、即ち、本線データ（としての画像データおよび音声データ）とプロキシデータ（としての画像データおよび音声データ）とが、再生時間で約２秒分ずつ多重化されたビットストリームが格納された所定のフォーマットのAVファイルを作成し、記録部／通信部７７（図４）に供給する。
【０１０５】
次に、図６は、図４のFyファイル作成部７６の構成例を示している。
【０１０６】
Fyファイル作成部７６は、データ縮小部９１、変化量算出部９２、表示タイプ決定部９３、選択部９４、およびファイル作成部９５で構成されている。
【０１０７】
データ縮小部９１には、画像処理部７２（図４）から、フレーム単位の画像データが供給される。データ縮小部９１は、画像処理部７２からのフレーム単位の画像データの画素数を間引き、その結果得られる画素数の少ない画像データを、変化量算出部９２に供給する。
【０１０８】
即ち、データ縮小部９１は、画像処理部７２からの画像データのフレームの横と縦の画素数が、それぞれ、例えば、1/8になるように間引きを行う。
【０１０９】
従って、画像処理部７２（図４）からデータ縮小部９１に供給される画像データのフレームが、例えば、横×縦が720×480画素で構成されるとすると、データ縮小部９１は、例えば、図７に示すように、画像処理部７２からの720×480画素の画像データの画素を間引くことにより、横と縦の画素数がそれぞれ1/8の90×60画素の画像データとする。
【０１１０】
即ち、データ縮小部９１は、画像処理部７２からの720×480画素の画像データを、例えば、横×縦が8×8画素のブロックに分割し、そのブロックを構成する画素の画素値の平均値等を、ブロックに割り当てることで、90×60画素の画像データを生成する。
【０１１１】
ここで、データ縮小部９１において、画像処理部７２からの画像データの画素数を少なくするのは、データ量を低減して、その後の処理の負担を軽減するためであり、Fyファイル作成部７６が十分な性能を有し、処理の負担を軽減する必要がない場合には、データ縮小部９１において、画像処理部７２からの画像データを、そのまま、後段の変化量算出部９２に供給すること、あるいは、データ縮小部９１を設けずに、Fyファイル作成部７６を構成することができる。
【０１１２】
変化量算出部９２は、データ縮小部９１から供給される画像データの変化の程度を表す変化量を、フレーム単位で求め、時系列に、表示タイプ決定部９３と選択部９４に供給する。なお、変化量算出部９２では、フレーム単位の変化量として、時間的な変化の程度を表す変化量（以下、適宜、時間変化量という）と、空間的な変化を表す変化量（以下、適宜、空間変化量という）とのうちの一方、または両方を求めることができる。
【０１１３】
ここで、時間変化量とは、時間方向の画像の変化の程度を表し、例えば、あるフレームの時間変化量は、そのフレームと、そのフレームの１フレーム前のフレームとの間の画像の変化の程度、即ち、画像の動きの程度を表す。そこで、時間変化量を、以下、適宜、動き情報ともいう。
【０１１４】
また、空間変化量とは、空間方向の画像の変化の程度を表し、例えば、あるフレームの空間変化量とは、そのフレームを構成する画素の画素値の変化の程度、即ち、画像の細かさ（複雑さ）を表す。そこで、空間変化量を、以下、適宜、細かさ情報ともいう。
【０１１５】
表示タイプ決定部９３は、変化量算出部９２から時系列に供給されるフレーム単位の変化量に基づき、そのフレームを表示するときの表示方法を表す表示タイプを、フレーム単位で決定し、選択部９４に供給する。ここで、表示タイプの詳細については、後述する。
【０１１６】
選択部９４は、変化量算出部９２から供給されるフレーム単位の変化量と、表示タイプ決定部９３から供給されるフレーム単位の表示タイプとのうちのいずれか一方、または両方を選択し、ファイル作成部９５に供給する。
【０１１７】
ここで、選択部９４において、どのような選択を行うかは、例えば、あらかじめ設定しておくこと、あるいは、ユーザの操作に応じて決定すること等が可能である。なお、選択部９４において、変化量算出部９２から供給されるフレーム単位の変化量のみを、いわば固定的に選択する場合には、Fyファイル作成部７６は、表示タイプ決定部９３および選択部９４を設けずに構成することができる。
【０１１８】
ファイル作成部９５は、選択部９４から供給される、フレーム単位の変化量と表示タイプとのうちの一方、または両方を格納した所定のフォーマットFyファイルを作成し、記録部／通信部７７（図４）に供給する。
【０１１９】
次に、図８のフローチャートを参照して、図６のFyファイル作成部７６が行う処理（Fyファイル作成処理）について説明する。
【０１２０】
まず最初に、ステップＳ１１において、データ縮小部９１は、画像処理部７２（図４）からの画像データの画素数を間引くデータ縮小を必要に応じて行い、その結果得られる画像データを、変化量算出部９２に供給して、ステップＳ１２に進む。
【０１２１】
ステップＳ１２では、変化量算出部９２が、データ縮小部９１からの画像データを用いて、画像処理部７２（図４）からの画像データの変化の程度を表す変化量を、フレーム単位で求め、時系列に、表示タイプ決定部９３と選択部９４に供給して、ステップＳ１３に進む。
【０１２２】
ステップＳ１３では、表示タイプ決定部９３が、変化量算出部９２からのフレーム単位の変化量に基づき、そのフレームを表示するときの表示方法を表す表示タイプを、フレーム単位で決定し、選択部９４に供給して、ステップＳ１４に進む。
【０１２３】
ステップＳ１４では、選択部９４が、変化量算出部９２から供給されるフレーム単位の変化量と、表示タイプ決定部９３から供給されるフレーム単位の表示タイプとのうちのいずれか一方、または両方を選択し、ファイル作成部９５に供給して、ステップＳ１５に進む。
【０１２４】
ステップＳ１５では、ファイル作成部９５が、選択部９４から供給される、フレーム単位の変化量と表示タイプとのうちの一方、または両方を格納した所定のフォーマットFyファイルを作成し、記録部／通信部７７（図４）に供給して、処理を終了する。
【０１２５】
次に、図９は、図６の変化量算出部９２の構成例を示している。
【０１２６】
上述したように、変化量算出部９２では、フレーム単位の変化量として、時間的な変化の程度を表す動き情報（時間変化量）と、空間的な変化を表す細かさ情報（空間変化量）とのうちの一方、または両方を求めることができる。
【０１２７】
図９の上から１番目は、フレーム単位の変化量として、動き情報のみを求める場合の変化量算出部９２の構成例を示しており、図９の上から２番目は、フレーム単位の変化量として、細かさ情報のみを求める場合の変化量算出部９２の構成例を示している。また、図９の上から３番目（下から１番目）は、フレーム単位の変化量として、動き情報と細かさ情報との両方を求める場合の変化量算出部９２の構成例を示している。
【０１２８】
図９の上から１番目の変化量算出部９２は、動き情報算出部１０１を有し、図９の上から２番目の変化量算出部９２は、細かさ情報算出部１０２を有する。また、図９の上から３番目の変化量算出部９２は、動き情報算出部１０１と細かさ情報算出部１０２とを有する。
【０１２９】
そして、動き情報算出部１０１と細かさ情報算出部１０２とには、データ縮小部９１（図６）からの画像データが供給される。
【０１３０】
動き情報算出部１０１は、データ縮小部９１からの画像データを用い、フレーム単位で動き情報を求めて出力する。細かさ情報算出部１０２は、データ縮小部９１からの画像データを用い、フレーム単位で細かさ情報を求めて出力する。
【０１３１】
次に、図１０を参照して、図９の動き情報算出部１０１において求められるフレーム単位の動き情報について説明する。
【０１３２】
動き情報算出部１０１は、例えば、図１０に示すように、ある動画を構成する時系列のフレームのうちの先頭からi番目のフレームである第iフレームの動き情報として、その１フレーム前の第i-1フレームから第iフレームまでの画像の変化量を求める。なお、この場合、第１フレームの動き情報は、存在しないことになる。但し、第１フレームの動き情報としては、例えば、第２フレームの動き情報と同一の動き情報を採用することができる。あるいは、第０フレームの画像が、画素値がすべて０の画像、または第１フレームと同一の画像であるとして、第１フレームの動き情報を求めることができる。
【０１３３】
次に、図１１は、図９の動き情報算出部１０１の構成例を示している。
【０１３４】
図１１において、動き情報算出部１０１は、動きベクトル検出部１１１と統計量算出部１１２とから構成されている。
【０１３５】
動きベクトル検出部１１１には、データ縮小部９１（図６）からの画像データが供給される。動きベクトル検出部１１１は、データ縮小部９１からの画像データのフレームを、順次、注目フレームとし、注目フレームの１フレーム前のフレーム（以下、適宜、前フレームという）を、例えば、16×16画素のブロック（MPEGにおけるマクロブロック）に分割する。さらに、動きベクトル検出部１１１は、前フレームの各マクロブロックについて、前フレームから注目フレームに向かう動きを表す動きベクトルを求め、統計量算出部１１２に供給する。
【０１３６】
統計量算出部１１２は、動きベクトル検出部１１１からの、前フレームのマクロブロックについて求められた動きベクトルの統計量を求め、注目フレームの動き情報として出力する。
【０１３７】
図１２を参照して、図１１の動き情報算出部１０１の処理について、さらに説明する。
【０１３８】
動き情報算出部１０１では、動きベクトル検出部１１１が、前フレームを16×16画素のマクロブロックに分割し、前フレームの各マクロブロックについて、そのマクロブロックに最も類似する注目フレームの16×16画素のブロック（以下、類似ブロックという）を検出する。そして、動きベクトル検出部１１１は、マクロブロックの、例えば、左上を始点とするとともに、類似ブロックの左上を終点とするベクトルを、マクロブロックの動きベクトル△F0(h,v)として求める。
【０１３９】
いま、前フレームの左からh番目で、上からv番目のマクロブロックの位置をF0(h,v)と表すとともに、マクロブロックF0(h,v)から、そのマクロブロックF0(h,v)の動きベクトル△F0(h,v)だけ移動した位置の注目フレームの16×16画素のブロック、即ち、類似ブロックの位置をF1(h,v)と表すこととすると、マクロブロックF0(h,v)の動きベクトル△F0(h,v)は、式△F0(h,v)=F1(h,v)-F0(h,v)で表される。
【０１４０】
統計量算出部１１２は、前フレームのマクロブロックについて求められた動きベクトルの統計量として、例えば、前フレームのすべてのマクロブロックの動きベクトル△F0(h,v)の大きさ|△F0(h,v)|の総和D0=Σ|△F0(h,v)|を求め、この総和D0を、注目フレームの動き情報として出力する。
【０１４１】
なお、総和D0=Σ|△F0(h,v)|におけるサメーションΣは、hを、１から、前フレームの横方向のマクロブロックの数までに変えるとともに、vを、１から、前フレームの縦方向のマクロブロックの数までに変えてのサメーションを表す。
【０１４２】
ここで、前フレームの各マクロブロックF0(h,v)の動きベクトル△F0(h,v)の大きさが大きいと、その和である動き情報D0も大きくなる。従って、注目フレームの動き情報D0が大きい場合には、注目フレームの画像の動きも大きい（激しい）ということになる。
【０１４３】
なお、上述の場合には、前フレームのマクロブロックについて求められた動きベクトルの統計量として、前フレームのすべてのマクロブロックの動きベクトル△F0(h,v)の大きさ|△F0(h,v)|の総和D0=Σ|△F0(h,v)|を求めるようにしたが、前フレームのマクロブロックについて求められた動きベクトルの統計量としては、その他、例えば、前フレームのマクロブロックについて求められた動きベクトルの分散を採用することが可能である。
【０１４４】
この場合、統計量算出部１１２では、前フレームのすべてのマクロブロックの動きベクトル△F0(h,v)の平均値△aveが求められ、前フレームのすべてのマクロブロックF0(h,v)の動きベクトル△F0(h,v)の分散σ0が、例えば、式σ0=Σ(△F0(h,v)-△ave)2を演算することで求められる。
【０１４５】
なお、分散σ0=Σ(△F0(h,v)-△ave)2におけるサメーションΣは、hを、１から、前フレームの横方向のマクロブロックの数までに変えるとともに、vを、１から、前フレームの縦方向のマクロブロックの数までに変えてのサメーションを表す。
【０１４６】
分散σ0も、総和D0と同様に、注目フレームの画像の動きが大きい（激しい）と大きくなる。
【０１４７】
ここで、図５の本線画像エンコーダ８１Ｖにおいて、画像データの符号化が行われる場合に、動きベクトル△F0(h,v)が求められるときには、統計量算出部１１２（図１１）は、本線画像エンコーダ８１Ｖで求められる動きベクトル△F0(h,v)を用いて、上述したような統計量を求めることができる。この場合、図１１の動き情報算出部１０１は、動きベクトル検出部１１１を設けずに構成することができる。
【０１４８】
次に、図１３は、図９の動き情報算出部１０１の他の構成例を示している。
【０１４９】
図１３において、動き情報算出部１０１は、ヒストグラム作成部１２１、ヒストグラム記憶部１２２、および差分演算部１２３から構成されている。
【０１５０】
ヒストグラム作成部１２１には、データ縮小部９１（図６）からの画像データが供給される。ヒストグラム作成部１２１は、データ縮小部９１からの画像データのフレームを、順次、注目フレームとし、注目フレームの画素値の、いわば簡略的なヒストグラムを作成し、注目フレームのヒストグラムとして、ヒストグラム記憶部１２２と差分演算部１２３に供給する。
【０１５１】
ヒストグラム記憶部１２２は、ヒストグラム作成部１２１から供給される注目フレームのヒストグラムを記憶する。ここで、ヒストグラム記憶部１２２は、少なくとも、２フレーム分のヒストグラムを記憶することができるだけの記憶容量を有しており、ヒストグラム作成部１２１から供給される今回の注目フレームのヒストグラムと、前回の注目フレーム、即ち、前フレームのヒストグラムとを記憶する。
【０１５２】
差分演算部１２３は、ヒストグラム作成部１２１から供給される注目フレームのヒストグラムと、ヒストグラム記憶部１２２に記憶された前フレームのヒストグラムとの、後述する差分絶対値和を求め、注目フレームの動き情報として出力する。
【０１５３】
図１４を参照して、図１３の動き情報算出部１０１の処理について、さらに説明する。
【０１５４】
データ縮小部９１（図６）からヒストグラム作成部１２１に供給される画像データの画素値が、例えば、０乃至２５５の整数値が表現可能な８ビットで表されるとすると、ヒストグラム作成部１２１は、０乃至２５５の範囲を、例えば、０乃至３１，３２乃至６３，６４乃至９５，９６乃至１２７，１２８乃至１５９，１６０乃至１９１，１９２乃至２２３，２２４乃至２５５の８つの小範囲に８等分し、各小範囲に含まれる画素値の度数を求めることにより、注目フレームの簡略的なヒストグラムを作成する。
【０１５５】
例えば、いま、第i+1フレームが注目フレームであるとすると、差分演算部１２３では、図１４に示すように、注目フレームである第i+1フレームと、前フレームである第iフレームとのヒストグラムの同一の小範囲の度数どうしの差分値の絶対値△（図１４において影を付して示す部分）が求められる。さらに、差分演算部１２３では、ヒストグラムの８つの小範囲について求められた度数の差分値の絶対値の総和（差分絶対値和）Σ△が求められ、注目フレームの動き情報として出力される。
【０１５６】
ここで、注目フレームの動きが大きい（激しい）場合には、注目フレームの画素値の度数分布は、前フレームの画素値の度数分布と異なるものになる。従って、注目フレームの差分絶対値和Σ△が大きい場合には、注目フレームの画像の動きも大きい（激しい）ということになる。
【０１５７】
次に、図１５は、図９の細かさ情報算出部１０２の構成例を示している。
【０１５８】
図１５において、細かさ情報算出部１０２は、DCT(Discrete Cosine Transform)変換部１３１、重み係数算出部１３２、および積算部１３３から構成されている。
【０１５９】
DCT変換部１３１には、データ縮小部９１（図６）からの画像データが供給される。DCT変換部１３１は、データ縮小部９１からの画像データのフレームを、順次、注目フレームとし、注目フレームを、例えば、8×8画素のブロックに分割する。さらに、DCT変換部１３１は、注目フレームの各ブロックをDCT変換し、各ブロックについて得られる8×8個のDCT係数を、積算部１３３に供給する。
【０１６０】
重み係数算出部１３２は、ブロックの8×8個のDCT係数それぞれに付す重みを求め、積算部１３３に供給する。
【０１６１】
積算部１３３は、DCT変換部１３１から供給されるブロックの8×8個のDCT係数それぞれに、重み係数算出部１３２から供給される重みを付して積算し、積算値を求める。さらに、積算部１３３は、注目フレームの各ブロックについて求められた積算値の総和を求め、注目フレームの細かさ情報として出力する。
【０１６２】
図１６を参照して、図１５の細かさ情報算出部１０２の処理について、さらに説明する。
【０１６３】
図１６左は、DCT変換の基底画像を示している。基底画像は、8×8個のパターン（周波数成分）からなり、右側のパターンほど、また下側のパターンほど、高い周波数成分のパターンとなる。
【０１６４】
ブロックの8×8個のDCT係数のうちの、左からi（i＝１，２，・・・，８）番目で、上からj（j＝１，２，・・・，８）番目のDCT係数Fi-1,j-1は、基底画像の左からi番目で、上からj番目のパターンの周波数成分がブロックに含まれている程度（度合い）を表す。
【０１６５】
図１６右は、図１５の重み係数算出部１３２が算出する重みGi-1,j-1を示している。
【０１６６】
重みGi-1,j-1は、DCT係数Fi-1,j-1に付す重みであり、重み係数算出部１３２は、重みGi-1,j-1を、例えば、式Gi-1,j-1=i×jにしたがって求める。従って、重み係数算出部１３２では、高い周波数成分のDCT係数Fi-1,j-1に付す重みGi-1,j-1ほど、大きな値の重みが求められる。
【０１６７】
図１５の積算部１３３は、DCT変換部１３１から供給されるブロックのDCT係数Fi-1,j-1に、重み係数算出部１３２から供給される重みGi-1,j-1を乗算し、乗算値Gi-1,j-1×Fi-1,j-1を求める。そして、積算部１３３は、ブロックの8×8個のDCT係数Fi-1,j-1それぞれについて得られる乗算値Gi-1,j-1×Fi-1,j-1を積算し、積算値V=ΣGi-1,j-1×Fi-1,j-1を求める。ここで、積算値V=ΣGi-1,j-1×Fi-1,j-1におけるサメーションΣは、i,jを、それぞれ、１から８までに変えてのサメーションを表す。
【０１６８】
さらに、積算部１３３は、注目フレームのすべてのブロックについて得られた積算値Vの総和Kを求め、注目フレームの細かさ情報として出力する。
【０１６９】
ここで、注目フレームに高周波成分が含まれるほど、積算値Vの総和Kである細かさ情報は大きくなるので、注目フレームの画像が細かい（複雑な）画像であるということになる。
【０１７０】
次に、図１７は、図９の細かさ情報算出部１０２の他の構成例を示している。
【０１７１】
図１７において、細かさ情報算出部１０２は、平均値算出部１４１、差分値演算部１４２、および積算部１４３から構成されている。
【０１７２】
平均値算出部１４１と差分値演算部１４２には、データ縮小部９１（図６）からの画像データが供給される。平均値算出部１４１は、データ縮小部９１からの画像データのフレームを、順次、注目フレームとし、注目フレームを、例えば、図１８に示すように、8×8画素のブロックに分割する。さらに、平均値算出部１４１は、注目フレームの各ブロックの画素値の平均値を求め、差分値演算部１４２に供給する。
【０１７３】
ここで、8×8画素のブロックのラスタスキャン順で、k番目の画素の画素値をPkと表すこととすると、平均値算出部１４１は、平均値Paveを、式Pave=1/(8×8)×ΣPkにしたがって求める。なお、平均値Pave=1/(8×8)×ΣPkにおけるサメーションΣは、kを、１から８×８（＝６４）までに変えてのサメーションを表す。
【０１７４】
差分値演算部１４２は、平均値算出部１４１と同様に、注目フレームを、8×8画素のブロックに分割し、ブロックの各画素値Pkと、平均値算出部１４１から供給される、そのブロックの画素値の平均値Paveとの差分値の絶対値|Pk-Pave|を求め、積算部１４３に供給する。
【０１７５】
積算部１４３は、差分値演算部１４２から供給されるブロックの各画素について求められた差分値の絶対値|Pk-Pave|を積算し、積算値Q=Σ|Pk-Pave|を求める。ここで、積算値Q=Σ|Pk-Pave|におけるサメーションΣは、kを、１から８×８（＝６４）までに変えてのサメーションを表す。
【０１７６】
さらに、積算部１４３は、注目フレームのすべてのブロックについて得られた積算値Qの総和を求め、注目フレームの細かさ情報として出力する。
【０１７７】
なお、注目フレームについて求められる、積算値Qの総和は、イントラAC(Intra-AC)と呼ばれるもので、その値が大きいほど、注目フレームにおける画素値にばらつきが大きい。従って、積算値Qの総和である細かさ情報が大きいほど、注目フレームの画像が細かい（複雑な）画像であるということになる。
【０１７８】
ここで、本実施の形態では、上述した動き情報や細かさ情報といった変化量は、後述するように、スクラブ（を含む変速再生）に利用されるが、変化量は、その他、例えば、シーンチェンジを検出する場合や、MPEG符号化の効率化を図る場合などに利用することができる。
【０１７９】
次に、図１９から図２５を参照して、図６の表示タイプ決定部９３について説明する。
【０１８０】
図１９は、変化量算出部９２（図６）で求められるフレームごとの変化量を示している。なお、図１９において、横軸はフレーム（先頭から何番目のフレームであるか）を表し、縦軸は変化量を表す。
【０１８１】
いま、変化量が、例えば、動き情報であるとすると、動きの激しい（大きい）フレームでは、変化量も大きくなり、動きのない（少ない）フレームでは、変化量は小さくなる。
【０１８２】
表示タイプ決定部９３（図６）は、変化量算出部９２において求められる、図１９に示したようなフレーム単位の変化量に基づき、各フレームを表示するときの表示方法を表す表示タイプを、複数の表示タイプの中から決定する。
【０１８３】
図２０は、表示タイプ決定部９３が決定する表示タイプの例を示している。
【０１８４】
図２０においては、表示タイプとして、静止画での表示を表す静止画タイプV1、並びに、フレームを表示するときの解像度やフレームを表示するときの表示レートが異なる通常タイプV2、および高表示レート低解像度タイプV3の３つがある。
【０１８５】
ここで、フレームを表示するときの解像度とは、ディスプレイ４１（図２）等の表示装置に表示される画像の空間解像度を意味する。例えば、本線データとプロキシデータそれぞれとしての画像データについては、本線データの方が解像度が高く、プロキシデータの方が解像度が低い。
【０１８６】
また、フレームを表示するときの表示レートとは、ディスプレイ４１等の表示装置において表示を更新する周波数（周期）を意味する。例えば、動画のフレームレート（例えば、30Hzなど）と同一の表示レートで表示を更新するとともに、表示対象のフレームを、フレームレートと同一のレートで、あるフレームからその次のフレーム（あるフレームの時間的に次のフレーム）に更新すれば、動画が１倍速で表示される。
【０１８７】
さらに、例えば、動画のフレームレートの２倍の表示レートで表示を更新するとともに、表示対象のフレームを、フレームレートの２倍のレートで、あるフレームからその次のフレームに更新すれば、動画が２倍速で表示される。
【０１８８】
なお、例えば、動画のフレームレートと同一の表示レートで表示を更新するとともに、表示対象のフレームを、フレームレートの２倍のレートで、あるフレームからその次のフレームに更新すれば、動画は、やはり、２倍速で表示される。
【０１８９】
但し、動画のフレームレートの２倍の表示レートで表示を更新するとともに、表示対象のフレームを、フレームレートの２倍のレートで更新する場合には、動画を構成するフレームが、いわばコマ落ちすることなくすべて表示されるが、動画のフレームレートと同一の表示レートで表示を更新するとともに、表示対象のフレームを、フレームレートの２倍のレートで更新する場合には、動画を構成するフレームが１フレームおきに表示されるコマ落ち状態となる。
【０１９０】
従って、表示対象のフレームが、フレームレートよりも高いレートで更新される場合には、表示レートを高くすることにより、コマ落ちを防止（低減）することができる。
【０１９１】
静止画タイプV1のフレームについては、例えば、表示対象のフレームが変更されても、その表示対象のフレームの画像が、直前に表示されたフレーム（の画像）と同一の画像であるとみなすことができる限り、直前に表示されたフレーム（の画像）が表示される（し続けられる）。
【０１９２】
通常タイプV2のフレームについては、例えば、動画のフレームレートと同一の表示レート（以下、適宜、通常レートという）で、本線データとしての画像データと同一の解像度（プロキシデータとしての画像データよりも高い解像度）（以下、適宜、通常解像度という）で、画像が表示される。
【０１９３】
高表示レート低解像度タイプV3のフレームについては、例えば、通常レートよりも高い、例えば、通常レートの２倍の表示レートで、プロキシデータとしての画像データと同一の解像度（本線データとしての画像データよりも低い解像度）で、画像が表示される。
【０１９４】
表示タイプとして、図２０に示したように、３つの静止画タイプV1、通常タイプV2、および高表示レート低解像度タイプV3がある場合、変化量算出部９２では、フレームの時間的な変化の程度を表す動き情報が、変化量として求められる。そして、表示タイプ決定部９３は、例えば、各フレームの変化量（動き情報）と、２つの所定の閾値とを比較し、その比較の結果に基づき、フレームの表示タイプを、静止画タイプV1、通常タイプV2、または高表示レート低解像度タイプV3のうちのいずれかに決定する。
【０１９５】
即ち、図２１は、図１９に示したフレーム単位の変化量に基づき、表示タイプ決定部９３がフレーム単位で決定する表示タイプを示している。
【０１９６】
表示タイプ決定部９３は、フレーム単位の変化量（動き情報）を、式L<Hの関係がある閾値Lまたは閾値Hと比較する。そして、表示タイプ決定部９３は、動き情報が閾値H以上のフレーム、即ち、動き情報が時間的な変化の程度が大であることを表すフレームの表示タイプを、低い解像度、または高い表示レートの低解像度／高表示レートタイプの一種である高表示レート低解像度タイプV3に決定する。
【０１９７】
ここで、例えば、編集で行われるスクラブにおいて、時間的な変化の程度が大のフレーム、つまり、動きが大きいフレームの表示においてコマ落ちが生じると、画像の時間的な変化を見逃しやすくなるため、動きが大きいフレームは、高い表示レートで表示することが望ましい。
【０１９８】
しかしながら、表示レートを高くすると、スクラブを行う装置にかかる負担が大きくなる。さらに、動きが大きいフレームのデータ量は多いため、その処理の負担は、動きが大きくないフレームの処理の負担よりも大きい。
【０１９９】
そこで、本実施の形態では、動きが大きいフレームについては、高い表示レートで表示するが、その代わりに、解像度が低い画像を表示する低解像度／高表示レートタイプの一種である高表示レート低解像度タイプV3を採用することとする。解像度が低い画像は、解像度が高い画像に比較して、データ量が少ないので、動きが大きいフレームについて、低い解像度の画像を、高い表示レートで表示することにより、編集において画像の時間的な変化を見逃すことを防止しながら、スクラブを行う装置にかかる負担を低減することができる。
【０２００】
一方、表示タイプ決定部９３は、動き情報が閾値L未満のフレーム、即ち、動き情報が時間的な変化の程度が小であることを表すフレームの表示タイプを、静止画での表示を表す静止画タイプV1に決定する。
【０２０１】
ここで、例えば、編集で行われるスクラブにおいて、時間的な変化の程度が小のフレーム、つまり、動きがない（ほとんどない）フレームが連続している場合に、そのようなフレームの中で、表示対象のフレームが更新されたときに、ディスプレイ４１（図２）等の表示装置の表示を、直前に表示されたフレーム（の画像）から、更新後の表示対象のフレーム（の画像）に変更しても、表示装置に表示される画像は（ほとんど）変化しない。
【０２０２】
このように、表示装置に表示される画像が変化しないのにもかかわらず、表示対象のフレームが更新されたときに、表示装置の表示を、直前に表示されたフレームから、更新後の表示対象のフレームに変更することは、スクラブを行う装置に、いわば無駄な負担をかけることになる。
【０２０３】
また、動きがない（ほとんどない）フレームが連続している場合に、そのようなフレームの中で、表示対象のフレームが更新されたときに、ディスプレイ４１（図２）等の表示装置の表示を、直前に表示されたフレームから、更新後の表示対象のフレームに変更すると、表示装置に表示される画像が僅かに変化することがある。この場合、動きがないフレームが連続し、編集点として設定されることがほとんどないフレームの区間において、スクラブを行う装置を操作するユーザの注意を、いわば無駄にひくことになり、ユーザに負担をかけることになる。
【０２０４】
そこで、本実施の形態では、動きがないフレームについては、表示対象のフレームが変更されても、その表示対象のフレームの画像が、直前に表示されたフレームと同一の画像であるとみなすことができる限り、直前に表示されたフレーム（の画像）が表示される静止画タイプV1を採用することとする。これにより、スクラブを行う装置や、その操作を行うユーザに無駄な負担をかけることを防止することができる。
【０２０５】
表示タイプ決定部９３は、動き情報が閾値H以上のフレーム、および動き情報が閾値L未満のフレーム以外のフレーム、つまり、動き情報が、閾値L以上で閾値H未満のフレームの表示タイプを、通常タイプV2に決定する。
【０２０６】
即ち、ある程度の動きがあるが、それほど大きな動きではないフレームについては、通常レート（動画のフレームレートと同一の表示レート）で、かつ、通常解像度で、画像を表示する通常タイプV2が採用される。
【０２０７】
ここで、動画を構成する時系列のフレーム（の並び）において、表示タイプが静止画タイプV1のフレームが連続する区間を、静止画区間といい、表示タイプが通常タイプV2のフレームが連続する区間を、通常区間という。また、表示タイプが高表示レート低解像度タイプV3のフレームが連続する区間を、高表示レート低解像度区間という。
【０２０８】
次に、図２２は、図６の表示タイプ決定部９３の構成例を示している。
【０２０９】
図２２において、表示タイプ決定部９３は、記憶部１６１、閾値処理部１６２、連続性判定部１６３、および決定部１６４で構成されている。
【０２１０】
記憶部１６１には、変化量算出部９２（図６）からフレーム単位の変化量が供給される。記憶部１６１は、変化量算出部９２からのフレーム単位の変化量を一時記憶する。
【０２１１】
閾値処理部１６２は、記憶部１６１に記憶されたフレーム単位の変化量と、閾値HまたはLとを比較し、その比較の結果を表す比較情報を、フレーム単位で、連続性判定部１６３と決定部１６４に供給する。
【０２１２】
連続性判定部１６３は、閾値処理部１６２からのフレーム単位の比較情報に基づき、閾値H以上の変化量のフレームが、ある複数のフレーム数であるNフレーム以上連続するかどうかと、閾値H未満の変化量のフレームが、Nフレーム以上連続するかどうか等を判定し、その判定結果を表す判定情報を、決定部１６４に供給する。
【０２１３】
決定部１６４は、閾値処理部１６２からの比較情報や、連続性判定部１６３からの判定情報に基づき、動画を構成する各フレームの表示タイプを決定して出力する。
【０２１４】
次に、図２３および図２４のフローチャートを参照して、図２２の表示タイプ決定部９３の処理について説明する。
【０２１５】
表示タイプ決定部９３は、変化量算出部９２（図６）からフレーム単位の変化量が供給されると、ステップＳ４１において、そのフレーム単位の変化量を、記憶部１６１にキャッシュ（一時記憶）させ、ステップＳ４２に進む。
【０２１６】
ここで、変化量算出部９２から表示タイプ決定部９３には、例えば、動き情報が変化量として供給されることとする。また、表示タイプ決定部９３は、例えば、図２０に示した静止画タイプV1、通常タイプV2、および高表示レート低解像度タイプV3のうちの３つの中から、各フレームの表示タイプを決定することとする。
【０２１７】
ステップＳ４２では、閾値処理部１６２が、記憶部１６１に記憶されたフレーム単位の変化量（動き情報）と、閾値HまたはL（の一方、あるいは両方）とを比較する閾値処理を行い、フレーム単位の変化量と、閾値HまたはLとの比較の結果を表す比較情報を、フレーム単位で、連続性判定部１６３に供給して、ステップＳ４３に進む。
【０２１８】
ステップＳ４３では、連続性判定部１６３が、いま、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームのうちの、例えば、まだ、注目フレームとしていない時系列順で最も先行するフレームを、注目フレームに選択し、ステップＳ４４に進む。
【０２１９】
ステップＳ４４では、連続性判定部１６３が、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値H以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H以上のフレームが、上述した複数フレーム数であるNフレーム以上連続して存在するかどうかを判定する。
【０２２０】
ステップＳ４４において、注目フレームの変化量が閾値H以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H以上のフレームがNフレーム以上連続して存在すると判定された場合、連続性判定部１６３は、その判定の結果を表す判定情報を、決定部１６４に供給して、ステップＳ４５に進む。
【０２２１】
ステップＳ４５では、決定部１６４は、連続性判定部１６３からの判定情報に基づき、注目フレームの表示タイプを、高表示レート低解像度タイプV3に決定し、ステップＳ５０に進む。
【０２２２】
ここで、ステップＳ４４およびＳ４５によれば、注目フレームの変化量が閾値H以上であるだけでなく、さらに、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H以上のフレームがNフレーム以上連続して存在する場合に、注目フレームの表示タイプが、高表示レート低解像度タイプV3に決定されるが、これは、次のような理由による。
【０２２３】
即ち、後述するように、表示タイプが静止画タイプV1、通常タイプV2、および高表示レート低解像度タイプVの３つの中から決定される場合には、スクラブにおいて、表示タイプが静止画タイプV1のフレームと、通常タイプV2のフレームとについては、解像度が高い画像（通常解像度の画像）、つまり、（プロキシデータよりも）データ量が多い本線データの画像データを処理して画像が表示される。一方、表示タイプが高表示レート低解像度タイプV3のフレームについては、解像度が低い画像、つまり、（本線データよりも）データ量が少ないプロキシデータの画像データを処理して画像が表示される。
【０２２４】
いま、例えば、光ディスク７（図１）が、本線データとプロキシデータとが記録されるプロフェッショナルディスクである場合において、その光ディスク７に記録された本線データ、またはプロキシデータを用いてスクラブを行うこととすると、表示タイプが静止画タイプV1または通常タイプV2のフレームについては、光ディスク７から本線データを読み出す必要があり、高表示レート低解像度タイプV3のフレームについては、光ディスク７からプロキシデータを読み出す必要がある。
【０２２５】
光ディスク７において、本線データとプロキシデータとは、物理的に離れた位置に記録されるため、例えば、極端には、表示タイプが、静止画タイプV1または通常タイプV2のフレームと、高表示レート低解像度タイプV3のフレームとが交互に現れると、光ディスク７（に記録されたデータ）を対象としたスクラブ時に、シークが頻繁に発生し、スクラブを行う装置の性能によっては、スクラブバー５３（図３）の操作によって指定されたフレームの表示をスムースに行うことが困難になることがある。
【０２２６】
そこで、本実施の形態では、シークが頻繁に発生するのを防止するために、表示タイプが高表示レート低解像度タイプV3のフレームが、Nフレーム以上連続し、かつ、表示タイプが静止画タイプV1または通常タイプV2のフレームも、Nフレーム以上連続するように、表示タイプが決定される。
【０２２７】
即ち、例えば、上述したように、ステップＳ４４およびＳ４５において、注目フレームの変化量が閾値H以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H以上のフレームがNフレーム以上連続して存在する場合に、注目フレームの表示タイプが、高表示レート低解像度タイプV3に決定される。
【０２２８】
ここで、フレーム数Nは、例えば、光ディスク７を再生するドライブ５等の最大のシーク時間や、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームの総数等を考慮して決定することができる。また、フレーム数Nは、ユーザの操作に対応して決定しても良い。
【０２２９】
また、フレーム数Nは、表示タイプを決定するときに、変化量が閾値H以上のフレームが連続して存在すべき最小のフレーム数（さらには、後述するように、変化量が閾値H未満のフレームが連続して存在すべき最小のフレーム数）であるので、以下、適宜、最小限度フレーム数Nという。
【０２３０】
なお、シークが問題となるのは、動画を構成する時系列のフレームにおいて、本線データを用いて画像が表示される静止画タイプV1または通常タイプV2のフレームと、プロキシデータを用いて画像が表示される高表示レート低解像度タイプV3のフレームとが、頻繁に切り替わる場合である。いずれも本線データを用いて画像が表示される静止画タイプV1のフレームと、通常タイプV2のフレームとが切り替わる場合は、シークは問題とならない。
【０２３１】
一方、ステップＳ４４において、注目フレームの変化量が閾値H以上でないと判定されるか、または、注目フレームの変化量が閾値H以上であっても、注目フレームの直前、直後、および前後のいずれにも、変化量が閾値H以上のフレームが最小限度フレーム数N以上連続して存在しないと判定された場合、ステップＳ４６に進み、連続性判定部１６３が、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値H未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H未満のフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０２３２】
ステップＳ４６において、注目フレームの変化量が閾値H未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H未満のフレームが最小限度フレーム数N以上連続して存在すると判定された場合、連続性判定部１６３は、その判定の結果を表す判定情報を、決定部１６４に供給して、ステップＳ４７に進む。
【０２３３】
注目フレームの変化量が閾値H未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H未満のフレームが最小限度フレーム数N以上連続して存在するとの判定の結果を表す判定情報の供給を連続性判定部１６３から受けた決定部１６４は、ステップＳ４７において、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値L以上であるかどうかを判定する。
【０２３４】
ステップＳ４７において、注目フレームの変化量が閾値L以上であると判定された場合、即ち、注目フレームの変化量が閾値L以上閾値H未満である場合、ステップＳ４８に進み、決定部１６４は、注目フレームの表示タイプを、通常タイプV2に決定して、ステップＳ５０に進む。
【０２３５】
また、ステップＳ４７において、注目フレームの変化量が閾値L以上でないと判定された場合、即ち、注目フレームの変化量が閾値L未満である場合、ステップＳ４９に進み、決定部１６４は、注目フレームの表示タイプを、静止画タイプV1に決定して、ステップＳ５０に進む。
【０２３６】
ここで、ステップＳ４６乃至Ｓ４９によれば、注目フレームの変化量が閾値H未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H未満のフレームがNフレーム以上連続して存在する場合に、注目フレームの表示タイプが、その注目フレームの変化量が閾値L以上であれば、通常タイプV2に決定され、注目フレームの変化量が閾値L未満であれば、静止画タイプV1に決定されるが、これは、上述したように、スクラブ時に、シークが頻繁に発生することを防止するためである。
【０２３７】
ステップＳ５０では、連続性判定部１６３が、いま、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームの中で、まだ、注目フレームに選択していないフレームがあるかどうかを判定する。
【０２３８】
ステップＳ５０において、まだ、注目フレームに選択していないフレームがあると判定された場合、ステップＳ４３に戻り、上述したように、まだ、注目フレームに選択していないフレームが、注目フレームに新たに選択され、以下、同様の処理が繰り返される。
【０２３９】
また、ステップＳ５０において、注目フレームに選択していないフレームがないと判定された場合、表示タイプ決定部９３は、処理を終了する。
【０２４０】
一方、ステップＳ４６において、注目フレームの変化量が閾値H未満でないと判定されるか、または、注目フレームの変化量が閾値H未満であっても、注目フレームの直前か、直後、および前後のいずれにも、変化量が閾値H未満のフレームが最小限度フレーム数N以上連続して存在しないと判定された場合、図２４のステップＳ６１に進み、連続性判定部１６３は、注目フレームの直前か、直後、または前後に亘って、変化量が閾値Hをまたぐフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０２４１】
ここで、図２５は、フレーム単位の変化量を示している。なお、図２５において、横軸はフレームを表し、縦軸は変化量を表す。また、図２５では、閾値HとLのうちの、閾値Hのみを図示してある。
【０２４２】
注目フレームの変化量が閾値H以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H以上のフレームがNフレーム以上連続して存在する場合には、図２３のステップＳ４５において、注目フレームの表示タイプは、高表示レート低解像度タイプV3に決定される。
【０２４３】
また、注目フレームの変化量が閾値H未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値H未満のフレームが最小限度フレーム数N以上連続して存在する場合には、図２３のステップＳ４８またはＳ４９において、注目フレームの表示タイプは、通常タイプV2または静止画タイプV1に決定される。
【０２４４】
従って、図２４のステップＳ６１の処理が行われるのは、注目フレームの直前か、直後、および前後のいずれにも、変化量が閾値H以上のフレームがNフレーム以上連続して存在せず、かつ、変化量が閾値H未満のフレームも最小限度フレーム数N以上連続して存在しない場合、つまり、注目フレームが、例えば、図２５の区間T1,T2,T3,T4として示すような、変化量が閾値Hをまたぐフレームが存在する区間（変化量が閾値H以上のフレームと、閾値H未満のフレームとが混在する区間）であり、かつ、変化量が閾値H以上のフレームが連続するフレーム数と、変化量が閾値H未満のフレームが連続するフレーム数が、多くても最小限度フレーム数N未満の区間（以下、適宜、混在区間という）のフレームである場合である。
【０２４５】
なお、混在区間は、図２５に示すように、必ず、変化量が閾値H以上のフレームがNフレーム以上連続して存在する区間（以下、適宜、大変化量区間という）と、変化量が閾値H未満のフレームが最小限度フレーム数N以上連続して存在する区間（以下、適宜、小変化量区間という）との間か、２つの大変化量区間どうしの間、または、２つの小変化量区間どうしの間に挟まれる形で存在する。
【０２４６】
混在区間は、区間長（フレーム数）が最小限度フレーム数N以上の区間と、最小限度フレーム数N未満の区間とに分けることができる。ここで、図２５における混在区間T1乃至T4のうちの、混在区間T2は、区間長が最小限度フレーム数N以上の区間であり、他の混在区間T1,T3,T4は、区間長が最小限度フレーム数N未満の区間である。
【０２４７】
また、混在区間は、大変化量区間と小変化量区間との間に挟まれる区間、大変化量区間どうしの間に挟まれる区間、または小変化量区間どうしの間に挟まれる区間のうちのいずれかに分けることができる。ここで、図２５における混在区間T1乃至T4のうちの、混在区間T1とT2は、大変化量区間どうしの間に挟まれる区間であり、混在区間T3は、大変化量区間と小変化量区間との間に挟まれる区間である。また、混在区間T4は、小変化量区間どうしの間に挟まれる区間である。
【０２４８】
図２４に戻り、上述したように、ステップＳ６１において、連続性判定部１６３は、注目フレームの直前か、直後、または前後に亘って、変化量が閾値Hをまたぐフレームが、最小限度フレーム数N以上連続して存在するかどうか、即ち、注目フレームが存在する混在区間が、区間長が最小限度フレーム数N以上の区間であるか否かを判定する。
【０２４９】
ステップＳ６１において、注目フレームの直前か、直後、または前後に亘って、変化量が閾値Hをまたぐフレームが、最小限度フレーム数N以上連続して存在すると判定された場合、即ち、注目フレームが存在する混在区間が、例えば、図２５の混在区間T2のような、区間長が最小限度フレーム数N以上の区間である場合、ステップＳ６２に進み、決定部１６４は、注目フレームの表示タイプを、例えば、通常タイプV2に決定して、図２３のステップＳ５０に進み、以下、上述した処理が行われる。
【０２５０】
即ち、変化量が閾値Hをまたぐフレームが、最小限度フレーム数N以上連続して存在する混在区間のフレームについては、そのすべてのフレームの表示タイプを、本線データ（としての画像データ）を用いて画像が表示される通常タイプV2とするか、または、プロキシデータ（としての画像データ）を用いて画像が表示される高表示レート低解像度タイプV3にすることによって、シークが頻繁に発生することを防止することができる。
【０２５１】
そこで、本実施の形態では、変化量が閾値Hをまたぐフレームが最小限度フレーム数N以上連続して存在する混在区間のフレームの表示タイプは、すべて、通常タイプV2とされる。なお、変化量が閾値Hをまたぐフレームが最小限度フレーム数N以上連続して存在する混在区間のフレームの表示タイプは、すべて、通常タイプV2とする他、高表示レート低解像度タイプV3とすることが可能である。
【０２５２】
ここで、シークが頻繁に発生することを防止することだけに注目すれば、混在区間のフレームの表示タイプを、本線データを用いて画像が表示される静止画タイプV1とすることも可能である。しかしながら、混在区間は、変化量が閾値Hをまたぐフレームが存在する区間であるから、混在区間のフレームの表示タイプを、変化量が閾値L未満のフレームの表示タイプである静止画タイプV1とすることは好ましくない。このため、混在区間のフレームの表示タイプは、通常タイプV2または高表示レート低解像度タイプV3のうちのいずれかとされる。
【０２５３】
一方、ステップＳ６１において、注目フレームの直前か、直後、および前後のいずれにも、変化量が閾値Hをまたぐフレームが、最小限度フレーム数N以上連続して存在しないと判定された場合、即ち、注目フレームが存在する混在区間（以下、適宜、注目混在区間という）が、例えば、図２５の混在区間T1やT3,T4のような、区間長が最小限度フレーム数N未満の区間である場合、ステップＳ６３に進み、連続性判定部１６３は、区間長が最小限度フレーム数N未満の注目混在区間の左側にある、時間的に先行するフレームのうちの、注目混在区間に隣接するフレーム（以下、適宜、左フレームという）の変化量と、注目混在区間の右側にある、時間的に後行するフレームのうちの、注目混在区間に隣接するフレーム（以下、適宜、右フレームという）の変化量とのうちのいずれか一方の変化量が閾値H以上であり、他方の変化量が閾値H未満であるかどうか、つまり、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間であるかどうかを判定する。
【０２５４】
ステップＳ６３において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間であると判定された場合、即ち、区間長が最小限度フレーム数N未満の注目混在区間が、例えば、図２５の混在区間T3のような、大変化量区間と小変化量区間とに挟まれる混在区間である場合、ステップＳ６２に進み、上述したように、決定部１６４は、注目フレームの表示タイプを、通常タイプV2に決定して、図２３のステップＳ５０に進み、以下、上述した処理が行われる。
【０２５５】
即ち、区間長が最小限度フレーム数N未満の注目混在区間を挟む大変化量区間と小変化量区間とは、いずれも、区間長が最小限度フレーム数N以上の区間である。さらに、大変化量区間のフレームの表示タイプは、プロキシデータを用いて画像が表示される高表示レート低解像度タイプV3に決定され、小変化量区間のフレームの表示タイプは、本線データを用いて画像が表示される通常タイプV2または静止画タイプV1に決定される。
【０２５６】
また、大変化量区間と小変化量区間とに挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その大変化量区間のフレームの表示タイプとして決定される高表示レート低解像度タイプV3、またはその小変化量区間のフレームの表示タイプとして決定される通常タイプV2と同一の表示タイプとすることにより、高表示レート低解像度タイプV3または通常タイプV2のフレームが、最小限度フレーム数N以上連続することとなって、シークが頻繁に発生することを防止することができる。
【０２５７】
そこで、本実施の形態では、変化量が閾値Hをまたぐフレームが最小限度フレーム数N未満の注目混在区間であって、大変化量区間と小変化量区間とに挟まれる注目混在区間のフレームの表示タイプは、すべて、通常タイプV2とされる。なお、変化量が閾値Hをまたぐフレームが最小限度フレーム数N未満の注目混在区間であって、大変化量区間と小変化量区間とに挟まれる注目混在区間のフレームの表示タイプは、すべて、通常タイプV2とする他、高表示レート低解像度タイプV3とすることが可能である。
【０２５８】
一方、ステップＳ６３において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間でないと判定された場合、ステップＳ６４に進み、連続性判定部１６３は、区間長が最小限度フレーム数N未満の注目混在区間の左側にある、時間的に先行するフレームのうちの、注目混在区間に隣接するフレーム（左フレーム）の変化量と、注目混在区間の右側にある、時間的に後行するフレームのうちの、注目混在区間に隣接するフレーム（右フレーム）の変化量とのいずれもが閾値H以上であるかどうかあるかどうか、つまり、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間どうしの間に挟まれる区間であるかどうかを判定する。
【０２５９】
ステップＳ６４において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間どうしの間に挟まれる区間でないと判定された場合、即ち、区間長が最小限度フレーム数N未満の注目混在区間が、例えば、図２５の混在区間T4のような、小変化量区間どうしの間に挟まれる混在区間である場合、ステップＳ６２に進み、上述したように、決定部１６４は、注目フレームの表示タイプを、通常タイプV2に決定して、図２３のステップＳ５０に進み、以下、上述した処理が行われる。
【０２６０】
即ち、２つの小変化量区間どうしの間に挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その２つの小変化量区間のフレームの表示タイプとして決定される（決定されうる）通常タイプV2と同一の表示タイプとすることにより、通常タイプV2のフレームが最小限度フレーム数N以上連続することとなって、シークが頻繁に発生することを防止することができる。
【０２６１】
一方、ステップＳ６４において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間どうしの間に挟まれる区間であると判定された場合、即ち、区間長が最小限度フレーム数N未満の注目混在区間が、例えば、図２５の混在区間T1のような、大変化量区間どうしの間に挟まれる混在区間である場合、ステップＳ６５に進み、決定部１６４は、注目フレームの表示タイプを、高表示レート低解像度タイプV3に決定して、図２３のステップＳ５０に進み、以下、上述した処理が行われる。
【０２６２】
即ち、２つの大変化量区間どうしの間に挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その２つの大変化量区間のフレームの表示タイプとして決定される高表示レート低解像度タイプV3と同一の表示タイプとすることにより、高表示レート低解像度タイプV3のフレームが最小限度フレーム数N以上連続することとなって、シークが頻繁に発生することを防止することができる。
【０２６３】
次に、図２６は、図６の変化量算出部９２において、変化量として動き情報が求められ、表示タイプ決定部９３において、動き情報に基づき、表示タイプが決定され、選択部９４において、変化量と表示タイプの両方が選択された場合の、図６のファイル作成部９５が作成するFyファイルの例を示している。
【０２６４】
図２６のFyファイルにおいては、左から右方向に、先頭から何番目のフレームかを表すフレームナンバ、フレームナンバに対応するフレームのタイムコード、フレームナンバに対応するフレームの変化量としての動き情報、フレームナンバに対応するフレームの表示タイプが、順次配置されている。
【０２６５】
なお、図２６のFyファイルでは、表示タイプは、図２０に示した静止画タイプV1、通常タイプV2、高表示レート低解像度タイプV3の３つのうちのいずれかに決定されている。
【０２６６】
さらに、図２６のFyファイルでは、表示タイプの決定には、閾値LとHとして、それぞれ１と５が採用されている。また、最小限度フレーム数Nは、Fyファイルを作成した動画のフレームの総数Fと、所定の係数Pとから、式N=F×Pによって求められる値が採用されている。ここで、Fyファイルを作成した動画のフレームの総数Fが、例えば、3000フレームであり、所定の係数Pが、例えば、0.01であるとすると、最小限度フレーム数Nは、30(=3000×0.01)フレームである。
【０２６７】
次に、図２０では、変化量として、動き情報を採用し、フレームの動き情報に基づいて、そのフレームの表示タイプを、静止画タイプV1、通常タイプV2、高表示レート低解像度タイプV3の３つのうちのいずれかに決定するようにしたが、フレームの表示タイプを決定する決定方法は、これに限定されるものではない。
【０２６８】
即ち、図２７は、図６の表示タイプ決定部９３が決定する表示タイプの他の例を示している。
【０２６９】
図２７においては、表示タイプとして、静止画での表示を表す静止画タイプV11、並びに、フレームを表示するときの解像度やフレームを表示するときの表示レートが異なる通常タイプV12、高表示レート通常解像度タイプV13、超高表示レート低解像度タイプV14、および超超高表示レート低解像度タイプV15の５つがある。
【０２７０】
静止画タイプV11のフレームについては、図２０の静止画タイプV1と同様に、表示対象のフレームが変更されても、その表示対象のフレームの画像が、直前に表示されたフレーム（の画像）と同一の画像であるとみなすことができる限り、直前に表示されたフレーム（の画像）が表示される（し続けられる）。
【０２７１】
通常タイプV12のフレームについては、図２０の通常タイプV2と同様に、動画のフレームレートと同一の表示レート（通常レート）で、本線データとしての画像データと同一の解像度（通常解像度）で、画像が表示される。
【０２７２】
高表示レート通常解像度タイプV13のフレームについては、通常レートよりも高い、例えば、通常レートの２倍の表示レートで、本線データとしての画像データと同一の解像度（通常解像度）で、画像が表示される。
【０２７３】
超高表示レート低解像度タイプV14のフレームについては、高表示レート通常解像度タイプV13の表示レートよりも高い、例えば、通常レートの３倍の表示レートで、プロキシデータとしての画像データと同一の解像度（本線データとしての画像データよりも低い解像度）で、画像が表示される。
【０２７４】
超超高表示レート低解像度タイプV15のフレームについては、超高表示レート低解像度タイプV14の表示レートよりも高い、例えば、通常レートの４倍の表示レートで、プロキシデータとしての画像データと同一の解像度（本線データとしての画像データよりも低い解像度）で、画像が表示される。
【０２７５】
ここで、通常レートが、例えば、NTSC(National Television System Committee)方式と同一の（約）３０フレーム／秒であるとすると、通常タイプV12、高表示レート通常解像度タイプV13、超高表示レート低解像度タイプV14、超超高表示レート低解像度タイプV15の表示レートは、それぞれ、３０，６０，９０，１２０フレーム／秒である。
【０２７６】
表示タイプとして、図２７に示したように、５つの静止画タイプV11、通常タイプV12、高表示レート通常解像度タイプV13、超高表示レート低解像度タイプV14、および超超高表示レート低解像度タイプV15がある場合、変化量算出部９２（図６）では、フレームの時間的な変化の程度を表す動き情報が、変化量として求められる。そして、表示タイプ決定部９３（図６）は、例えば、各フレームの動き情報と、４つの所定の閾値とを比較し、その比較の結果に基づき、フレームの表示タイプを、静止画タイプV11、通常タイプV12、高表示レート通常解像度タイプV13、超高表示レート低解像度タイプV14、または超超高表示レート低解像度タイプV15のうちのいずれかに決定する。
【０２７７】
即ち、図２８は、フレーム単位の変化量としての動き情報と、その変化量に基づき、表示タイプ決定部９３（図６）がフレーム単位で決定する表示タイプとを示している。
【０２７８】
なお、図２８において、横軸はフレームを表し、縦軸は変化量を表す。
【０２７９】
表示タイプ決定部９３（図６）は、フレーム単位の変化量（動き情報）を、式TH1<TH2<TH3<TH4の関係がある閾値TH1,TH2,TH3,TH4と比較する。そして、表示タイプ決定部９３は、動き情報が閾値TH4以上のフレーム、即ち、動き情報が時間的な変化の程度が極めて大であることを表すフレームの表示タイプを、低い解像度、または高い表示レートの低解像度／高表示レートタイプの一種である超超高表示レート低解像度タイプV15に決定する。図２８では、動き情報が閾値TH4以上のフレームが連続する区間D5のフレームの表示タイプが、超超高表示レート低解像度タイプV15に決定されている。
【０２８０】
また、表示タイプ決定部９３は、動き情報が閾値TH3以上で閾値TH4未満のフレーム、即ち、動き情報が時間的な変化の程度が極めて大に近い程度に大であることを表すフレームの表示タイプを、低い解像度、または高い表示レートの低解像度／高表示レートタイプの一種であり、超超高表示レート低解像度タイプV15より表示レートが低い超高表示レート低解像度タイプV14に決定する。図２８では、動き情報が閾値TH3以上で閾値TH4未満のフレームが連続する区間D4とD6のフレームの表示タイプが、超高表示レート低解像度タイプV14に決定されている。
【０２８１】
さらに、表示タイプ決定部９３は、動き情報が閾値TH2以上で閾値TH3未満のフレーム、即ち、動き情報が時間的な変化の程度が極めて大までには至らないが、それでも大であることを表すフレームの表示タイプを、超高表示レート低解像度タイプV14より表示レートが低く、かつ解像度が高い高表示レート通常解像度タイプV13に決定する。図２８では、動き情報が閾値TH2以上で閾値TH3未満のフレームが連続する区間D3とD7のフレームの表示タイプが、高表示レート通常解像度タイプV13に決定されている。
【０２８２】
また、表示タイプ決定部９３は、動き情報が閾値TH1以上で閾値TH2未満のフレーム、即ち、動き情報が時間的な変化の程度がそれほど大ではないことを表すフレームの表示タイプを、高表示レート通常解像度タイプV13より表示レートが低い通常タイプV12に決定する。図２８では、動き情報が閾値TH1以上で閾値TH2未満のフレームが連続する区間D2とD8のフレームの表示タイプが、通常タイプV12に決定されている。
【０２８３】
さらに、表示タイプ決定部９３は、動き情報が閾値TH1未満のフレーム、即ち、動き情報が時間的な変化の程度が小であることを表すフレームの表示タイプを、静止画での表示を表す静止画タイプV11に決定する。図２８では、動き情報が閾値TH1未満のフレームが連続する区間D1とD9のフレームの表示タイプが、静止画タイプV11に決定されている。
【０２８４】
次に、図２９および図３０のフローチャートを参照して、表示タイプが、図２７に示した静止画タイプV11、通常タイプV12、高表示レート通常解像度タイプV13、超高表示レート低解像度タイプV14、または超超高表示レート低解像度タイプV15のうちのいずれかに決定される場合の、図２２の表示タイプ決定部９３の処理について説明する。
【０２８５】
表示タイプ決定部９３は、変化量算出部９２（図６）からフレーム単位の変化量が供給されると、ステップＳ８１において、そのフレーム単位の変化量を、記憶部１６１（図２２）にキャッシュ（一時記憶）させ、ステップＳ８２に進む。
【０２８６】
ここで、変化量算出部９２から表示タイプ決定部９３には、例えば、動き情報が変化量として供給されることとする。
【０２８７】
ステップＳ８２では、閾値処理部１６２（図２２）が、記憶部１６１に記憶されたフレーム単位の変化量（動き情報）と、閾値TH1,TH2,TH3、またはTH4とを比較する閾値処理を行い、フレーム単位の変化量と、閾値TH1,TH2,TH3、またはTH4との比較の結果を表す比較情報を、フレーム単位で、連続性判定部１６３に供給して、ステップＳ８３に進む。
【０２８８】
ステップＳ８３では、連続性判定部１６３（図２２）が、いま、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームのうちの、まだ、注目フレームとしていない時系列順で最も先行するフレームを、注目フレームに選択し、ステップＳ８４に進む。
【０２８９】
ステップＳ８４では、連続性判定部１６３が、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値TH3以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3以上のフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０２９０】
ステップＳ８４において、注目フレームの変化量が閾値TH3以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3以上のフレームが最小限度フレーム数N以上連続して存在すると判定された場合、連続性判定部１６３は、その判定の結果を表す判定情報を、決定部１６４（図２２）に供給して、ステップＳ８５に進む。
【０２９１】
注目フレームの変化量が閾値TH3以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3以上のフレームが最小限度フレーム数N以上連続して存在するとの判定の結果を表す判定情報の供給を連続性判定部１６３から受けた決定部１６４は、ステップＳ８５において、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値TH4以上であるかどうかを判定する。
【０２９２】
ステップＳ８５において、注目フレームの変化量が閾値TH4以上であると判定された場合、ステップＳ８６に進み、決定部１６４は、注目フレームの表示タイプを、超超高表示レート低解像度タイプV15に決定し、ステップＳ９３に進む。
【０２９３】
また、ステップＳ８５において、注目フレームの変化量が閾値TH4以上でないと判定された場合、即ち、注目フレームの変化量が閾値TH3以上で閾値TH4未満である場合、ステップＳ８７に進み、決定部１６４は、注目フレームの表示タイプを、超高表示レート低解像度タイプV14に決定し、ステップＳ９３に進む。
【０２９４】
ここで、ステップＳ８４乃至Ｓ８７によれば、注目フレームの変化量が閾値TH3以上であるだけでなく、さらに、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3以上のフレームがNフレーム以上連続して存在する場合に、注目フレームの表示タイプが、超超高表示レート低解像度タイプV15、または超高表示レート低解像度タイプV14のうちのいずれかに決定されるが、これは、次のような理由による。
【０２９５】
即ち、表示タイプが、図２７に示した静止画タイプV11、通常タイプV12、高表示レート通常解像度タイプV13、超高表示レート低解像度タイプV14、および超超高表示レート低解像度タイプV15の中から決定される場合には、スクラブにおいて、表示タイプが、静止画タイプV11のフレーム、通常タイプV12のフレーム、および高表示レート通常解像度タイプV13のフレームについては、解像度が高い画像（通常解像度の画像）、つまり、（プロキシデータよりも）データ量が多い本線データの画像データを処理して画像が表示される。
【０２９６】
一方、表示タイプが、超高表示レート低解像度タイプV14のフレーム、および超超高表示レート低解像度タイプV15のフレームについては、解像度が低い画像、つまり、（本線データよりも）データ量が少ないプロキシデータの画像データを処理して画像が表示される。
【０２９７】
いま、例えば、光ディスク７（図１）が、本線データとプロキシデータとが記録されるプロフェッショナルディスクである場合において、その光ディスク７に記録された本線データ、またはプロキシデータを用いてスクラブを行うこととすると、図２３で説明した場合と同様に、動画を構成する時系列のフレームにおいて、プロキシデータを用いて画像が表示される超高表示レート低解像度タイプV14のフレーム、または超超高表示レート低解像度タイプV15のフレームと、本線データを用いて画像が表示される静止画タイプV11、通常タイプV12、または高表示レート通常解像度タイプV13のフレームとが頻繁に切り替わると、シークが頻繁に発生し、スクラブバー５３（図３）の操作によって指定されたフレームの表示をスムースに行うことが困難になることがある。
【０２９８】
上述のようなシークが頻繁に発生することを防止するには、プロキシデータを用いて画像が表示される超高表示レート低解像度タイプV14のフレーム、または超超高表示レート低解像度タイプV15のフレームと、本線データを用いて画像が表示される静止画タイプV11、通常タイプV12、または高表示レート通常解像度タイプV13のフレームとが頻繁に切り替わらないようにする必要がある。
【０２９９】
一方、超高表示レート低解像度タイプV14のフレーム、および超超高表示レート低解像度タイプV15のフレームでは、いずれも、プロキシデータを用いて画像が表示されるから、超高表示レート低解像度タイプV14のフレームと、超超高表示レート低解像度タイプV15のフレームとの切り替わりについては、シークは問題とならない。
【０３００】
さらに、静止画タイプV11のフレーム、通常タイプV12のフレーム、および、高表示レート通常解像度タイプV13のフレームでは、いずれも、本線データを用いて画像が表示されるから、静止画タイプV11のフレーム、通常タイプV12のフレーム、または、高表示レート通常解像度タイプV13のフレームのうちの任意の１つの表示タイプのフレームと、他の１つの表示タイプのフレームとの切り替わりについても、シークは問題にならない。
【０３０１】
そこで、図２９および図３０では、プロキシデータを用いて画像が表示される表示タイプ（超高表示レート低解像度タイプV14、超超高表示レート低解像度タイプV15）のフレームと、本線データを用いて画像が表示される表示タイプ（静止画タイプV11、通常タイプV12、高表示レート通常解像度タイプV13）のフレームとの切り替わりが、少なくとも最小限度フレーム数Nだけ連続するフレームの区間において生じないように、上述したステップＳ８４乃至Ｓ８７において、注目フレームの変化量が、閾値TH3以上であり、かつ、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3以上のフレームが、最小限度フレーム数N以上連続する場合に、注目フレームの表示タイプが、超高表示レート低解像度タイプV14、または超超高表示レート低解像度タイプV15のうちのいずれかに決定される。
【０３０２】
また、プロキシデータを用いて画像が表示される表示タイプのフレームと、本線データを用いて画像が表示される表示タイプのフレームとの切り替わりが、少なくとも最小限度フレーム数Nだけ連続するフレームの区間において生じないように、後述するステップＳ８８乃至Ｓ９２において、注目フレームの変化量が、閾値TH3未満であり、かつ、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3未満のフレームが、最小限度フレーム数N以上連続する場合に、注目フレームの表示タイプが、静止画タイプV11、通常タイプV12、または高表示レート通常解像度タイプV13のうちのいずれかに決定される。
【０３０３】
即ち、ステップＳ８４において、注目フレームの変化量が閾値TH3以上でないと判定されるか、または、注目フレームの変化量が閾値TH3以上であっても、注目フレームの直前、直後、および前後のいずれにも、変化量が閾値TH3以上のフレームが最小限度フレーム数N以上連続して存在しないと判定された場合、ステップＳ８８に進み、連続性判定部１６３が、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値TH3未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3未満のフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０３０４】
ステップＳ８８において、注目フレームの変化量が閾値TH3未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3未満のフレームが最小限度フレーム数N以上連続して存在すると判定された場合、連続性判定部１６３は、その判定の結果を表す判定情報を、決定部１６４に供給して、ステップＳ８９に進む。
【０３０５】
注目フレームの変化量が閾値TH3未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3未満のフレームが最小限度フレーム数N以上連続して存在するとの判定の結果を表す判定情報の供給を連続性判定部１６３から受けた決定部１６４は、ステップＳ８９において、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が、閾値TH1未満であるか、閾値TH1以上閾値TH2未満であるか、または閾値TH2以上閾値TH3未満であるかを判定する。
【０３０６】
ステップＳ８９において、注目フレームの変化量が閾値TH1未満であると判定された場合、ステップＳ９０に進み、決定部１６４は、注目フレームの表示タイプを、静止画タイプV11に決定して、ステップＳ９３に進む。
【０３０７】
また、ステップＳ８９において、注目フレームの変化量が閾値TH1以上閾値TH2未満であると判定された場合、ステップＳ９１に進み、決定部１６４は、注目フレームの表示タイプを、通常タイプV12に決定して、ステップＳ９３に進む。
【０３０８】
また、ステップＳ８９において、注目フレームの変化量が閾値TH2以上閾値TH3未満であると判定された場合、ステップＳ９２に進み、決定部１６４は、注目フレームの表示タイプを、高表示レート通常解像度タイプV13に決定して、ステップＳ９３に進む。
【０３０９】
ここで、ステップＳ８８乃至Ｓ９２によれば、上述したように、注目フレームの変化量が閾値TH3未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3未満のフレームがNフレーム以上連続して存在する場合に、注目フレームの表示タイプが、いずれも本線データを用いて画像が表示される静止画タイプV11、通常タイプV12、または高表示レート通常解像度タイプV13に決定されるが、これは、上述したように、スクラブ時に、シークが頻繁に発生することを防止するためである。
【０３１０】
ステップＳ９３では、連続性判定部１６３が、いま、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームの中で、まだ、注目フレームに選択していないフレームがあるかどうかを判定する。
【０３１１】
ステップＳ９３において、まだ、注目フレームに選択していないフレームがあると判定された場合、ステップＳ８３に戻り、上述したように、まだ、注目フレームに選択していないフレームが、注目フレームに新たに選択され、以下、同様の処理が繰り返される。
【０３１２】
また、ステップＳ９３において、注目フレームに選択していないフレームがないと判定された場合、表示タイプ決定部９３は、処理を終了する。
【０３１３】
一方、ステップＳ８８において、注目フレームの変化量が閾値TH3未満でないと判定されるか、または、注目フレームの変化量が閾値TH3未満であっても、注目フレームの直前か、直後、および前後のいずれにも、変化量が閾値TH3未満のフレームが最小限度フレーム数N以上連続して存在しないと判定された場合、図３０のステップＳ１０１に進み、連続性判定部１６３は、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3をまたぐフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０３１４】
ここで、注目フレームの変化量が閾値TH3以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3以上のフレームがNフレーム以上連続して存在する場合には、図２９のステップＳ８６またはＳ８７において、注目フレームの表示タイプは、超高表示レート低解像度タイプV14、または超超高表示レート低解像度タイプV15に決定される。
【０３１５】
また、注目フレームの変化量が閾値TH3未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3未満のフレームが最小限度フレーム数N以上連続して存在する場合には、図２９のステップＳ９０乃至Ｓ９２において、注目フレームの表示タイプは、静止画タイプV11、通常タイプV12、または高表示レート通常解像度タイプV13に決定される。
【０３１６】
従って、図３０のステップＳ１０１の処理が行われるのは、注目フレームの直前か、直後、および前後のいずれにも、変化量が閾値TH3以上のフレームがNフレーム以上連続して存在せず、かつ、変化量が閾値TH3未満のフレームも最小限度フレーム数N以上連続して存在しない場合、つまり、注目フレームが、変化量が閾値TH3をまたぐフレームが存在する区間（変化量が閾値TH3以上のフレームと、閾値TH3未満のフレームとが混在する区間）であり、かつ、変化量が閾値TH3以上のフレームが連続するフレーム数と、閾値TH3未満のフレームが連続するフレーム数が、多くても最小限度フレーム数N未満の区間（これも、以下、適宜、混在区間という）のフレームである場合である。
【０３１７】
なお、混在区間は、図２５で説明した場合と同様に、必ず、変化量が閾値TH3以上のフレームがNフレーム以上連続して存在する区間（これも、以下、適宜、大変化量区間という）と、変化量が閾値TH3未満のフレームが最小限度フレーム数N以上連続して存在する区間（これも、以下、適宜、小変化量区間という）との間か、２つの大変化量区間どうしの間、または、２つの小変化量区間どうしの間のうちのいずれかに挟まれる形で存在する。
【０３１８】
以上から、混在区間は、区間長（フレーム数）が最小限度フレーム数N以上の区間と、最小限度フレーム数N未満の区間とに分けることができる。
【０３１９】
また、混在区間は、大変化量区間と小変化量区間との間に挟まれる区間、大変化量区間どうしの間に挟まれる区間、または小変化量区間どうしの間に挟まれる区間のうちのいずれかに分けることができる。
【０３２０】
ステップＳ１０１では、連続性判定部１６３は、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3をまたぐフレームが、最小限度フレーム数N以上連続して存在するかどうか、即ち、注目フレームが存在する混在区間が、区間長が最小限度フレーム数N以上の区間であるか否かを判定する。
【０３２１】
ステップＳ１０１において、注目フレームの直前か、直後、または前後に亘って、変化量が閾値TH3をまたぐフレームが、最小限度フレーム数N以上連続して存在すると判定された場合、ステップＳ１０２に進み、決定部１６４は、注目フレームの表示タイプを、本線データを用いて画像が表示される表示タイプのうちの、例えば、高表示レート通常解像度タイプV13に決定して、図２９のステップＳ９３に進み、以下、上述した処理が行われる。
【０３２２】
即ち、変化量が閾値TH3をまたぐフレームが、最小限度フレーム数N以上連続して存在する混在区間のフレームについては、そのすべてのフレームの表示タイプを、本線データ（としての画像データ）を用いて画像が表示される表示タイプとするか、または、プロキシデータ（としての画像データ）を用いて画像が表示される表示タイプにすることによって、シークが頻繁に発生することを防止することができる。
【０３２３】
そこで、図３０では、変化量が閾値TH3をまたぐフレームが最小限度フレーム数N以上連続して存在する混在区間のフレームの表示タイプは、すべて、本線データを用いて画像が表示される表示タイプのうちの、例えば、高表示レート通常解像度タイプV13とされる。
【０３２４】
なお、変化量が閾値TH3をまたぐフレームが最小限度フレーム数N以上連続して存在する混在区間のフレームの表示タイプは、その他、本線データを用いて画像が表示される表示タイプのうちの、例えば、通常タイプV12とすることが可能である。また、変化量が閾値TH3をまたぐフレームが最小限度フレーム数N以上連続して存在する混在区間のフレームの表示タイプは、その他、例えば、プロキシデータを用いて画像が表示される超高表示レート低解像度タイプV14、または超超高表示レート低解像度タイプV15のうちのいずれか一方とすることが可能である。
【０３２５】
一方、ステップＳ１０１において、注目フレームの直前か、直後、および前後のいずれにも、変化量が閾値TH3をまたぐフレームが、最小限度フレーム数N以上連続して存在しないと判定された場合、即ち、注目フレームが存在する混在区間（注目混在区間）が、区間長が最小限度フレーム数N未満の区間である場合、ステップＳ１０３に進み、連続性判定部１６３は、区間長が最小限度フレーム数N未満の注目混在区間の左側にある、時間的に先行するフレームのうちの、注目混在区間に隣接するフレーム（左フレーム）の変化量と、注目混在区間の右側にある、時間的に後行するフレームのうちの、注目混在区間に隣接するフレーム（右フレーム）の変化量とのうちのいずれか一方の変化量が閾値TH3以上であり、他方の変化量が閾値TH3未満であるかどうか、つまり、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間であるかどうかを判定する。
【０３２６】
ステップＳ１０３において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間であると判定された場合、ステップＳ１０２に進み、上述したように、決定部１６４は、注目フレームの表示タイプを、高表示レート通常解像度タイプV13に決定して、図２９のステップＳ９３に進み、以下、上述した処理が行われる。
【０３２７】
即ち、区間長が最小限度フレーム数N未満の注目混在区間を挟む大変化量区間と小変化量区間とは、いずれも、区間長が最小限度フレーム数N以上の区間である。さらに、大変化量区間のフレームの表示タイプは、プロキシデータを用いて画像が表示される表示タイプ（超高表示レート低解像度タイプV14、または超超高表示レート低解像度タイプV15）に決定され、小変化量区間のフレームの表示タイプは、本線データを用いて画像が表示される表示タイプ（静止画タイプV11、通常タイプV12、または高表示レート通常解像度タイプV13）に決定される。
【０３２８】
また、大変化量区間と小変化量区間とに挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その大変化量区間のフレームの表示タイプ、またはその小変化量区間のフレームの表示タイプと同一の表示タイプとすることにより、シークが頻繁に発生することを防止することができる。
【０３２９】
そこで、図３０では、変化量が閾値TH3をまたぐフレームが最小限度フレーム数N未満の注目混在区間であって、大変化量区間と小変化量区間とに挟まれる注目混在区間のフレームの表示タイプは、すべて、本線データを用いて画像が表示される表示タイプのうちの、例えば、高表示レート通常解像度タイプV13とされる。
【０３３０】
なお、変化量が閾値TH3をまたぐフレームが最小限度フレーム数N未満の注目混在区間であって、大変化量区間と小変化量区間とに挟まれる注目混在区間のフレームの表示タイプは、その他、例えば、本線データを用いて画像が表示される表示タイプのうちの通常タイプV12や、プロキシデータを用いて画像が表示される表示タイプのうちの超高表示レート低解像度タイプV14とすることが可能である。
【０３３１】
一方、ステップＳ１０３において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間でないと判定された場合、ステップＳ１０４に進み、連続性判定部１６３は、区間長が最小限度フレーム数N未満の注目混在区間の左側にある、時間的に先行するフレームのうちの、注目混在区間に隣接するフレーム（左フレーム）の変化量と、注目混在区間の右側にある、時間的に後行するフレームのうちの、注目混在区間に隣接するフレーム（右フレーム）の変化量とのいずれもが閾値TH3以上であるかどうかあるかどうか、つまり、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間どうしの間に挟まれる区間であるかどうかを判定する。
【０３３２】
ステップＳ１０４において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間どうしの間に挟まれる区間でないと判定された場合、ステップＳ１０２に進み、上述したように、決定部１６４は、注目フレームの表示タイプを、本線データを用いて画像が表示される表示タイプのうちの、例えば、高表示レート通常解像度タイプV13に決定して、図２９のステップＳ９３に進み、以下、上述した処理が行われる。
【０３３３】
即ち、２つの小変化量区間どうしの間に挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その２つの小変化量区間のフレームの表示タイプとして決定される、本線データを用いて画像が表示される表示タイプと同一の表示タイプとすることにより、シークが頻繁に発生することを防止することができる。
【０３３４】
一方、ステップＳ１０４において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間どうしの間に挟まれる区間であると判定された場合、ステップＳ１０５に進み、決定部１６４は、注目フレームの表示タイプを、プロキシデータを用いて画像が表示される表示タイプのうちの、例えば、超高表示レート低解像度タイプV14に決定して、図２９のステップＳ９３に進み、以下、上述した処理が行われる。
【０３３５】
即ち、２つの大変化量区間どうしの間に挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その２つの大変化量区間のフレームの表示タイプとして決定される、プロキシデータを用いて画像が表示される表示タイプと同一の表示タイプとすることにより、シークが頻繁に発生することを防止することができる。
【０３３６】
次に、図３１は、図６の表示タイプ決定部９３が決定する表示タイプの他の例を示している。
【０３３７】
図３１においては、表示タイプとして、フレームを表示するときの解像度やフレームを表示するときの表示レートが異なる低解像度通常表示レートタイプC1、通常タイプC2、および通常解像度低表示レートタイプC3の３つがある。
【０３３８】
低解像度通常表示レートタイプC1のフレームについては、動画のフレームレートと同一の表示レート（通常レート）で、プロキシデータとしての画像データと同一の解像度（本線データとしての画像データよりも低い解像度）で、画像が表示される。
【０３３９】
通常タイプC2のフレームについては、通常レートの表示レートで、本線データとしての画像データと同一の解像度（通常解像度という）で、画像が表示される。
【０３４０】
通常解像度低表示レートタイプC3のフレームについては、通常レートよりも低い、例えば、通常レートの１／２倍の表示レートで、本線データとしての画像データと同一の解像度（プロキシデータとしての画像データよりも高い解像度）で、画像が表示される。
【０３４１】
表示タイプとして、図３１に示したように、３つの低解像度通常表示レートタイプC1、通常タイプC2、および通常解像度低表示レートタイプC3がある場合、変化量算出部９２（図６）では、フレームの空間的な変化の程度を表す細かさ情報が、変化量として求められる。そして、表示タイプ決定部９３は、例えば、各フレームの変化量（細かさ情報）と、２つの所定の閾値とを比較し、その比較の結果に基づき、フレームの表示タイプを、低解像度通常表示レートタイプC1、通常タイプC2、または通常解像度低表示レートタイプC3のうちのいずれかに決定する。
【０３４２】
即ち、図３２は、フレーム単位の変化量としての細かさ情報と、その変化量に基づき、表示タイプ決定部９３（図６）がフレーム単位で決定する表示タイプとを示している。
【０３４３】
なお、図３２において、横軸はフレームを表し、縦軸は変化量を表す。
【０３４４】
表示タイプ決定部９３は、フレーム単位の変化量（細かさ情報）を、式L<Hの関係がある閾値Lまたは閾値Hと比較する。そして、表示タイプ決定部９３は、細かさ情報が閾値H以上のフレーム、即ち、細かさ情報が空間的な変化の程度が大であることを表すフレームの表示タイプを、高い解像度、または低い表示レートの高解像度／低表示レートタイプの一種である通常解像度低表示レートタイプC3に決定する。
【０３４５】
ここで、例えば、編集で行われるスクラブにおいて、空間的な変化の程度が大のフレーム、つまり、画素値の変化が大きい画像（複雑な画像）のフレームの表示を低解像度で行うと、画像の空間的な変化を見逃しやすくなるため、複雑な画像のフレームは、高い解像度で表示することが望ましい。
【０３４６】
しかしながら、複雑な画像を高い解像度で表示する処理の負担は、複雑でない、例えば、平坦な画像を表示する処理の負担より大きくなる。
【０３４７】
そこで、複雑な画像のフレームについては、高解像度で表示するが、その代わりに、低い表示レートで画像を表示する高解像度／低表示レートタイプの一種である通常解像度低表示レートタイプC3を採用することとする。画像を低い表示レートで表示する場合には、画像を高い表示レートで表示する場合に比較して、処理の負担が少ないので、複雑な画像のフレームについて、高い解像度の画像を、低い表示レートで表示することにより、編集において画像の空間的な変化を見逃すことを防止しながら、スクラブを行う装置にかかる負担を低減することができる。
【０３４８】
一方、表示タイプ決定部９３は、細かさ情報が閾値L未満のフレーム、即ち、細かさ情報が空間的な変化の程度が小であることを表すフレームの表示タイプを、通常解像度低表示レートタイプC3よりも低い解像度で、かつ、通常解像度低表示レートタイプC3よりも高い通常レートの表示レートで画像を表示する低解像度通常表示レートタイプC1に決定する。
【０３４９】
ここで、空間的な変化の程度が小のフレーム、つまり、平坦な画像のフレームについては、高い解像度で画像を表示しても、低い解像度で画像を表示した場合と、細部の見え方は、それほど変わらない。
【０３５０】
このように、高い解像度で表示しても、低い解像度で表示しても、細部の見え方がほとんど変わらない画像を、高い解像度で表示することは、スクラブを行う装置に、いわば無駄な負担をかけることになる。
【０３５１】
そこで、平坦な画像のフレームの表示タイプは、通常解像度低表示レートタイプC3よりも低い解像度で、かつ、通常解像度低表示レートタイプC3よりも高い通常レートの表示レートで画像を表示する低解像度通常表示レートタイプC1とされる。これにより、スクラブを行う装置に無駄な負担をかけることを防止することができる。
【０３５２】
表示タイプ決定部９３は、細かさ情報が閾値H以上のフレーム、および細かさ情報が閾値L未満のフレーム以外のフレーム、つまり、細かさ情報が、閾値L以上で閾値H未満のフレームの表示タイプを、通常タイプC2に決定する。
【０３５３】
即ち、それほど複雑ではないが、平坦でもない画像のフレームの表示タイプは、通常レート（動画のフレームレートと同一の表示レート）で、かつ、通常解像度で、画像を表示する通常タイプC2とされる。
【０３５４】
次に、図３３および図３４のフローチャートを参照して、表示タイプが、変化量としての細かさ情報に基づき、図３１に示した低解像度通常表示レートタイプC1、通常タイプC2、または通常解像度低表示レートタイプC3のうちのいずれかに決定される場合の、図２２の表示タイプ決定部９３の処理について説明する。
【０３５５】
表示タイプ決定部９３は、変化量算出部９２（図６）からフレーム単位の変化量が供給されると、ステップＳ１２１において、そのフレーム単位の変化量を、記憶部１６１（図２２）にキャッシュ（一時記憶）させ、ステップＳ１２２に進む。
【０３５６】
ここで、図３３および図３４では、変化量算出部９２から表示タイプ決定部９３には、細かさ情報が変化量として供給される。
【０３５７】
ステップＳ１２２では、閾値処理部１６２が、記憶部１６１に記憶されたフレーム単位の変化量（細かさ情報）と、閾値HまたはLとを比較する閾値処理を行い、フレーム単位の変化量と、閾値HまたはLとの比較の結果を表す比較情報を、フレーム単位で、連続性判定部１６３に供給して、ステップＳ１２３に進む。
【０３５８】
ステップＳ１２３では、連続性判定部１６３が、いま、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームのうちの、まだ、注目フレームとしていない時系列順で最も先行するフレームを、注目フレームに選択し、ステップＳ１２４に進む。
【０３５９】
ステップＳ１２４では、連続性判定部１６３が、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値L未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値未満のフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０３６０】
ステップＳ１２４において、注目フレームの変化量が閾値L未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L未満のフレームが最小限度フレーム数N以上連続して存在すると判定された場合、連続性判定部１６３は、その判定の結果を表す判定情報を、決定部１６４に供給して、ステップＳ１２５に進む。
【０３６１】
ステップＳ１２５では、決定部１６４は、連続性判定部１６３からの判定情報に基づき、注目フレームの表示タイプを、低解像度通常表示レートタイプC1に決定し、ステップＳ１３０に進む。
【０３６２】
ここで、ステップＳ１２４およびＳ１２５によれば、注目フレームの変化量が閾値L未満であるだけでなく、さらに、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L未満のフレームがNフレーム以上連続して存在する場合に、注目フレームの表示タイプが、低解像度通常表示レートタイプC1に決定されるが、これは、次のような理由による。
【０３６３】
即ち、表示タイプが、図３１に示した低解像度通常表示レートタイプC1、通常タイプC2、および通常解像度低表示レートタイプC3の中から決定される場合には、スクラブにおいて、表示タイプが、低解像度通常表示レートタイプC1のフレームについては、解像度が低い画像、つまり、（本線データよりも）データ量が少ないプロキシデータを処理して画像が表示される。
【０３６４】
一方、表示タイプが、通常タイプC2、および通常解像度低表示レートタイプC3のフレームについては、解像度が高い画像、つまり、（プロキシデータデータよりも）データ量が多い本線データの画像データを処理して画像が表示される。
【０３６５】
いま、例えば、光ディスク７（図１）が、本線データとプロキシデータとが記録されるプロフェッショナルディスクである場合において、その光ディスク７に記録された本線データ、またはプロキシデータを用いてスクラブを行うこととすると、図２３で説明した場合と同様に、動画を構成する時系列のフレームにおいて、プロキシデータを用いて画像が表示される低解像度通常表示レートタイプC1のフレームと、本線データを用いて画像が表示される通常タイプC2、または通常解像度低表示レートタイプC3のフレームとが頻繁に切り替わると、シークが頻繁に発生し、スクラブバー５３（図３）の操作によって指定されたフレームの表示をスムースに行うことが困難になることがある。
【０３６６】
上述のようなシークが頻繁に発生することを防止するには、プロキシデータを用いて画像が表示される低解像度通常表示レートタイプC1のフレームと、本線データを用いて画像が表示される通常タイプC2、または通常解像度低表示レートタイプC3のフレームとが頻繁に切り替わらないようにする必要がある。
【０３６７】
一方、通常タイプC2のフレーム、および通常解像度低表示レートタイプC3のフレームでは、いずれも、本線データを用いて画像が表示されるから、通常タイプC2のフレームと、通常解像度低表示レートタイプC3のフレームとの切り替わりについては、シークは問題とならない。
【０３６８】
そこで、図３３および図３４では、プロキシデータを用いて画像が表示される表示タイプ（低解像度通常表示レートタイプC1）のフレームと、本線データを用いて画像が表示される表示タイプ（通常タイプC2、通常解像度低表示レートタイプC3）のフレームとの切り替わりが、少なくとも最小限度フレーム数Nだけ連続するフレームの区間において生じないように、上述したステップＳ１２４およびＳ１２５において、注目フレームの変化量が、閾値L未満であり、かつ、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L未満のフレームが、最小限度フレーム数N以上連続する場合に、注目フレームの表示タイプが、プロキシデータを用いて画像が表示される低解像度通常表示レートタイプC1に決定される。
【０３６９】
また、プロキシデータを用いて画像が表示される表示タイプのフレームと、本線データを用いて画像が表示される表示タイプのフレームとの切り替わりが、少なくとも最小限度フレーム数Nだけ連続するフレームの区間において生じないように、後述するステップＳ１２６乃至Ｓ１２９において、注目フレームの変化量が、閾値L以上であり、かつ、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L以上のフレームが、最小限度フレーム数N以上連続する場合に、注目フレームの表示タイプが、本線データを用いて画像が表示される通常タイプC2、または通常解像度低表示レートタイプC3に決定される。
【０３７０】
即ち、ステップＳ１２４において、注目フレームの変化量が閾値L未満でないと判定されるか、または、注目フレームの変化量が閾値L未満であっても、注目フレームの直前、直後、および前後のいずれにも、変化量が閾値L未満のフレームが最小限度フレーム数N以上連続して存在しないと判定された場合、ステップＳ１２６に進み、連続性判定部１６３が、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値L以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L以上のフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０３７１】
ステップＳ１２６において、注目フレームの変化量が閾値L以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L以上のフレームが最小限度フレーム数N以上連続して存在すると判定された場合、連続性判定部１６３は、その判定の結果を表す判定情報を、決定部１６４に供給して、ステップＳ１２７に進む。
【０３７２】
注目フレームの変化量が閾値L以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L以上のフレームが最小限度フレーム数N以上連続して存在するとの判定の結果を表す判定情報の供給を連続性判定部１６３から受けた決定部１６４は、ステップＳ１２７において、閾値処理部１６２からの比較情報に基づき、注目フレームの変化量が閾値H以上であるかどうかを判定する。
【０３７３】
ステップＳ１２７において、注目フレームの変化量が閾値H以上であると判定された場合、ステップＳ１２８に進み、決定部１６４は、注目フレームの表示タイプを、通常解像度低表示レートタイプC3に決定して、ステップＳ１３０に進む。
【０３７４】
また、ステップＳ１２７において、注目フレームの変化量が閾値H以上でないと判定された場合、即ち、注目フレームの変化量が閾値L以上閾値H未満である場合、ステップＳ１２９に進み、決定部１６４は、注目フレームの表示タイプを、通常タイプC2に決定して、ステップＳ１３０に進む。
【０３７５】
ここで、ステップＳ１２６乃至Ｓ１２９によれば、注目フレームの変化量が閾値L以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L以上のフレームがNフレーム以上連続して存在する場合に、表示タイプが本線データを用いて画像が表示される通常解像度低表示レートタイプC3、または通常タイプC2のうちのいずれかに決定されるが、これは、上述したように、スクラブ時に、シークが頻繁に発生することを防止するためである。
【０３７６】
ステップＳ１３０では、連続性判定部１６３が、いま、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームの中で、まだ、注目フレームに選択していないフレームがあるかどうかを判定する。
【０３７７】
ステップＳ１３０において、まだ、注目フレームに選択していないフレームがあると判定された場合、ステップＳ１２３に戻り、上述したように、まだ、注目フレームに選択していないフレームが、注目フレームに新たに選択され、以下、同様の処理が繰り返される。
【０３７８】
また、ステップＳ１３０において、注目フレームに選択していないフレームがないと判定された場合、表示タイプ決定部９３は、処理を終了する。
【０３７９】
一方、ステップＳ１２６において、注目フレームの変化量が閾値L以上でないと判定されるか、または、注目フレームの変化量が閾値L以上であっても、注目フレームの直前、直後、および前後のいずれにも、変化量が閾値L以上のフレームが最小限度フレーム数N以上連続して存在しないと判定された場合、図３４のステップＳ１５１に進み、連続性判定部１６３は、注目フレームの直前か、直後、または前後に亘って、変化量が閾値Lをまたぐフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０３８０】
ここで、注目フレームの変化量が閾値L未満であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L未満のフレームがNフレーム以上連続して存在する場合には、図３３のステップＳ１２５において、注目フレームの表示タイプは、低解像度通常表示レートタイプC1に決定される。
【０３８１】
また、注目フレームの変化量が閾値L以上であり、注目フレームの直前か、直後、または前後に亘って、変化量が閾値L以上のフレームが最小限度フレーム数N以上連続して存在する場合には、図３３のステップＳ１２８またはＳ１２９において、注目フレームの表示タイプは、通常解像度低表示レートタイプC3、または通常タイプC2に決定される。
【０３８２】
従って、図３４のステップＳ１５１の処理が行われるのは、注目フレームの直前、直後、および前後のいずれにも、変化量が閾値L未満のフレームがNフレーム以上連続して存在せず、かつ、変化量が閾値L以上のフレームも最小限度フレーム数N以上連続して存在しない場合、つまり、注目フレームが、変化量が閾値Lをまたぐフレームが存在する区間（変化量が閾値L未満のフレームと、閾値L以上のフレームとが混在する区間）であり、かつ、変化量が閾値L未満のフレームが連続するフレーム数と、閾値L以上のフレームが連続するフレーム数が、多くても最小限度フレーム数N未満の区間（これも、以下、適宜、混在区間という）のフレームである場合である。
【０３８３】
なお、混在区間は、図２５で説明した場合と同様に、必ず、変化量が閾値L未満のフレームがNフレーム以上連続して存在する区間（これも、以下、適宜、小変化量区間という）と、変化量が閾値L以上のフレームが最小限度フレーム数N以上連続して存在する区間（これも、以下、適宜、大変化量区間という）との間か、２つの大変化量区間どうしの間、または、２つの小変化量区間どうしの間のうちのいずれかに挟まれる形で存在する。
【０３８４】
以上から、混在区間は、区間長（フレーム数）が最小限度フレーム数N以上の区間と、最小限度フレーム数N未満の区間とに分けることができる。
【０３８５】
また、混在区間は、大変化量区間と小変化量区間との間に挟まれる区間、大変化量区間どうしの間に挟まれる区間、または小変化量区間どうしの間に挟まれる区間のうちのいずれかに分けることができる。
【０３８６】
ステップＳ１５１では、連続性判定部１６３は、注目フレームの直前か、直後、または前後に亘って、変化量が閾値Lをまたぐフレームが、最小限度フレーム数N以上連続して存在するかどうか、即ち、注目フレームが存在する混在区間が、区間長が最小限度フレーム数N以上の区間であるか否かを判定する。
【０３８７】
ステップＳ１５１において、注目フレームの直前か、直後、または前後に亘って、変化量が閾値Lをまたぐフレームが、最小限度フレーム数N以上連続して存在すると判定された場合、ステップＳ１５２に進み、決定部１６４は、注目フレームの表示タイプを、本線データを用いて画像が表示される表示タイプのうちの、例えば、通常タイプC2に決定して、図３３のステップＳ１３０に進み、以下、上述した処理が行われる。
【０３８８】
即ち、変化量が閾値Lをまたぐフレームが、最小限度フレーム数N以上連続して存在する混在区間のフレームについては、そのすべてのフレームの表示タイプを、本線データ（としての画像データ）を用いて画像が表示される表示タイプとするか、または、プロキシデータ（としての画像データ）を用いて画像が表示される表示タイプにすることによって、シークが頻繁に発生することを防止することができる。
【０３８９】
そこで、図３４では、変化量が閾値Lをまたぐフレームが最小限度フレーム数N以上連続して存在する混在区間のフレームの表示タイプは、すべて、本線データを用いて画像が表示される表示タイプのうちの、例えば、通常タイプC2とされる。
【０３９０】
なお、変化量が閾値Lをまたぐフレームが最小限度フレーム数N以上連続して存在する混在区間のフレームの表示タイプは、その他、例えば、プロキシデータを用いて画像が表示される低解像度通常表示レートC1とすることが可能である。
【０３９１】
一方、ステップＳ１５１において、注目フレームの直前、直後、および前後のいずれにも、変化量が閾値Lをまたぐフレームが、最小限度フレーム数N以上連続して存在しないと判定された場合、即ち、注目フレームが存在する混在区間（注目混在区間）が、区間長が最小限度フレーム数N未満の区間である場合、ステップＳ１５３に進み、連続性判定部１６３は、区間長が最小限度フレーム数N未満の注目混在区間の左側にある、時間的に先行するフレームのうちの、注目混在区間に隣接するフレーム（左フレーム）の変化量と、注目混在区間の右側にある、時間的に後行するフレームのうちの、注目混在区間に隣接するフレーム（右フレーム）の変化量とのうちのいずれか一方の変化量が閾値L未満であり、他方の変化量が閾値L以上であるかどうか、つまり、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間であるかどうかを判定する。
【０３９２】
ステップＳ１５３において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間であると判定された場合、ステップＳ１５２に進み、上述したように、決定部１６４は、注目フレームの表示タイプを、通常タイプC2に決定して、図３３のステップＳ１３０に進み、以下、上述した処理が行われる。
【０３９３】
即ち、区間長が最小限度フレーム数N未満の注目混在区間を挟む大変化量区間と小変化量区間とは、いずれも、区間長が最小限度フレーム数N以上の区間である。さらに、大変化量区間のフレームの表示タイプは、本線データを用いて画像が表示される表示タイプ（通常タイプC2、または通常解像度低表示レートタイプC3）決定され、小変化量区間のフレームの表示タイプは、プロキシデータを用いて画像が表示される表示タイプ（低解像度通常表示レートタイプC1）に決定される。
【０３９４】
また、大変化量区間と小変化量区間とに挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その大変化量区間のフレームの表示タイプ、またはその小変化量区間のフレームの表示タイプと同一の表示タイプとすることにより、シークが頻繁に発生することを防止することができる。
【０３９５】
そこで、図３４では、変化量が閾値Lをまたぐフレームが最小限度フレーム数N未満の注目混在区間であって、大変化量区間と小変化量区間とに挟まれる注目混在区間のフレームの表示タイプは、すべて、本線データを用いて画像が表示される表示タイプのうちの、例えば、通常タイプC2とされる。
【０３９６】
なお、変化量が閾値Lをまたぐフレームが最小限度フレーム数N未満の注目混在区間であって、大変化量区間と小変化量区間とに挟まれる注目混在区間のフレームの表示タイプは、その他、例えば、小変化量区間のフレームの表示タイプ、即ち、プロキシデータを用いて画像が表示される低解像度通常表示レートタイプC1とすることが可能である。
【０３９７】
一方、ステップＳ１５３において、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間と小変化量区間との間に挟まれる区間でないと判定された場合、ステップＳ１５４に進み、連続性判定部１６３は、区間長が最小限度フレーム数N未満の注目混在区間の左側にある、時間的に先行するフレームのうちの、注目混在区間に隣接するフレーム（左フレーム）の変化量と、注目混在区間の右側にある、時間的に後行するフレームのうちの、注目混在区間に隣接するフレーム（右フレーム）の変化量とのいずれもが閾値L未満であるかどうかあるかどうか、つまり、区間長が最小限度フレーム数N未満の注目混在区間が、小変化量区間どうしの間に挟まれる区間であるかどうかを判定する。
【０３９８】
ステップＳ１５４において、区間長が最小限度フレーム数N未満の注目混在区間が、小変化量区間どうしの間に挟まれる区間でないと判定された場合、即ち、区間長が最小限度フレーム数N未満の注目混在区間が、大変化量区間どうしの間に挟まれる区間である場合、ステップＳ１５２に進み、上述したように、決定部１６４は、注目フレームの表示タイプを、大変化量区間のフレームの表示タイプ、即ち、本線データを用いて画像が表示される表示タイプのうちの、例えば、通常タイプC2に決定して、図３３のステップＳ１３０に進み、以下、上述した処理が行われる。
【０３９９】
即ち、２つの大変化量区間どうしの間に挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その２つの大変化量区間のフレームの表示タイプとして決定される、本線データを用いて画像が表示される表示タイプと同一の表示タイプとすることにより、シークが頻繁に発生することを防止することができる。
【０４００】
一方、ステップＳ１５４において、区間長が最小限度フレーム数N未満の注目混在区間が、小変化量区間どうしの間に挟まれる区間であると判定された場合、ステップＳ１５５に進み、決定部１６４は、注目フレームの表示タイプを、プロキシデータを用いて画像が表示される低解像度通常表示レートタイプC1に決定して、図３３のステップＳ１３０に進み、以下、上述した処理が行われる。
【０４０１】
即ち、２つの小変化量区間どうしの間に挟まれる、区間長が最小限度フレーム数N未満の注目混在区間のフレームについては、その２つの小変化量区間のフレームの表示タイプとして決定される、プロキシデータを用いて画像が表示される低解像度通常表示レートタイプC1と同一の表示タイプとすることにより、シークが頻繁に発生することを防止することができる。
【０４０２】
次に、図３５は、図６の変化量算出部９２において、変化量として動き情報と細かさ情報が求められ、表示タイプ決定部９３において、動き情報に基づく表示タイプと細かさ情報に基づく表示タイプが決定され、選択部９４において、変化量と表示タイプの両方が選択された場合の、図６のファイル作成部９５が作成するFyファイルの例を示している。
【０４０３】
図３５のFyファイルにおいては、左から右方向に、先頭から何番目のフレームかを表すフレームナンバ、フレームナンバに対応するフレームのタイムコード、フレームナンバに対応するフレームの変化量としての動き情報と細かさ情報、フレームナンバに対応するフレームの動き情報に基づく表示タイプと細かさ情報に基づく表示タイプが、順次配置されている。
【０４０４】
図３６は、図６の変化量算出部９２において、変化量として動き情報と細かさ情報が求められ、選択部９４において、変化量のみが選択された場合の、図６のファイル作成部９５が作成するFyファイルの例を示している。
【０４０５】
図３６のFyファイルにおいては、左から右方向に、先頭から何番目のフレームかを表すフレームナンバ、フレームナンバに対応するフレームのタイムコード、フレームナンバに対応するフレームの変化量としての動き情報と細かさ情報が、順次配置されている。
【０４０６】
図３７は、図６の変化量算出部９２において、変化量として動き情報と細かさ情報が求められ、表示タイプ決定部９３において、動き情報に基づく表示タイプと細かさ情報に基づく表示タイプが決定され、選択部９４において、表示タイプのみが選択された場合の、図６のファイル作成部９５が作成するFyファイルの例を示している。
【０４０７】
図３７のFyファイルにおいては、左から右方向に、先頭から何番目のフレームかを表すフレームナンバ、フレームナンバに対応するフレームのタイムコード、フレームナンバに対応するフレームの動き情報に基づく表示タイプと細かさ情報に基づく表示タイプが、順次配置されている。
【０４０８】
次に、上述の場合には、表示タイプを、動き情報または細かさ情報のうちのいずれか一方に基づいて決定するようにしたが、表示タイプは、動き情報および細かさ情報の両方に基づいて決定することも可能である。
【０４０９】
即ち、図３８は、図６の表示タイプ決定部９３が決定する表示タイプの他の例を示している。
【０４１０】
図３８においては、表示タイプとして、静止画での表示を表す静止画タイプVC1、並びに、フレームを表示するときの解像度やフレームを表示するときの表示レートが異なる通常タイプVC2、高表示レート低解像度タイプVC3、および通常表示レート低解像度タイプVC4の４つがある。
【０４１１】
静止画タイプVC1のフレームについては、図２０の静止画タイプV1と同様に、表示対象のフレームが変更されても、その表示対象のフレームの画像が、直前に表示されたフレーム（の画像）と同一の画像であるとみなすことができる限り、直前に表示されたフレーム（の画像）が表示される（し続けられる）。
【０４１２】
通常タイプVC2のフレームについては、図２０の通常タイプV2と同様に、動画のフレームレートと同一の表示レート（通常レート）で、本線データとしての画像データと同一の解像度（通常解像度）で、画像が表示される。
【０４１３】
高表示レート低解像度タイプVC3のフレームについては、図２０の高表示レート低解像度タイプV3と同様に、通常レートよりも高い、例えば、通常レートの２倍の表示レートで、プロキシデータとしての画像データと同一の解像度（本線データとしての画像データよりも低い解像度）で、画像が表示される。
【０４１４】
通常表示レート低解像度タイプVC4のフレームについては、通常レートの表示レートで、プロキシデータとしての画像データと同一の解像度（本線データとしての画像データよりも低い解像度）で、画像が表示される。
【０４１５】
ここで、高表示レート低解像度タイプVC3と、通常表示レート低解像度タイプVC4とは、高表示レート低解像度タイプVC3では、通常レートよりも高い表示レートで画像が表示されるのに対して、通常表示レート低解像度タイプVC4では、通常レート（の表示レート）で画像が表示される点だけが異なる。
【０４１６】
表示タイプとして、図３８に示したように、４つの静止画タイプVC1、通常タイプVC2、高表示レート低解像度タイプVC3、および通常表示レート低解像度タイプVC4がある場合、変化量算出部９２（図６）では、動き情報と細かさ情報が、変化量として求められる。そして、表示タイプ決定部９３（図６）は、動き情報と細かさ情報の両方に基づき、即ち、例えば、動き情報と２つの閾値とを比較するとともに、細かさ情報と１つの閾値とを比較し、それらの比較の結果に基づき、フレームの表示タイプを、静止画タイプVC1、通常タイプVC2、高表示レート低解像度タイプVC3、または通常表示レート低解像度タイプVC4のうちのいずれかに決定する。
【０４１７】
即ち、図３９は、フレーム単位の変化量としての動き情報および細かさ情報と、その動き情報および細かさ情報に基づき、表示タイプ決定部９３（図６）がフレーム単位で決定する表示タイプとを示している。
【０４１８】
なお、図３９上は、フレーム単位の動き情報を表しており、図３９下は、フレーム単位の細かさ情報を表している。
【０４１９】
また、図３９において、横軸はフレームを表し、縦軸は変化量（動き情報、細かさ情報）を表す。
【０４２０】
表示タイプ決定部９３（図６）は、フレーム単位の動き情報を、式L<Hの関係がある閾値LまたはHと比較し、その比較結果に基づき、いわば仮の表示タイプを決定する（表示タイプを仮決定する）。
【０４２１】
即ち、表示タイプ決定部９３は、例えば、図２０乃至図２５で説明した場合と同様にして、フレームの動き情報に基づき、そのフレームの仮の表示タイプを、図２０に示した静止画タイプV1、通常タイプV2、または高表示レート低解像度タイプV3のうちのいずれかに決定する（表示タイプを仮決定する）。
【０４２２】
これにより、図２０乃至図２５で説明したように、大まかには、動き情報が閾値L未満のフレームの表示タイプは、静止画タイプV1に、動き情報が閾値L以上閾値H未満のフレームの表示タイプは、通常タイプV2に、動き情報が閾値H以上のフレームの表示タイプは、高表示レート低解像度タイプV3に、それぞれ仮決定される。
【０４２３】
また、表示タイプ決定部９３（図６）は、フレーム単位の細かさ情報を、所定の閾値Kと比較し、その比較結果と、動き情報に基づいて仮決定された仮の表示タイプとに基づき、フレームの表示タイプを、図３８に示した静止画タイプVC1、通常タイプVC2、高表示レート低解像度タイプVC3、または通常表示レート低解像度タイプVC4のうちのいずれかに最終的に決定する。
【０４２４】
即ち、表示タイプ決定部９３は、仮の表示タイプが静止画タイプV1のフレームの表示タイプを、静止画タイプVC1に最終的に決定し、仮の表示タイプが高表示レート低解像度タイプV3のフレームの表示タイプを、高表示レート低解像度タイプVC3に最終的に決定する。
【０４２５】
また、表示タイプ決定部９３は、仮の表示タイプが通常タイプV2のフレームのうちの、細かさ情報が閾値K以上のフレーム、つまり、平坦な画像とは言えない画像のフレームの表示タイプを、通常タイプVC2に最終的に決定する。さらに、表示タイプ決定部９３は、仮の表示タイプが通常タイプV2のフレームのうちの、細かさ情報が閾値K未満のフレーム、つまり、平坦な画像のフレームの表示タイプを、通常表示レート低解像度タイプVC4に最終的に決定する。
【０４２６】
即ち、仮の表示タイプが通常タイプV2のフレームは、それほど大きな動きではないが、ある程度の動きがあるフレームである。また、細かさ情報が閾値K未満のフレームは、平坦な画像のフレームである。従って、仮の表示タイプが通常タイプV2のフレームのうちの、細かさ情報が閾値K未満のフレームは、ある程度の動きがあるが、平坦な画像のフレームである。
【０４２７】
ある程度の動きがある画像であっても、平坦な画像であれば、低解像度で表示しても、画像の空間的な変化を見逃しやすくはならない。また、スクラブにおいて、画像を低解像度で表示する場合には、スクラブを行う装置にかかる負荷を軽減することができる。
【０４２８】
そこで、ある程度の動きがある、仮の表示タイプが通常タイプV2のフレームについては、表示タイプが、原則として、通常解像度で画像が表示される通常タイプVC2に最終的に決定されるが、細かさ情報が閾値K未満である場合に限り、通常解像度より低い解像度で画像が表示される通常表示レート低解像度タイプVC4に最終的に決定される。
【０４２９】
ここで、図３９では、細かさ情報が閾値K未満のフレームの区間DPのフレームであり、かつ、動き情報に基づく仮の表示タイプが通常タイプV2のフレームの表示タイプが、通常表示レート低解像度タイプVC4に最終的に決定されている。
【０４３０】
なお、フレーム単位の動き情報と細かさ情報に基づいて、図３８に示した静止画タイプVC1、通常タイプVC2、高表示レート低解像度タイプVC3、または通常表示レート低解像度タイプVC4のうちのいずれかに最終的に決定される表示タイプを、以下、適宜、最終表示タイプという。
【０４３１】
次に、図４０のフローチャートを参照して、表示タイプ（最終表示タイプ）が、動き情報と細かさ情報の両方に基づき、図３８に示した静止画タイプVC1、通常タイプVC2、高表示レート低解像度タイプVC3、または通常表示レート低解像度タイプVC4のうちのいずれかに決定される場合の、図２２の表示タイプ決定部９３の処理について説明する。
【０４３２】
なお、変化量算出部９２（図６）では、変化量として、動き情報と細かさ情報とが求められ、表示タイプ決定部９３に供給される。
【０４３３】
表示タイプ決定部９３は、ステップＳ１８１において、変化量算出部９２（図６）からのフレーム単位の動き情報に基づき、図２３および図２４で説明したようにして、動き情報に基づく表示タイプ（仮の表示タイプ）を決定し、ステップＳ１８２に進む。
【０４３４】
ステップＳ１８２では、表示タイプ決定部９３は、変化量算出部９２から供給されるフレーム単位の細かさ情報を、記憶部１６１（図２２）にキャッシュさせ、ステップＳ１８３に進む。
【０４３５】
ステップＳ１８３では、閾値処理部１６２（図２２）が、記憶部１６１に記憶されたフレーム単位の細かさ情報と閾値Kとを比較する閾値処理を行い、フレーム単位の細かさ情報変化量と閾値Kとの比較の結果を表す比較情報を、フレーム単位で、連続性判定部１６３に供給して、ステップＳ１８４に進む。
【０４３６】
ステップＳ１８４では、連続性判定部１６３（図２２）が、いま、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームのうちの、まだ、注目フレームとしていない時系列順で最も先行するフレームを、注目フレームに選択し、その注目フレームの情報を、決定部１６４（図２２）に供給して、ステップＳ１８５に進む。
【０４３７】
ステップＳ１８５では、決定部１６４が、注目フレームの動き情報に基づく表示タイプ（ステップＳ１８１で決定された仮の表示タイプ）が、静止画タイプV1であるかどうかを判定する。
【０４３８】
ステップＳ１８５において、注目フレームの動き情報に基づく表示タイプが、静止画タイプV1であると判定された場合、ステップＳ１８６に進み、決定部１６４は、注目フレームの最終表示タイプ（注目フレームの動き情報と細かさ情報に基づく表示タイプ）を、静止画タイプVC1に最終的に決定し、ステップＳ１９３に進む。
【０４３９】
また、ステップＳ１８５において、注目フレームの動き情報に基づく表示タイプが、静止画タイプV1でないと判定された場合、ステップＳ１８７に進み、決定部１６４が、注目フレームの動き情報に基づく表示タイプが、高表示レート低解像度タイプV3であるかどうかを判定する。
【０４４０】
ステップＳ１８７において、注目フレームの動き情報に基づく表示タイプが、高表示レート低解像度タイプV3であると判定された場合、ステップＳ１８８に進み、決定部１６４は、注目フレームの最終表示タイプを、高表示レート低解像度タイプVC3に最終的に決定し、ステップＳ１９３に進む。
【０４４１】
また、ステップＳ１８７において、注目フレームの動き情報に基づく表示タイプが、高表示レート低解像度タイプV3でないと判定された場合、即ち、注目フレームの動き情報に基づく表示タイプが、通常タイプV2である場合、ステップＳ１８９に進み、連続性判定部１６３（図２２）は、閾値処理部１６２からの比較情報に基づき、動き情報に基づく表示タイプが通常タイプV2の注目フレームの細かさ情報が閾値K未満のフレームであり、注目フレームの直前か、直後、または前後に亘って、細かさ情報が閾値K未満のフレームが、最小限度フレーム数N以上連続して存在するかどうかを判定する。
【０４４２】
ステップＳ１８９において、注目フレームの細かさ情報が閾値K未満でないか、または、注目フレームの細かさ情報が閾値K未満であっても、注目フレームの直前、直後、および前後のいずれにも、細かさ情報が閾値K未満のフレームが最小限度フレーム数N以上連続して存在しないと判定された場合、連続性判定部１６３は、その判定の結果を表す判定情報を、決定部１６４（図２２）に供給して、ステップＳ１９０に進む。
【０４４３】
注目フレームの細かさ情報が閾値K未満でないとの判定の結果、または、注目フレームの直前、直後、および前後に亘ってのいずれにも、細かさ情報が閾値K未満のフレームが最小限度フレーム数N以上連続して存在しないとの判定の結果を表す判定情報の供給を連続性判定部１６３から受けた決定部１６４（図２２）は、ステップＳ１９０において、動き情報に基づく表示タイプが通常タイプV2の注目フレームの最終表示タイプを、通常タイプVC2に最終的に決定し、ステップＳ１９３に進む。
【０４４４】
また、ステップＳ１８９において、注目フレームの細かさ情報が閾値K未満であり、注目フレームの直前か、直後、または前後に亘って、細かさ情報が閾値K未満のフレームが最小限度フレーム数N以上連続して存在すると判定された場合、ステップＳ１９１に進み、連続性判定部１６３（図２２）は、細かさ情報が閾値K未満の、注目フレームの直前、直後、または前後に亘る、最小限度フレーム数N以上連続するフレームの区間のフレームのうちの、動き情報に基づく表示タイプが通常タイプV2のフレームの表示タイプを、通常表示レート低解像度タイプVC4に変更した場合に、同一の表示タイプが連続するフレーム数が、最小限度フレーム数N未満となる区間が生じるかどうかを判定する。
【０４４５】
即ち、ステップＳ１９１では、例えば、図３９において、区間DPが、細かさ情報が閾値K未満のフレームが最小限度フレーム数N以上連続する区間であるとすると、その区間DPのフレームのうちの、動き情報に基づく表示タイプが通常タイプV2のフレームの表示タイプを、通常表示レート低解像度タイプVC4に変更した場合に、Fyファイルを作成しようとしている動画について最終的に得られる、動き情報と細かさ情報に基づく表示タイプの時系列において、同一の表示タイプが連続する区間の中に、その同一の表示タイプが連続する数が、最小限度フレーム数N未満となる区間が生じるかどうかが判定される。
【０４４６】
ステップＳ１９１において、細かさ情報が閾値K未満の、注目フレームの直前、直後、または前後に亘る、最小限度フレーム数N以上連続するフレームの区間のフレームのうちの、動き情報に基づく表示タイプが通常タイプV2のフレームの表示タイプを、通常表示レート低解像度タイプVC4に変更すると、同一の表示タイプが連続するフレーム数が、最小限度フレーム数N未満となる区間が生じると判定された場合、即ち、動き情報に基づく表示タイプが通常タイプV2の注目フレームの最終表示タイプを、通常表示レート低解像度タイプVC4にすると、シークが頻発するおそれがある場合、ステップＳ１９０に進み、決定部１６４（図２２）は、上述したように、動き情報に基づく表示タイプが通常タイプV2の注目フレームの最終表示タイプを、通常タイプVC2に最終的に決定し、ステップＳ１９３に進む。
【０４４７】
また、ステップＳ１９１において、細かさ情報が閾値K未満の、注目フレームの直前、直後、または前後に亘る、最小限度フレーム数N以上連続するフレームの区間のフレームのうちの、動き情報に基づく表示タイプが通常タイプV2のフレームの表示タイプを、通常表示レート低解像度タイプVC4に変更しても、同一の表示タイプが連続するフレーム数が、最小限度フレーム数N未満となる区間が生じないと判定された場合、ステップＳ１９２に進み、決定部１６４（図２２）は、動き情報に基づく表示タイプが通常タイプV2の注目フレームの最終表示タイプを、通常表示レート低解像度タイプVC4に最終的に決定し、ステップＳ１９３に進む。
【０４４８】
ここで、表示タイプ（最終表示タイプ）が、図３８に示した静止画タイプVC1、通常タイプVC2、高表示レート低解像度タイプVC3、および通常表示レート低解像度タイプVC4の中から決定される場合には、スクラブにおいて、表示タイプが、静止画タイプVC1のフレームと、通常タイプVC2のフレームとについては、解像度が高い画像（通常解像度の画像）、つまり、（プロキシデータよりも）データ量が多い本線データの画像データを処理して画像が表示される。
【０４４９】
また、表示タイプが、高表示レート低解像度タイプVC3のフレームと、通常表示レート低解像度タイプVC4のフレームとについては、解像度が低い画像、つまり、（本線データよりも）データ量が少ないプロキシデータの画像データを処理して画像が表示される。
【０４５０】
いま、例えば、光ディスク７（図１）が、本線データとプロキシデータとが記録されるプロフェッショナルディスクである場合において、その光ディスク７に記録された本線データ、またはプロキシデータを用いてスクラブを行うこととすると、図２３で説明した場合と同様に、動画を構成する時系列のフレームにおいて、プロキシデータを用いて画像が表示される高表示レート低解像度タイプVC3のフレーム、または通常表示レート低解像度タイプVC4のフレームと、本線データを用いて画像が表示される静止画タイプVC1、または通常タイプVC2のフレームとが頻繁に切り替わると、シークが頻繁に発生し、スクラブバー５３（図３）の操作によって指定されたフレームの表示をスムースに行うことが困難になることがある。
【０４５１】
上述のようなシークが頻繁に発生することを防止するには、プロキシデータを用いて画像が表示される高表示レート低解像度タイプVC3のフレーム、または通常表示レート低解像度タイプVC4のフレームと、本線データを用いて画像が表示される静止画タイプVC1、または通常タイプVC2のフレームとが頻繁に切り替わらないようにする必要がある。
【０４５２】
そのため、図４０では、ステップＳ１９０乃至Ｓ１９２において、細かさ情報が閾値K未満の、注目フレームの直前、直後、または前後に亘る、最小限度フレーム数N以上連続するフレームの区間のフレームのうちの、動き情報に基づく表示タイプが通常タイプV2のフレームの表示タイプを、通常表示レート低解像度タイプVC4に変更しても、同一の表示タイプが連続するフレーム数が、最小限度フレーム数N未満となる区間が生じない場合に限り、動き情報に基づく表示タイプが通常タイプV2の注目フレームの最終表示タイプを、通常表示レート低解像度タイプVC4に決定し、他の場合（同一の表示タイプ（最終表示タイプ）が連続するフレーム数が、最小限度フレーム数N未満となる区間が生じる場合）には、動き情報に基づく表示タイプが通常タイプV2の注目フレームの最終表示タイプを、通常表示レート低解像度タイプVC4に決定するようになっている。
【０４５３】
ステップＳ１９３では、連続性判定部１６３が、いま、Fyファイル作成部７６（図６）でFyファイルを作成しようとしている動画を構成するフレームの中で、まだ、注目フレームに選択していないフレームがあるかどうかを判定する。
【０４５４】
ステップＳ１９３において、まだ、注目フレームに選択していないフレームがあると判定された場合、ステップＳ１８４に戻り、上述したように、まだ、注目フレームに選択していないフレームが、注目フレームに新たに選択され、以下、同様の処理が繰り返される。
【０４５５】
また、ステップＳ１９３において、注目フレームに選択していないフレームがないと判定された場合、表示タイプ決定部９３は、処理を終了する。
【０４５６】
次に、図４１は、図６の変化量算出部９２において、変化量として動き情報と細かさ情報が求められ、表示タイプ決定部９３において、動き情報と細かさ情報に基づく表示タイプ（最終表示タイプ）が決定され、選択部９４において、変化量と表示タイプの両方が選択された場合の、図６のファイル作成部９５が作成するFyファイルの例を示している。
【０４５７】
図４１のFyファイルにおいては、左から右方向に、先頭から何番目のフレームかを表すフレームナンバ、フレームナンバに対応するフレームのタイムコード、フレームナンバに対応するフレームの変化量としての動き情報と細かさ情報、フレームナンバに対応するフレームの動き情報と細かさ情報に基づく表示タイプ（最終表示タイプ）が、順次配置されている。
【０４５８】
次に、図４２は、図１のドライブ５の構成例を示している。
【０４５９】
ドライブ５は、記録部／再生部１８１、デコーダ１８２、Fyファイル作成部１８３、および外部I/F１８４から構成される。
【０４６０】
記録部／再生部１８１は、外部I/F１８４から供給されるデータ（のファイル）や、Fyファイル作成部１８３から供給されるFyファイルを、光ディスク７に書き込む（記録する）。また、記録部／再生部１８１は、光ディスク７からデータを読み出し、デコーダ１８２または外部I/F１８４に供給する。
【０４６１】
デコーダ１８２は、記録部／再生部１８１から供給されるデータをデコードし、Fyファイル作成部１８３に供給する。
【０４６２】
Fyファイル作成部１８３は、図４のFyファイル作成部７６（図６）と同様に構成され、デコーダ１８２から供給されるデータから、メタファイルとしてのFyファイルを作成し、記録部／再生部１８１に供給する。
【０４６３】
外部I/F１８４は、記録部／再生部１８１から供給されるデータを受信し、外部に出力する。また、外部I/F１８４は、外部から供給されるデータを受信し、記録部／再生部１８１に供給する。
【０４６４】
以上のように構成されるドライブ５では、記録部／再生部１８１が、例えば、ユーザの操作に応じて、外部I/F１８４を介して供給されるデータを、光ディスク７に記録し、あるいは、光ディスク７に記録されたデータを読み出し、外部I/F１８４を介して外部に出力する。
【０４６５】
また、ドライブ５では、例えば、光ディスク７が本線データとプロキシデータが格納されたAVファイルと、メタデータが格納されたメタファイルとが記録されたプロフェッショナルディスクである場合には、記録部／再生部１８１は、光ディスク７に記録されたメタファイルの中に、Fyファイルが存在するかどうかを、例えば、光ディスク７がドライブ５に装着されたとき、あるいはユーザの操作に応じて確認する。
【０４６６】
そして、記録部／再生部１８１は、光ディスク７にFyファイルが記録されていない場合、光ディスク７から本線データとしての画像データを読み出すことによりその画像データを取得し、デコーダ１８２に供給する。
【０４６７】
光ディスク７に記録された本線データとしての画像データは、図５で説明したように、例えば、MPEG2方式で符号化されているため、デコーダ１８２は、記録部／再生部１８１からの本線データをMPEG2方式で復号し、その復号の結果得られる画像データを、Fyファイル作成部１８３に供給する。
【０４６８】
Fyファイル作成部１８３は、図４のFyファイル作成部７６と同様にして、デコーダ１８２からの画像データ（光ディスク７に記録された画像データ）のメタデータが格納されたメタファイルとしてのFyファイルを作成する。
【０４６９】
即ち、Fyファイル作成部１８３は、デコーダ１８２からの画像データを用いて、その画像データの各フレームの変化量を求める。さらに、Fyファイル作成部１８３は、必要に応じて、フレームの変化量に基づき、表示タイプを決定し、フレーム単位の変化量と表示タイプとのうちのいずれか一方、または両方が格納されたFyファイルを作成して、記録部／再生部１８１に供給する。
【０４７０】
記録部／再生部１８１は、Fyファイル作成部１８３から供給されたFyファイルを、光ディスク７に記録する。
【０４７１】
なお、図４２のドライブ５において、例えば、外部から外部I/F１８４に対して、画像データがMPEG2方式で符号化された符号化ビットストリームが供給され、記録部／再生部１８１が、外部I/F１８４から供給される符号化ビットストリーム（のファイル）を光ディスク７に記録する場合には、Fyファイル作成部１８３では、その符号化ビットストリームの記録が終了した後に、上述したように、Fyファイルを作成することもできるし、記録部／再生部１８１において、外部I/F１８４から供給される符号化ビットストリームをデコーダ１８２に供給してデコードさせてFyファイル作成部１８３に供給させることにより、符号化ビットストリームの光ディスク７への記録と並列して、Fyファイルを作成することもできる。
【０４７２】
ここで、フレームの変化量を求めるのに用いる画素値の種類は、特に限定されるものではない。即ち、画素値が、例えば、輝度信号(Y)と色差信号(Cb,Cr)からなる場合には、輝度信号を用いて変化量を求めることもできるし、色差信号を用いて変化量を求めることもできる。但し、人間の視覚に対する影響は、色差信号の変化よりも、輝度信号の変化の方が大であるので、変化量は、輝度信号を用いて求めるのが望ましい。
【０４７３】
また、画素値が、R,G,Bの色成分からなる場合には、例えば、R,G,Bの色成分の自乗和等を用いて、変化量を求めることができる。
【０４７４】
さらに、変化量としての動き情報としては、図１１乃至図１４で説明した値以外の動きの激しさを定量的に表す値を採用することができる。同様に、変化量としての細かさ情報としては、図１５乃至図１８で説明した値以外の画像の細かさを定量的に表す値（例えば、ディフィカルティ(difficulty)やフラットネスと呼ばれる値等）を採用することができる。
【０４７５】
また、例えば、図４２で説明したように、MPEG2方式で符号化された画像データを用いて変化量を求める場合には、その画像データのMPEG2方式での符号化によって得られている符号化ビットストリームを解析（パース）し、その解析の結果を用いて、変化量を求めることができる。
【０４７６】
即ち、符号化ビットストリームには、動きベクトルが含まれるので、変化量としての動き情報を、図１１および図１２で説明したように、動きベクトルを用いて求める場合には、符号化ビットストリームを解析することにより、その解析の結果として、符号化ビットストリームに含まれる動きベクトルを得て、その動きベクトルを用いて、動き情報を求めることができる。
【０４７７】
また、符号化ビットストリームには、8×8画素のブロックをDCT変換して得られるDCT係数が含まれるので、変化量としての細かさ情報を、図１５および図１６で説明したように、DCT係数を用いて求める場合には、符号化ビットストリームを解析することにより、その解析の結果として、符号化ビットストリームに含まれるDCT係数を得て、そのDCT係数を用いて、細かさ情報を求めることができる。
【０４７８】
さらに、8×8画素のブロックをDCT変換して得られるDCT係数のうちの、左上のDCT係数である、いわゆる直流成分は、ブロックの8×8画素それぞれの画素値の平均値であるから、変化量としての細かさ情報を、図１７および図１８で説明したように、ブロックの画素値の平均値を用いて求める場合には、符号化ビットストリームを解析することにより、その解析の結果として、符号化ビットストリームに含まれるDCT係数のうちの直流成分を得て、その直流成分、即ち、ブロックの画素値の平均値を用いて、細かさ情報を求めることができる。
【０４７９】
次に、図４３は、図１のPC１のCPU２２（図２）が編集プログラムを実行することで、編集システムとして機能するPC１の機能的構成例を示している。
【０４８０】
編集システムは、キーボード２、マウス３、ディスプレイ４１、編集制御部２０１、ストリームメモリ制御部２２１、およびストリーム用メモリ２２２等から構成される。
【０４８１】
また、編集制御部２０１は、GUI制御部２１１、ストリーム復号位置検出部２１２、データ供給制御部２１３、Fyファイル管理部２１４、表示タイプ取得部２１５、デコーダ２１６、Fyファイル作成部２１７、および表示制御部２１８から構成される。
【０４８２】
GUI制御部２１１は、表示制御部２１８を制御することにより、ディスプレイ４１（図２）に、例えば、図３に示したビューワ５１等のGUIを表示させる。また、GUI制御部２１１は、ディスプレイ４１に表示されたGUIに対する、キーボード２やマウス３のユーザの操作に応じて、キーボード２やマウス３から供給される操作信号を受信し、その操作信号に応じて、必要な情報等を、ストリーム復号位置検出部２１２や、データ供給制御部２１３、表示制御部２１８等に供給する。
【０４８３】
即ち、GUI制御部２１１は、例えば、キーボード２やマウス３から供給される操作信号に応じて、スクラブの対象となる本線データまたはプロキシデータのストリーム（AVファイル）を指示する情報や、スクラブにおいて再生すべきフレームを指示する情報とともに、フレームの再生を要求するコマンド（命令）を、ストリーム復号位置検出部２１２に供給する。
【０４８４】
また、GUI制御部２１１は、キーボード２やマウス３から供給される操作信号に応じて、変化量に基づいて表示タイプを決定するときに用いられる閾値を、データ供給制御部２１３に供給する。
【０４８５】
ストリーム復号位置検出部２１２は、GUI制御部２１１からのコマンドに応じて、ディスプレイ４１に表示するフレームを特定する情報としてのフレームナンバと、そのフレームのデータ（本線データまたはプロキシデータ）を含むストリームを特定する情報としてのストリームナンバを生成し、データ供給制御部２１３に供給する。
【０４８６】
データ供給制御部２１３は、編集システムを構成するブロックどうしの間でやりとりされるデータの中継等を行う。
【０４８７】
即ち、データ供給制御部２１３は、例えば、GUI制御部２１１からの閾値を受信し、その閾値を、Fyファイル管理部２１４に供給する。また、データ供給制御部２１３は、例えば、ストリーム復号位置検出部２１２からのフレームナンバおよびストリームナンバを受信し、そのフレームナンバおよびストリームナンバを、表示タイプ取得部２１５やストリームメモリ制御部２２１に供給する。さらに、データ供給制御部２１３は、例えば、ストリームメモリ制御部２２１からのストリーム（本線データまたはプロキシデータ）を受信し、そのストリームを、デコーダ２１６に供給する。また、データ供給制御部２１３は、例えば、光ディスク７から読み出されたFyファイルを受信することにより取得し、そのFyファイルを、Fyファイル管理部２１４に供給する。さらに、データ供給制御部２１３は、Fyファイル作成部２１７から供給されるFyファイルを受信し、そのFyファイルを、光ディスク７に供給して記録させる。
【０４８８】
Fyファイル管理部２１４は、データ供給制御部２１３から供給されるFyファイルの管理（記憶）を行う。また、Fyファイル管理部２１４は、Fyファイルに格納されている変化量と、データ供給制御部２１３から供給される閾値とを比較することにより、表示タイプの決定（再決定）を行う。
【０４８９】
表示タイプ取得部２１５は、Fyファイル管理部２１４で管理されているFyファイルを参照することにより、データ供給制御部２１３から供給されるフレームナンバ（さらには、必要なストリームナンバ）によって特定されるフレーム、即ち、ディスプレイ４１に表示するフレームの表示タイプを取得し、デコーダ２１６および表示制御部２１８、その他の編集システムを構成する必要なブロックである、例えば、GUI制御部２１１などに供給する。
【０４９０】
デコーダ２１６は、メモリ制御部２１６Ａを内蔵しており、データ供給制御部２１３から供給されるストリーム（本線データまたはプロキシデータ）を復号し、その結果得られるフレームの画像データ（ベースバンドの画像データ）を、Fyファイル作成部２１７や表示制御部２１８に供給する。
【０４９１】
なお、デコーダ２１６は、ストリームを復号するにあたって必要なデータを、RAM２４（図２）に記憶させながら、ストリームの復号を行うが、デコーダ２１６が内蔵するメモリ制御部２１６Ａは、RAM２４に対するデータの読み書きを制御する。また、デコーダ２１６は、後述するように、ディスプレイ４１に表示するフレームの表示タイプが静止画タイプである場合に、デコードを行わないことがあるが、ディスプレイ４１に表示するフレームの表示タイプが静止画タイプであることについては、表示タイプ取得部２１５からの表示タイプを参照することにより認識する。
【０４９２】
Fyファイル作成部２１７は、図６に示したFyファイル作成部７６と同様に構成され、デコーダ２１６から供給される画像データから、Fyファイルを作成し、データ供給制御部２１３に供給する。
【０４９３】
表示制御部２１８は、GUI制御部２１１から供給される情報や、Fyファイル管理部２１４で管理されているFyファイル等に応じて、ディスプレイ４１にGUIを表示させる。また、表示制御部２１８は、デコーダ２１６から供給されるフレームの画像データに対応する画像を、表示タイプ取得部２１５から供給される、そのフレームの表示タイプが表す表示方法で、ディスプレイ４１に表示させる。なお、ディスプレイ４１では、RAM２４（図２）の一部の記憶領域としてのフレームバッファ２１８Ａに記憶されているデータに対応する画像が表示されるようになっており、表示制御部２１８は、フレームバッファ２１８Ａに画像データを書き込むことで、その画像データに対応する画像を、ディスプレイ４１に表示させる。
【０４９４】
ストリームメモリ制御部２２１は、光ディスク７やストリーム用メモリ２２２に対するストリーム（本線データまたはプロキシデータ）の読み書きを制御する。即ち、ストリームメモリ制御部２２１は、データ供給制御部２１３からのフレームナンバおよびストリームナンバによって特定されるフレームを復号するのに必要なストリームのデータ（本線データまたはプロキシデータ）を読み出し、データ供給制御部２１３に供給するとともに、必要に応じて、ストリーム用メモリ２２２に供給する。
【０４９５】
ストリーム用メモリ２２２は、RAM２４（図２）の一部の記憶領域であり、ストリームメモリ制御部２２１から供給されるストリームのデータを記憶する。ここで、ストリームメモリ制御部２２１は、光ディスク７から読み出したストリームのデータを、ストリーム用メモリ２２２に供給して記憶させ、既に、ストリーム用メモリ２２２に記憶されているストリームのデータを、ストリーム用メモリ２２２から読み出す。ストリームのデータを、ストリーム用メモリ２２２から読み出す場合には、光ディスク７から読み出す場合に比較して、高速に読み出すことができる。
【０４９６】
以上のように構成される編集システムでは、光ディスク７から、Fyファイルが読み出され、データ供給制御部２１３を介して、Fyファイル管理部２１４に供給されて記憶される。
【０４９７】
一方、スクラブにおいてディスプレイ４１に表示するフレームとして指示されたフレームを、注目フレームということとすると、表示タイプ取得部２１５は、Fyファイル管理部２１４で管理（記憶）されているFyファイルを参照することにより、注目フレームの表示タイプを取得し、表示制御部２１８に供給する。
【０４９８】
また、デコーダ２１６は、光ディスク７から読み出され、データ供給制御部２１３を介して供給されるデータを、注目フレームの画像データに復号し、表示制御部２１８に供給する。表示制御部２１８は、注目フレームの画像データに対応する画像を、その注目フレームの表示タイプが表す表示方法で、ディスプレイ４１に表示させる。
【０４９９】
ここで、Fyファイルには、上述したように、フレーム単位の変化量と表示タイプのいずれか一方、または両方が選択されて格納されるため、Fyファイルには、変化量と表示タイプの両方が格納されている場合、変化量が格納されているが、表示タイプが格納されていない場合、表示タイプが格納されているが、変化量が格納されていない場合がある。
【０５００】
Fyファイルに表示タイプが格納されている場合、即ち、変化量と表示タイプの両方が格納されている場合と、表示タイプが格納されているが、変化量が格納されていない場合とにおいては、Fyファイルに格納されている表示タイプを、そのまま用いて、注目フレームの画像データに対応する画像を、ディスプレイ４１に表示させることができる。
【０５０１】
また、Fyファイルに変化量が格納されている場合、即ち、変化量と表示タイプの両方が格納されている場合と、変化量が格納されているが、表示タイプが格納されていない場合とにおいては、Fyファイル管理部２１４において、Fyファイルに格納されているフレーム単位の変化量に基づき、フレーム単位の表示タイプを求め、その表示タイプを用いて、注目フレームの画像データに対応する画像を、ディスプレイ４１に表示させることができる。
【０５０２】
なお、光ディスク７にFyファイルが記録されていない場合には、Fyファイル作成部２１７において、Fyファイルを作成し、光ディスク７に記録することができる。
【０５０３】
また、ここでは、図４３の編集システムにおいて、光ディスク７に記録されているデータを対象にスクラブを行うこととするが、その他、例えば、図１のハードディスク４や図２のハードディスク２５に記録されているデータを対象にスクラブを行うことが可能である。
【０５０４】
次に、図４４は、図４３のFyファイル管理部２１４と表示タイプ取得部２１５の構成例を示している。
【０５０５】
Fyファイル管理部２１４は、ファイル記憶部２３１、変化量取得部２３２、表示タイプ決定部２３３、および表示タイプ書き込み部２３４から構成されている。
【０５０６】
ファイル記憶部２３１は、データ供給制御部２１３（図４３）から供給されるFyファイル（に格納されたデータ）を記憶する。
【０５０７】
変化量取得部２３２は、ファイル記憶部２３１に記憶されたFyファイルから、フレーム単位の変化量を読み出すことにより取得し、表示タイプ決定部２３３に供給する。
【０５０８】
表示タイプ決定部２３３は、記憶部２４１、閾値処理部２４２、連続性判定部２４３、および決定部２４４から構成され、変化量取得部２３２から供給されるフレーム単位の変化量に基づき、図２２の表示タイプ決定部９３と同様にして、フレーム単位の表示タイプを決定（再決定）し、表示タイプ書き込み部２３４に供給する。
【０５０９】
ここで、表示タイプ決定部２３３において、記憶部２４１、閾値処理部２４２、連続性判定部２４３、または決定部２４４は、図２２の表示タイプ決定部９３の記憶部１６１、閾値処理部１６２、連続性判定部１６３、または決定部１６４とそれぞれ同様に構成される。
【０５１０】
なお、閾値処理部２４２は、閾値処理部１６２と同様に、フレーム単位の変化量と閾値とを比較するが、閾値処理部２４２が変化量と比較する閾値は、図４３のGUI制御部２１１からデータ供給制御部２１３を介して、閾値処理部２４２に供給されるようになっている。
【０５１１】
表示タイプ書き込み部２３４は、Fyファイル管理部２１４から供給されるフレーム単位の表示タイプを、ファイル記憶部２３１に記憶されているFyファイル（図２６）に格納されているフレーム番号およびタイムコードに対応付けて記憶させる（書き込む）。
【０５１２】
表示タイプ取得部２１５は、表示タイプ読み出し部２５１から構成される。表示タイプ読み出し部２５１は、Fyファイル管理部２１４で管理されているFyファイル、即ち、Fyファイル管理部２１４のファイル記憶部２３１に記憶されているFyファイルから、データ供給制御部２１３から供給される注目フレームのフレームナンバに対応付けられている表示タイプを読み出すことにより取得し、図４３のデコーダ２１６や表示制御部２１８等に供給する。
【０５１３】
次に、図４３の編集システムにおいて行われるスクラブでは、例えば、図３に示したスクラブバー５３のスクラブつまみ５４の位置によって、ディスプレイ４１（に表示されるビューア５１の表示部５２）に表示するフレーム（注目フレーム）が指定される。
【０５１４】
即ち、図４３のGUI制御部２１１は、表示制御部２１８にスクラブバー５３を表示させ、そのスクラブバー５３のスクラブつまみ５４の位置によって指定されるフレームを、注目フレームとして認識する。
【０５１５】
ここで、図４５を参照して、スクラブつまみ５４の位置と、その位置によって指定されるフレームとの関係について説明する。
【０５１６】
図４５は、スクラブバー５３を示している。
【０５１７】
スクラブバー５３においては、スクラブつまみ５４が移動可能な水平方向の移動可能範囲（水平方向が、例えば、１０数cm程度の長さの範囲）は、スクラブの対象とされた動画（のストリーム）を構成するフレームの数と同一の小区間（以下、適宜、指定区間という）に区分される。
【０５１８】
ここで、図４５では、移動可能範囲が、F個の指定区間に区分されている。
【０５１９】
また、指定区間の水平方向の長さ（移動可能範囲を指定区間に区切るときの幅）を区間長ということとすると、図４５では、移動可能範囲は、同一の区間長の指定区間に区分されている（等分されている）。
【０５２０】
移動可能範囲を区分する各指定区間には、例えば、左側の指定区間から右側の指定区間の方向に、スクラブの対象とされた動画を構成するフレームが、時系列に割り当てられる。従って、移動可能範囲の左からi番目の指定区間を第i指定区間というとともに、スクラブの対象とされた動画を構成するフレームの、先頭からi番目のフレームを第iフレームということとすると、第i指定区間には、第iフレームが割り当てられる。
【０５２１】
GUI制御部２１１は、スクラブつまみ５４が位置している指定区間を、ディスプレイ４１に直前に表示されたフレームの表示タイプが表す表示レートに応じたタイミングで検出し、その指定区間に割り当てられているフレームを、注目フレームとして認識する。
【０５２２】
ここで、表示タイプとして、図２０に示した静止画タイプV1、通常タイプV2、および高表示レート低解像度タイプV3の３つを採用し、静止画タイプV1と通常タイプV2の表示レートが、例えば、３０フレーム／秒であり、高表示レート低解像度タイプV3の表示レートが、例えば、６０フレーム／秒であるとする。
【０５２３】
図４６は、通常タイプV2と高表示レート低解像度タイプV3のフレームそれぞれのスクラブでの表示方法を示している。
【０５２４】
GUI制御部２１１は、ディスプレイ４１に直前に表示されたフレームの表示タイプが、３０フレーム／秒の表示レートの静止画タイプV1または通常タイプV2であるときには、１／３０秒間隔で、スクラブつまみ５４が位置している指定区間を検出し、その指定区間に割り当てられているフレームを、注目フレームとして認識する。従って、表示タイプが、通常タイプV2であるときには、ディスプレイ４１に表示されるフレーム（注目フレーム）は、１／３０秒間隔、つまり、３０フレーム／秒の表示レートで更新される。
【０５２５】
また、GUI制御部２１１は、ディスプレイ４１に直前に表示されたフレームの表示タイプが、例えば、６０フレーム／秒の表示レートの高表示レート低解像度タイプV3であるときには、１／６０秒間隔で、スクラブつまみ５４が位置している指定区間を検出し、その指定区間に割り当てられているフレームを、注目フレームとして認識する。従って、表示タイプが、高表示レート低解像度タイプV3であるときには、ディスプレイ４１に表示されるフレーム（注目フレーム）は、１／６０秒間隔、つまり、６０フレーム／秒の表示レートで更新される。
【０５２６】
以上から、スクラブつまみ５４が、例えば、１／３０秒間に、２つの指定区間分の長さだけ左から右に移動する速さで移動された場合、表示タイプが、例えば、通常タイプV2のフレームが連続する通常区間では、１／３０秒間隔で、１フレームおきのフレーム、つまり、第iフレーム、第i+2フレーム、第i+4フレーム、・・・が注目フレームとなり、その結果、ディスプレイ４１では、画像が、コマ落ち状態で、２倍速で表示される。
【０５２７】
また、スクラブつまみ５４が、上述の場合と同様に、１／３０秒間に、２つの指定区間分の長さだけ左から右に移動する速さで移動された場合、即ち、１／６０秒間に、１つの指定区間分の長さだけ左から右に移動する速さで移動された場合、表示タイプが、例えば、高表示レート低解像度タイプV3のフレームが連続する高表示レート低解像度区間では、１／６０秒間隔で、１フレームごとのフレーム、つまり、第iフレーム、第i+1フレーム、第i+2フレーム、・・・が注目フレームとなり、その結果、ディスプレイ４１では、画像が、コマ落ちなしで、２倍速で表示される。
【０５２８】
以上のように、スクラブつまみ５４を、２倍速の表示（再生）を行うような速い移動速度で移動させた場合、コマ落ちが生じる表示タイプのフレームと、コマ落ちが生じない表示タイプのフレームとがある。即ち、表示レートが通常タイプV2に比べて高い高表示レート低解像度タイプV3のフレーム、つまり、動きが大きいフレームについては、スクラブつまみ５４が速く動かされても、コマ落ちが生じにくくなっている。これにより、動きが大きいフレームについて、画像の時間的な変化を見逃すのを防止することができる。
【０５２９】
なお、上述したように、通常区間では、１／３０秒間隔で、注目フレームが更新されるのに対して、高表示レート低解像度区間では、通常区間の１／２の１／６０秒間隔で、注目フレームが更新される。
【０５３０】
従って、デコーダ２１６（図４３）は、高表示レート低解像度区間のフレーム（表示タイプが高表示レート低解像度タイプV3のフレーム）を、通常区間のフレーム（表示タイプが通常タイプV2のフレーム）の２倍の速度で復号する必要がある。さらに、高表示レート低解像度区間のフレームは、通常区間のフレームよりも動きの大きなフレームであるから、解像度が一定である場合には、デコーダ２１６での復号に要するデータのデータ量については、高表示レート低解像度区間のフレームの方が、通常区間のフレームよりも多い。以上から、高表示レート低解像度区間のフレームの表示には、通常区間のフレームの表示に比較して大きな負荷がかかる。
【０５３１】
そこで、図４３の編集システムでは、通常区間のフレームを表示する場合には、本線データとしての画像データを復号し、高表示レート低解像度区間のフレームを表示する場合には、本線データよりもデータ量が少ないプロキシデータとしての画像データを復号し、これにより、高表示レート低解像度区間のフレームの表示にかかる負荷を軽減するようになっている。
【０５３２】
また、上述の場合には、スクラブつまみ５４が、例えば、１／３０秒間に、２つの指定区間分の長さだけ左から右に移動する速さで移動されることとしたが、その他、例えば、スクラブつまみ５４が、１／３０秒間に、１つの指定区間分の長さだけ左から右に移動する速さで移動されることとした場合には、表示タイプが、通常タイプV2のフレームが連続する通常区間では、１／３０秒間隔で、１フレームごとのフレームが注目フレームとなり、その結果、ディスプレイ４１では、画像が、コマ落ちなしで、１倍速で表示される。
【０５３３】
また、スクラブつまみ５４が、１／３０秒間に、１つの指定区間分の長さだけ左から右に移動する速さで移動された場合には、スクラブつまみ５４は、１／６０秒間に、１つの指定区間分の長さの１／２だけ左から右に移動するから、表示タイプが、高表示レート低解像度タイプV3のフレームが連続する高表示レート低解像度区間では、１／３０秒間に、同一のフレームが注目フレームとなり、その結果、ディスプレイ４１では、やはり、画像が、コマ落ちなしで、１倍速で表示される。
【０５３４】
次に、図４７を参照して、表示タイプが静止画タイプV1のフレームの表示について説明する。
【０５３５】
図４３の編集システムでは、表示タイプが静止画タイプV1のフレームが連続する静止画区間のフレームについては、その静止画区間のフレームの中で、注目フレーム（表示対象のフレーム）が変更されても、ディスプレイ４１に直前に表示されたフレームの画像が表示される。
【０５３６】
即ち、静止画区間のフレームについては、その静止画区間のフレームが注目フレームである限り、その静止画区間において最初に注目フレームとなったフレームの画像が表示し続けられる。
【０５３７】
従って、例えば、図４７の上から１番目に示すように、スクラブの開始時に、スクラブつまみ５４が、静止画区間以外の区間（ここでは、通常区間または高表示レート低解像度区間）のフレームを注目フレームに指定している場合において、ユーザがスクラブつまみ５４を左から右方向に移動させ、これにより、静止画区間のフレームの中で、その静止画区間の左端に位置するフレーム（静止画区間の中で時間的に最も先行するフレーム）が、最初に、注目フレームに指定されると、デコーダ２１６（図４３）において、その最初に注目フレームに指定されたフレームの画像データが復号され、ディスプレイ４１において、対応する画像が表示される。
【０５３８】
そして、その後は、静止画区間のフレームが注目フレームに指定されている限り、最初に注目フレームに指定されたフレームの画像が、現在の注目フレームの画像として表示される。従って、デコーダ２１６では、静止画区間のフレームが注目フレームに指定されている限り、現在の注目フレームの画像データの復号は、最初に注目フレームに指定されたフレームの画像データの復号を除いて行われない。
【０５３９】
また、例えば、図４７の上から２番目に示すように、スクラブの開始時に、スクラブつまみ５４が、静止画区間のフレームを注目フレームに指定している場合には、デコーダ２１６（図４３）において、スクラブの開始時に注目フレームに指定されたフレームの画像データが復号され、ディスプレイ４１において、対応する画像が表示される。
【０５４０】
そして、その後は、静止画区間のフレームが注目フレームに指定されている限り、スクラブの開始時に注目フレームに指定されたフレームの画像が、現在の注目フレームの画像として表示される。従って、デコーダ２１６では、静止画区間のフレームが注目フレームに指定されている限り、現在の注目フレームの画像データの復号は、スクラブの開始時に注目フレームに指定されたフレームの画像データの復号を除いて行われない。
【０５４１】
さらに、例えば、図４７の上から３番目（下から１番目）に示すように、スクラブの開始時に、スクラブつまみ５４が、静止画区間以外の区間（ここでは、通常区間または高表示レート低解像度区間）のフレームを注目フレームに指定している場合において、ユーザがスクラブつまみ５４を右から左方向に移動させ、これにより、静止画区間のフレームの中で、その静止画区間の右端に位置するフレーム（静止画区間の中で時間的に最も後行するフレーム）が、最初に、注目フレームに指定されると、デコーダ２１６（図４３）において、その最初に注目フレームに指定されたフレームの画像データが復号され、ディスプレイ４１において、対応する画像が表示される。
【０５４２】
そして、その後は、静止画区間のフレームが注目フレームに指定されている限り、最初に注目フレームに指定されたフレームの画像が、現在の注目フレームの画像として表示される。従って、デコーダ２１６では、静止画区間のフレームが注目フレームに指定されている限り、現在の注目フレームの画像データの復号は、最初に注目フレームに指定されたフレームの画像データの復号を除いて行われない。
【０５４３】
次に、図４８のフローチャートを参照して、図４３の編集システムで行われるスクラブの処理について説明する。
【０５４４】
例えば、ユーザが、AVファイルとFyファイルとが記録された光ディスク７（図１）を、ドライブ５に装着（挿入）し、編集プログラムを起動するように、キーボード２またはマウス３を操作すると、CPU２２（図２）は、編集プログラムを実行し、これにより、PC１は、図４３の編集システムとして機能するようになる。
【０５４５】
その後、ユーザが、キーボード２またはマウス３を操作して、スクラブの対象となるAVファイルを指定すると、その操作に対応した操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給される。
【０５４６】
GUI制御部２１１は、ステップＳ２１１において、キーボード２またはマウス３からの操作信号に応じて、スクラブの対象となるAVファイルを認識して、ステップＳ２１２に進む。
【０５４７】
ステップＳ２１２では、Fyファイル管理部２１４が、GUI制御部２１１がスクラブの対象として認識したAVファイルに対応するFyファイルをキャッシュ（一時記憶）し、ステップＳ２１３に進む。
【０５４８】
即ち、GUI制御部２１１は、スクラブの対象として認識したAVファイルに対応するFyファイルを供給するように、ストリーム復号位置検出部２１２を介して、データ供給制御部２１３を制御する。データ供給制御部２１３は、GUI制御部２１１からの制御にしたがい、光ディスク７からFyファイルを読み出し、Fyファイル管理部２１４に供給する。ステップＳ２１２において、Fyファイル管理部２１４は、以上のようにして、データ供給制御部２１３から供給されるFyファイルを、ファイル記憶部２３１（図４４）に記憶させる。
【０５４９】
ステップＳ２１３では、Fyファイル管理部２１４の変化量取得部２３２（図４４）が、直前のステップＳ２１２でファイル記憶部２３１に記憶されたFyファイルに、表示タイプが存在するかどうかを判定する。
【０５５０】
ステップＳ２１３において、ファイル記憶部２３１に記憶されたFyファイルに、表示タイプが存在すると判定された場合、後述するステップＳ２１４をスキップして、ステップＳ２１５に進む。
【０５５１】
また、ステップＳ２１３において、ファイル記憶部２３１に記憶されたFyファイルに、表示タイプが存在しないと判定された場合、変化量取得部２３２は、ファイル記憶部２３１に記憶されたFyファイルから、フレーム単位の変化量を読み出し、表示タイプ決定部２３３（図４４）に供給して、ステップＳ２１４に進む。
【０５５２】
なお、ここでは、ファイル記憶部２３１に記憶されたFyファイルには、少なくとも、フレーム単位の変化量としての動き情報が記憶されているものとする。
【０５５３】
ステップＳ２１４では、表示タイプ決定部２３３が、変化量取得部２３２から供給されるフレーム単位の変化量に基づき、図２２の表示タイプ決定部９３と同様にして、フレーム単位の表示タイプを決定し、表示タイプ書き込み部２３４（図４４）に供給する。そして、表示タイプ書き込み部２３４は、表示タイプ決定部２３３からの表示タイプを、ファイル記憶部２３１のFyファイルに書き込み、ステップＳ２１４からステップＳ２１５に進む。
【０５５４】
なお、表示タイプ決定部２３３の閾値処理部２４２（図４４）は、ステップＳ２１４で表示タイプを決定するにあたって、変化量と閾値とを比較するが、その閾値としては、図２２の表示タイプ決定部９３の閾値処理部１６２が用いるのと同一の閾値を使用する。
【０５５５】
また、上述したように、ステップＳ２１３からステップＳ２１５に進むとき、またはステップＳ２１４からステップ２１５に進むとき、図４３の編集システムでは、図３のビューワ５１その他のGUIをディスプレイ４１に表示するGUI表示処理が開始される。GUI表示処理の詳細については、後述する。
【０５５６】
ステップＳ２１５では、GUI制御部２１１が、編集プログラムを終了するように、キーボード２またはマウス３が操作されたかどうかを判定する。
【０５５７】
ステップＳ２１５において、編集プログラムを終了するように、キーボード２またはマウス３が操作されていないと判定された場合、ステップＳ２１６に進み、GUI制御部２１１は、ステップＳ２１３からステップＳ２１５に進むとき、またはステップＳ２１４からステップ２１５に進むときに開始されたGUI表示処理によって表示されたビューワ５１（図３）のスクラブバー５３が有するスクラブつまみ５４が移動されたかどうか、即ち、ユーザがキーボード２またはマウス３を操作することにより、スクラブつまみ５４を移動したかどうかを判定する。
【０５５８】
ステップＳ２１６において、スクラブつまみ５４が移動されたと判定された場合、即ち、ユーザが、スクラブつまみ５４を移動するように、キーボード２またはマウス３を操作し、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給された場合、GUI制御部２１１は、スクラブつまみ５４が位置する指定区間（図４５）に割り当てられたフレームを注目フレームとし、その注目フレームの情報を、ストリーム復号位置検出部２１２およびデータ供給制御部２１３を介して、表示タイプ取得部２１５に供給して、ステップＳ２１７に進む。
【０５５９】
ステップＳ２１７では、表示タイプ取得部２１５が、GUI制御部２１１から、ストリーム復号位置検出部２１２およびデータ供給制御部２１３を介して供給される注目フレームの情報に基づき、注目フレームの表示タイプを、Fyファイル管理部２１４のファイル記憶部２３１（図４４）から読み出すことにより取得し、GUI制御部２１１、デコーダ２１６、および表示制御部２１８に供給する。さらに、ステップＳ２１７では、デコーダ２１６と表示制御部２１８が、表示タイプ取得部２１５からの注目フレームの表示タイプを判定し、その判定の結果に基づき、注目フレームの画像を表示する表示制御処理（後述するステップＳ２１８乃至Ｓ２２３）を行って、ステップＳ２１５に戻る。
【０５６０】
即ち、ステップＳ２１７において、注目フレームの表示タイプが、静止画タイプV1であると判定された場合、ステップＳ２１８に進み、表示制御部２１８は、直前に注目フレームであったフレーム（以下、適宜、前回フレームという）の表示タイプが静止画タイプV1であり、かつ、前回フレームと注目フレームとが、同一の静止画区間のフレームであるかどうかを、Fyファイル管理部２１４のファイル記憶部２３１に記憶されたFyファイルを参照することにより判定する。
【０５６１】
ステップＳ２１８において、前回フレームと注目フレームとが、同一の静止画区間のフレームでないと判定された場合、ステップＳ２１９に進み、デコーダ２１６は、データ供給制御部２１３が光ディスク７から注目フレームの本線データ（さらには、その注目フレームの復号に必要なデータ）を読み出し、デコーダ２１６に供給するのを待って、その注目フレームの本線データを取得（受信）して、ステップＳ２２０に進む。
【０５６２】
ステップＳ２２０では、デコーダ２１６は、データ供給制御部２１３から取得した注目フレームの本線データを復号し、その結果得られる画像データを、表示制御部２１８に供給して、ステップＳ２２１に進む。ステップＳ２２１では、表示制御部２１８が、デコーダ２１６からの注目フレームの画像データを、フレームバッファ２１８Ａに記憶させ、ステップＳ２２２に進み、そのフレームバッファ２１８Ａに記憶された画像データに対応する画像を、ディスプレイ４１に表示させる。
【０５６３】
従って、表示タイプが静止画タイプV1のフレームの画像としては、本線データとしての画像データに対応する画像、即ち、（プロキシデータとしての画像データに対応する画像よりも）解像度が高い画像が表示される。
【０５６４】
一方、ステップＳ２１８において、前回フレームと注目フレームとが、同一の静止画区間のフレームであると判定された場合、ステップＳ２２２に進み、表示制御部２１８は、直前（間近）に行われたステップＳ２２１で、フレームバッファ２１８Ａに記憶された画像データに対応する画像を、注目フレームの画像として、ディスプレイ４１に表示させる。
【０５６５】
即ち、前回フレームと注目フレームとが、同一の静止画区間のフレームである場合には、その静止画区間のフレームの画像としては、その静止画区間のフレームの中で、最初に注目フレームとなったフレームの画像が表示される。従って、この場合、デコーダ２１６において復号を行わずに済むので、PC１にかかる負荷を軽減することができる。
【０５６６】
一方、ステップＳ２１７において、注目フレームの表示タイプが、通常タイプV2であると判定された場合、ステップＳ２１９乃至Ｓ２２２に順次進み、上述したように、注目フレームの画像が表示される。
【０５６７】
即ち、ステップＳ２１９において、デコーダ２１６は、データ供給制御部２１３が光ディスク７から注目フレームの本線データを読み出し、デコーダ２１６に供給するのを待って、その注目フレームの本線データを取得して、ステップＳ２２０に進む。
【０５６８】
ステップＳ２２０では、デコーダ２１６は、データ供給制御部２１３から取得した注目フレームの本線データを復号し、その結果得られる画像データを、表示制御部２１８に供給して、ステップＳ２２１に進む。ステップＳ２２１では、表示制御部２１８が、デコーダ２１６からの注目フレームの画像データを、フレームバッファ２１８Ａに記憶させ、ステップＳ２２２に進み、そのフレームバッファ２１８Ａに記憶された画像データに対応する画像を、ディスプレイ４１に表示させる。
【０５６９】
従って、表示タイプが通常タイプV2のフレームの画像としては、本線データとしての画像データに対応する画像、即ち、（プロキシデータとしての画像データに対応する画像よりも）解像度が高い画像が表示される。
【０５７０】
一方、ステップＳ２１７において、注目フレームの表示タイプが、高表示レート低解像度タイプV3であると判定された場合、ステップＳ２３３に進み、デコーダ２１６は、データ供給制御部２１３が光ディスク７から注目フレームのプロキシデータ（さらには、注目フレームの復号に必要なデータ）を読み出し、デコーダ２１６に供給するのを待って、その注目フレームのプロキシデータを取得して、ステップＳ２２０に進む。
【０５７１】
ステップＳ２２０では、デコーダ２１６は、データ供給制御部２１３から取得した注目フレームのプロキシデータを復号し、その結果得られる画像データを、表示制御部２１８に供給して、ステップＳ２２１に進む。ステップＳ２２１では、表示制御部２１８が、デコーダ２１６からの注目フレームの画像データを、フレームバッファ２１８Ａに記憶させ、ステップＳ２２２に進み、そのフレームバッファ２１８Ａに記憶された画像データに対応する画像を、ディスプレイ４１に表示させる。
【０５７２】
従って、表示タイプが高表示レート低解像度タイプV3のフレームの画像としては、プロキシデータとしての画像データに対応する画像、即ち、（本線データとしての画像データに対応する画像よりも）解像度が低い画像が表示される。
【０５７３】
一方、ステップＳ２１６において、スクラブつまみ５４が移動されていないと判定された場合、ステップＳ２２２に進み、表示制御部２１８は、直前（間近）に行われたステップＳ２２１で、フレームバッファ２１８Ａに記憶された画像データに対応する画像を、注目フレームの画像として、ディスプレイ４１に表示させる。
【０５７４】
即ち、スクラブつまみ５４が、前回のステップＳ２１６の判定が行われたときから移動されていない場合には、表示制御部２１８は、フレームバッファ２１８Ａに記憶された画像データに対応する画像、つまり、直前に表示された画像（前回のステップＳ２２２において表示された画像）を、再度表示させる。
【０５７５】
以上のように、ステップＳ２２２において、注目フレームの画像が表示された後は、ステップＳ２２４に進み、GUI制御部２１１は、ステップＳ２１７で表示タイプ取得部２１５から供給された注目フレームの表示タイプを判定する。
【０５７６】
ステップＳ２２４において、注目フレームの表示タイプが高表示レート低解像度タイプV3であると判定された場合、ステップＳ２２５に進み、GUI制御部２１１は、前回のステップＳ２１６での、スクラブつまみ５４が移動されたかどうかの判定を行ってから、高表示レート低解像度タイプV3の表示レートに対応する時間である、例えば、１／６０秒が経過したかどうかを判定する。
【０５７７】
ステップＳ２２５において、１／６０秒が経過していないと判定された場合、ステップＳ２２５に戻る。
【０５７８】
また、ステップＳ２２５において、１／６０秒が経過したと判定された場合、ステップＳ２１５に戻り、以下、上述した処理が繰り返される。
【０５７９】
従って、表示タイプが高表示レート低解像度タイプV3のフレームが注目フレームとなっている場合には、GUI制御部２１１が、ステップＳ２１６において、高表示レート低解像度タイプV3に応じた１／６０秒の周期で、スクラブつまみ５４が移動されたかどうかを判定する。
【０５８０】
そして、スクラブつまみ５４が移動されたと判定された場合、表示制御部２１８は、移動後のスクラブつまみ５４が位置する指定区間（図４５）に割り当てられたフレームのプロキシデータを復号することにより得られる画像データに対応する画像（低解像度の画像）を、ディスプレイ４１に表示させる。
【０５８１】
また、スクラブつまみ５４が移動されていないと判定された場合、表示制御部２１８は、直前にディスプレイ４１に表示された画像を、再度表示させる。
【０５８２】
以上のようにして、表示タイプが高表示レート低解像度タイプV3のフレームについては、その表示レートである６０フレーム／秒で、ディスプレイ４１に画像が表示される。
【０５８３】
一方、ステップＳ２２４において、注目フレームの表示タイプが静止画タイプV1または通常タイプV2のうちのいずれかであると判定された場合、ステップＳ２２６に進み、GUI制御部２１１は、前回のステップＳ２１６での、スクラブつまみ５４が移動されたかどうかの判定を行ってから、静止画タイプV1と通常タイプV2の表示レートに対応する時間である、例えば、１／３０秒が経過したかどうかを判定する。
【０５８４】
ステップＳ２２６において、１／３０秒が経過していないと判定された場合、ステップＳ２２６に戻る。
【０５８５】
また、ステップＳ２２６において、１／３０秒が経過したと判定された場合、ステップＳ２１５に戻り、以下、上述した処理が繰り返される。
【０５８６】
従って、表示タイプが静止画タイプV1または通常タイプV2のうちのいずれかのフレームが注目フレームとなっている場合には、GUI制御部２１１が、ステップＳ２１６において、静止画タイプV1と通常タイプV2に応じた１／３０秒の周期で、スクラブつまみ５４が移動されたかどうかを判定する。
【０５８７】
そして、スクラブつまみ５４が移動されたと判定された場合、表示制御部２１８は、移動後のスクラブつまみ５４が位置する指定区間（図４５）に割り当てられたフレームの本線データを復号することにより得られる画像データに対応する画像（高解像度の画像）を、ディスプレイ４１に表示させる。
【０５８８】
また、スクラブつまみ５４が移動されていないと判定された場合、表示制御部２１８は、直前にディスプレイ４１に表示された画像を、再度表示させる。
【０５８９】
以上のようにして、表示タイプが静止画タイプV1と通常タイプV2のフレームについては、その表示レートである３０フレーム／秒で、ディスプレイ４１に画像が表示される。
【０５９０】
一方、ステップＳ２１５において、編集プログラムを終了するように、キーボード２またはマウス３が操作されたと判定された場合、即ち、例えば、ユーザが、編集プログラムを終了するように、キーボード２またはマウス３を操作し、その操作に対応した操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給された場合、スクラブの処理（編集プログラムの実行）は終了する。
【０５９１】
以上のように、スクラブつまみ５４によって指定されているフレームである注目フレームの表示タイプを取得し、注目フレームの画像を、その注目フレームの表示タイプが表す表示方法で表示させるようにしたので、スクラブを適切に行うことができる。
【０５９２】
即ち、表示タイプが静止画タイプV1のフレーム、つまり、動きがないフレームが注目フレームである場合には、その注目フレームを含む、静止画タイプV1のフレームが連続する静止画区間において最初に注目フレームとなったフレームの画像データを、本線データを復号することにより得て、その画像データに対応する画像を表示するので、同一のフレームの高画質の画像が表示され、その結果、ユーザは、画像の内容を、容易に確認することができる。さらに、同一の静止画区間のフレームが連続して注目フレームとなっている限りは、本線データを復号する必要がないので、編集システムとしてのPC１にかかる負担を軽減することができる。
【０５９３】
また、表示タイプが高表示レート低解像度タイプV3フレーム、つまり、動きが大きい（激しい）フレームが注目フレームである場合には、高い表示レートで、画像を表示するので、ユーザは、動きの激しい画像の内容を正確に確認することができる。
【０５９４】
さらに、表示タイプが高表示レート低解像度タイプV3フレームが注目フレームである場合には、本線データよりもデータ量が少ないプロキシデータを復号し、その結果得られる画像データに対応する画像を表示するので、編集システムとしてのPC１にかかる負担を軽減し、PC１に大きな負荷がかかることに起因して、編集プログラムが応答しなくなること（PC１がハングアップすること）を防止することができる。
【０５９５】
また、表示タイプが通常タイプV2のフレーム、つまり、激しくはないが、ある程度の動きがあるフレームが注目フレームである場合には、表示タイプが高表示レート低解像度タイプV3のフレームより低い表示レートではあるが、表示タイプが高表示レート低解像度タイプV3のフレームより高い解像度の画像が表示される。表示タイプが通常タイプV2のフレームは、表示タイプが高表示レート低解像度タイプV3のフレームより画像の動き（フレーム間の画素値の変化）が小さいので、表示タイプが高表示レート低解像度タイプV3のフレームより低い表示レートで表示しても、ユーザが、画像の内容を正確に確認することができる。
【０５９６】
さらに、表示タイプが通常タイプV2のフレームは、表示タイプが高表示レート低解像度タイプV3のフレームより画像の動きが小さいので、表示タイプが通常タイプV2のフレームの本線データのデータ量は、表示タイプが高表示レート低解像度タイプV3のフレームの本線データのデータ量よりも少ない。従って、表示タイプが通常タイプV2のフレームが注目フレームである場合に、本線データを復号し、その結果得られる画像データに対応する高解像度の画像を表示しても、編集システムとしてのPC１にかかる負荷は、表示タイプが高表示レート低解像度タイプV3のフレームの本線データを復号する場合にかかる負荷よりも小さくなる。
【０５９７】
以上のように、図４３の編集システムでは、スクラブにおいて、すべてのフレームを同一の表示方法で表示するのではなく、表示タイプに応じて、画像の解像度と表示レートを変えるようにし、さらには、注目フレームとなったフレームをすべて復号するのではなく、表示タイプに応じて、必要なフレームだけを復号するようにしたので、適切なスクラブが可能となる。
【０５９８】
なお、図４８のスクラブの処理では、表示タイプが、動き情報に基づいて決定される、図２０に示した静止画タイプV1、通常タイプV2、および高表示レート低解像度タイプV3の３つであるとしたが、スクラブの処理は、表示タイプが、例えば、図２７に示した静止画タイプV11、通常タイプV12、高表示レート通常解像度タイプV13、超高表示レート低解像度タイプV14、および超超高表示レート低解像度タイプV15の５つであっても行うことができるし、表示タイプが、例えば、細かさ情報に基づいて決定される、図３１に示した低解像度通常表示レートタイプC1、通常タイプC2、および通常解像度低表示レートタイプC3の３つであっても行うことができる。
【０５９９】
また、上述の場合には、光ディスク７に、解像度が高い画像の本線データと、解像度が低い画像のプロキシデータとを記録し、即ち、同一内容の２種類の解像度の画像を記録し、フレームの表示タイプに応じて、解像度が高い画像、または解像度が低い画像を表示するようにしたが、その他、例えば、光ディスク７に、高、中、低の３種類の解像度の画像を記録し、フレームの表示タイプに応じて、解像度が高の画像、解像度が中の画像、または解像度が低の画像を表示することが可能である。
【０６００】
次に、上述したように、図４３の編集システムでは、図４８のスクラブの処理のステップＳ２１３からステップＳ２１５に進むとき、またはステップＳ２１４からステップ２１５に進むときに、図３のビューワ５１その他のGUIをディスプレイ４１に表示するGUI表示処理が開始される。
【０６０１】
ここで、Fyファイルには、上述したように、フレーム単位の変化量と表示タイプのうちの一方、または両方が選択されて格納されるが、以下においては、Fyファイルには、変化量と表示タイプのうちの、変化量が、少なくともが格納されていることとする。
【０６０２】
Fyファイルに変化量が格納されているが、表示タイプが格納されていない場合、変化量に基づき、Fy管理部２１４（図４３）において表示タイプを求めることができるため、表示タイプが格納されていないが、変化量が格納されているFyファイルは、Fy管理部２１４を有する図４３の編集システムにとっては、実質的に、表示タイプと変化量の両方が格納されているFyファイルに等価である。
【０６０３】
一方、Fyファイルに表示タイプが格納されているが、変化量が格納されていない場合、表示タイプから、変化量を求めることはできないため、表示タイプが格納されているが、変化量が格納されていないFyファイルについては、以下説明する処理のうちの、変化量を対象とする処理は行われない。但し、変化量が格納されていないFyファイルであっても、Fyファイル作成部２１７において、そのFyファイルに対応するAVファイルに格納されたデータから、変化量が格納されたFyファイルを作成し直すことにより、その作成し直したFyファイルを用いて、以下説明する処理のうちの、変化量を対象とする処理も行うことができる。
【０６０４】
図４９は、GUI表示処理によってディスプレイ４１に表示されるGUIとしての編集ウインドウ３０１の例を示している。
【０６０５】
図４９の編集ウインドウ３０１においては、その右上に、図３で説明したビューワ５１が配置されている。さらに、編集ウインドウ３０１の下部には、横長の長方形の領域であるFyファイル表示部３１１が設けられている。
【０６０６】
Fyファイル表示部３１１には、スクラブの対象のAVファイルに対応するFyファイルに格納された情報等を表すGUIが表示される。
【０６０７】
なお、ここでは、スクラブの対象のAVファイルに対応するFyファイルには、変化量として、動き情報が格納されていることとし、その動き情報を、例えば、図２０および図２１で説明したように、閾値Lまたは閾値Hと比較することにより、表示タイプが、静止画タイプV1、通常タイプV2、または高表示レート低解像度タイプV3のうちのいずれかに決定されることとする。
【０６０８】
図４９のFyファイル表示部３１１には、スクラブの対象のAVファイル、つまり、Fyファイル管理部２１４に管理されているFyファイルに格納されている変化量を時系列に表すグラフ（以下、適宜、変化量グラフという）が表示される。なお、図４９では（後述する図でも同様）、Fyファイル表示部３１１の横方向（左から右方向）が時間の経過、つまり、フレーム（先頭から何番目のフレームであるか）を表し、縦方向が、変化量を表す。
【０６０９】
さらに、Fyファイル表示部３１１には、ビューワ５１のスクラブつまみ５４が位置する指定区間に割り当てられているフレームの位置を表す位置情報としての位置インジケータ３１２が表示される。
【０６１０】
ここで、スクラブにおいては、スクラブバー５３のスクラブつまみ５４が位置する指定区間に割り当てられたフレームが、ビューア５１の表示部５２に表示する注目フレームとされる。位置インジケータ３１２は、スクラブの対象のAVファイルに対応する動画（スクラブの対象の動画）を構成する時系列のフレームのうちの、注目フレームに対応する位置に表示される縦方向に延びる線分のGUIであり、スクラブつまみ５４が水平方向に移動され、注目フレームが、移動直前に注目フレームであったフレームから別のフレームに変更されると、位置インジケータ３１２も、その別のフレームに対応する位置を指示するように、横方向に移動される。
【０６１１】
また、Fyファイル表示部３１１の変化量グラフが表示される領域の横方向のスケール（目盛）（尺度）と、スクラブバー５３の移動可能範囲のスケールとは、対応している。
【０６１２】
即ち、仮に、Fyファイル表示部３１１の変化量グラフが表示される領域の横方向を所定数倍することによって、Fyファイル表示部３１１の変化量グラフが表示される領域の横方向の長さと、スクラブバー５３の移動可能範囲の長さとを一致させた場合、Fyファイル表示部３１１に表示される位置インジケータ３１２の位置と、スクラブつまみ５４の位置とは一致する。
【０６１３】
なお、上述のように、Fyファイル表示部３１１の変化量グラフが表示される領域の横方向の長さと、スクラブバー５３の移動可能範囲の長さとを一致させた場合に、スクラブつまみ５４の位置における変化量グラフの値が、スクラブつまみ５４が位置する指定区間に割り当てられたフレームの変化量である。
【０６１４】
図４９では、Fyファイル表示部３１１には、さらに、Fyファイル管理部２１４に管理されているFyファイルに格納されている変化量に基づき、表示タイプを決定したときに用いられた閾値を表す閾値情報としての閾値インジケータ３１３Ｈおよび３１３Ｌが表示されている。
【０６１５】
ここで、閾値インジケータ３１３Ｈおよび３１３Ｌは、表示タイプを決定したときに用いられた閾値に対応する縦方向の位置に表示される横方向に延びる線分のGUIである。従って、Fyファイル管理部２１４に管理されているFyファイルに格納されている変化量が、例えば、上述したように、動き情報であり、その動き情報を、閾値Lまたは閾値Hと比較することにより、表示タイプが、静止画タイプV1、通常タイプV2、または高表示レート低解像度タイプV3のうちのいずれかに決定されたとすると、閾値インジケータ３１３Ｈは、例えば、閾値Hに対応する（縦方向の）位置に表示され、閾値インジケータ３１３Ｌは、閾値Lに対応する位置に表示される。
【０６１６】
なお、閾値情報としての閾値インジケータ３１３Ｈと３１３Ｌは、ユーザが、編集システム（図４３）のキーボード２またはマウス３を操作することにより（例えば、ドラッグすることにより）、縦方向に移動させることができ、これにより、表示タイプを決定するのに用いる閾値を、移動後の閾値情報が表す閾値に変更することができる。表示タイプを決定するのに用いる閾値が変更された場合、ファイル管理部２１４（図４４）の表示タイプ決定部２３３は、Fyファイルに格納されている変化量と、変更後の閾値とを比較し、その比較結果に基づいて、表示タイプを決定し直す。このように、変更後の閾値を用いて、表示タイプを決定し直す処理は、後述するGUI表示処理において行われる。
【０６１７】
以上のようなFyファイル表示部３１１によれば、ユーザは、変化量グラフによって、スクラブの対象の動画の全体に亘る変化量の推移を、視覚で把握することができる。即ち、変化量が、例えば、動き情報である場合には、ユーザは、変化量グラフによって、スクラブの対象の動画の全体に亘る動きの程度の推移を把握することができる。その結果、ユーザは、スクラブの対象の動画が、例えば、全体として、動きがある、または動きの少ない動画であることや、あるいは、一部のフレームにおいて、動きが激しい動画であることなどを、前もって把握することができる。
【０６１８】
さらに、ユーザは、変化量グラフと、注目フレームの位置を表す位置インジケータ３１２とによって、ビューワ５１（の表示部５２）に表示されている注目フレーム、さらには、注目フレーム付近のフレームの動きの程度を把握することができる。
【０６１９】
また、ユーザは、変化量グラフ、注目フレームの位置を表す位置インジケータ３１２、並びに閾値インジケータ３１３Ｈおよび３１３Ｌによって、どのような表示タイプ（表示方法）で、ビューワ５１に画像が表示されているのかを把握することができる。さらに、ユーザは、編集システム（図４３）において、Fyファイルが、どのように利用されているか（例えば、スクラブにおいて、画像を表示することに利用されていることなど）を認識することができる。
【０６２０】
次に、図５０のフローチャートを参照して、GUI表示処理について説明する。
【０６２１】
GUI表示処理では、GUI制御部２１１が、編集ウインドウ３０１（図４９）を表示するように、表示制御部２１８を制御し、これにより、表示制御部２１８が、ディスプレイ４１に、編集ウインドウ３０１を表示させる。そして、ステップＳ２５１において、表示制御部２１８は、Fyファイル管理部２１４（図４３）が管理しているFyファイル、即ち、Fyファイル管理部２１４のファイル記憶部２３１（図４４）に記憶されているFyファイルを読み出し、そのFyファイルに格納されている変化量に基づき、変化量グラフを、編集ウインドウ３０１のFyファイル表示部３１１に表示させて、ステップＳ２５２に進む。
【０６２２】
ステップＳ２５２では、表示制御部２１８は、Fyファイル管理部２１４のファイル記憶部２３１（図４４）に記憶されているFyファイルに格納されている表示タイプを決定するのに用いられた閾値に応じて、例えば、閾値インジケータ３１３Ｈおよび３１３Ｌ（図４９）を、編集ウインドウ３０１のFyファイル表示部３１１に表示させる。
【０６２３】
ここで、GUI表示処理が開始された直後に、Fyファイル管理部２１４のファイル記憶部２３１（図４４）に記憶されているFyファイルに格納されている表示タイプを決定するのに用いられた閾値を、デフォルトの閾値という。
【０６２４】
また、ここでは、デフォルトの閾値として、２つの閾値HとLがあることとして、その２つの閾値HとLにそれぞれ対応する閾値インジケータ３１３Ｈおよび３１３Ｌが表示されることとする。
【０６２５】
なお、デフォルトの閾値として、１つの閾値しかない場合には、その１つの閾値に対応する１つの閾値情報としての閾値インジケータが表示される。また、デフォルトの閾値として、３以上の閾値がある場合には、そのデフォルトの閾値にそれぞれ対応する、そのデフォルトの閾値の数と同一の数の閾値情報としての閾値インジケータが表示される。
【０６２６】
その後、ステップＳ２５２からＳ２５３に進み、表示制御部２１８は、ディスプレイ４１に表示されている編集ウインドウ３０１（図４９）におけるスクラブつまみ５４の位置、ひいては、そのスクラブつまみ５４が位置している指定区間に割り当てられているフレーム、つまり、注目フレームの情報を、GUI制御部２１１から取得し（GUI制御部２１１から供給される注目フレームの情報を受信し）、ステップＳ２５４に進む。
【０６２７】
ステップＳ２５４では、表示制御部２１８は、直前のステップＳ２５３でGUI制御部２１１から取得した注目フレームの情報に応じて、位置インジケータ３１２（図４９）を、編集ウインドウ３０１のFyファイル表示部３１１に表示させる。即ち、表示制御部２１８は、スクラブつまみ５４が位置する指定区間に割り当てられたフレーム（注目フレーム）に対応するFyファイル表示部３１１の横方向の位置に、縦方向に延びる線分状の位置インジケータ３１２（図４９）を表示させる。
【０６２８】
そして、ステップＳ２５４からＳ２５５に進み、GUI制御部２１１が、編集プログラムを終了するように、キーボード２またはマウス３が操作されたかどうかを判定する。
【０６２９】
ステップＳ２５５において、編集プログラムを終了するように、キーボード２またはマウス３が操作されていないと判定された場合、ステップＳ２５６に進み、GUI制御部２１１は、スクラブつまみ５４が移動されたかどうか、即ち、ユーザがキーボード２またはマウス３を操作することにより、スクラブつまみ５４を移動したかどうかを判定する。
【０６３０】
ステップＳ２５６において、スクラブつまみ５４が移動されたと判定された場合、即ち、ユーザが、スクラブつまみ５４を移動するように、キーボード２またはマウス３を操作し、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給された場合、GUI制御部２１１は、スクラブつまみ５４が位置する指定区間（図４５）に割り当てられたフレームを注目フレームとし、その注目フレームの情報を、表示制御部２１８に供給して、ステップＳ２５３に戻り、以下、同様の処理が繰り返される。
【０６３１】
ここで、ステップＳ２５３乃至Ｓ２５６の処理によって、スクラブつまみ５４が横方向に移動され、注目フレームが、移動直前に注目フレームであったフレームから別のフレームに変更されると、位置インジケータ３１２も、その別のフレームに対応する位置を指示するように、横方向に移動される。
【０６３２】
また、ステップＳ２５５とＳ２５６は、それぞれ、図４８のステップＳ２１５とＳ２１６と同一の処理であり、従って、図４８のステップＳ２１５とＳ２１６の処理は、それぞれ、ステップＳ２５５とＳ２５６の処理として行うことができる。この場合、ステップＳ２５５とＳ２５６は、図４８で説明したように、注目フレームの表示タイプが静止画タイプV1または通常タイプV2であるときには、１／３０秒周期で行われ、注目フレームの表示タイプが高表示レート低解像度タイプV3であるときには、１／６０秒周期で行われる。
【０６３３】
一方、ステップＳ２５６において、スクラブつまみ５４が移動されていないと判定された場合、ステップＳ２５７に進み、GUI制御部２１１が、閾値インジケータ３１３Ｈまたは３１３Ｌ（図４９）の移動が開始されたかどうか、即ち、ユーザが、閾値インジケータ３１３Ｈまたは３１３Ｌを移動するように、キーボード２またはマウス３を操作したかどうかを判定する。
【０６３４】
ステップＳ２５７において、閾値インジケータ３１３Ｈまたは３１３Ｌの移動が開始されていないと判定された場合、ステップＳ２５５に戻り、以下、同様の処理が繰り返される。
【０６３５】
また、ステップＳ２５７において、閾値インジケータ３１３Ｈまたは３１３Ｌの移動が開始されたと判定された場合、即ち、ユーザが、閾値インジケータ３１３Ｈまたは３１３Ｌを移動するように、キーボード２またはマウス３を操作し、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されている場合、GUI制御部２１１は、キーボード２またはマウス３からの操作信号に応じて、閾値インジケータ３１３Ｈまたは３１３Ｌを移動する位置を求め、その位置を表す情報を、表示制御部２１８に供給して、ステップＳ２５８に進む。
【０６３６】
ステップＳ２５８では、表示制御部２１８が、閾値インジケータ３１３Ｈまたは３１３Ｌを、直前に表示されていた位置に代えて、GUI制御部２１１からの情報に応じた位置に表示させ、ステップＳ２５９に進む。
【０６３７】
ステップＳ２５９では、GUI制御部２１１が、閾値インジケータ３１３Ｈまたは３１３Ｌの移動が終了されたかどうか、即ち、ユーザが、閾値インジケータ３１３Ｈまたは３１３Ｌを移動させるキーボード２またはマウス３の操作を終了したかどうかを判定する。
【０６３８】
ステップＳ２５９において、閾値インジケータ３１３Ｈまたは３１３Ｌを移動させる操作が終了されていないと判定された場合、即ち、ユーザが、閾値インジケータ３１３Ｈまたは３１３Ｌを移動するように、キーボード２またはマウス３を操作し続けており、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されている場合、GUI制御部２１１は、キーボード２またはマウス３からの操作信号に応じて、閾値インジケータ３１３Ｈまたは３１３Ｌを移動する位置を求め、その位置を表す情報を、表示制御部２１８に供給して、ステップＳ２５８に戻り、以下、同様の処理が繰り返される。
【０６３９】
ここで、ステップＳ２５７乃至Ｓ２５９の処理によって、閾値インジケータ３１３Ｈまたは３１３Ｌを移動するユーザの操作にしたがって、閾値インジケータ３１３Ｈまたは３１３Ｌが、縦方向に移動される。
【０６４０】
一方、ステップＳ２５９において、閾値インジケータ３１３Ｈまたは３１３Ｌを移動させる操作が終了されたと判定された場合、即ち、ユーザが、閾値インジケータ３１３Ｈまたは３１３Ｌを移動させるキーボード２またはマウス３の操作を終了し、閾値インジケータ３１３Ｈまたは３１３Ｌを移動させる操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されなくなった場合、GUI制御部２１１は、移動が終了された閾値インジケータ３１３Ｈまたは３１３Ｌの（縦方向の）位置に対応する閾値を、データ供給制御部２１３（図４３）を介して、Fyファイル管理部２１４に供給して、ステップＳ２６０に進む。
【０６４１】
ここで、GUI制御部２１１がデータ供給制御部２１３を介してFyファイル管理部２１４に供給する閾値は、Fyファイル管理部２１４（図４４）の表示タイプ決定部２３３を構成する閾値処理部２４２に供給され、以後、閾値処理部２４２は、新たな閾値が供給されるか、または、ファイル記憶部２３１に新たなFyファイルが記憶されるまで、GUI制御部２１１からデータ供給制御部２１３を介して供給された閾値を用いて処理を行う。
【０６４２】
ステップＳ２６０では、Fyファイル管理部２１４（図４４）の表示タイプ決定部２３３が、直前に、GUI制御部２１１からデータ供給制御部２１３を介して閾値処理部２４２に供給された閾値、つまり、移動後の閾値情報としての閾値インジケータ３１３Ｈ，３１３Ｌが表す閾値と、Fyファイル記憶部２３１に記憶されたFyファイルに格納されている変化量とを用いて、表示タイプを新たに決定する（決定し直す）。
【０６４３】
即ち、表示タイプ決定部２３３は、Fyファイル記憶部２３１に記憶されたFyファイルに格納されている変化量と、移動後の閾値情報としての閾値インジケータ３１３Ｈまたは３１３Ｌが表す閾値H,Lとを比較し、その比較結果に基づき、表示タイプを決定し直す。そして、表示タイプ決定部２３３において決定し直された表示タイプは、表示タイプ書き込み部２３４によって、ファイル記憶部２３１に記憶されているFyファイルにおける表示タイプに上書きする形で、ファイル記憶部２３１に書き込まれる。
【０６４４】
従って、その後は、上述した図４８のステップＳ２１７とＳ２２４では、表示タイプ決定部２３３において決定し直された表示タイプを参照して、注目フレームの表示タイプの判定が行われ、その表示タイプに応じて、注目フレームの表示が行われる。
【０６４５】
以上のように、ユーザが、GUIとしての閾値インジケータ３１３Ｈまたは３１３Ｌを操作することにより、表示タイプを決定するときの閾値H,Lが変更され、その変更後の閾値H,Lを用いて、表示タイプが、いわばリアルタイムで決定し直されるので、ユーザは、例えば、PC１の性能等を考慮して、閾値HまたはLを変更し、スクラブにおいてフレーム（画像）が表示されるときの表示タイプ（表示方法）を、容易に調整し、スムースな（最適な）スクラブが行われるようにすることができる。
【０６４６】
ステップＳ２６０の処理後は、ステップＳ２５５に戻り、以下、同様の処理が繰り返される。
【０６４７】
そして、ステップＳ２５５において、編集プログラムを終了するように、キーボード２またはマウス３が操作されたと判定された場合、即ち、例えば、ユーザが、編集プログラムを終了するように、キーボード２またはマウス３を操作し、その操作に対応した操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給された場合、GUI表示処理は終了する。
【０６４８】
次に、図４９では、Fyファイル表示部３１１に、変化量グラフ、位置インジケータ３１２、並びに閾値インジケータ３１３Ｈおよび３１３Ｌを表示することとしたが、Fyファイル表示部３１１には、変化量グラフ、位置インジケータ３１２、並びに閾値インジケータ３１３Ｈおよび３１３Ｌに代えて、または、変化量グラフ、位置インジケータ３１２、並びに閾値インジケータ３１３Ｈおよび３１３Ｌとともに、Fyファイル管理部２１４（図４３）で管理されているFyファイルにおける表示タイプを時系列に表す帯状の領域のGUIであるタイプ情報を表示することができる。
【０６４９】
図５１は、変化量グラフ、位置インジケータ３１２、並びに閾値インジケータ３１３Ｈおよび３１３Ｌとともに、タイプ情報が表示されるFyファイル表示部３１１の表示例を示している。
【０６５０】
図５１において、Fyファイル表示部３１１は、グラフ表示部３２１とタイプ情報表示部３２２とから構成されている。
【０６５１】
グラフ表示部３２１は、Fyファイル表示部３１１の上側の長方形の領域であり、そこには、図４９で説明した変化量グラフ、位置インジケータ３１２、並びに閾値インジケータ３１３Ｈおよび３１３Ｌが表示される。
【０６５２】
タイプ情報表示部３２２は、Fyファイル表示部３１１の下側の長方形の領域であり、そこには、タイプ情報が表示される。
【０６５３】
ここで、タイプ情報は、横長の長方形の領域を有するGUIであり、その横方向（左から右方向）は、図４９のFyファイル表示部３１１で説明したように、時間の経過、つまり、フレーム（先頭から何番目のフレームであるか）を表す。
【０６５４】
さらに、タイプ情報は、横方向の各位置に対応するフレームの表示タイプを表し、図５１では、図２０で説明した３つの静止画タイプV1、通常タイプV2、および高表示レート低解像度タイプV3があるとして、静止画タイプV1のフレームが連続する静止画区間が、左下がり（右上がり）の斜線を付して、通常タイプV2のフレームが連続する通常区間が、模様を付さずに、高表示レート低解像度タイプV3のフレームが連続する高表示レート低解像度区間が横方向の線（横線）を付して、それぞれ示されている。
【０６５５】
従って、ユーザは、タイプ情報によって、スクラブの対象の動画のフレームの表示タイプを、把握することができる。
【０６５６】
グラフ表示部３２１に表示される変化量グラフと、タイプ情報表示部３２２に表示されるタイプ情報との、横方向のスケールは一致している。従って、Fyファイル表示部３１１の横方向のある位置を注目位置として注目した場合、注目位置の変化量グラフの値は、その注目位置に対応するフレームの変化量（ここでは、動き情報）を表し、注目位置のタイプ情報に付されている模様は、その注目位置に対応するフレームの表示タイプを表す。
【０６５７】
また、スクラブの対象となっている動画において、閾値インジケータ３１３Ｌが表す閾値L未満の変化量のフレームが連続するフレーム数の最小値、閾値インジケータ３１３Ｈが表す閾値H以上の変化量のフレームが連続するフレーム数の最小値、および閾値L以上閾値H未満の変化量のフレームが連続するフレーム数の最小値のいずれもが、最小限度フレーム数N以上であるとすると、閾値L未満の変化量のフレームの表示タイプは、静止画タイプV1に、閾値L以上閾値H未満の変化量のフレームの表示タイプは、通常タイプV2に、閾値H以上の変化量のフレームの表示タイプは、高表示レート低解像度タイプV3に、それぞれ決定される。
【０６５８】
この場合、図５１に示すように、グラフ表示部３２１において、変化量グラフの値（変化量）が、閾値インジケータ３１３Ｌが表す閾値Ｌ未満になる区間と、タイプ情報表示部３２２において、静止画区間である、斜線が付されるタイプ情報の区間とは一致し、グラフ表示部３２１において、変化量グラフの値が、閾値インジケータ３１３Ｈが表す閾値Ｈ以上になる区間と、タイプ情報表示部３２２において、高表示レート低解像度区間である、横線が付されるタイプ情報の区間とも一致する。さらに、グラフ表示部３２１において、変化量グラフの値が、閾値L以上閾値Ｈ未満になる区間と、タイプ情報表示部３２２において、通常区間である、模様が付されないタイプ情報の区間とも一致する。
【０６５９】
さらに、タイプ情報表示部３２２には、タイプ情報とともに、グラフ表示部３２１に表示されている位置インジケータ３１２が、その位置インジケータ３１２としての線分を延長する形で表示される。
【０６６０】
従って、ユーザは、ビューワ５１（図４９）（の表示部５２）に表示されている注目フレーム、即ち、位置インジケータ３１２の位置に対応するフレームの変化量と表示タイプ（が表す表示方法）とを、容易に（一目で）把握することができる。
【０６６１】
なお、タイプ情報としての長方形の領域には、表示タイプごとに異なる模様を付す他、表示タイプごとに異なる色を付すことや、表示タイプごとに異なる濃淡（明暗）を付すこと等が可能である。
【０６６２】
図５１に示したように、Fyファイル表示部３１１が、変化量グラフ等が表示されるグラフ表示部３２１と、タイプ情報が表示されるタイプ情報表示部３２２とから構成される場合においても、図４９のFyファイル表示部３１１と同様に、閾値インジケータ３１３Ｈと３１３Ｌは、ユーザの操作に応じて移動させることができる。
【０６６３】
さらに、閾値インジケータ３１３Ｈまたは３１３Ｌが移動され、これにより、表示タイプを決定するのに用いる閾値HまたはLが変更された場合、ファイル管理部２１４（図４４）の表示タイプ決定部２３３は、Fyファイルに格納されている変化量と、変更後の閾値HまたはLとを比較し、その比較結果に基づいて、表示タイプを決定し直すが、図５１のタイプ情報表示部３２２のタイプ情報は、決定し直された表示タイプにしたがって表示し直される。
【０６６４】
即ち、図５２は、表示タイプを決定するのに用いる閾値HまたはLが変更されるのに伴って表示し直されるタイプ情報を示している。
【０６６５】
図５２の上から１番目は、あるタイミングで表示されたFyファイル表示部３１１を示している。なお、図５２では、Fyファイル表示部３１１の他に、キーボード２またはマウス３によって操作されるカーソルも図示してある。
【０６６６】
図５２の上から１番目のFyファイル表示部３１１が表示されている場合において、例えば、ユーザが、カーソルによって、閾値インジケータ３１３Ｌをドラッグし、下方向に移動させた場合、ファイル管理部２１４（図４４）の表示タイプ決定部２３３は、Fyファイルに格納されている変化量と、移動後の閾値インジケータ３１３Ｌが表す、変更後の閾値L、または、変更されていない閾値Hとを比較し、その比較結果に基づいて、表示タイプを決定し直す。そして、表示タイプ決定部２３３において決定し直された表示タイプにしたがって、タイプ情報が表示し直される。
【０６６７】
図５２の上から２番目は、以上のようにしてタイプ情報が表示し直されたFyファイル表示部３１１を示している。
【０６６８】
上述したように、閾値インジケータ３１３Ｌが、下方向に移動されると、移動後の閾値インジケータ３１３Ｌが表す閾値（変更後の閾値）Lは、移動前の閾値インジケータ３１３Ｌが表す閾値（変更前の閾値)Lよりも小さくなる。従って、閾値インジケータ３１３Ｌの移動後は、移動前よりも、閾値L未満の変化量のフレームが減少するとともに、閾値L以上で閾値H未満の変化量のフレームが増加する。即ち、閾値インジケータ３１３Ｌの移動後は、移動前よりも、表示タイプが静止画タイプV1のフレームが減少するとともに、表示タイプが通常タイプV2のフレームが増加する。
【０６６９】
その結果、閾値インジケータ３１３Ｌの移動後は、図５２の上から２番目に示すように、移動前に比べて、静止画区間（斜線を付してある部分）が減少するとともに、通常区間（模様を付していない部分）が増加したタイプ情報が表示される。
【０６７０】
一方、図５２の上から１番目のFyファイル表示部３１１が表示されている場合において、例えば、ユーザが、カーソルによって、閾値インジケータ３１３Ｌをドラッグし、上方向に移動させた場合、ファイル管理部２１４（図４４）の表示タイプ決定部２３３は、Fyファイルに格納されている変化量と、移動後の閾値インジケータ３１３Ｌが表す、変更後の閾値L、または、変更されていない閾値Hとを比較し、その比較結果に基づいて、表示タイプを決定し直す。そして、表示タイプ決定部２３３において決定し直された表示タイプにしたがって、タイプ情報が表示し直される。
【０６７１】
図５２の上から３番目（下から１番目）は、以上のようにしてタイプ情報が表示し直されたFyファイル表示部３１１を示している。
【０６７２】
上述したように、閾値インジケータ３１３Ｌが、上方向に移動されると、移動後の閾値インジケータ３１３Ｌが表す閾値（変更後の閾値）Lは、移動前の閾値インジケータ３１３Ｌが表す閾値（変更前の閾値)Lよりも大きくなる。従って、閾値インジケータ３１３Ｌの移動後は、移動前よりも、閾値L未満の変化量のフレームが増加するとともに、閾値L以上で閾値H未満の変化量のフレームが減少する。即ち、閾値インジケータ３１３Ｌの移動後は、移動前よりも、表示タイプが静止画タイプV1のフレームが増加するとともに、表示タイプが通常タイプV2のフレームが減少する。
【０６７３】
その結果、閾値インジケータ３１３Ｌの移動後は、図５２の上から３番目に示すように、移動前に比べて、静止画区間（斜線を付してある部分）が増加するとともに、通常区間（模様を付していない部分）が減少したタイプ情報が表示される。
【０６７４】
次に、図５３のフローチャートを参照して、図５１および図５２で説明したように、タイプ情報が表示される場合のGUI表示処理について説明する。
【０６７５】
GUI表示処理では、GUI制御部２１１が、編集ウインドウ３０１（図４９）を表示するように、表示制御部２１８を制御し、これにより、表示制御部２１８が、ディスプレイ４１に、編集ウインドウ３０１を表示させる。
【０６７６】
そして、ステップＳ２８１において、表示制御部２１８は、図５０のステップＳ２５１と同様に、Fyファイル管理部２１４（図４３）が管理しているFyファイルを読み出し、そのFyファイルにおける変化量に基づき、変化量グラフを、編集ウインドウ３０１のFyファイル表示部３１１（図５１）のグラフ表示部３２１に表示させて、ステップＳ２８２に進む。
【０６７７】
ステップＳ２８２では、表示制御部２１８は、Fyファイル管理部２１４（図４３）が管理しているFyファイルにおける表示タイプに基づき、その表示タイプを時系列に表すタイプ情報（表示タイプの時系列の並びを表すタイプ情報）を、編集ウインドウ３０１のFyファイル表示部３１１（図５１）のタイプ情報表示部３２２に表示させて、ステップＳ２８３に進む。
【０６７８】
ステップＳ２８３では、表示制御部２１８は、図５０のステップＳ２５２と同様に、Fyファイル管理部２１４のファイル記憶部２３１（図４４）に記憶されているFyファイルに格納されている表示タイプを決定するのに用いられた閾値（デフォルトの閾値）に応じて、閾値インジケータ３１３Ｈおよび３１３Ｌ（図４９）を、編集ウインドウ３０１のFyファイル表示部３１１（図５１）のグラフ表示部３２１に表示させる。
【０６７９】
その後、ステップＳ２８３からステップＳ２８４に進み、ステップＳ２８４乃至Ｓ２９１において、図５０のステップＳ２５３乃至Ｓ２６０とそれぞれ同様の処理が行われる。
【０６８０】
そして、ステップＳ２９１において、図５０のステップＳ２６０と同様に、Fyファイル管理部２４１の表示タイプ決定部２３３（図４４）において、移動後の閾値インジケータ３１３Ｈまたは３１３Ｌが表す閾値と、Fyファイル記憶部２３１（図４４）に記憶されたFyファイルに格納されている変化量とを用いて、表示タイプが決定し直され、その決定し直された表示タイプが、ファイル記憶部２３１に新たに書き込まれると、ステップＳ２９２に進み、表示制御部２１８（図４３）は、Fyファイル管理部２１４（図４４）のファイル記憶部２３１に新たに書き込まれた表示タイプに基づき、その表示タイプを時系列に表すタイプ情報（表示タイプの時系列の並びを表すタイプ情報）を、編集ウインドウ３０１のFyファイル表示部３１１（図５１）のタイプ情報表示部３２２に新たに表示させる、タイプ情報表示部３２２の表示の更新を行って、ステップＳ２８６に戻る。
【０６８１】
以上のように、ユーザが、GUIとしての閾値インジケータ３１３Ｈまたは３１３Ｌを操作することにより、表示タイプを決定するときの閾値HまたはLが変更され、その変更後の閾値HとLを用いて、表示タイプが決定し直されると、表示タイプを時系列に表すタイプ情報の表示は、決定し直された表示タイプに基づいて更新される。
【０６８２】
ところで、変化量としては、動き情報や細かさ情報があり、Fyファイルには、動き情報または細かさ情報のいずれか一方だけを格納することができる。さらに、Fyファイルには、例えば、図３５に示したように、動き情報と細かさ情報の両方を格納することもできる。
【０６８３】
Fyファイルに、動き情報と細かさ情報の両方が格納されている場合、Fyファイル表示部３１１では、例えば、Fyファイルにおける変化量としての動き情報と細かさ情報とのうちのいずれか一方の変化量を選択し、その選択した方の変化量を時系列に表す変化量グラフを表示することができる。
【０６８４】
即ち、図５４は、動き情報と細かさ情報とのうちのいずれか一方の変化量を選択し、その選択した方の変化量を時系列に表す変化量グラフを表示するFyファイル表示部３１１（を含む編集ウインドウ３０１）を示している。
【０６８５】
図５４において、Fyファイル表示部３１１の左上には、動き情報を時系列に表す変化量グラフ、または細かさ情報を時系列に表す変化量グラフのうちのいずれの表示を行うかを選択するときに操作されるGUIである動き情報タブ３３１および細かさ情報タブ３３２が設けられている。
【０６８６】
ユーザが、動き情報タブ３３１と細かさ情報タブ３３２のうちの、例えば、動き情報タブ３３１を選択する操作をすると（例えば、動き情報タブ３３１をマウス３でクリックすると）、Fyファイル表示部３１１には、変化量グラフとして、動き情報を時系列に表すグラフが表示される。また、ユーザが、動き情報タブ３３１と細かさ情報タブ３３２のうちの、例えば、細かさ情報タブ３３２を選択する操作をすると、Fyファイル表示部３１１には、変化量グラフとして、細かさ情報を時系列に表すグラフが表示される。
【０６８７】
図５４では、細かさ情報タブ３３２を選択する操作が行われ、これにより、Fyファイル表示部３１１には、変化量グラフとして、細かさ情報を時系列に表すグラフが表示されている。
【０６８８】
次に、Fyファイルに、動き情報と細かさ情報の両方が格納されている場合には、Fyファイル表示部３１１において、動き情報と細かさ情報とのうちのいずれか一方の変化量グラフを表示する他、さらに、動き情報と細かさ情報との両方の変化量グラフを表示することができる。また、Fyファイル表示部３１１において、変化量グラフとともに、表示タイプを時系列に表すタイプ情報も表示することができる。
【０６８９】
そこで、図５５は、そのようなFyファイル表示部３１１を示している。
【０６９０】
図５５のFyファイル表示部３１１は、変化量グラフ等が表示されるグラフ表示部３２１と、タイプ情報等が表示されるタイプ情報表示部３２２とから構成されている。
【０６９１】
さらに、図５５のFyファイル表示部３１１には、その左上に、動き情報を時系列に表す変化量グラフ（以下、適宜、動き情報グラフともいう）、細かさ情報を時系列に表す変化量グラフ（以下、適宜、細かさ情報グラフともいう）、または動き情報グラフと細かさ情報グラフの両方のうちのいずれの表示を行うかを選択するときに操作されるGUIである動き情報タブ３３１、細かさ情報タブ３３２、および全情報タブ３３３が設けられている。
【０６９２】
ユーザが、動き情報タブ３３１、細かさ情報タブ３３２、または全情報タブ３３３のうちの、例えば、動き情報タブ３３１を選択する操作をすると、図５５上に示すように、Fyファイル表示部３１１のグラフ表示部３２１には、動き情報グラフが表示される。また、Fyファイル表示部３１１のタイプ情報表示部３２２には、動き情報と、閾値H，Lとを比較することにより決定された表示タイプ（動き情報に基づく表示タイプ）を時系列に表すタイプ情報が表示される。その他、Fyファイル表示部３１１には、ビューワ５１（図４９）に表示されるフレーム（注目フレーム）の位置を表す位置インジケータ３１２、さらには、動き情報に基づく表示タイプを決定するときに用いられる閾値HとLをそれぞれ表す閾値インジケータ３１３Ｈと３１３Ｌも表示される。
【０６９３】
ここで、Fyファイルに、動き情報と細かさ情報が格納されている場合に、例えば、図３８乃至図４０で説明したように、動き情報と細かさ情報に基づく表示タイプ（最終表示タイプ）が、動き情報が２つの閾値H,Lと比較されるとともに、細かさ情報が１つの閾値Kと比較されることによって、図３８に示した静止画タイプVC1、通常タイプVC2、高表示レート低解像度タイプVC3、または通常表示レート低解像度タイプVC4のうちのいずれかに決定されることとする。
【０６９４】
この場合、ユーザが、動き情報タブ３３１、細かさ情報タブ３３２、または全情報タブ３３３のうちの、例えば、全情報タブ３３を選択する操作をすると、図５５下に示すように、Fyファイル表示部３１１のグラフ表示部３２１には、動き情報グラフと細かさ情報が表示される。また、Fyファイル表示部３１１のタイプ情報表示部３２２には、動き情報と閾値H,Lとを比較するとともに、細かさ情報と閾値Kとを比較することにより決定された、動き情報と細かさ情報とに基づく表示タイプを時系列に表すタイプ情報が表示される。その他、Fyファイル表示部３１１には、ビューワ５１（図４９）に表示されるフレーム（注目フレーム）の位置を表す位置インジケータ３１２、さらには、表示タイプを決定するときに用いられる閾値H,L,Kをそれぞれ表す閾値インジケータ３１３Ｈ，３１３Ｌ、３１３Ｋも表示される。
【０６９５】
なお、ユーザが、動き情報タブ３３１、細かさ情報タブ３３２、または全情報タブ３３３のうちの、例えば、細かさ情報タブ３３２を選択する操作をした場合には、動き情報タブ３３１を選択する操作がされた場合と同様に、Fyファイル表示部３１１のグラフ表示部３２１には、細かさ情報グラフが表示され、Fyファイル表示部３１１のタイプ情報表示部３２２には、細かさ情報と閾値Kを比較することにより決定された表示タイプ（細かさ情報に基づく表示タイプ）を時系列に表すタイプ情報が表示される。その他、Fyファイル表示部３１１には、ビューワ５１（図４９）に表示されるフレーム（注目フレーム）の位置を表す位置インジケータ３１２、さらには、細かさ情報に基づく表示タイプを決定するときに用いられる閾値Kを表す閾値インジケータ３１３Kも表示される。
【０６９６】
次に、図５６のフローチャートを参照して、図５４および図５５で説明したように、Fyファイルに、変化量として、動き情報と細かさ情報などの複数の情報（値）が格納されている場合に行われるGUI表示処理について説明する。
【０６９７】
なお、ここでは、Fyファイルに、変化量として、動き情報と細かさ情報とが格納されており、注目すべき変化量である注目情報のデフォルトとして、動き情報と細かさ情報のうちの、例えば、動き情報が設定されていることとする。さらに、Fy管理部２１４（図４３）では、デフォルトの注目情報である動き情報に基づく表示タイプが、Fyファイルに格納されていない場合、図４８のスクラブの処理のステップＳ２１４において、デフォルトの注目情報である動き情報に基づく表示タイプが決定され、ファイル記憶部２３１（図４４）に書き込まれることとする。
【０６９８】
GUI表示処理では、GUI制御部２１１（図４３）が、編集ウインドウ３０１（図４９）を表示するように、表示制御部２１８（図４３）を制御し、これにより、表示制御部２１８が、ディスプレイ４１に、編集ウインドウ３０１を表示させる。そして、ステップＳ３１１において、表示制御部２１８は、Fyファイル管理部２１４（図４３）が管理しているFyファイル、即ち、Fyファイル管理部２１４のファイル記憶部２３１（図４４）に記憶されているFyファイルを読み出し、そのFyファイルに格納されている動き情報と細かさ情報のうちの、デフォルトの注目情報である動き情報に基づき、変化量グラフ（動き情報グラフ）を、編集ウインドウ３０１のFyファイル表示部３１１に表示させる。
【０６９９】
さらに、表示制御部２１８は、Fyファイル管理部２１４のファイル記憶部２３１から読み出したFyファイルに格納されている動き情報と細かさ情報に基づき、例えば、図５５に示したように、動き情報タブ３３１、細かさ情報タブ３３２、および全情報タブ３３３を表示させ、ステップＳ３１１からステップＳ３１２に進む。
【０７００】
ステップＳ３１２では、表示制御部２１８は、Fyファイル管理部２１４（図４３）のファイル記憶部２３１に記憶されている、デフォルトの注目情報である動き情報に基づく表示タイプに基づき、その表示タイプを時系列に表すタイプ情報（表示タイプの時系列の並びを表すタイプ情報）を、編集ウインドウ３０１のFyファイル表示部３１１（図５１）のタイプ情報表示部３２２に表示させて、ステップＳ３１３に進む。
【０７０１】
ステップＳ３１３では、表示制御部２１８は、Fyファイル管理部２１４のファイル記憶部２３１（図４４）に記憶されているFyファイルに格納されている、デフォルトの注目情報である動き情報に基づく表示タイプを決定するのに用いられた閾値HおよびLに応じて、閾値インジケータ３１３Ｈおよび３１３Ｌ（図５５）を、Fyファイル表示部３１１に表示させる。
【０７０２】
その後、ステップＳ３１３からＳ３１４に進み、ステップＳ３１４乃至Ｓ３１７において、図５０のステップＳ２５３乃至Ｓ２５６とそれぞれ同様の処理が行われる。
【０７０３】
即ち、ステップＳ３１４では、表示制御部２１８は、スクラブつまみ５４の位置、ひいては、そのスクラブつまみ５４が位置している指定区間（図４５）に割り当てられているフレーム、つまり、注目フレームの情報を、GUI制御部２１１から取得し（GUI制御部２１１から供給される注目フレームの情報を受信し）、ステップＳ３１５に進む。
【０７０４】
ステップＳ３１５では、表示制御部２１８は、直前のステップＳ３１４でGUI制御部２１１から取得した注目フレームの情報に応じて、位置インジケータ３１２（図５５）を、Fyファイル表示部３１１に表示させる。即ち、表示制御部２１８は、スクラブつまみ５４が位置する指定区間に割り当てられたフレーム（注目フレーム）に対応する位置に、位置インジケータ３１２を表示させる。
【０７０５】
そして、ステップＳ３１５からＳ３１６に進み、GUI制御部２１１が、編集プログラムを終了するように、キーボード２またはマウス３が操作されたかどうかを判定する。
【０７０６】
ステップＳ３１６において、編集プログラムを終了するように、キーボード２またはマウス３が操作されていないと判定された場合、ステップＳ３１７に進み、GUI制御部２１１は、スクラブつまみ５４が移動されたかどうか、即ち、ユーザがキーボード２またはマウス３を操作することにより、スクラブつまみ５４を移動したかどうかを判定する。
【０７０７】
ステップＳ３１７において、スクラブつまみ５４が移動されたと判定された場合、即ち、ユーザが、スクラブつまみ５４を移動するように、キーボード２またはマウス３を操作し、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給された場合、GUI制御部２１１は、スクラブつまみ５４が位置する指定区間（図４５）に割り当てられたフレームを注目フレームとし、その注目フレームの情報を、表示制御部２１８に供給して、ステップＳ３１４に戻り、以下、同様の処理が繰り返される。
【０７０８】
一方、ステップＳ３１７において、スクラブつまみ５４が移動されていないと判定された場合、ステップＳ３１８に進み、GUI制御部２１１（図４３）は、ステップＳ３１１で表示された動き情報タブ３３１、細かさ情報タブ３３２、または全情報タブ３３３のうちのいずれかを選択する操作がされたかどうかを判定する。
【０７０９】
ステップＳ３１８において、動き情報タブ３３１、細かさ情報タブ３３２、および全情報タブ３３３のうちのいずれについても、選択をする操作がされていないと判定された場合、注目情報を変更するための処理が行われる、後述するステップＳ３１９乃至Ｓ３２２をスキップして、ステップＳ３２３に進む。
【０７１０】
また、ステップＳ３１８において、動き情報タブ３３１、細かさ情報タブ３３２、または全情報タブ３３３のうちのいずれかを選択する操作がされたと判定された場合、即ち、ユーザが、キーボード２またはマウス３を操作することにより、動き情報タブ３３１、細かさ情報タブ３３２、または全情報タブ３３３のうちのいずれかを選択し、その選択に応じた操作信号が、キーボード２またはマウス３から、GUI制御部２１１（図４３）に供給された場合、GUI制御部２１１は、キーボード２またはマウス３からの操作信号に基づき、動き情報タブ３３１、細かさ情報タブ３３２、または全情報タブ３３３のうちの選択されたタブ（以下、適宜、選択タブともいう）に対応する情報を、注目情報として、ステップＳ３１９に進む。
【０７１１】
ここで、選択タブが動き情報タブ３３１である場合には、その動き情報タブ３３１に対応する情報である動き情報が、注目情報とされ、選択タブが細かさ情報タブ３３２である場合には、その細かさ情報タブ３３２に対応する細かさ情報が、注目情報とされる。また、選択タブが全情報タブ３３３である場合には、その全部情報タブ３３３に対応する情報である、Fyファイルに格納されている変化量のすべて、即ち、ここでは、動き情報と細かさ情報の両方が、注目情報とされる。
【０７１２】
ステップＳ３１９では、表示制御部２１８（図４３）は、Fyファイル管理部２１４が管理しているFyファイル、即ち、Fyファイル管理部２１４のファイル記憶部２３１（図４４）に記憶されているFyファイルを読み出し、そのFyファイルに格納されている動き情報と細かさ情報のうちの、注目情報に基づき、変化量グラフを、編集ウインドウ３０１のFyファイル表示部３１１に表示させる。
【０７１３】
即ち、動き情報と細かさ情報のうちの、例えば、動き情報が注目情報である場合には、ステップＳ３１９において、表示制御部２１８は、図５５上に示したように、動き情報グラフを、Fyファイル表示部３１１に表示させる。また、例えば、細かさ情報が注目情報である場合には、ステップＳ３１９において、表示制御部２１８は、細かさ情報グラフを、Fyファイル表示部３１１に表示させる。さらに、例えば、動き情報と細かさ情報の両方が注目情報である場合には、ステップＳ３１９において、表示制御部２１８は、図５５下に示したように、動き情報グラフと細かさ情報グラフを、Fyファイル表示部３１１に表示させる。
【０７１４】
その後、ステップＳ３１９からステップＳ３２０に進み、Fyファイル管理部２１４（図４３）は、その表示タイプ決定部２３３において、注目情報と、注目情報に基づく表示タイプを求めるための現在の閾値（デフォルトの閾値、または、閾値インジケータ３１３Ｈ，３１３Ｌ、若しくは３１３Ｋ（図５５）の位置が表す閾値H,L、若しくはK）とを比較することにより、注目情報に基づく表示タイプを求め、ファイル記憶部２３１に記憶させて、ステップＳ３２１に進む。
【０７１５】
ステップＳ３２１では、表示制御部２１８は、Fyファイル管理部２１４（図４３）のファイル記憶部２３１に記憶された注目情報に基づく表示タイプに基づき、その表示タイプを時系列に表すタイプ情報（表示タイプの時系列の並びを表すタイプ情報）を、Fyファイル表示部３１１に表示させて、ステップＳ３２２に進む。
【０７１６】
ステップＳ３２２では、表示制御部２１８は、Fyファイル管理部２１４のファイル記憶部２３１（図４４）に記憶された注目情報に基づく表示タイプを決定するのに用いられた（直前のステップＳ３２０で表示タイプを求めるのに用いられた）閾値H,L、若しくはKに応じて、閾値インジケータ３１３Ｈ，３１３Ｌ、若しくは３１３Ｋ（図５５）を、Fyファイル表示部３１１に表示させる。
【０７１７】
即ち、動き情報と細かさ情報のうちの、例えば、動き情報が注目情報である場合には、ステップＳ３２２において、表示制御部２１８は、図５５上に示したように、動き情報に基づく表示タイプを求めるのに用いられた閾値HとLに対応する、Fyファイル表示部３１１上の位置に、それぞれ、閾値インジケータ３１３Ｈと３１３Ｌを表示させる。
【０７１８】
また、例えば、細かさ情報が注目情報である場合には、ステップＳ３２２において、表示制御部２１８は、細かさ情報に基づく表示タイプを求めるのに用いられた閾値Kに対応する、Fyファイル表示部３１１上の位置に、閾値インジケータ３１３Ｋを表示させる。
【０７１９】
さらに、例えば、動き情報と細かさ情報の両方が注目情報である場合には、ステップＳ３２２において、表示制御部２１８は、図５５下に示したように、動き情報と細かさ情報に基づく表示タイプを求めるのに用いられた閾値H,L,Kに対応する、Fyファイル表示部３１１上の位置に、それぞれ、閾値インジケータ３１３Ｈ，３１３Ｌ，３１３Ｋを表示させる。
【０７２０】
その後は、ステップＳ３２２からステップＳ３２３に進み、ステップＳ３２３乃至Ｓ３２７において、図５３のステップＳ２８８乃至Ｓ２９２とそれぞれ同様の処理が行われる。
【０７２１】
即ち、ステップＳ３２３では、GUI制御部２１１が、Fyファイル表示部３１１に表示されている閾値インジケータ、つまり、注目情報に基づく表示タイプを求めるのに用いられた閾値に対応する閾値インジケータ（閾値インジケータ３１３Ｈ，３１３Ｌ，３１３Ｋのうちのいずれか）の移動が開始されたかどうか、即ち、ユーザが、閾値インジケータを移動するように、キーボード２またはマウス３を操作したかどうかを判定する。
【０７２２】
ステップＳ３２３において、Fyファイル表示部３１１に表示されている閾値インジケータの移動が開始されていないと判定された場合、ステップＳ３１６に戻り、以下、同様の処理が繰り返される。
【０７２３】
また、ステップＳ３２３において、Fyファイル表示部３１１に表示されている閾値インジケータの移動が開始されたと判定された場合、即ち、ユーザが、Fyファイル表示部３１１に表示されている閾値インジケータを移動するように、キーボード２またはマウス３を操作し、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されている場合、GUI制御部２１１は、キーボード２またはマウス３からの操作信号に応じて、Fyファイル表示部３１１に表示されている閾値インジケータを移動する位置を求め、その位置を表す情報を、表示制御部２１８に供給して、ステップＳ３２４に進む。
【０７２４】
ステップＳ３２４では、表示制御部２１８が、閾値インジケータを、Fyファイル表示部３１１に直前に表示されていた位置に代えて、GUI制御部２１１からの情報に応じた位置に表示させ、ステップＳ３２５に進む。
【０７２５】
ステップＳ３２５では、GUI制御部２１１が、閾値インジケータの移動が終了されたかどうか、即ち、ユーザが、閾値インジケータを移動させるキーボード２またはマウス３の操作を終了したかどうかを判定する。
【０７２６】
ステップＳ３２５において、閾値インジケータを移動させる操作が終了されていないと判定された場合、即ち、ユーザが、閾値インジケータを移動するように、キーボード２またはマウス３を操作し続けており、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されている場合、GUI制御部２１１は、キーボード２またはマウス３からの操作信号に応じて、閾値インジケータを移動する位置を求め、その位置を表す情報を、表示制御部２１８に供給して、ステップＳ３２４に戻り、以下、同様の処理が繰り返される。
【０７２７】
一方、ステップＳ３２５において、閾値インジケータを移動させる操作が終了されたと判定された場合、即ち、ユーザが、閾値インジケータを移動させるキーボード２またはマウス３の操作を終了し、閾値インジケータを移動させる操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されなくなった場合、GUI制御部２１１は、移動が終了された閾値インジケータの（縦方向の）位置に対応する閾値を、データ供給制御部２１３（図４３）を介して、Fyファイル管理部２１４に供給して、ステップＳ３２６に進む。
【０７２８】
ここで、図５０で説明したように、GUI制御部２１１がデータ供給制御部２１３を介してFyファイル管理部２１４に供給する閾値は、Fyファイル管理部２１４（図４４）の表示タイプ決定部２３３を構成する閾値処理部２４２に供給され、以後、閾値処理部２４２は、新たな閾値が供給されるか、または、ファイル記憶部２３１に新たなFyファイルが記憶されるまで、GUI制御部２１１からデータ供給制御部２１３を介して供給された閾値を用いて処理を行う。
【０７２９】
ステップＳ３２６では、Fyファイル管理部２１４（図４４）の表示タイプ決定部２３３は、直前に、GUI制御部２１１からデータ供給制御部２１３を介して閾値処理部２４２に供給された閾値、つまり、移動後の閾値インジケータが表す閾値と、Fyファイル記憶部２３１に記憶されたFyファイルに格納されている、注目情報となっている変化量とを用いて、表示タイプを新たに決定する（決定し直す）。
【０７３０】
即ち、表示タイプ決定部２３３は、Fyファイル記憶部２３１に記憶されたFyファイルに格納されている、注目情報となっている変化量と、移動後の閾値インジケータが表す閾値とを比較し、その比較結果に基づき、注目情報に基づく表示タイプを決定し直す。そして、表示タイプ決定部２３３において決定し直された注目情報に基づく表示タイプは、表示タイプ書き込み部２３４によって、ファイル記憶部２３１に上書きする形で書き込まれる。
【０７３１】
以上のようにして、ステップＳ３２６において、注目情報に基づく表示タイプが決定し直された後は、ステップＳ３２７に進み、表示制御部２１８（図４３）は、Fyファイル管理部２１４（図４４）のファイル記憶部２３１に新たに書き込まれた注目情報に基づく表示タイプに基づき、その表示タイプを時系列に表すタイプ情報（表示タイプの時系列の並びを表すタイプ情報）を、Fyファイル表示部３１１に表示させる、タイプ情報表示部３２２の表示の更新を行って、ステップＳ３１６に戻る。
【０７３２】
そして、ステップＳ３１６において、編集プログラムを終了するように、キーボード２またはマウス３が操作されたと判定された場合、即ち、例えば、ユーザが、編集プログラムを終了するように、キーボード２またはマウス３を操作し、その操作に対応した操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給された場合、GUI表示処理は終了する。
【０７３３】
ところで、スクラブでは、スクラブつまみ５４の位置が、表示レートに対応する周期で検出され、スクラブつまみ５４が位置する指定区間に割り当てられたフレームを注目フレームとして、その注目フレームが、ビューワ５１（図３）に表示される。
【０７３４】
ここで、説明を簡単にするために、表示レートが一定であるとする。
【０７３５】
図４５で説明したように、スクラブバー５３の移動可能範囲が、スクラブの対象の動画を構成するフレームの数と同一の数の、区間長が同一の指定区間に区分されている場合において、スクラブつまみ５４を一定の速さで移動させると、スクラブつまみ５４は、ある単位時間において、ある一定の距離、ひいては、ある一定の数の指定区間を移動する。従って、上述したように、表示レートが一定であれば、スクラブつまみ５４が一定の速度で一定の距離だけ移動されることによって、ある一定のフレーム数のフレームが表示される。
【０７３６】
以上のように、スクラブつまみ５４を一定の速度で一定の距離だけ移動した場合に、ある一定のフレーム数のフレームが表示されることは、スクラブつまみ５４が、スクラブバー５３の移動可能範囲のうちのどのような範囲を移動するかによらない。
【０７３７】
即ち、スクラブの対象の動画に、動きが激しいフレームが連続する区間（以下、適宜、動きあり区間という）と、動きがないフレームが連続する区間（以下、適宜、動きなし区間という）とが存在する場合において、スクラブバー５３の移動可能範囲のうちの、動きあり区間のフレームが割り当てられている指定区間の範囲と、動きなし区間のフレームが割り当てられている指定区間の範囲のぞれぞれで、スクラブつまみ５４を一定の速度で一定の距離だけ移動しても、ビューワ５１に表示されるフレームの数は変わらない。
【０７３８】
しかしながら、動きあり区間のフレームが割り当てられている指定区間の範囲において、スクラブつまみ５４を移動させると、動きあり区間のフレームは、動きが激しいために、ビューワ５１に表示される画像は大きく変化する（動く）。
【０７３９】
一方、動きなし区間のフレームが割り当てられている指定区間の範囲において、スクラブつまみ５４を移動させると、動きない区間のフレームは、動きが（ほとんど）ないために、ビューワ５１に表示される画像は（ほとんど）変わらない。
【０７４０】
従って、スクラブバー５３の移動可能範囲を、区間長が同一の指定区間に区分した場合には、スクラブつまみ５４を一定の速度で一定の距離だけ移動させたときに、ビューワ５１に表示される画像が大きく変化する範囲と、変わらない範囲とが生じる。
【０７４１】
そして、動きなし区間のフレームが割り当てられている指定区間の範囲においては、スクラブつまみ５４をある程度移動させても、ビューワ５１に表示される画像が変わらないので、スクラブつまみ５４を操作しているユーザに煩わしさを感じさせることがある。
【０７４２】
一方、動きあり区間のフレームが割り当てられている指定区間の範囲においては、スクラブつまみ５４をある程度移動させると、ビューワ５１に表示される画像が大きく変化するので、スクラブつまみ５４を操作しているユーザには、所望の画像のフレームを探し出すために、精細な（細かな）スクラブつまみ５４の操作が要求されることがある。
【０７４３】
そこで、フレームを割り当てる指定区間の区間長は、一定ではなく、その指定区間に割り当てるフレームの変化量としての、例えば、動き情報に応じた重み付けをした区間長とし、これにより、スクラブバー５３の移動可能範囲を、変化量である動き情報が大のフレームが割り当てられる指定区間ほど、区間長が大の指定区間に区分することができる。
【０７４４】
図５７は、以上のように、指定区間の区間長に重み付けをする場合の重みの例を示している。
【０７４５】
図５７において、横軸はフレーム（先頭から何番目のフレームであるか）を表し、縦軸は変化量である動き情報を表す。
【０７４６】
図５７では、式L1>L2>L3>L4を満たす閾値L1,L2,L3,L4を用いて、動き情報が閾値L1以上のフレームが割り当てられる指定区間の区間長の重みwが、例えば、１とされ、動き情報が閾値L2以上閾値L1未満のフレームが割り当てられる指定区間の区間長の重みwが、例えば、０．７とされる。また、動き情報が閾値L3以上閾値L2未満のフレームが割り当てられる指定区間の区間長の重みwが、例えば、０．５とされ、動き情報が閾値L4以上閾値L3未満のフレームが割り当てられる指定区間の区間長の重みwが、例えば、０．３とされる。さらに、動き情報が閾値L4未満のフレームが割り当てられる指定区間の区間長の重みwが、例えば、０．１とされる。
【０７４７】
以上のような重みwを用いた重み付けをした区間長は、例えば、次のようにして求めることができる。
【０７４８】
即ち、区間長に同一の重みwによる重み付けがされる指定区間が連続する区間を、同一重み区間ということとし、スクラブの対象の動画を構成するフレームに割り当てられる指定区間のシーケンスが、Q個の同一重み区間に分けられるとする。
【０７４９】
また、Q個の同一重み区間のうちの、先頭からq番目の同一重み区間を構成する指定区間の数、ひいては、q番目の同一重み区間を構成する指定区間に割り当てられているフレームの数をFqと表すとともに、q番目の同一重み区間を構成する各指定区間の区間長に付される重みをwqと表すこととする。
【０７５０】
なお、スクラブの対象の動画のフレームの総数Fは、式F=F1+F2+・・・FQで表される。
【０７５１】
いま、移動可能範囲の長さを１とすると、重み付けをしない場合、指定区間の区間長は、1/Fで表される。
【０７５２】
一方、重み付けをする場合、先頭からq番目の同一重み区間を構成する指定区間の区間長は、wq／（ΣwiFi）で表される。即ち、先頭からq番目の同一重み区間の長さは、wqFq／（ΣwiFi）で表されるので、wqFq／（ΣwiFi）を、q番目の同一重み区間を構成する指定区間（に割り当てられているフレーム）の数Fqで除算することにより、重み付けをする場合の、先頭からq番目の同一重み区間を構成する指定区間の区間長を求めることができる。但し、ΣwiFiは、サフィックスiを、１からQに変えてのwiFiの総和を表す。
【０７５３】
なお、重み付けをしない場合の、指定区間の区間長は、重み付けをする場合の重みw1,w2,・・・,wQがすべて同一の重みwであるとすることにより求めることができる。即ち、重み付けをする場合、先頭からq番目の同一重み区間を構成する指定区間の区間長は、上述したように、wq／（ΣwiFi）であるが、w1,w2,・・・,wQを、同一の重みwとすると、wq／（ΣwiFi）=w／（wΣFi）=1/ΣFi=1/Fとなる。
【０７５４】
次に、図５７では、表示タイプを決定するのに用いられる閾値とは関係がない４つの閾値L1,L2,L3,L4を用いて、フレームに割り当てられる指定区間の区間長の重みwを求めるようにしたが、区間長の重みwは、その他、例えば、表示タイプを決定するのに用いられる閾値を用いて行うことが可能である。
【０７５５】
即ち、図５８は、動き情報に基づく表示タイプを決定するのみ用いられる閾値HおよびLを用いて求められる重みの例を示している。
【０７５６】
図５８において、横軸はフレーム（先頭から何番目のフレームであるか）を表し、縦軸は変化量である動き情報を表す。
【０７５７】
図５８では、動き情報が閾値H以上のフレームが割り当てられる指定区間の区間長の重みwが、例えば、０．５とされ、動き情報が閾値L以上閾値H未満のフレームが割り当てられる指定区間の区間長の重みwが、例えば、０．３とされる。また、動き情報が閾値L未満のフレームが割り当てられる指定区間の区間長の重みwが、例えば、０．１とされる。
【０７５８】
なお、フレームに割り当てられる指定区間の区間長の重みwは、その他、例えば、フレームの表示タイプが、そのフレームの動き情報に基づいて決定される場合に、その表示タイプに応じて決定することができる。
【０７５９】
即ち、表示タイプが、動き情報に基づいて決定される場合には、その表示タイプがフレームの動きの程度を表す。具体的には、例えば、図２０に示したように、表示タイプが、動き情報に基づいて、静止画タイプV1、通常タイプV2、または高表示レート低解像度タイプV3のうちのいずれかに決定される場合には、原則として、静止画タイプV1のフレームは、動き情報が閾値L未満のフレームであり、通常タイプV2のフレームは、動き情報が閾値L以上閾値H未満のフレームである。また、高表示レート低解像度タイプV3のフレームは、動き情報が閾値H以上のフレームである。
【０７６０】
従って、図５８で説明した閾値HおよびLを用いる場合と同様に、表示タイプを用いて、静止画タイプV1のフレームが割り当てられる指定区間の区間長の重みwを０．１に、通常タイプV2のフレームが割り当てられる指定区間の区間長の重みwを０．３に、高表示レート低解像度タイプV3のフレームが割り当てられる指定区間の区間長の重みwを０．５に、それぞれすることができる。
【０７６１】
なお、フレームに割り当てられる指定区間の区間長の重みwを、そのフレームの表示タイプに応じて決定する場合には、静止画タイプV1のフレームが連続する静止画区間、通常タイプV2のフレームが連続する通常区間、高表示レート低解像度タイプV3のフレームが連続する高表示レート低解像度区間は、いずれも、同一重み区間ともなる。
【０７６２】
次に、図５９は、区間長に重み付けをしない場合と、重み付けをする場合それぞれの指定区間を示している。
【０７６３】
区間長に重み付けをしない場合には、図５９の上半分側に示すように、スクラブバー５３の移動可能範囲が、スクラブの対象の動画を構成するフレームの数の、同一の区間長の指定区間に区分され、図４５で説明したように、左の指定区間から、スクラブの対象の動画を構成するフレームが時系列に割り当てられる。
【０７６４】
区間長に重み付けをしない場合、静止画タイプV1のフレームが連続する静止画区間、通常タイプV2のフレームが連続する通常区間、高表示レート低解像度タイプV3のフレームが連続する高表示レート低解像度区間のいずれのフレームに割り当てられる指定区間の区間長もdになっている。
【０７６５】
一方、区間長に重み付けをする場合には、図５９の下半分側に示すように、スクラブバー５３の移動可能範囲が、指定区間に区分され、図４５で説明したように、左の指定区間から、スクラブの対象の動画を構成するフレームが時系列に割り当てられるが、変化量である動き情報が大のフレームが割り当てられる指定区間ほど、区間長が大になっている。
【０７６６】
即ち、図５９では、静止画タイプV1のフレームが連続する静止画区間のフレーム、つまり、動きがないフレームに割り当てられる指定区間の区間長は、重み付けをしない場合の区間長dの1/2倍のd/2になっている。また、通常タイプV2のフレームが連続する通常区間のフレーム、つまり、激しいとまでは言えない動きがあるフレームに割り当てられる指定区間の区間長は、重み付けをしない場合の区間長dと同一のdになっている。さらに、高表示レート低解像度タイプV3のフレームが連続する高表示レート低解像度区間のフレーム、つまり、動きが激しいフレームに割り当てられる指定区間の区間長は、重み付けをしない場合の区間長dの3倍の3dになっている。
【０７６７】
従って、区間長に重み付けをする場合には、スクラブつまみ５４が、区間長に重み付けをしない場合の1/2の移動量だけ移動されると、静止画区間のフレームの表示が終了する。その結果、スクラブつまみ５４をある程度移動させても、ビューワ５１に表示される画像が変わらずに、スクラブつまみ５４を操作しているユーザに煩わしさを感じさせることを防止することができる。
【０７６８】
さらに、区間長に重み付けをする場合には、スクラブつまみ５４が、区間長に重み付けをしない場合の3倍の移動量だけ移動されると、ビューワ５１に表示される注目フレームが、高表示レート低解像度区間のあるフレームから次のフレームに変更される。その結果、ユーザは、スクラブつまみ５４を、それほど精細な（細かな）に操作しなくても、所望の画像のフレームを容易に探し出すことができる。
【０７６９】
なお、図５９には、横方向のスケールを、スクラブバー５３の移動可能範囲のスケールと一致させたタイプ情報（表示タイプを時系列に表す帯状の領域のGUI）を図示してある。
【０７７０】
横方向のスケールが、スクラブバー５３の移動可能範囲のスケールと一致するタイプ情報においては、スクラブつまみ５４の位置におけるタイプ情報（の模様）が、スクラブつまみ５４が位置する指定区間に割り当てられたフレームの表示タイプを表す。
【０７７１】
図５９において、タイプ情報としての帯状の領域のうちの、斜線を付して示す領域D1は、静止画タイプV1のフレームが連続する静止画区間を表しており、模様を付さずに示す領域D2は、通常タイプV2のフレームが連続する通常区間を表す。また、横線を付して示す領域D3は、高表示レート低解像度タイプV3のフレームが連続する高表示レート低解像度区間を表す。
【０７７２】
図５９では、上述したように、区間長に重み付けをした場合の、静止画タイプV1のフレームが連続する静止画区間のフレームに割り当てられる指定区間の区間長は、重み付けをしない場合の区間長dの1/2倍のd/2になっているので、区間長に重み付けをした場合の静止画区間を表す領域D1の横方向の長さも、区間長に重み付けをしない場合の1/2倍になる。
【０７７３】
また、図５９では、区間長に重み付けをした場合の、通常タイプV2のフレームが連続する通常区間のフレームに割り当てられる指定区間の区間長は、重み付けをしない場合の区間長dと同一のdになっているので、区間長に重み付けをした場合の通常区間を表す領域D2の横方向の長さも、区間長に重み付けをしない場合と同一になる。
【０７７４】
さらに、図５９では、区間長に重み付けをした場合の、高表示レート低解像度タイプV3のフレームが連続する高表示レート低解像度区間のフレームに割り当てられる指定区間の区間長は、重み付けをしない場合の区間長dの3倍の3dになっているので、区間長に重み付けをした場合の高表示レート低解像度区間を表す領域D3の横方向の長さも、区間長に重み付けをしない場合の3倍になる。
【０７７５】
以上のように、区間長に重み付けをした場合には、タイプ情報は、重み付け後の区間長に応じ、区間長に重み付けをしない場合と異なるものになる（逆に言えば、区間長に重み付けをしない場合には、タイプ情報は、区間長に重み付けをした場合と異なるものになる）。
【０７７６】
図４３の編集システムには、動作モードとして、上述したような、指定区間の区間長に重み付けをする重み付けオンモードと、重み付けをしない重み付けオフモードとを設け、ユーザの操作に応じて、動作モードを、重み付けオンモードまたは重み付けオフモードに切り替えることができる。
【０７７７】
そこで、図６０のフローチャートを参照して、図４３の編集システムが、指定区間の区間長に関して行う処理（区間長に関する処理）について説明する。
【０７７８】
なお、編集ウインドウ３０１（図４９）には、動作モードを、重み付けオンモードまたは重み付けオフモードに切り替えるときに操作される、図示せぬ重みボタンが設けられているとし、ユーザが、その重みボタンを操作することで、動作モードが、重み付けオンモードまたは重み付けオフモードに切り替えられることとする。
【０７７９】
また、スクラブバー５３の移動可能範囲の長さは１であるとする。
【０７８０】
区間長に関する処理では、ステップＳ３５１において、GUI制御部２１１が、動作モードが切り替えられたかどうかを判定する。ステップＳ３５１において、動作モードが重み付けオンモードに切り替えられたと判定された場合、ステップＳ３５２に進み、GUI制御部２１１は、Fyファイル管理部２１４（図４４）のファイル記憶部２３１に記憶されたFyファイルにおける変化量または表示タイプに基づき、上述したように、フレームに割り当てられる各指定区間の区間長に付す重みを求めて、ステップＳ３５３に進む。
【０７８１】
ステップＳ３５３では、GUI制御部２１１が、フレームに割り当てられる各指定区間の区間長に付す重みに基づき、各指定区間について、重み付けをした区間長を求める。
【０７８２】
即ち、ステップＳ３５２において、変化量または表示タイプに基づき、上述したように、フレームに割り当てられる各指定区間の区間長に付す重みが求められた場合には、GUI制御部２１１は、区間長に同一の重みwによる重み付けがされる指定区間が連続する区間を、同一重み区間として認識する。
【０７８３】
そして、上述したように、スクラブの対象の動画を構成するフレームに割り当てられる指定区間のシーケンスが、Q個の同一重み区間に分けられるとすると、GUI制御部２１１は、Q個の同一重み区間のうちの、先頭からq番目の同一重み区間を構成する指定区間の数Fqと、ステップＳ３５３で求められた、ｑ番目の同一重み区間を構成する指定区間の区間長に付される重みwqとを用い、先頭からq番目の同一重み区間を構成する指定区間の区間長wq／（ΣwiFi）を求める。
【０７８４】
GUI制御部２１１は、ステップＳ３５３でQ個の同一重み区間それぞれを構成する指定区間の区間長wq／（ΣwiFi）を求めると、その指定区間の区間長wq／（ΣwiFi）を、表示制御部２１８（図４３）に供給して、ステップＳ３５４に進み、ビューワ５１に表示されているスクラブバー５３の移動可能範囲を区分する指定区間の区間長を、ステップＳ３５３で求めた区間長に設定（変更）し、ステップＳ３５５に進む。
【０７８５】
ステップＳ３５５では、表示制御部２１８は、例えば、図５１に示したように、Fyファイル表示部３１１に、タイプ情報が表示されている場合には、ステップＳ３５３でGUI制御部２１１から供給された指定区間の区間長wq／（ΣwiFi）に応じて、図５９で説明したように、Fyファイル表示部３１１に表示されているタイプ情報を変更し、ステップＳ３５１に戻る。
【０７８６】
一方、ステップＳ３５１において、動作モードが重み付けオフモードに切り替えられたと判定された場合、ステップＳ３５６に進み、GUI制御部２１１は、フレームに割り当てられる各指定区間の区間長を同一の1/Fに設定（変更）するとともに、その区間長1/Fを表示制御部２１８に供給して、ステップＳ３５７に進む。なお、上述したように、Fは、スクラブの対象の動画を構成するフレームの総数を表す。
【０７８７】
ステップＳ３５７では、表示制御部２１８は、例えば、図５１に示したように、Fyファイル表示部３１１に、タイプ情報が表示されている場合には、Fyファイル表示部３１１に表示されているタイプ情報を、ステップＳ３５６でGUI制御部２１１から供給された区間長1/Fに応じて変更し、ステップＳ３５１に戻る。
【０７８８】
次に、Fyファイル表示部３１１には、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間までに割り当てるフレームの範囲である割り当て範囲を表す割り当て範囲情報を表示し、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間にまでに、割り当て範囲情報が表す割り当て範囲の先頭のフレームから終わりのフレームまでを割り当てることができる。
【０７８９】
即ち、図６１は、割り当て範囲情報としての範囲指定インジケータ３５１Ｓおよび３５１Ｅが表示されるFyファイル表示部３１１の表示例を示している。
【０７９０】
図６１のFyファイル表示部３１１は、図５１で説明したように、グラフ表示部３２１とタイプ情報表示部３２２とから構成されており、そこには、変化量グラフ、タイプ情報、位置インジケータ３１２、並びに閾値インジケータ３１３Ｈおよび３１３Ｌが表示されている。
【０７９１】
さらに、図６１のFyファイル表示部３１１には、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間までに割り当てるフレームの範囲である割り当て範囲を表す範囲指定インジケータ３５１Ｓおよび３５１Ｅが表示されている。
【０７９２】
ここで、スクラブの対象の動画の先頭のフレームから終わりのフレームまでに、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間が割り当てられている状態を、デフォルト割り当て状態ということとすると、デフォルト割り当て状態では、図４９で説明したように、仮に、Fyファイル表示部３１１の変化量グラフが表示される領域の横方向を所定数倍することによって、Fyファイル表示部３１１の変化量グラフが表示される領域の横方向の長さと、スクラブバー５３の移動可能範囲の長さとを一致させた場合、Fyファイル表示部３１１に表示される位置インジケータ３１２の位置と、スクラブつまみ５４の位置とは一致する。
【０７９３】
従って、Fyファイル表示部３１１の変化量グラフが表示される領域の横方向の各位置には、スクラブの対象の動画の先頭のフレームから終わりのフレームまでが対応しているとみなすことができ、位置インジケータ３１２は、Fyファイル表示部３１１の変化量グラフが表示される領域の横方向の位置のうちの、ビューワ５１に表示されているフレーム（注目フレーム）に対応する位置に表示される。
【０７９４】
範囲指定インジケータ３５１Ｓと３５１Ｅは、縦方向に延びる、信号インジケータ３１２と平行の線分のGUIであり、Fyファイル表示部３１１のグラフ表示部３２１に表示される。さらに、範囲指定インジケータ３５１Ｓと３５１Ｅは、ユーザがキーボード２またはマウス３を操作することにより、Fyファイル表示部３１１（のグラフ表示部３２１）の変化量グラフが表示される領域内を、横方向に移動することができるようになっている。
【０７９５】
但し、範囲指定インジケータ３５１Ｓが、範囲指定インジケータ３５１Ｅよりも右側に移動すること、逆に言えば、範囲指定インジケータ３５１Ｅが、範囲指定インジケータ３５１Ｓよりも左側に移動することは制限されている。従って、範囲指定インジケータ３５１Ｓは、Fyファイル表示部３１１の変化量グラフが表示される領域の左端から、範囲指定インジケータ３５１Ｅの位置までの範囲を移動することができ、範囲指定インジケータ３５１Ｅは、範囲指定インジケータ３５１Ｓの位置から、Fyファイル表示部３１１の変化量グラフが表示される領域の右端までの範囲を移動することができる。
【０７９６】
範囲指定インジケータ３５１Ｓと３５１Ｅによれば、スクラブの対象の動画を構成するフレームのうちの、範囲指定インジケータ３５１Ｓの位置に対応するフレームから、範囲指定インジケータ３５１Ｅの位置に対応するフレームまでの範囲（割り当て範囲）のフレームが、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間までに割り当てられる。
【０７９７】
従って、スクラブつまみ５４が移動可能範囲の左端に位置しているときには、範囲指定インジケータ３５１Ｓの位置に対応するフレームが、ビューワ５１に表示する注目フレームとされ、スクラブつまみ５４が移動可能範囲の右端に位置しているときには、範囲指定インジケータ３５１Ｅの位置に対応するフレームが、ビューワ５１に表示する注目フレームとされる。
【０７９８】
なお、範囲指定インジケータ３５１Ｓが、Fyファイル表示部３１１の変化量グラフが表示される領域の左端に位置し、かつ、範囲指定インジケータ３５１Ｅが、Fyファイル表示部３１１の変化量グラフが表示される領域の右端に位置している状態では、スクラブの対象の動画の先頭のフレームから終わりのフレームまでに、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間が割り当てられる。従って、この状態は、デフォルト割り当て状態である。
【０７９９】
そして、デフォルト割り当て状態では、スクラブつまみ５４が移動可能範囲の左端に位置しているときには、スクラブの対象の動画の先頭のフレームが、ビューワ５１に表示する注目フレームとされ、スクラブつまみ５４が移動可能範囲の右端に位置しているときには、スクラブの対象の動画の終わりのフレームが、ビューワ５１に表示する注目フレームとされる。
【０８００】
デフォルト割り当て状態では、上述のように、スクラブの対象の動画の先頭のフレームから終わりのフレームまでに、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間が割り当てられる。
【０８０１】
従って、例えば、スクラブの対象の動画のフレーム数が多い場合には、指定区間の区間長が短くなるので、スクラブつまみ５４を少しだけ移動しても、ビューワ５１に表示する注目フレームとするフレームが、スクラブつまみ５４の移動前と移動後とで大きく変化し（移動後のスクラブつまみ５４が位置する指定区間に割り当てられているフレームが、移動前のスクラブつまみ５４が位置する指定区間に割り当てられているフレームから多くのフレーム数だけ離れたフレームとなり）、所望の画像のフレームを探し出すことが困難になることがある。
【０８０２】
そこで、範囲指定インジケータ３５１Ｓまたは３５１Ｅを移動し、スクラブの対象の動画を構成するフレームのうちの、範囲指定インジケータ３５１Ｓの位置に対応するフレームから、範囲指定インジケータ３５１Ｅの位置に対応するフレームまでの範囲（割り当て範囲）のフレームを、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間までに割り当てることにより、所望の画像のフレームを、容易に探し出すことが可能となる。
【０８０３】
即ち、範囲指定インジケータ３５１Ｓまたは３５１Ｅを移動することにより、スクラブの対象の動画を構成するフレームのうちの、範囲指定インジケータ３５１Ｓの位置に対応するフレームから、範囲指定インジケータ３５１Ｅの位置に対応するフレームまでの範囲のフレーム、つまり、スクラブの対象の動画を構成する先頭のフレームから終わりのフレームまでの範囲のすべてではなく、一部の範囲を、割り当て範囲（スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間までに割り当てられるフレームの範囲）とすることができる。
【０８０４】
このように、スクラブの対象の動画の一部の範囲を割り当て範囲とすることにより、すべての範囲を割り当て範囲とする場合に比較して、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間までに割り当てられるフレームの数が少なくなり、その結果、指定区間の区間長が長くなる。
【０８０５】
従って、指定区間の区間長が短いことに起因して、ビューワ５１に表示する注目フレームとするフレームが、スクラブつまみ５４の移動前と移動後とで大きく変化することを防止することができ、その結果、所望の画像のフレームを、容易に探し出すことが可能となる。
【０８０６】
なお、スクラブつまみ５４が位置する指定区間に割り当てられたフレームの付近において、画像に動きがない場合には、ビューワ５１に表示する注目フレームとするフレームが、スクラブつまみ５４の移動前と移動後とで大きく変化しても、ビューワ５１に表示される画像は変化しないので、ビューワ５１に表示する注目フレームとするフレームがスクラブつまみ５４の移動前と移動後とで大きく変化する（離れる）ことは、所望の画像を探し出すことの障害にはならない。
【０８０７】
一方、スクラブつまみ５４が位置する指定区間に割り当てられたフレームの付近において、画像の動きが激しい場合には、ビューワ５１に表示する注目フレームとするフレームが、スクラブつまみ５４の移動前と移動後とで大きく変化して（離れて）しまうと、ビューワ５１に表示される画像は大きく変化するので、ビューワ５１に表示する注目フレームとするフレームがスクラブつまみ５４の移動前と移動後とで大きく変化することが、所望の画像を探し出すことの障害になる。
【０８０８】
従って、スクラブの対象の動画の、画像の動きが激しいフレームの区間を、割り当て範囲とすることが効果的である（スクラブの対象の動画の、画像の動きが激しいフレームの区間を、割り当て範囲とすることによって、所望の画像のフレームを、容易に探し出すことが可能となる）。
【０８０９】
そして、Fyファイル表示部３１１では、Fyファイルに動き情報が変化量として格納されていれば、その動き情報のグラフ（動き情報グラフ）（変化量グラフ）が表示され、また、動き情報に基づいて決定された表示タイプを表すタイプ情報が表示される。
【０８１０】
ユーザは、Fyファイル表示部３１１に表示される動き情報グラフやタイプ情報を見て、画像の動きの激しいフレームの区間を容易に認識することができ、さらに、その区間が、割り当て範囲となるように、範囲指定インジケータ３５１Ｓや３５１Ｅを操作することができる。
【０８１１】
なお、範囲指定インジケータ３５１Ｓおよび３５１Ｅは、スクラブバー５３の移動可能範囲の先頭の指定区間から終わりの指定区間までに割り当てるフレームの範囲である割り当て範囲を表すから、割り当て範囲情報ということができるとともに、割り当て範囲を指定するときに操作されるから、範囲指定操作手段ということもできる。
【０８１２】
ここで、範囲指定インジケータ３５１Ｓと３５１Ｅのうちの、範囲指定インジケータ３５１Ｓを、以下、適宜、始点インジケータ３５１Ｓともいう。また、範囲指定インジケータ３５１Ｅを、以下、適宜、終点インジケータ３５１Ｅともいう。
【０８１３】
次に、図６２のフローチャートを参照して、図６１で説明したように、スクラブバー５３の移動可能範囲（の指定区間）に割り当てるフレームの範囲（割り当て範囲）を、範囲始点インジケータ３５１Ｓと終点インジケータ３５１Ｅに応じて設定する割り当て範囲設定処理について説明する。
【０８１４】
ステップＳ３７１において、GUI制御部２１１（図４３）が、表示制御部２１８を制御することにより、Fyファイル表示部３１１に、始点インジケータ３５１Ｓと終点インジケータ３５１Ｅを表示させ、ステップＳ３７２に進む。
【０８１５】
ここで、割り当て範囲設定処理の開始直後に行われるステップＳ３７１では、始点インジケータ３５１Ｓと終点インジケータ３５１Ｅは、Fyファイル表示部３１１の変化量グラフが表示される領域の左端の位置と右端に位置に、それぞれ表示され、あるいは、編集プログラムの実行が前回終了されたときの始点インジケータ３５１Ｓと終点インジケータ３５１Ｅの位置と同一の位置に表示される。
【０８１６】
ステップＳ３７２では、GUI制御部２１１（図４３）が、スクラブの対象の動画を構成するフレームのうちの、始点インジケータ３５１Ｓの位置に対応するフレームから、終点インジケータ３５１Ｅの位置に対応するフレームまでの範囲を、割り当て範囲として、その割り当て範囲のフレームを、スクラブバー５３の移動可能範囲に割り当てる。
【０８１７】
即ち、いま、説明を簡単にするために、上述した指定区間の区間長に対する重み付けを考慮しないとすれば、GUI制御部２１１は、スクラブバー５３の移動可能範囲を、その長さを割り当て範囲のフレームの数で除算した除算値を区間長とする指定区間に区分し、割り当て範囲のフレームを、移動可能範囲の先頭の指定区間から終わりの指定区間までに割り当てる。
【０８１８】
そして、ステップＳ３７２からステップＳ３７３に進み、GUI制御部２１１が、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅ（図６１）の移動が開始されたかどうか、即ち、ユーザが、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動するように、キーボード２またはマウス３を操作したかどうかを判定する。
【０８１９】
ステップＳ３７３において、始点インジケータ３５１Ｓおよび終点インジケータ３５１Ｅの移動のいずれも開始されていないと判定された場合、ステップＳ３７３に戻る。
【０８２０】
また、ステップＳ３７３において、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅの移動が開始されたと判定された場合、即ち、ユーザが、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動するように、キーボード２またはマウス３を操作し、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されている場合、GUI制御部２１１は、キーボード２またはマウス３からの操作信号に応じて、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動する位置を求め、その位置を表す情報を、表示制御部２１８に供給して、ステップＳ３７４に進む。
【０８２１】
ステップＳ３７４では、表示制御部２１８が、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを、直前に表示されていた位置に代えて、GUI制御部２１１からの情報に応じた位置に表示させ、ステップＳ３７５に進む。
【０８２２】
ステップＳ３７５では、GUI制御部２１１が、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅの移動が終了されたかどうか、即ち、ユーザが、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動させるキーボード２またはマウス３の操作を終了したかどうかを判定する。
【０８２３】
ステップＳ３７５において、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動させる操作が終了されていないと判定された場合、即ち、ユーザが、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動するように、キーボード２またはマウス３を操作し続けており、その操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されている場合、GUI制御部２１１は、キーボード２またはマウス３からの操作信号に応じて、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動する位置を求め、その位置を表す情報を、表示制御部２１８に供給して、ステップＳ３７４に戻り、以下、同様の処理が繰り返される。
【０８２４】
ここで、ステップＳ３７３乃至Ｓ３７５の処理によって、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動される操作にしたがって、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅが、横方向に移動される。
【０８２５】
一方、ステップＳ３７５において、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動させる操作が終了されたと判定された場合、即ち、ユーザが、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動させるキーボード２またはマウス３の操作を終了し、始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを移動させる操作に対応する操作信号が、キーボード２またはマウス３からGUI制御部２１１に供給されなくなった場合、GUI制御部２１１は、移動が終了された始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅの（横方向の）位置を認識して、ステップＳ３７２に戻り、スクラブの対象の動画を構成するフレームのうちの、始点インジケータ３５１Ｓの位置に対応するフレームから、終点インジケータ３５１Ｅの位置に対応するフレームまでの範囲を、割り当て範囲として、その割り当て範囲のフレームを、スクラブバー５３の移動可能範囲に割り当て、以下、同様の処理が繰り返される。
【０８２６】
以上のように、ユーザは、GUIとしての始点インジケータ３５１Ｓまたは終点インジケータ３５１Ｅを操作して、動画を構成するフレームのうちの、スクラブの対象となるフレームの範囲（スクラブバー５３の移動可能範囲に割り当てられるフレームの範囲（割り当て範囲）を、容易に変更することができる。
【０８２７】
なお、図６２の割り当て範囲設定処理は、例えば、編集プログラムが終了されるときに終了する。
【０８２８】
次に、スクラブにおいては、ビューワ５１で表示するフレームの画像のサイズを、例えば、そのフレームの表示タイプに応じて変更することができる。
【０８２９】
図６３は、ビューワ５１で表示するフレームの画像のサイズを、そのフレームの表示タイプに応じて変更する場合の、ビューワ５１の表示例を示している。
【０８３０】
なお、ここでは、フレームの表示タイプは、例えば、動き情報に基づいて、図２０で説明した静止画タイプV1、通常タイプV2、または高表示レート低解像度タイプV3のうちのいずれかに決定されていることとする。
【０８３１】
図６３の左から１番目は、ビューワ５１において静止画タイプV1のフレームの画像が表示される場合の表示例を示している。
【０８３２】
図４３の編集システムでは、静止画タイプV1のフレームの画像については、例えば、あるデフォルトのサイズが設定されており、ビューワ５１は、静止画タイプV1のフレームの画像を、対角線の長さ、または横と縦の長さを、あらかじめ設定されているデフォルトのサイズにして表示する。
【０８３３】
図６３の左から２番目は、ビューワ５１において通常タイプV2のフレームの画像が表示される場合の表示例を示している。
【０８３４】
図４３の編集システムでは、通常タイプV2のフレームの画像については、例えば、デフォルトのサイズの1.5倍のサイズが設定されており、ビューワ５１は、通常タイプV2のフレームの画像を、対角線の長さ、または横と縦の長さをデフォルトのサイズの1.5倍のサイズにして表示する。
【０８３５】
図６３の左から３番目（右から１番目）は、ビューワ５１において高表示レート低解像度タイプV3のフレームの画像が表示される場合の表示例を示している。
【０８３６】
図４３の編集システムでは、高表示レート低解像度タイプV3のフレームの画像については、例えば、デフォルトのサイズの2倍のサイズが設定されており、ビューワ５１は、高表示レート低解像度タイプV3のフレームの画像を、対角線の長さ、または横と縦の長さをデフォルトのサイズの2倍のサイズにして表示する。
【０８３７】
通常タイプV2のフレームの画像には、ある程度の動きがあるので、通常タイプV2のフレームの画像を、上述したように大きなサイズで表示することにより、ユーザは、画像の動きの詳細を確認することができる。
【０８３８】
また、高表示レート低解像度タイプV3のフレームの画像には、激しい動きがあるので、高表示レート低解像度タイプV3のフレームの画像を、より大きなサイズで表示することにより、やはり、ユーザは、画像の動きの詳細を確認することができる。
【０８３９】
さらに、上述したように、画像を、表示タイプごとに異なるサイズで表示することにより、ユーザは、ビューワ５１に表示されている画像のフレームの表示タイプ、ひいては、動きの程度を、容易に認識することができる。
【０８４０】
なお、図６３では、画像を、動き情報に基づいて決定された表示タイプごとに異なるサイズで表示するようにしたが、その他、例えば、細かさ情報に基づいて決定された表示タイプごとに異なるサイズで表示することも可能である。
【０８４１】
画像を、細かさ情報に基づいて決定された表示タイプごとに異なるサイズで表示する場合には、例えば、細かさの程度が大の細かさ情報に基づいて決定される表示タイプの画像ほど、大きなサイズで表示することにより、ユーザは、画像の詳細を、容易に確認することが可能となる。
【０８４２】
図４８で説明したスクラブの処理においては、ステップＳ２２２において画像を表示するときに、以上のように、表示タイプに応じたサイズで、画像を表示することができる。
【０８４３】
そこで、図６４のフローチャートを参照して、表示タイプに応じたサイズで、画像を表示する場合の、図４８のステップＳ２２２の処理（表示処理）について説明する。
【０８４４】
なお、ここでは、上述したように、表示タイプが、例えば、図２０で説明した静止画タイプV1、通常タイプV2、または高表示レート低解像度タイプV3のうちのいずれかに決定されていることとする。また、図６３で説明したように、静止画タイプV1のフレームの画像については、あるデフォルトのサイズが設定されており、通常タイプV2のフレームの画像については、例えば、デフォルトのサイズの1.5倍のサイズが設定されていることとする。さらに、高表示レート低解像度タイプV3のフレームの画像については、例えば、デフォルトのサイズの2倍のサイズが設定されていることとする。
【０８４５】
表示制御部２１８（図４３）は、ステップＳ３９１において、表示タイプ取得部２１５（図４３）から供給される、スクラブつまみ５４が位置している指定区間に割り当てられているフレーム（注目フレーム）の表示タイプが、静止画タイプV1、通常タイプV2、または高表示レート低解像度タイプV3のうちのいずれであるかを判定する。
【０８４６】
ステップＳ３９１において、注目フレームの表示タイプが、静止画タイプV1であると判定された場合、ステップＳ３９２に進み、表示制御部２１８は、図６３の左から１番目に示したように、ビューワ５１に、デフォルトのサイズで、フレームバッファ２１８Ａ（図４３）に記憶された画像データに対応する画像を表示させる。
【０８４７】
また、ステップＳ３９１において、注目フレームの表示タイプが、通常タイプV2であると判定された場合、ステップＳ３９３に進み、表示制御部２１８は、図６３の左から２番目に示したように、ビューワ５１に、デフォルトのサイズの1.5倍のサイズで、フレームバッファ２１８Ａに記憶された画像データに対応する画像を表示させる。
【０８４８】
また、ステップＳ３９１において、注目フレームの表示タイプが、高表示レート低解像度タイプV3であると判定された場合、ステップＳ３９４に進み、表示制御部２１８は、図６３の左から３番目に示したように、ビューワ５１に、デフォルトのサイズの2倍のサイズで、フレームバッファ２１８Ａに記憶された画像データに対応する画像を表示させる。
【０８４９】
なお、画像をデフォルトのサイズより大きいサイズで表示する場合には、ビューワ５１のサイズも大きくなり、その結果、ビューワ５１がデフォルトのサイズで表示されている場合に見える編集ウインドウ３０１の領域の一部が、サイズが大きくなったビューワ５１に隠れて見えなくなる。そこで、ビューワ５１のサイズを大きくする場合には、そのビューワ５１としての画像は、例えば、半透明にして表示することが可能である。この場合、ビューワ５１がデフォルトのサイズで表示されている場合に見える編集ウインドウ３０１の領域の一部が、サイズが大きくなったビューワ５１に隠れて見えなくなることを防止することができる。
【０８５０】
また、ビューワ５１（に表示される画像）のサイズは、スクラブつまみ５４が操作されている間（例えば、ドラッグされている間）だけ、上述のように表示タイプに応じて変更し、スクラブつまみ５４の操作が停止された場合には、デフォルトのサイズとすることができる。
【０８５１】
さらに、以上のような画像のサイズの変更は、注目フレームの表示タイプに応じて行う他、例えば、ユーザによるスクラブつまみ５４の操作に応じて行うことが可能である。
【０８５２】
即ち、ユーザは、一般に、所望の画像を探す場合において、ビューワ５１に表示される画像に、それほど注目していないときには、スクラブつまみ５４を速く移動させるように操作し、逆に、注目しているときには、スクラブつまみ５４をゆっくり移動させるように操作する。
【０８５３】
そこで、スクラブつまみ５４が速く移動されている場合には、画像を、デフォルトのサイズで表示し、スクラブつまみ５４がゆっくり移動されている場合には、画像を、デフォルトのサイズよりも大きいサイズで表示することができる。このようにすることで、ユーザは、所望の画像を探しやすくなる。
【０８５４】
また、図６３では、ビューワ５１全体、従って、スクラブバー５３も、サイズが変更されているが、スクラブバー５３の操作中に、スクラブバー５３のサイズが変更されると、操作しにくくなるおそれがあるので、スクラブバー５３のサイズは、変更しないようにすること（例えば、ビューワ５１の表示部５２（図３）のみのサイズを変更すること）が望ましい。
【０８５５】
以上、本発明を、スクラブを行う場合について説明したが、本発明は、スクラブ以外の変速再生（ｎ倍速再生）を行う場合にも適用可能である。
【０８５６】
なお、本実施の形態では、ビューワ５１に表示するフレームを指定するときに操作される手段として、スクラブつまみ５４を有するスクラブバー５３を採用し、スクラブつまみ５４の位置によって、ビューワ５１に表示するフレームを指定するようにしたが、ビューワ５１に表示するフレームの指定は、その他、例えば、いわゆる（GUIではなくて実物の）ジョグダイヤルやシャトルリング等を操作することによって行うことが可能である。
【０８５７】
また、本実施の形態では、動画の画像データの変化の程度を表す変化量（動き情報、細かさ情報）をフレームごとに求め、その変化量に基づき、表示タイプをフレームごとに決定し、その表示タイプを用いて、スクラブに関する各種の処理を行うようにしたが、表示タイプは、その他、例えば、動画に音声データが付随する場合には、その音声データのレベル（パワー）そのものや、その変化の程度を表す値に基づいて決定することが可能である。即ち、例えば、音声データのレベルが、小から大に変化する（音声の盛り上がりがある）フレームでは、注目すべきシーンの画像が映っている可能性が高いので、音声データのレベルが小から大に変化するフレームの表示タイプとしては、例えば、動き情報がある程度大であれば、表示レートが高い表示タイプを決定し、また、例えば、細かさ情報がある程度大であれば、解像度が高い表示タイプを決定するようにすることができる。
【０８５８】
さらに、本実施の形態では、光ディス７が、本線データとプロキシデータとが記録されるプロフェッショナルディスクであるとして、光ディスク７に記録された本線データとプロキシデータ、即ち、２種類の解像度の画像データを用いて、スクラブを行うようにしたが、スクラブは、その他、例えば、１種類の解像度、または３種類以上の解像度の画像データを用いて行うことが可能である。
【０８５９】
また、本実施の形態では、図２２の表示タイプ決定部９３において（図４４の表示タイプ決定部２３３でも同様）、シークの問題に対処するために、変化量がある閾値以上またはある閾値未満のフレームが最小限度フレーム数N以上連続するか否かの判定（連続性の判定）を行うようにしたが、シークの問題に対処する必要がなければ、連続性の判定を行わずに、変化量がある閾値以上またはある閾値未満であるかどうかによって、表示タイプを決定することができる。
【０８６０】
さらに、本実施の形態では、フレームごとに変化量を求め、フレームごとの変化量に基づき、フレームごとに表示タイプを決定するようにしたが、変化量は、その他、複数フレームごとに求めることが可能である。同様に、表示タイプも、複数フレームごとに求めることが可能である。
【０８６１】
即ち、図６５は、複数フレームとしての、例えば、1GOPを構成するフレームごと（単位）の変化量を示している。なお、図６５において、横軸はフレームを表し、縦軸は変化量を表す。
【０８６２】
図６５では、太線が、1GOPを構成するフレームごとの変化量を示している。1GOPを構成するフレームごとの変化量としては、例えば、その1GOPを構成するすべてのフレームの変化量の平均値や、1GOPを構成するフレームのうちのIピクチャの変化量などを採用することができる。
【０８６３】
図６５に示したように、1GOPを構成するフレームごとの変化量を求める場合には、その変化量に基づき、フレームごとの変化量からフレームごとの表示タイプを決定した場合と同様にして、1GOPを構成するフレームごと（単位）の表示タイプを決定することができる。
【０８６４】
また、複数フレームとしての、例えば、1GOPを構成するフレームごとの表示タイプは、1GOPを構成するフレームごとの変化量に基づいて決定する他、フレームごとの変化量に基づいて決定することが可能である。
【０８６５】
即ち、図６６は、フレームごとの変化量と、フレームごとの表示タイプとの両方が格納されたFyファイルを示している。
【０８６６】
例えば、いま、1GOPが１５フレームで構成されるとすると、1GOPを構成する１５フレームごとの表示タイプは、例えば、その1GOPを構成する１５フレームにおいて最も割合が多い表示タイプに決定することができる。
【０８６７】
この場合、例えば、図６６のFyファイルに示した先頭から１番目のフレームから１５番目のフレームで構成される1GOPでは、フレームごとの表示タイプV1,V2,V3の中で、表示タイプV2の割合が最も多いので、その1GOPの表示タイプはV2に決定される。
【０８６８】
例えば、図６６のFyファイルに示した先頭から９番目のフレームについては、フレームごとの表示タイプはV1となるが、1GOPごとの表示タイプはV2となる。
【０８６９】
以上のように、変化量や表示タイプを、複数フレームとしての、例えば、1GOPを構成するフレームごと求めて（決定して）、Fyファイルに格納する場合には、フレームごとの変化量や表示タイプをFyファイルに格納する場合に比較して、Fyファイルの容量（ファイルサイズ）を小さくすることができ、また、Fyファイルの解析（ファイルパース）に要する処理の負担を軽減することができる。
【０８７０】
なお、Fyファイルの作成時に、画像データをMPEG方式で符号化する場合において、1GOPを構成するフレームごとの変化量や表示タイプを求めるときには、その変化量や表示タイプは、MPEG方式での符号化の結果得られるストリーム中のGOPヘッダに含めるようにすることができる。
【０８７１】
ここで、本実施の形態では、画像データをMPEG方式で符号化して、光ディスク７に記録するため、図４３の編集システムのデコーダ２１６では、画像データを、MPEG方式で復号する必要がある。MPEG方式では、例えば、１５フレームを1GOPとして、各フレームが、I(Intra)ピクチャ、P(Predictive)ピクチャ、またはB(Bidirectionally Predictive )ピクチャのうちのいずれかのピクチャタイプのピクチャとして符号化される。そして、I,P,Bピクチャのうちの、PピクチャとBピクチャとは、それらより先に符号化されるIまたはPピクチャを参照画像（予測画像を生成するベースになる画像）として符号化されるため、その参照画像を復号した後でなければ復号することができない。
【０８７２】
即ち、例えば、いま、1GOPが１５フレームで構成されることとし、その１５フレームの各フレームを、ピクチャタイプを示すI,P、またはBと、表示順を示す数字とで表すこととすると、1GOPの１５フレームの並びは、例えば、B1,B2,I3,B4,B5,P6,B7,B8,P9,B10,B11,P12,B13,B14,P15と表すことができる。
【０８７３】
いま、上述のような１５フレームB1乃至P15からなるGOPのうちの、例えば、先頭から６番目のPピクチャP6が、３番目のIピクチャI3を参照画像として符号化され、９番目のPピクチャP9が、６番目のPピクチャP6を参照画像として符号化され、１２番目のPピクチャP12が、９番目のPピクチャP9を参照画像として符号化され、１５番目のPピクチャP15が、１２番目のPピクチャP12を参照画像として符号化されたとする。さらに、１３番目のBピクチャB13が、１２番目のPピクチャP12と１５番目のPピクチャP15とを参照画像として符号化されたとする。
【０８７４】
この場合、例えば、１３番目のBピクチャB13が、ビューワ１５に表示する注目フレームとなると、３番目のIピクチャI3を復号し、６番目のPピクチャP6を、３番目のIピクチャI3を参照して復号し、９番目のPピクチャP9を、６番目のPピクチャP6を参照して復号し、１２番目のPピクチャP12を、９番目のPピクチャP9を参照して復号し、１５番目のPピクチャP15を、１２番目のPピクチャP12を参照して復号した後でなければ、１２番目のPピクチャP12と１５番目のPピクチャP15とを参照することができないので、１３番目のBピクチャB13を復号することができない。従って、BピクチャB13の復号に時間を要することとなる。
【０８７５】
そこで、他のピクチャの復号に参照されるPピクチャP6,P9,P12,P15を、それぞれ、IピクチャI6,I9,I12,I15として、P-to-Iファイルと呼ばれる別ファイルに格納しておき、デコーダ２１６においては、そのP-to-Iファイルに格納されたピクチャを必要に応じて参照して復号を行うことができる。この場合、例えば、BピクチャB13は、P-to-Iファイルに格納されたIピクチャI12とI15とを参照し、短時間で復号することができる。
【０８７６】
なお、上述した一連の処理のうちの、CPU２２（図２）がプログラムを実行することによって行われる処理は、可能な範囲で、専用のハードウェアにより行うことができる。
【０８７７】
また、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０８７８】
【図１】本発明を適用したデータ処理システムの一実施の形態の構成例を示すブロック図である。
【図２】PC１のハードウェアの構成例を示すブロック図である。
【図３】ビューワ５１の表示例を示す図である。
【図４】カメラ６の構成例を示すブロック図である。
【図５】AVファイル作成部７５の構成例を示すブロック図である。
【図６】Fyファイル作成部７６の構成例を示すブロック図である。
【図７】データ縮小部９１の処理を説明するための図である。
【図８】Fyファイル作成処理を説明するフローチャートである。
【図９】変化量算出部９２の構成例を示すブロック図である。
【図１０】動き情報算出部１０１において求められるフレーム単位の動き情報を説明する図である。
【図１１】動き情報算出部１０１の構成例を示すブロック図である。
【図１２】動き情報算出部１０１の処理を説明する図である。
【図１３】動き情報算出部１０１の他の構成例を示すブロック図である。
【図１４】動き情報算出部１０１の処理を説明する図である。
【図１５】細かさ情報算出部１０２の構成例を示すブロック図である。
【図１６】細かさ情報算出部１０２の処理を説明する図である。
【図１７】細かさ情報算出部１０２の他の構成例を示すブロック図である。
【図１８】平均値算出部１４１の処理を説明する図である。
【図１９】変化量算出部９２で求められるフレームごとの変化量を示す図である。
【図２０】表示タイプの例を説明する図である。
【図２１】表示タイプ決定部９３がフレーム単位で決定する表示タイプを説明する図である。
【図２２】表示タイプ決定部９３の構成例を示すブロック図である。
【図２３】表示タイプ決定処理を説明するフローチャートである。
【図２４】表示タイプ決定処理を説明するフローチャートである。
【図２５】フレーム単位の変化量を示す図である。
【図２６】Fyファイルの例を示す図である。
【図２７】表示タイプの例を説明する図である。
【図２８】フレーム単位の動き情報と表示タイプとを示す図である。
【図２９】表示タイプ決定処理を説明するフローチャートである。
【図３０】表示タイプ決定処理を説明するフローチャートである。
【図３１】表示タイプの例を説明する図である。
【図３２】フレーム単位の細かさ情報と表示タイプとを示す図である。
【図３３】表示タイプ決定処理を説明するフローチャートである。
【図３４】表示タイプ決定処理を説明するフローチャートである。
【図３５】Fyファイルの例を示す図である。
【図３６】Fyファイルの例を示す図である。
【図３７】Fyファイルの例を示す図である。
【図３８】表示タイプの例を説明する図である。
【図３９】動き情報および細かさ情報と表示タイプとを示す図である。
【図４０】表示タイプ決定処理を説明するフローチャートである。
【図４１】Fyファイルの例を示す図である。
【図４２】ドライブ５の構成例を示すブロック図である。
【図４３】編集システムとして機能するPC１の機能的構成例を示すブロック図である。
【図４４】Fyファイル管理部２１４と表示タイプ取得部２１５との構成例を示すブロック図である。
【図４５】スクラブつまみ５４の位置と、その位置によって指定されるフレームとの関係について説明する図である。
【図４６】通常タイプV2と高表示レート低解像度タイプV3のフレームそれぞれのスクラブでの表示方法を示す図である。
【図４７】表示タイプが静止画タイプV1のフレームの表示を説明する図である。
【図４８】スクラブの処理を説明するフローチャートである。
【図４９】編集ウインドウ３０１の表示例を示す図である。
【図５０】GUI表示処理を説明するフローチャートである。
【図５１】Fyファイル表示部３１１の表示例を示す図である。
【図５２】閾値HまたはLが変更されるのに伴って表示し直されるタイプ情報を示す図である。
【図５３】GUI表示処理を説明するフローチャートである。
【図５４】Fyファイル表示部３１１の表示例を示す図である。
【図５５】Fyファイル表示部３１１の表示例を示す図である。
【図５６】GUI表示処理を説明するフローチャートである。
【図５７】指定区間の区間長に重み付けをする重みの例を示す図である。
【図５８】指定区間の区間長に重み付けをする重みの例を示す図である。
【図５９】区間長に重み付けをしない場合と、重み付けをする場合それぞれの指定区間を示す図である。
【図６０】区間長に関する処理を説明するフローチャートである。
【図６１】Fyファイル表示部３１１の表示例を示す図である。
【図６２】割り当て範囲設定処理を説明するフローチャートである。
【図６３】ビューワ５１の表示例を示す図である。
【図６４】表示処理を説明するフローチャートである。
【図６５】1GOPを構成するフレームごとの変化量を示す図である。
【図６６】1GOPを構成するフレームごとの表示タイプを決定する方法を説明する図である。
【符号の説明】
【０８７９】
１  PC，  ２  キーボード，  ３  マウス，  ４  ハードディスク，  ５  ドライブ，  ６  カメラ，  ７  光ディスク，  ２１  バス，  ２２  CPU，  ２３  ROM，  ２４  RAM，  ２５  ハードディスク，  ２６  出力部，  ２７  入力部，  ２８  通信部，  ２９  ドライブ，  ３０  入出力インタフェース，  ３１  リムーバブル記録媒体，  ４１  ディスプレイ，  ４２  スピーカ，  ５１  ビューワ，  ５２  表示部，  ５３  スクラブバー，  ５４  スクラブつまみ，  ５５  タイムコード表示部，  ５６  操作部，  ７１  撮像部，  ７２  画像処理部，  ７３  マイク，  ７４  音声処理部，  ７５  AVファイル作成部，  ７６  Fyファイル作成部，  ７７  記録部／通信部，  ８１  本線エンコーダ，  ８１Ａ  本線音声エンコーダ，  ８１Ｖ  本線画像エンコーダ，  ８２  プロキシエンコーダ，  ８２Ａ  プロキシ音声エンコーダ，  ８２Ｖ  プロキシ画像エンコーダ，  ８３  ファイル作成部，  ９１  データ縮小部，  ９２  変化量算出部，  ９３  表示タイプ決定部，  ９４  選択部，  ９５  ファイル作成部，  １０１  動き情報算出部，  １０２  細かさ情報算出部，  １１１  動きベクトル検出部，  １１２  統計量算出部，  １２１  ヒストグラム作成部，  １２２  ヒストグラム記憶部，  １２３  差分演算部，  １３１  DCT変換部，  １３２  重み係数算出部，  １３３  積算部，  １４１  平均値算出部，  １４２  差分値演算部，  １４３  積算部，  １６１  記憶部，  １６２  閾値処理部，  １６３  連続性判定部，  １６４  決定部，  １８１  記録部／再生部，  １８２  デコーダ，  １８３  Fyファイル作成部，  １８４  外部I/F，  ２０１  編集制御部，  ２１１  GUI制御部，  ２１２  ストリーム復号位置検出部，  ２１３  データ供給制御部，  ２１４  Fyファイル管理部，  ２１５  表示タイプ取得部，  ２１６  デコーダ，  ２１６Ａ  メモリ制御部，  ２１７  Fyファイル作成部，  ２１８  表示制御部，  ２１８Ａ  フレームバッファ，  ２２１  ストリームメモリ制御部，  ２２２  ストリーム用メモリ，  ２３１  ファイル記憶部，  ２３２  変化量取得部，  ２３３  表示タイプ決定部，  ２３４  表示タイプ書き込み部，  ２４１  記憶部，  ２４２  閾値処理部，  ２４３  連続性判定部，  ２４４  決定部，  ３１１  Fyファイル表示部，  ３１２  位置インジケータ，  ３１３Ｈ，３１３Ｌ  閾値インジケータ，  ３２１  グラフ表示部，  ３２２  タイプ情報表示部，  ３３１  動き情報タブ，  ３３２  細かさ情報タブ，  ３３３  全情報タブ，  ３５１Ｅ，３５１Ｓ  範囲指定インジケータ
【図１】
0004613851.tif 000002
【図２】
0004613851.tif 000003
【図３】
0004613851.tif 000004
【図４】
0004613851.tif 000005
【図５】
0004613851.tif 000006
【図６】
0004613851.tif 000007
【図７】
0004613851.tif 000008
【図８】
0004613851.tif 000009
【図９】
0004613851.tif 000010
【図１０】
0004613851.tif 000011
【図１１】
0004613851.tif 000012
【図１２】
0004613851.tif 000013
【図１３】
0004613851.tif 000014
【図１４】
0004613851.tif 000015
【図１５】
0004613851.tif 000016
【図１６】
0004613851.tif 000017
【図１７】
0004613851.tif 000018
【図１８】
0004613851.tif 000019
【図１９】
0004613851.tif 000020
【図２０】
0004613851.tif 000021
【図２１】
0004613851.tif 000022
【図２２】
0004613851.tif 000023
【図２３】
0004613851.tif 000024
【図２４】
0004613851.tif 000025
【図２５】
0004613851.tif 000026
【図２６】
0004613851.tif 000027
【図２７】
0004613851.tif 000028
【図２８】
0004613851.tif 000029
【図２９】
0004613851.tif 000030
【図３０】
0004613851.tif 000031
【図３１】
0004613851.tif 000032
【図３２】
0004613851.tif 000033
【図３３】
0004613851.tif 000034
【図３４】
0004613851.tif 000035
【図３５】
0004613851.tif 000036
【図３６】
0004613851.tif 000037
【図３７】
0004613851.tif 000038
【図３８】
0004613851.tif 000039
【図３９】
0004613851.tif 000040
【図４０】
0004613851.tif 000041
【図４１】
0004613851.tif 000042
【図４２】
0004613851.tif 000043
【図４３】
0004613851.tif 000044
【図４４】
0004613851.tif 000045
【図４５】
0004613851.tif 000046
【図４６】
0004613851.tif 000047
【図４７】
0004613851.tif 000048
【図４８】
0004613851.tif 000049
【図４９】
0004613851.tif 000050
【図５０】
0004613851.tif 000051
【図５１】
0004613851.tif 000052
【図５２】
0004613851.tif 000053
【図５３】
0004613851.tif 000054
【図５４】
0004613851.tif 000055
【図５５】
0004613851.tif 000056
【図５６】
0004613851.tif 000057
【図５７】
0004613851.tif 000058
【図５８】
0004613851.tif 000059
【図５９】
0004613851.tif 000060
【図６０】
0004613851.tif 000061
【図６１】
0004613851.tif 000062
【図６２】
0004613851.tif 000063
【図６３】
0004613851.tif 000064
【図６４】
0004613851.tif 000065
【図６５】
0004613851.tif 000066
【図６６】
0004613851.tif 000067