(57)【要約】【課題】複数の連続した画像の中からユーザが望むシーンを見つけて再生表示する。【解決手段】制御部３２に画像分析部５１ａ、グラフ作成部５１ｂ、表示制御部５１ｃを設ける。画像分析部５１ａは、再生対象とする各画像の視覚特性を分析する。グラフ作成部５１ｂは、画像分析部５１ａによって分析された各画像の視覚特性を相関的に表わす特性グラフを作成する、表示制御部５１ｃは、グラフ作成部５１ｂによって作成された特性グラフを表示部に表示すると共に、特性グラフ上の任意の位置が指定された際に、その指定位置に対応した視覚特性を有する画像を表示部に表示する。これにより、再生対象とする各画像の視覚特性をグラフ化して、その中から所望のシーンを探して再生表示することができる。【選択図】      図３
2008242812.tif 000002
【特許請求の範囲】
【請求項１】
複数の連続した画像を記憶する画像記憶手段と、
この画像記憶手段に記憶された各画像を表示するための表示手段と、
前記各画像の視覚特性を分析する画像分析手段と、
この画像分析手段によって分析された前記各画像の視覚特性を相関的に表わす特性グラフを作成するグラフ作成手段と、
このグラフ作成手段によって作成された特性グラフを前記表示手段に表示すると共に、前記特性グラフ上の任意の位置が指定された際に、その指定位置の視覚特性に対応した画像を前記表示手段に表示する表示制御手段と
を具備したことを特徴とする画像再生装置。
【請求項２】
前記視覚特性とは色情報であり、
前記グラフ作成手段は、前記各画像の色情報を相関的に表わす特性グラフを作成することを特徴とする請求項１記載の画像再生装置。
【請求項３】
グラフ化する色情報を指定するグラフ色指定手段を備え、
前記グラフ作成手段は、前記グラフ色指定手段によって指定された色情報に関する特性グラフを作成することを特徴とする請求項２記載の画像再生装置。
【請求項４】
前記色情報には、Ｒ，Ｇ，Ｂ，Ｃ，Ｙ，Ｍ，又はＷの何れか１色が含まれることを特徴とする請求項２または３記載の画像再生装置。
【請求項５】
前記視覚特性とは輝度情報であり、
前記グラフ作成手段は、前記各画像の輝度情報を相関的に表わす特性グラフを作成することを特徴とする請求項１記載の画像再生装置。
【請求項６】
グラフ種類を指定するグラフ種類指定手段を備え、
前記グラフ作成手段は、前記グラフ種類指定手段によって指定された種類の特性グラフを作成することを特徴とする請求項１記載の画像再生装置。
【請求項７】
前記グラフ種類には、折れ線グラフ、棒グラフ、又は帯グラフの何れか１つが含まれることを特徴とする請求項６記載の画像再生装置。
【請求項８】
前記グラフ作成手段は、前記画像分析手段によって得られた分析データを当該各画像に関連付けて記憶しておき、次回同じ画像の視覚特性をグラフ化する際にこれを参照することを特徴とする請求項１記載の画像再生装置。
【請求項９】
前記画像記憶手段に記憶された各画像は、動画像であることを特徴とする請求項１記載の画像再生装置。
【請求項１０】
前記画像記憶手段に記憶された各画像は、複数の静止画であることを特徴とする請求項１記載の画像再生装置。
【請求項１１】
前記表示手段は、第１の表示手段と第２の表示手段を備え、
前記第１の表示手段は、前記複数の連続した画像を表示し、
前記第２の表示手段は、前記特性グラフを表示する
ことを特徴とする請求項１記載の画像再生装置。
【請求項１２】
前記表示手段で表示している画像に対応した前記特性グラフの対応位置記号を示す位置表示手段を備え、
前記表示制御手段は、前記位置表示手段で表示している前記特性グラフの対応位置記号を移動することにより前記特性グラフ上の任意の位置を指定する
ことを特徴とする請求項１記載の画像再生装置。
【請求項１３】
前記表示手段は、画像記憶手段に記憶された画像と、前記特性グラフを同時に表示することを特徴とする請求項１記載の画像再生装置。
【請求項１４】
複数の連続した画像を再生対象とし、これらの画像を表示装置に表示するコンピュータによって実行されるプログラムであって、
前記コンピュータに、
前記各画像の視覚特性を分析処理する機能と、
前記分析処理によって得られた前記各画像の視覚特性を相関的に表わす特性グラフを作成する機能と、
前記特性グラフを前記表示装置に表示すると共に、前記特性グラフ上の任意の位置が指定された際に、その指定位置の視覚特性に対応した画像を前記表示装置に表示する機能と
を実現させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えばデジタルカメラ等の撮像装置に用いて好適な画像再生装置に係り、特に複数の連続した画像を再生表示する場合に用いて好適な画像再生装置及びプログラムに関する。
【背景技術】
【０００２】
通常、デジタルカメラ等の撮像装置では、静止画や動画の撮影機能を備えると共に、その撮影された画像をモニタ画面に再生表示するための再生機能を備える。ここで、動画像を再生する際に、その動画像を構成する各シーンの中で画像の特徴的変化の大きいシーンを選択的にサムネイル化し、これらを時系列順に表示する方法がある（例えば、特許文献１参照）。
【特許文献１】特開２００５−２７７８４７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
上述したような方法によれば、動画像を再生表示する前に、時系列に並べられたサムネイル画像から当該動画像の内容を把握することができる。しかしながら、全てのシーンをサムネイル化することはできないので、その中からユーザが望むシーンを見つけて再生表示することはできない。
【０００４】
本発明は前記のような点に鑑みなされたもので、複数の連続した画像の中からユーザが望むシーンを見つけて再生表示することのできる画像再生装置及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００５】
本発明の請求項１に係る画像再生装置は、複数の連続した画像を記憶する画像記憶手段と、この画像記憶手段に記憶された各画像を表示するための表示手段と、前記各画像の視覚特性を分析する画像分析手段と、この画像分析手段によって分析された前記各画像の視覚特性を相関的に表わす特性グラフを作成するグラフ作成手段と、このグラフ作成手段によって作成された特性グラフを前記表示手段に表示すると共に、前記特性グラフ上の任意の位置が指定された際に、その指定位置の視覚特性に対応した画像を前記表示手段に表示する表示制御手段とを具備したことを特徴とする。
【０００６】
本発明の請求項２は、請求項１記載の画像再生装置において、前記視覚特性とは色情報であり、前記グラフ作成手段は、前記各画像の色情報を相関的に表わす特性グラフを作成することを特徴とする。
【０００７】
本発明の請求項３は、請求項２記載の画像再生装置において、グラフ化する色情報を指定するグラフ色指定手段を備え、前記グラフ作成手段は、前記グラフ色指定手段によって指定された色情報に関する特性グラフを作成することを特徴とする。
【０００８】
本発明の請求項４は、請求項２または３記載の画像再生装置において、前記色情報には、Ｒ，Ｇ，Ｂ，Ｃ，Ｙ，Ｍ，又はＷの何れか１色が含まれることを特徴とする。
【０００９】
本発明の請求項５は、請求項１記載の画像再生装置において、前記視覚特性とは輝度情報であり、前記グラフ作成手段は、前記各画像の輝度情報を相関的に表わす特性グラフを作成することを特徴とする。
【００１０】
本発明の請求項６は、請求項１記載の画像再生装置において、グラフ種類を指定するグラフ種類指定手段を備え、前記グラフ作成手段は、前記グラフ種類指定手段によって指定された種類の特性グラフを作成することを特徴とする。
【００１１】
本発明の請求項７は、請求項６記載の画像再生装置において、前記グラフ種類には、折れ線グラフ、棒グラフ、又は帯グラフの何れか１つが含まれることを特徴とする。
【００１２】
本発明の請求項８は、請求項１記載の画像再生装置において、前記グラフ作成手段は、前記画像分析手段によって得られた分析データを当該各画像に関連付けて記憶しておき、次回同じ画像の視覚特性をグラフ化する際にこれを参照することを特徴とする。
【００１３】
本発明の請求項９は、請求項１記載の画像再生装置において、前記画像記憶手段に記憶された各画像は、動画像であることを特徴とする。
【００１４】
本発明の請求項１０は、請求項１記載の画像再生装置において、前記画像記憶手段に記憶された各画像は、複数の静止画であることを特徴とする。
【００１５】
本発明の請求項１１は、請求項１記載の画像再生装置において、前記表示手段は、第１の表示手段と第２の表示手段を備え、前記第１の表示手段は、前記複数の連続した画像を表示し、前記第２の表示手段は、前記特性グラフを表示することを特徴とする。
【００１６】
本発明の請求項１２は、請求項１記載の画像再生装置において、前記表示手段で表示している画像に対応した前記特性グラフの対応位置記号を示す位置表示手段を備え、前記表示制御手段は、前記位置表示手段で表示している前記特性グラフの対応位置記号を移動することにより前記特性グラフ上の任意の位置を指定することを特徴とする。
【００１７】
本発明の請求項１３は、請求項１記載の画像再生装置において、前記表示手段は、画像記憶手段に記憶された画像と、前記特性グラフを同時に表示することを特徴とする。
【００１８】
本発明の請求項１４に係るプログラムは、複数の連続した画像を再生対象とし、これらの画像を表示装置に表示するコンピュータによって実行されるプログラムであって、前記コンピュータに、前記各画像の視覚特性を分析処理する機能と、前記分析処理によって得られた前記各画像の視覚特性を相関的に表わす特性グラフを作成する機能と、前記特性グラフを前記表示装置に表示すると共に、前記特性グラフ上の任意の位置が指定された際に、その指定位置の視覚特性に対応した画像を前記表示装置に表示する機能とを実現させることを特徴とする。
【発明の効果】
【００１９】
本発明によれば、複数の連続した画像の視覚特性をグラフ化することで、複数の連続した画像の中からユーザが望むシーンを見つけて再生表示することができる。
【発明を実施するための最良の形態】
【００２０】
以下、図面を参照して本発明の実施形態を説明する。
【００２１】
図１は本発明の一実施形態に係る撮像装置としてデジタルカメラを例にした場合の外観構成を示す図であり、図１（ａ）は主に前面の構成、同図（ｂ）は主に背面の構成を示す斜視図である。
【００２２】
このデジタルカメラ１は、略矩形の薄板状のカメラ本体２の前面に、撮影レンズ３、セルフタイマランプ４、光学ファインダ窓５、ストロボ発光部６、マイクロホン部７などを有し、上面の（ユーザにとって）右端側には電源キー８及びシャッタキー９などが設けられている。
【００２３】
電源キー８は、電源のオン／オフ毎に操作するキーであり、シャッタキー９は、撮影時に撮影タイミングを指示するキーである。
【００２４】
また、デジタルカメラ１の背面には、撮影モード（Ｒ）キー１０、再生モード（Ｐ）キー１１、光学ファインダ１２、スピーカ部１３、マクロキー１４、ストロボキー１５、メニュー（ＭＥＮＵ）キー１６、リングキー１７、セット（ＳＥＴ）キー１８、ディスプレイキー（ＤＩＳＰ）１９、表示部２０などが設けられている。
【００２５】
撮影モードキー１０は、電源オフの状態から操作することで自動的に電源オンとして静止画の撮影モードに移行する一方で、電源オンの状態から繰返し操作することで、静止画モード、動画モードを循環的に設定する。静止画モードは、静止画を撮影するためのモードである。また、動画モードは、動画を撮影するためのモードである。再生モードキー１１は、電源オフの状態から操作することで自動的に電源オンとして再生モードに移行する。
【００２６】
光学ファインダ１２は、撮影時にユーザが撮影対象となる被写体を光学的に確認するためのものである。スピーカ部１３は、音声を出力する。マクロキー１４は、静止画の撮影モードで通常撮影とマクロ撮影とを切換える際に操作する。ストロボキー１５は、ストロボ発光部６の発光モードを切換える際に操作する。
【００２７】
メニューキー１６は、各種メニュー項目等を選択する際に操作する。リングキー１７は、上下左右方向の項目選択用のカーソルキーが一体に形成されたものであり、このリングキー１７の中央に位置するセットキー１８は、その時点で選択されている項目を設定する際に操作する。
【００２８】
また、ディスプレイキー（ＤＩＳＰ）１９は、表示モードの切り替えを指示するためのキーである。本実施形態では、このディスプレイキー１９を後述するグラフ表示の指示キーとして用いる。
【００２９】
表示部２０は、バックライト付きのカラー液晶パネルで構成される。この表示部２０は、撮影モード時には電子ファインダとしてスルー画像のモニタ表示を行う一方で、再生モード時には選択した画像等を再生表示する。
【００３０】
なお、図示はしないがデジタルカメラ１の底面には、記録媒体として用いられるメモリカードを着脱するためのメモリカードスロットや、外部のパーソナルコンピュータ等と接続するためのシリアルインタフェースコネクタとして、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）コネクタ等が設けられている。
【００３１】
図２はデジタルカメラ１の電子回路構成を示すブロック図である。
【００３２】
このデジタルカメラ１には、前記撮影レンズ３を構成する図示せぬフォーカスレンズおよびズームレンズを含むレンズ光学系２２がモータ２１の駆動により光軸方向に所定の範囲内で移動可能に設けられている。このレンズ光学系２２の光軸後方に撮像素子であるＣＣＤ２３が配設されている。ＣＣＤ２３は、撮影レンズ３を通過する光を受光し、その受光量に応じた画像データを取得する。
【００３３】
基本モードである記録モード時において、ＣＣＤ２３がタイミング発生器（ＴＧ）２４、ドライバ２５によって走査駆動され、一定周期毎に結像した光像に対応する光電変換出力を１画面分出力する。
【００３４】
このＣＣＤ２３の光電変換出力は、アナログ値の信号の状態でＲＧＢの各原色成分毎に適宜ゲイン調整された後に、サンプルホールド回路２６でサンプルホールドされ、Ａ／Ｄ変換器２７でデジタルデータに変換される。そして、カラープロセス回路２８において、画素補間処理及びγ補正処理を含むカラープロセス処理が行われて、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒが生成され、ＤＭＡ（Ｄｉｒｅｃｔ  Ｍｅｍｏｒｙ  Ａｃｃｅｓｓ）コントローラ２９に出力される。
【００３５】
ＤＭＡコントローラ２９は、カラープロセス回路２８から出力される複合同期信号、メモリ書込みイネーブル信号、及びクロック信号に従って、前記輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒを一旦内部のバッファに書き込んだ後、ＤＲＡＭインタフェース（Ｉ／Ｆ）３０を介してＤＲＡＭ３１にＤＭＡ転送する。
【００３６】
制御部３２は、デジタルカメラ１全体の制御を行う。この制御部３２は、ＣＰＵと、このＣＰＵで実行されるプログラムなどを記憶したＲＯＭ、及びワークメモリとして使用されるＲＡＭなどを含むマイクロコンピュータにより構成される。
【００３７】
制御部３２は、ＤＲＡＭ３１からＤＲＡＭインタフェース３０を介して前記輝度及び色差信号を読み出した後、ＶＲＡＭコントローラ３３を介してＶＲＡＭ３４に書き込む。デジタルビデオエンコーダ３５は、前記輝度及び色差信号をＶＲＡＭコントローラ３３を介してＶＲＡＭ３４より定期的に読み出し、これらのデータを元にビデオ信号を発生して表示部２０に出力する。
【００３８】
表示部２０は、撮影時にはモニタ表示部（電子ファインダ）として機能する。この表示部２０は、デジタルビデオエンコーダ３５からのビデオ信号に基づいた表示を行うことで、その時点でＶＲＡＭコントローラ３３から取込んでいる画像情報に基づく画像をリアルタイムに表示する。
【００３９】
このように、表示部２０にその時点での画像がモニタ画像としてリアルタイムに表示されている状態で、例えば静止画撮影を行いたいタイミングでシャッタキー９を押下操作すると、トリガ信号が発生する。
【００４０】
制御部３２は、このトリガ信号に応じて、その時点でＣＣＤ２３から取込んでいる１画面分の輝度及び色差信号のＤＲＡＭ３１へのＤＭＡ転送の終了後、直ちにＣＣＤ２３からのＤＲＡＭ３１への経路を停止し、記録保存の状態に遷移する。
【００４１】
この記録保存の状態では、制御部３２がＤＲＡＭ３１に書き込まれている１フレーム分の輝度及び色差信号をＤＲＡＭインタフェース３０を介してＹ，Ｃｂ，Ｃｒの各コンポーネント毎に縦８画素×横８画素の基本ブロックと呼称される単位で読み出して、画像処理部３７の内部に存在するＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈ  ｃｏｄｉｎｇ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）処理ブロックに書き込む。画像処理部３７は、ＡＤＣＴ（Ａｄａｐｔｉｖｅ  Ｄｉｓｃｒｅｔｅ  Ｃｏｓｉｎｅ  Ｔｒａｎｓｆｏｒｍ：適応離散コサイン変換）、エントロピ符号化方式であるハフマン符号化等の処理によりデータ圧縮する。
【００４２】
制御部３２は、前記データ圧縮により得られた符号データを１画像のデータファイルとして画像処理部３７から読み出して記録用のメモリ３８に書き込む。このメモリ３８としては、予め本体に内蔵されたフラッシュメモリ等の内部メモリの他に、記録媒体として着脱自在に装着されるメモリカードなどを含む。１フレーム分の輝度及び色差信号の圧縮処理及びメモリ３８への全圧縮データの書込み終了に伴って、制御部３２はＣＣＤ２３からＤＲＡＭ３１への経路を再び起動する。
【００４３】
制御部３２には、さらに音声処理部３９、ＵＳＢインタフェース（Ｉ／Ｆ）４０、ストロボ駆動部４１が接続される。
【００４４】
音声処理部３９は、Ａ／Ｄ変換およびＤ／Ａ変換を含む音声データの入出力処理を行う。動画撮影時において、音声処理部３９は、動画データに同期させてマイクロホン部（ＭＩＣ）７より入力されたアナログの音声信号をデジタル化して取り込む。また、再生時において、音声処理部３９は、音声付き動画データから分離された音声データをアナログ化して、デジタルカメラ１の背面側に設けられたスピーカ部（ＳＰ）１３を通じて出力する。
【００４５】
ＵＳＢインタフェース４０は、ＵＳＢコネクタを介して有線接続されるパーソナルコンピュータ等の他の情報端末装置との間で画像データ、その他の送受を行う場合の通信制御を行う。ストロボ駆動部４１は、撮影時に図示せぬストロボ用の大容量コンデンサを充電した上で、制御部３２からの制御に基づいてストロボ発光部６を閃光駆動する。
【００４６】
なお、前記キー入力部３６は、上述したシャッタキー９の他に、電源キー８、撮影モードキー１０、再生モードキー１１、マクロキー１４、ストロボキー１５、メニューキー１６、リングキー１７、セットキー１８、ディスプレイキー１９などから構成される。これらのキー操作に伴う信号は直接制御部３２へ送出される。
【００４７】
また、静止画像ではなく動画像の撮影時においては、シャッタキー９が押下操作されたときに、画像処理部３７の内部に存在する動画処理ブロックで、ＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔ  Ｇｒｏｕｐ）またはｍｏｔｉｏｎ−ＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）などの手法によって撮影動画をデータ圧縮してメモリ３８へ記録する。再度シャッタキー９が操作されると、動画データの記録を終了する。
【００４８】
一方、基本モードである再生モード時には、制御部３２がメモリ３８に記録されている画像データを選択的に読み出し、画像処理部３７で記録モード時にデータ圧縮した手順と全く逆の手順で、圧縮されている画像データを伸長する。そして、この伸長した画像データをＤＲＡＭインタフェース３０を介してＤＲＡＭ３１に保持させた上で、このＤＲＡＭ３１の保持内容をＶＲＡＭコントローラ３３を介してＶＲＡＭ３４に記憶させ、このＶＲＡＭ３４より定期的に画像データを読み出してビデオ信号を発生し、表示部２０で再生出力させる。
【００４９】
選択した画像データが静止画像ではなく動画像であった場合には、制御部３２は、その動画データを構成する複数フレームの静止画データを時系列の順で順次再生して表示する。すべての静止画データの再生を終了した時点で、例えば、次に再生の指示がなされるまで先頭に位置する静止画データを表示するなどを行う。
【００５０】
図３は制御部３２の機能構成を示すブロック図である。
【００５１】
制御部３２を機能的に示すと、処理部５１と記憶部５２に分けられる。処理部５１はＣＰＵやＲＯＭ、記憶部５２はＲＯＭやＲＡＭなどに相当する。
【００５２】
本実施形態において、制御部３２の処理部５１は、画像分析部５１ａ、グラフ作成部５１ｂ、表示制御部５１ｃからなる。画像分析部５１ａは、再生対象とする各画像の視覚特性を分析する。「視覚特性」とは、ユーザが直感的に撮影シーンを連想できる特性のことを示し、具体的には画像の色情報と輝度情報のことである。グラフ作成部５１ｂは、画像分析部５１ａによって分析された各画像の視覚特性を相関的に表わす特性グラフを作成する。表示制御部５１ｃは、グラフ作成部５１ｂによって作成された特性グラフを表示部２０に表示すると共に、特性グラフ上の任意の位置が指定された際に、その指定位置に対応した視覚特性を有する画像を表示部２０に表示する。
【００５３】
また、記憶部５２は、プログラム記憶部５２ａ、設定データ記憶部５２ｂからなる。プログラム記憶部５２ａは、本発明を実現するためのプログラムを含む各種プログラムデータを記憶する。設定データ記憶部５２ｂは、グラフ作成に必要な各種設定データを記憶する。
【００５４】
次に、同実施形態の動作を説明する。
【００５５】
今、図４に示すような複数のシーンからなる動画像を再生表示する場合を想定する。図中の画像ａ，画像ｂ，画像ｃ…は、この動画像に含まれる特徴なシーンを時系列順に抜き出したものであり、例えば画像ａは緑の草原、画像ｂは赤い花、画像ｃは白い花のシーンをそれぞれ撮影したものである。
【００５６】
まず、動画再生に際し、図５に示すようなグラフ種類設定画面６１を通じてグラフの種類を設定しておく。このグラフ種類設定画面６１は、例えばメニューキー１６の操作によって表示部２０に表示される。図５の例では、「折れ線グラフ」、「棒グラフ」、「帯グラフ」の３種類が指定可能なグラフとして用意されている。このグラフ種類設定画面６１上でユーザがカーソルキー等の操作によって任意のグラフ種類を指定すると、その指定されたグラフ種類を示す設定データが制御部３２内に設けられた記憶部５２の設定データ記憶部５２ｂに記憶保持される。
【００５７】
ここで、ユーザが所定の操作により動画像の再生モードを指示すると、以下のような処理が実行される。
【００５８】
図６はデジタルカメラ１の動画再生時の処理動作を示すフローチャートである。なお、このフローチャートで示される処理は、プログラムコードの形態でプログラム記憶部５２ａに記憶されている。
【００５９】
すなわち、動画再生指示があると、制御部３２は、まず、メモリ３８から再生対象として指定された動画像のデータを読み出し、その１フレーム目の画像を初期画面として表示部２０に表示する（ステップＳ１１）。
【００６０】
図７にその初期画面の一例を示す。表示部２０の画面上に１フレーム目の画像が表示されると共に、その表示画面の下部に横長の再生ツールバー７１が表示される。この再生ツールバー７１の左端が再生開始位置、右端が再生終了位置を示しており、再生を開始すると、その再生動作に連動して表示ポインタ（対応位置記号）７１ａがリアルタイムで右方向に移動するようになっている。後述するように、特性グラフ７２が表示された状態で（図９参照）、この表示ポインタ（対応位置記号）７１ａを移動させることにより、特性グラフ７２の任意の位置を指定することができる。
【００６１】
ここで、ユーザがディスプレイキー１９の押下によりグラフ表示を指示すると（ステップＳ１２のＹｅｓ）、制御部３２は、当該動画像に関する分析データが既に存在するか否かを判断する（ステップＳ１３）。過去に同じ動画像のグラフ表示を行っていれば、そのときの分析データが当該動画像に関連付けられてメモリ３８に記憶されているが、初めてグラフ表示する場合には存在しない。
【００６２】
該当する分析データが存在した場合には（ステップＳ１３のＹｅｓ）、分析結果に基づいて動画全体の視覚特性を表わす特性グラフ７２を作成する（ステップＳ１６）。この際、該当する分析データが存在したとしても、その分析データをさらに分析することで、より詳細な特性グラフとするようにしても良い。例えば、分析データがＲ，Ｇ，Ｂのデータのみ存在している場合に、Ｗ，Ｙ，Ｍ，Ｃのデータをさらに分析することにより求めることが考えられる。そして、この分析結果が得られると、制御部３２は、これを当該動画像に関連付けてメモリ３８に記憶しておくようにしても良い。
【００６３】
該当する分析データが存在しなかった場合には（ステップＳ１３のＮｏ）、制御部３２は、当該動画像を構成する各画像を分析処理する（ステップＳ１４）。詳しくは、まず、当該動画像をフレーム単位で分割して各シーンの画像を得る。そして、これらの画像について、Ｒ，Ｇ，Ｂの色情報と輝度情報を画素単位で抽出することにより、図８（ａ）に示すようなヒストグラムを求める。図８（ａ）の横軸は明るさ、縦軸は画素数を示している。なお、横軸の明るさは、例えば２５６階調で表される。
【００６４】
なお、ここで分析処理は、各画像について行うものとしたが、これに限らず、連続した２つの画像を分析して、その差分情報に基づいて上述のヒストグラムを求めるようにしても良い。
【００６５】
ここで、Ｒ，Ｇ，Ｂの各色毎に横軸の明るさと縦軸の画素数を乗じた値を階調数分累積することにより、各色の画素の強さを求める。この画素の強さを縦軸のみで表すと、図８（ｂ）のようになる。この例では、Ｒの成分が最も強く、続いて、Ｂ、Ｇの順であることが示されている。動画像の各シーンについて同様の分析処理を行い、これらの結果を時系列順に繋げると、図９に示すような動画像全体の特性グラフ７２が得られる。
【００６６】
図６に戻って、再生対象とする動画像の分析結果が得られると、制御部３２は、これを当該動画像に関連付けてメモリ３８に記憶しておく（ステップＳ１５）。このように、分析結果を記憶保持しておくことで、次回のグラフ表示の際に、これを再利用してユーザの指定したグラフを簡単に作成することができ、何度も同じ分析処理を繰り返す無駄を省くことができる。
【００６７】
なお、再生対象が動画像ではなく、連続撮影によって得られた複数の画像であれば、これらの画像毎にそれぞれの分析結果を所定の形式で付加しておくことでも良い。これにより、各画像を個別に使用する場合でも分析結果を利用することができる。
【００６８】
続いて、制御部３２は、前記分析結果に基づいて動画全体の視覚特性を表わす特性グラフ７２を作成する（ステップＳ１６）。その際、制御部３２は、設定データ記憶部５２ｂを参照して現在設定されているグラフ種類を判断し、そのグラフ種類に対応した特性グラフ７２を作成することになる。
【００６９】
制御部３２は、前記作成した特性グラフ７２を現在表示中の画像の上に重ねて表示する（ステップＳ１７）。図９にそのときのグラフ表示例を示す。この例では、動画像のＲ，Ｇ，Ｂの色情報の変化を折れ線グラフで表している。
【００７０】
なお、ここで重ねて表示する特性グラフは、半透過や全透過で表示して、できるだけ画像の表示の妨げにならないようにしても良い。
【００７１】
ここで、例えばユーザが赤い花のシーンを見たい場合には、リングキー１７に含まれる左右のカーソルキーを操作して、図１０に示すように、特性グラフ７２の中でＲの成分が強くなるＰの位置に再生ツールバー７１の表示ポインタ７１ａを移動させる。再生ツールバー７１の表示ポインタ７１ａを移動させると、制御部３２は、これを表示変更指示として受け取る（ステップＳ１８のＹｅｓ）。
【００７２】
なお、表示変更指示の方法は、再生ツールバーを移動することに限られない。例えば、表示装置にタッチパネルが搭載されており、特性グラフの所望の位置をタッチすることにより表示変更指示を入力できるようにしても良いし、再生ツールバーを表示する代わりに特性グラフに重畳して、表示ポインタを表示するようにしても良い。つまり、特性グラフ上の任意の位置が識別できればよい。
【００７３】
これにより、制御部３２は、移動後の表示ポインタ７１ａの位置に基づいて、該当する視覚特性を有する画像をメモリ３８から検索し（ステップＳ１９）、これを現在表示中の画像に代えて表示する（ステップＳ２０）。なお、このときに、特性グラフ７２を自動的に消すようにしても良いし、ユーザがディスプレイキー１９を再度押下するなどして明示的に消すことでも良い。
【００７４】
図１１に表示変更後の画像の一例を示す。この例では、前記Ｐの位置に対応した画像として、赤い花のシーンが表示されている。この状態で、例えばセットキー１８を押下すると、そのシーンから動画像の再生が開始されることになる。
【００７５】
このように、再生対象とする動画像の視覚特性をグラフ化することで、そのグラフの変化から撮影シーンを連想でき、その中から所望のシーンを見つけて選択的に表示することができる。特に、視覚特性として色情報をグラフ化することで、Ｒ，Ｇ，Ｂの色変化から動画像の各シーンの流れを把握して、所望のシーンを直感的に探し出すことができるようになる。
【００７６】
なお、前記実施形態では、特性グラフ７２として折れ線グラフを表示する場合を例にしたが、図１２に示すような棒グラフや、図１３に示すような帯グラフの形で表示することも可能である。どのようなグラフで表示するのかは、図６に示したグラフ種類設定画面６１にて指定しておくことができる。
【００７７】
また、前記実施形態では、特性グラフ７２を図９や図１０のように現在表示中の画像の上に重畳させて表示する構成としたが、特性グラフ７２を現在表示中の画像に重ならないように別のエリアに表示することでも良い。このようにすれば、画面上で画像を確認しながら、特性グラフ７２によるシーン選択操作を行うことができる。
【００７８】
さらに、物理的に２つの表示部を設けて、一方の表示部に複数の連続した画像を表示し、他方の表示部に特性グラフ７２を当該連続画像に関連付けて表示するような構成であっても良い。
【００７９】
また、図１４に示すように、各シーン毎にＲ，Ｇ，Ｂの合成色を時系列順に表示するような構成であっても良い。図１４の例では、再生ツールバー７３が特性グラフの機能を兼ねており、再生ツールバー７３がシーン毎に区分されて、各シーンの合成色が表示されている。ユーザがリングキー１７に含まれる左右のカーソルキーを操作して、表示ポインタ７３ａを移動させると、その移動位置に対応したシーンの画像が表示されることになる。このように、Ｒ，Ｇ，Ｂの合成色を表示すれば、グラフ表示エリアを大きく必要としないので、表示中の画像の邪魔にならないなどの利点がある。
【００８０】
また、図１５に示すようなグラフ色設定画面６２を通じてグラフ化する色情報を任意に指定できるようにしても良い。図１５の例では、「Ｒ，Ｇ，Ｂ」の他に、「Ｒ」，「Ｇ」，「Ｂ」の各色を個別に指定できるように構成されている。各色を個別に指定した場合には、その指定色のみの特性グラフが表示されることになる。図１６に「Ｒ」を指定した場合に表示される特性グラフ７４の一例を示す。このような特性グラフ７４の表示により、特定の色だけに着目して所望のシーンを見つけ出すことができる。
【００８１】
さらに、「Ｒ」，「Ｇ」，「Ｂ」の原色系の色だけでなく、「Ｃ（シアン）」，「Ｙ（イエロー）」，「Ｍ（マゼンタ）」や「Ｗ（ホワイト）」などの色を含め、これらの中から任意に指定できるような構成としても良い。
【００８２】
また、図１７に示すようグラフ要素設定画面６３を通じてグラフ化する要素を任意に指定できるようにしても良い。図１７の例では、「色」と「明るさ」を指定できるように構成されている。「明るさ」を指定した場合には、画像を構成する各画素の輝度情報が視覚特性として抽出され、その輝度情報の平均値を各シーンで相関的に表した特性グラフが作成される。図１８に「明るさ」を指定した場合に表示される特性グラフ７５の一例を示す。この例では、各シーンの輝度情報の平均値を棒グラフで表している。このような特性グラフ７５の表示により、例えば暗いシーン（例えば夜景など）など、画像の明暗によって区別できるようなシーンを簡単に見つけ出すことができる。
【００８３】
また、前記実施形態では、再生ツールバー７１の表示ポインタ７１ａの移動操作により特性グラフ７２上の位置を指定する構成としたが、例えばタッチパネルを用いることにより、特性グラフ７２上の位置を直接指で触れるなどして指定することでも良い。
【００８４】
さらに、図１９に示すように、再生ツールバー７１の表示ポインタ７１ａを固定化し、その表示ポインタ７１ａの位置を基準にして特性グラフ７２を移動させることでも良い。図１９では、再生ツールバー７１の表示ポインタ７１ａを中央位置で固定し、そこから左右のカーソルキーの操作によって特性グラフ７２を左右に移動させる場合の例が示されている。図１９（ａ）の状態で左カーソルキーを操作すると、同図（ｂ）に示すように特性グラフ７２が左側にシフトする。特性グラフ７２上の表示ポインタ７１ａに対応している位置が現在の指定位置として認識される。
【００８５】
また、前記実施形態では、動画像の再生表示を想定して説明したが、本発明は動画像に限らず、例えば静止画を連続撮影した得られた複数の画像を再生対象とする場合でも適用可能である。
【００８６】
また、再生対象画像は、デジタルカメラ１の撮影機能によって得られたものに限らず、外部の装置から提供されたものであっても良い。
【００８７】
また、前記実施形態では、デジタルカメラを例にして説明したが、例えばパソコンやカメラ付きの携帯電話やＰＤＡ（Personal Digital Assistant）など、画像の再生撮影機能を備えた電子機器であれば、そのすべてに適用可能である。
【００８８】
要するに、本発明は前記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、前記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【００８９】
また、上述した実施形態において記載した手法は、コンピュータに実行させることのできるプログラムとして、例えば磁気ディスク（フレキシブルディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ等）、半導体メモリなどの記録媒体に書き込んで各種装置に適用したり、そのプログラム自体をネットワーク等の伝送媒体により伝送して各種装置に適用することも可能である。本装置を実現するコンピュータは、記録媒体に記録されたプログラムあるいは伝送媒体を介して提供されたプログラムを読み込み、このプログラムによって動作が制御されることにより、上述した処理を実行する。
【図面の簡単な説明】
【００９０】
【図１】図１は本発明の一実施形態に係る撮像装置としてデジタルカメラを例にした場合の外観構成を示す図であり、図１（ａ）は主に前面の構成、同図（ｂ）は主に背面の構成を示す斜視図である。
【図２】図２は同実施形態におけるデジタルカメラの電子回路構成を示すブロック図である。
【図３】図３は同実施形態におけるデジタルカメラに設けられた制御部の機能構成を示すブロック図である。
【図４】図４は同実施形態におけるデジタルカメラの動画像の各シーンの一例を示す図である。
【図５】図５は同実施形態におけるデジタルカメラのグラフ種類設定画面の一例を示す図である。
【図６】図６は同実施形態におけるデジタルカメラの動画再生時の処理動作を示すフローチャートである。
【図７】図７は同実施形態におけるデジタルカメラの動画再生時の初期画面の一例を示す図である。
【図８】図８は同実施形態におけるデジタルカメラの画像分析方法を説明するための図である。
【図９】図９は同実施形態におけるデジタルカメラの動画再生時に表示される特性グラフの一例を示す図である。
【図１０】図１０は同実施形態におけるデジタルカメラの特性グラフと再生ツールバーの表示ポインタとの関係を示す図である。
【図１１】図１１は同実施形態におけるデジタルカメラの表示変更後の画像の一例を示す図である。
【図１２】図１２は同実施形態におけるデジタルカメラの特性グラフを棒グラフの形で表示した場合の一例を示す図である。
【図１３】図１３は同実施形態におけるデジタルカメラの特性グラフを帯グラフの形で表示した場合の一例を示す図である。
【図１４】図１４は同実施形態におけるデジタルカメラの特性グラフとして各シーンの合成色を表示した場合の一例を示す図である。
【図１５】図１５は同実施形態におけるデジタルカメラのグラフ色設定画面の一例を示す図である。
【図１６】図１６は前記グラフ色設定画面にて「Ｒ」の色を指定した場合に表示される特性グラフの一例を示す図である。
【図１７】図１７は同実施形態におけるデジタルカメラのグラフ要素設定画面の一例を示す図である。
【図１８】図１８は前記グラフ要素設定画面にて「明るさ」を指定した場合に表示される特性グラフの一例を示す図である。
【図１９】図１９は同実施形態におけるデジタルカメラの特性グラフを移動表示する場合の一例を示す図である。
【符号の説明】
【００９１】
１…デジタルカメラ、２…カメラ本体、３…撮影レンズ、４…セルフタイマランプ、５…光学ファインダ窓、６…ストロボ発光部、７…マイクロホン部、８…電源キー、９…シャッタキー、１０…撮影モードキー、１１…再生モードキー、１２…光学ファインダ、１３…スピーカ部、１４…マクロキー、１５…ストロボキー、１６…メニュー（ＭＥＮＵ）キー、１７…リングキー、１８…セット（ＳＥＴ）キー、１９…ディスプレイキー、２０…表示部、２１…モータ、２２…レンズ光学系、２３…ＣＣＤ、２４…タイミング発生器（ＴＧ）、２５…ドライバ、２６…サンプルホールド回路（Ｓ／Ｈ）、２７…Ａ／Ｄ変換器、２８…カラープロセス回路、２９…ＤＭＡコントローラ、３０…ＤＲＡＭインタフェース（Ｉ／Ｆ）、３１…ＤＲＡＭ、３２…制御部、３３…ＶＲＡＭコントローラ、３４…ＶＲＡＭ、３５…デジタルビデオエンコーダ、３６…キー入力部、３７…画像処理部、３８…メモリ、３９…音声処理部、４０…ＵＳＢインタフェース（Ｉ／Ｆ）、４１…ストロボ駆動部、５１…処理部、５１ａ…画像分析部、５１ｂ…グラフ作成部、５１ｃ…表示制御部、５２…記憶部、５２ａ…プログラム記憶部、５２ｂ…設定データ記憶部、６１…グラフ種類設定画面、６２…グラフ色設定画面、６３…グラフ要素設定画面、７１…再生ツールバー、７１ａ…表示ポインタ、７２…特性グラフ、７３…再生ツールバー、７３ａ…再生ツールバー、７４…特性グラフ、７５…特性グラフ。
【図１】
2008242812.tif 000003
【図２】
2008242812.tif 000004
【図３】
2008242812.tif 000005
【図４】
2008242812.tif 000006
【図５】
2008242812.tif 000007
【図６】
2008242812.tif 000008
【図７】
2008242812.tif 000009
【図８】
2008242812.tif 000010
【図９】
2008242812.tif 000011
【図１０】
2008242812.tif 000012
【図１１】
2008242812.tif 000013
【図１２】
2008242812.tif 000014
【図１３】
2008242812.tif 000015
【図１４】
2008242812.tif 000016
【図１５】
2008242812.tif 000017
【図１６】
2008242812.tif 000018
【図１７】
2008242812.tif 000019
【図１８】
2008242812.tif 000020
【図１９】
2008242812.tif 000021