(57)【要約】【課題】複数の元画像同士の差異をより明確に識別して、より確実に目的とする画像を選択可能とした表示制御装置、表示制御装置の制御方法、プログラム、及び記憶媒体を提供する。【解決手段】撮像装置は、相関性検出部２０１、画像抽出部２０２、画像合成部２０３、表示信号生成部２０４を備える。相関性検出部２０１は、複数枚の画像の中で相関性が高い画像があると検出した場合、相関性が高い画像を同一のグループとして関連付ける。画像合成部２０３は、画像抽出部２０２により相関性が高い画像から抽出された複数の部分画像を合成して合成画像を作成する。表示信号生成部２０４は、合成画像に対してユーザ操作部１０７から選択された部分画像の選択状態枠を表示部１０９の画面に表示し、選択される部分画像の切り替えに従って選択状態枠を切り替える。【選択図】図７ａ
2012105195.tif 000002
【特許請求の範囲】
【請求項１】
表示手段に対する画像の表示を制御する表示制御装置であって、
複数枚の画像をグループ分けして管理する管理手段と、
前記管理手段により同一のグループとして関連付けられた画像から部分画像を抽出する抽出手段と、
前記抽出手段により抽出された複数の部分画像を合成して合成画像を作成する合成手段と、
前記合成手段により作成された合成画像に対して外部入力により選択された部分画像の選択状態を前記表示手段に表示すると共に、選択される部分画像の切り替えに従って前記選択状態を示す表示を切り替える制御手段と、を備えることを特徴とする表示制御装置。
【請求項２】
複数枚の画像の中で相関性が高い画像があるか否かを検出する検出手段を更に備え、
前記管理手段は、前記検出手段により相関性が高い画像があると検出された場合、相関性が高い画像を同一のグループとして関連付けて管理し、
前記抽出手段は、前記管理手段により同一のグループとして関連付けられた相関性が高い画像から部分画像を抽出することを特徴とする請求項１に記載の表示制御装置。
【請求項３】
前記管理手段は、前記抽出手段により抽出された部分画像の抽出元である元画像と、前記合成手段により作成された合成画像とを、同一のグループとして関連付けて管理することを特徴とする請求項１に記載の表示制御装置。
【請求項４】
前記制御手段は、前記抽出手段により抽出された部分画像と、前記合成手段により作成された合成画像とを、前記表示手段の同一の画面内に表示することを特徴とする請求項１に記載の表示制御装置。
【請求項５】
前記制御手段は、前記合成画像に対して部分画像が選択された場合、該部分画像の抽出元である元画像を前記表示手段に表示することを特徴とする請求項１に記載の表示制御装置。
【請求項６】
画像の輝度もしくは画像の色度を含む画像同士の間のパラメータの差分値が一定の範囲内に収まる画像は、前記管理手段により前記同一のグループとして関連付けられると共に、前記抽出手段により前記部分画像を抽出する対象となることを特徴とする請求項１に記載の表示制御装置。
【請求項７】
前記部分画像の選択状態を示す表示には、選択された部分画像を縁取りする表示、選択された部分画像以外の輝度を低下させる表示、選択された部分画像を前記表示手段の画面上で手前側に配置する表示、選択された部分画像を点滅させる表示、選択された部分画像を拡大する表示、が含まれることを特徴とする請求項１に記載の表示制御装置。
【請求項８】
前記複数枚の画像は、撮像装置により連続的に撮影された画像であることを特徴とする請求項１に記載の表示制御装置。
【請求項９】
表示手段に対する画像の表示を制御する表示制御装置の制御方法であって、
複数枚の画像をグループ分けして管理する管理工程と、
前記管理工程により同一のグループとして関連付けられた画像から部分画像を抽出する抽出工程と、
前記抽出工程により抽出された複数の部分画像を合成して合成画像を作成する合成工程と、
前記合成工程により作成された合成画像に対して外部入力により選択された部分画像の選択状態を前記表示手段に表示すると共に、選択される部分画像の切り替えに従って前記選択状態を示す表示を切り替える制御工程と、を有することを特徴とする制御方法。
【請求項１０】
表示手段に対する画像の表示を制御する表示制御装置の制御方法をコンピュータに実行させるためのコンピュータで読み取り可能なプログラムであって、前記制御方法は、
複数枚の画像をグループ分けして管理する管理工程と、
前記管理工程により同一のグループとして関連付けられた画像から部分画像を抽出する抽出工程と、
前記抽出工程により抽出された複数の部分画像を合成して合成画像を作成する合成工程と、
前記合成工程により作成された合成画像に対して外部入力により選択された部分画像の選択状態を前記表示手段に表示すると共に、選択される部分画像の切り替えに従って前記選択状態を示す表示を切り替える制御工程と、を有することを特徴とするプログラム。
【請求項１１】
請求項１０に記載のプログラムを格納することを特徴とするコンピュータで読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、連写撮影された複数の画像の中から目的とする画像を選択する場合に適用される表示制御装置、表示制御装置の制御方法、プログラム、及び記憶媒体に関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置においては、連続的に撮影を行う連写撮影時における静止画の連写速度の高速化が進んでいる。連写速度の高速化は、デジタル一眼レフカメラのみならずコンパクトカメラにおいても進んでいるため、ユーザは手軽に高速連写撮影を行うことができ、決定的なシャッタチャンスを逃さずに撮影することができるようになってきている。
【０００３】
ところが、撮像装置において高速連写撮影で得られた複数の画像は時間的に近接しているため画像間の被写体の変化量は微小なものとなり、類似する画像が多数存在してしまう。多数の類似した画像の中からユーザが所望の画像を探す方法としては、撮像装置の表示部において１枚ずつ画像送りや画像戻しを繰り返すことで探す方法がある。
【０００４】
更に、前記方法の他に、撮像装置の表示部の画像再生画面を複数に分割して連写画像を配列表示することで、配列表示された画像の中から所望の画像を探す方法がある（例えば、特許文献１参照）。しかし、特許文献１の表示方法は、画像再生画面を複数に分割して連写画像を配列表示する方法であるため、表示される画像が縮小されてサイズが小さくなる結果、類似する画像の細部の差異を確認することが困難であるという問題がある。
【０００５】
そこで、連続的に撮影を行った撮影対象の動きを一見して把握することを可能とした技術が提案されている（例えば、特許文献２参照）。特許文献２には、連続撮影された複数の画像を合成して１枚の画像を生成することが記載されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００１−３３３３７４号公報
【特許文献２】特開２００９−４４５７３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、上述した特許文献２記載の技術のように、連続撮影中の被写体の全体的な動きを把握するために、連続撮影された複数の画像から１枚の合成画像を作成して表示を行うだけでは、次のような問題がある。合成画像上においてユーザが希望する被写体の画像を把握できたとしても、その瞬間の被写体を含んでいる元画像を多数の連写画像の中から探す操作は別途行わなければならず、煩わしいという問題があった。
【０００８】
本発明の目的は、複数の元画像同士の差異をより明確に識別して、より確実に目的とする画像を選択可能とした表示制御装置、表示制御装置の制御方法、プログラム、及び記憶媒体を提供することにある。
【課題を解決するための手段】
【０００９】
上記目的を達成するために、本発明は、表示手段に対する画像の表示を制御する表示制御装置であって、複数枚の画像をグループ分けして管理する管理手段と、前記管理手段により同一のグループとして関連付けられた画像から部分画像を抽出する抽出手段と、前記抽出手段により抽出された複数の部分画像を合成して合成画像を作成する合成手段と、前記合成手段により作成された合成画像に対して外部入力により選択された部分画像の選択状態を前記表示手段に表示すると共に、選択される部分画像の切り替えに従って前記選択状態を示す表示を切り替える制御手段と、を備えることを特徴とする。
【発明の効果】
【００１０】
本発明によれば、合成画像に対して選択された部分画像の選択状態を表示し、部分画像の切り替えに従って選択状態を示す表示を切り替える。即ち、複数の元画像とそれらから合成された合成画像を関連付けて管理し、ユーザが合成画像を見ながら目的とする元画像を選択可能とする制御を実現することができる。これにより、複数の元画像同士の差異をより明確に識別して、より確実に目的とする画像を選択することが可能となる。特に、連写撮影などで得られた多量の画像の中から目的とする画像を容易に選択することが可能となる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施の形態に係る撮像装置の主要部の構成を示すブロック図である。
【図２】撮像装置の表示信号演算部の内部の構成を示すブロック図である。
【図３】（ａ）〜（ｊ）は、撮像装置により撮像した複数の画像データを示す図である。（ｋ）は、（ａ）〜（ｊ）の画像の相関性を管理するための管理テーブルを示す図である。（ｍ）は、画像データ間の相関性を検出する際の判断基準とするための予め設定された閾値（Ｔｈ１、Ｔｈ２）を示す図である。
【図４】（ａ）〜（ｃ）は、図３（ｇ）〜（ｉ）の画像から一定領域を抽出した画像を示す図である。（ｄ）は、図４（ａ）〜（ｃ）の画像を図３（ｆ）の画像の上に合成した画像を示す図である。（ｅ）は、図４（ａ）〜（ｃ）の画像を図３（ｆ）の画像の上に均等配置した画像を示す図である。
【図５】（ａ）〜（ｃ）は、図４（ｄ）の画像を表示部に表示している状態において選択状態枠を部分画像の間で移動させて切り替えることにより所望の部分画像を選択している様子を示す図である。（ｄ）は、図５（ｂ）の選択表示においてユーザ操作部の決定ボタンを押下したときの表示を示す図である。
【図６】（ａ）〜（ｃ）は、図４（ｅ）の画像を表示部に表示している状態において選択状態枠を部分画像の間で移動させて切り替えることにより所望の部分画像を選択している様子を示す図である。（ｄ）は、図６（ｂ）の選択表示においてユーザ操作部の決定ボタンを押下したときの表示を示す図である。
【図７ａ】撮像装置において撮影した画像の再生を行う場合の画像抽出・画像合成・画像選択等の処理手順を示すフローチャートである。
【図７ｂ】撮像装置において撮影した画像の再生を行う場合の画像抽出・画像合成・画像選択等の処理手順を示すフローチャートである。
【図８】（ａ）〜（ｃ）は、図３（ｅ）、（ｂ）、（ｄ）の画像と同じ画像を示す図である。（ｄ）〜（ｆ）は、合成画像である図４（ｅ）と関連付けられた元画像である図３（ｇ）〜（ｉ）を合成画像と同一の画面内に表示した様子を示す図である。
【発明を実施するための形態】
【００１２】
以下、本発明の実施の形態について図面を参照しながら説明する。
【００１３】
図１は、本発明の実施の形態に係る撮像装置の主要部の構成を示すブロック図である。
【００１４】
図１において、撮像装置は、撮影レンズ１０１、撮像素子１０２、Ａ／Ｄ変換部１０３、画像処理部１０４、記録媒体制御部１０６、ユーザ操作部１０７、表示信号演算部１０８、表示部１０９を備えたデジタルカメラとして構成されている。本発明の表示制御装置は表示信号演算部１０８を中心に構成されている。
【００１５】
撮像装置による撮影に伴い、撮影レンズ１０１を通過した光束は撮像素子１０２へ入射する。撮像素子１０２は、被写体の光学像を電気信号に光電変換し信号電荷として蓄積する電荷蓄積型のセンサであり、ＣＭＯＳイメージセンサまたはＣＣＤイメージセンサにより構成されている。Ａ／Ｄ変換部１０３は、撮像素子１０２から出力される電気信号をアナログ信号からデジタル信号に変換する。画像処理部１０４は、Ａ／Ｄ変換部１０３から出力されるデジタル信号を受けて、現像処理や各種補正など画像処理全般を行う。
【００１６】
記録媒体１０５は、撮像装置に着脱可能に構成されており、撮像装置により撮影した画像データ、撮影日時を示す日付データ等が記録される外部媒体である。記録媒体制御部１０６は、記録媒体１０５に対して画像データ、日付データ等の書き込み／読み出し等の制御を行う。ユーザ操作部１０７は、撮像装置に対して各種の設定／操作を行うためのダイヤル、ボタン、スイッチ（不図示）等を備えており、ユーザからの設定／操作を受け付ける。
【００１７】
表示信号演算部１０８は、ユーザ操作部１０７からの指示に従って、画像処理部１０４または記録媒体制御部１０６から出力される画像データ、日付データを受け付け、次の処理を行う。複数枚の画像データ間の相関性の高さを管理テーブル（図３参照）により管理し、相関性の高い画像から一定領域を抽出し、複数の一定領域から合成画像を作成する。表示信号演算部１０８の詳細については図２で後述する。
【００１８】
表示部１０９（表示手段）は、表示信号演算部１０８からの出力信号を表示するものであり、ＬＣＤ（Liquid Cristal Display）等から構成されている。
【００１９】
図２は、撮像装置の表示信号演算部１０８の内部の構成を示すブロック図である。
【００２０】
図２において、表示信号演算部１０８は、相関性検出部２０１（検出手段、管理手段）、画像抽出部２０２（抽出手段）、画像合成部２０３（合成手段）、表示信号生成部２０４（制御手段）から構成されている。表示信号演算部１０８は、制御プログラムに基づいて、後述の図７ａ、図７ｂのフローチャートに示す処理を実行する。
【００２１】
相関性検出部２０１は、記録媒体１０５に記録されている複数枚の画像データを記録媒体制御部１０６を介して読み出し、高い相関性がある画像を検出する。記録媒体１０５から読み出す画像の枚数はユーザがユーザ操作部１０７から指定できる。
【００２２】
ここで、相関性の具体例としては、連続的に撮影した画像で見られるような画像間での画像データの近似性がある。また、相関性の別の具体例としては、画像データに関連付けられたＧＰＳ（Global Positioning System）の位置データのように画像データ以外の近似性がある。
【００２３】
相関性検出部２０１は、高い相関性がある画像データを検出した場合は、管理テーブルにより、相関性のある画像データ同士を同一のグループとして関連付ける（グループ分けする）ことで管理する。更に、相関性検出部２０１は、同一のグループとして関連付けられた複数枚の画像データを画像抽出部２０２に出力する。他方、相関性検出部２０１は、いずれの画像データとも相関性が見つからない画像データを検出した場合は、相関性が見つからない画像データを表示信号生成部２０４に出力する。
【００２４】
画像抽出部２０２は、同一のグループとして関連付けられた複数枚の画像データから画像間で差異のある一定領域（部分画像）を抽出し、当該抽出した複数の一定領域データを画像合成部２０３に出力する。
【００２５】
画像合成部２０３は、複数の一定領域（部分画像）データを表示部１０９の同一画面上に表示する画像に合成する合成画像の作成を行う。更に、画像合成部２０３は、合成画像に対しても、合成画像を構成する部分画像を抽出した部分画像抽出元である画像と同一のグループに関連付け、合成画像データを表示信号生成部２０４に出力する。
【００２６】
表示信号生成部２０４は、画像の再生がユーザ操作部１０７を介して指示されると、ユーザ操作部１０７からの指示に従いながら、次のように表示信号を生成する。表示信号生成部２０４は、画像処理部１０４、相関性検出部２０１、画像合成部２０３から入力される画像データを基に、表示部１０９に表示するための表示信号を生成する。
【００２７】
上記の図１及び図２に示した構成を備える本実施の形態の撮像装置は以下の特徴を有する。連続的に撮影された連写画像等の複数の元画像を多重合成した１枚の合成画像上での被写体の選択によって、合成画像となっている複数の元画像のうちの所望の画像を選択することができるようにする。複数の元画像を多重合成した１枚の合成画像を見ながらの選択であるため、複数の元画像同士の差異を明確に識別できるので、より確実に所望とする元画像を選択できるようになる。
【００２８】
次に、撮像装置の表示信号演算部１０８が備える相関性検出部２０１で作成される相関性を管理する管理テーブルと画像同士の相関性を判断する方法について、図３を用いて説明する。
【００２９】
図３（ａ）〜（ｊ）は、撮像装置により撮像した複数の画像データを示す図である。図３（ｋ）は、（ａ）〜（ｊ）の画像の相関性を管理するための管理テーブルを示す図である。図３（ｍ）は、画像データ間の相関性を検出する際の判断基準とするための予め設定された閾値（Ｔｈ１、Ｔｈ２）を示す図である。
【００３０】
図３において、相関性検出部２０１で作成される（ｋ）に示す管理テーブルは、（ａ）〜（ｊ）の画像データについて相関性のある画像同士を同一のグループとして関連付けて管理するためのテーブルである。グループ１として関連付けられたのは、連続撮影された（ｇ）〜（ｉ）の画像である。グループ２として関連付けられたのは、定点観測で撮影されたために撮影位置が近く、画像間の相関性が高い（ａ）、（ｃ）、（ｊ）の画像である。
【００３１】
画像の相関性について具体的に説明すると、（ｍ）に示すように、相関性を比較する対象となる画像データ間の差分値が閾値Ｔｈ１を超える場合は、双方の画像の相関性は低いと判断する。例えば（ａ）と（ｆ）とは相関性は低い。
【００３２】
また、相関性を比較する対象となる画像データ間の差分値が閾値Ｔｈ２よりも小さい場合は、双方の画像の相関性は高すぎるため、同一のグループに関連付けるが、双方の画像の差異を認識しづらいので合成画像を作成するための一定領域の抽出は行わない。
【００３３】
また、相関性を比較する対象となる画像データ間の差分値が閾値Ｔｈ１と閾値Ｔｈ２の間（一定の範囲内）に収まる画像は、同一のグループに関連付けられ、しかも合成画像を作成するための一定領域を抽出する対象となる。
【００３４】
相関性検出部２０１は、（ｍ）に示す判断基準により、連続撮影された画像や、撮影された時間間隔が離れていてもＧＰＳ等による撮影位置が近い画像で、画像データ間の差分値が閾値Ｔｈ１よりも小さい画像は、同一のグループに関連付ける。
【００３５】
ここで、上述した差分値とは、具体的には、相関性を比較する対象となる画像それぞれに付随するパラメータ（画像の輝度もしくは画像の色度を含む）の差分を取って得られた値である。また、合成画像を作成するための一定領域とは、（ｇ）〜（ｉ）の画像を例にとるとバットを持った人物の領域である。
【００３６】
次に、画像抽出部２０２で行われる、同一のグループとして関連付けた複数枚の画像データから画像間で差異のある一定領域を抽出する処理について説明する。
【００３７】
本実施の形態では、図３（ｆ）〜（ｉ）の連続撮影された画像を例に挙げて説明する。同一のグループとして関連付けた複数枚の画像データから画像間で差異のある一定領域を抽出するには、図３（ｆ）のような抽出対象が表示されていない画像に対して、図３（ｇ）〜（ｉ）の画像データの差分値が閾値Ｔｈ２を超える領域を抽出する。図３（ｇ）〜（ｉ）の画像データから一定領域（バットを持った人物）を抽出した結果を図４（ａ）〜（ｃ）に示す。
【００３８】
図４（ａ）〜（ｃ）は、図３（ｇ）〜（ｉ）の画像から一定領域を抽出した画像を示す図である。図４（ｄ）は、図４（ａ）〜（ｃ）の画像を図３（ｆ）の画像の上に合成した画像を示す図である。図４（ｅ）は、図４（ａ）〜（ｃ）の画像を図３（ｆ）の画像の上に均等配置した画像を示す図である。
【００３９】
図４において、図４（ｄ）の合成画像は、画像合成部２０３が図４（ａ）〜（ｃ）に示す一定領域を抽出した画像を重ね合わせ、図３（ｆ）の画像に合成することで作成されている。また、図４（ｅ）の合成画像は、画像合成部２０３が図４（ａ）〜（ｃ）に示す一定領域を抽出した画像データを図３（ｆ）の画像の上に均等配置することで作成されている。
【００４０】
図５（ａ）〜（ｃ）は、図４（ｄ）の画像を表示部１０９に表示している状態において選択状態枠を部分画像の間で移動させて切り替えることにより所望の部分画像を選択している様子を示す図である。図５（ｄ）は、図５（ｂ）の選択表示においてユーザ操作部の決定ボタンを押下したときの表示を示す図である。
【００４１】
図５において、（ａ）〜（ｃ）は、ユーザによるユーザ操作部１０７の操作（外部入力による選択）により、（ａ）〜（ｃ）の合成画像の中で、選択対象となる部分画像を切り替える例を示している。（ａ）〜（ｃ）の太線で示す外形線は、選択対象となる部分画像（バットを持った人物）を示す選択状態枠である。更に、（ｂ）の画像を選択中にユーザ操作部１０７の決定ボタン（不図示）を押下したときの表示が（ｄ）の画像である。これは、（ｂ）の合成画像から選択した部分画像を含む元画像である。
【００４２】
図６（ａ）〜（ｃ）は、図４（ｅ）の画像を表示部１０９に表示している状態において選択状態枠を部分画像の間で移動させて切り替えることにより所望の部分画像を選択している様子を示す図である。図６（ｄ）は、図６（ｂ）の選択表示においてユーザ操作部の決定ボタンを押下したときの表示を示す図である。
【００４３】
図６において、（ａ）〜（ｃ）は、ユーザによるユーザ操作部１０７の操作により、（ａ）〜（ｃ）の合成画像の中で、選択対象となるそれぞれ左端・中央・右端に配置された部分画像の間で選択表示枠を切り替える例を示している。更に、（ｂ）の画像を選択中にユーザ操作部１０７の決定ボタン（不図示）を押下したときの表示が（ｄ）の画像である。これは、（ｂ）の合成画像から選択した部分画像を含む元画像である。
【００４４】
次に、本実施の形態の撮像装置により撮影した画像の再生を行う場合の画像抽出・画像合成・画像選択等の処理手順について説明する。
【００４５】
図７ａ、図７ｂは、撮像装置において撮影した画像の再生を行う場合の画像抽出・画像合成・画像選択等の処理手順を示すフローチャートである。
【００４６】
図７ａ、図７ｂにおいて、ユーザからユーザ操作部１０７により画像の再生が指示されると、表示信号演算部１０８の相関性検出部２０１は、記録媒体１０５に保存されている複数枚の画像データを記録媒体制御部１０６を介して読み出す（ステップＳ７０１）。次に、相関性検出部２０１は、読み出した複数枚の画像データの中で相関性の高い画像データがあるかどうかを判別する（ステップＳ７０２）。
【００４７】
読み出した複数枚の画像データの中で相関性の高い画像データを検出しなかった場合は、後述のステップＳ７０７に進む。他方、読み出した複数枚の画像データの中で相関性の高い画像データを検出した場合は、相関性検出部２０１は、次の管理テーブルを作成する（ステップＳ７０３）。相関性の高い画像データを同一のグループに関連付け、関連付けた画像データを管理する管理テーブル（図３（ｋ）参照）を作成する。
【００４８】
次に、画像抽出部２０２は、同一のグループに関連付けた複数の画像の中から、図３（ｍ）に示した判断基準に基づいて一定領域（部分画像）を抽出し、当該抽出した複数の一定領域のデータを画像合成部２０３に出力する（ステップＳ７０４）。画像合成部２０３は、抽出した複数の一定領域（複数の部分画像）を貼り合わせた合成画像を作成する（ステップＳ７０５）。
【００４９】
複数の部分画像の貼り合わせ方としては、図４（ｄ）に示すように複数の部分画像を画面の奥行き方向に重ね合わせる、図４（ｅ）に示すように複数の部分画像を重ならないように画面上で均等に配置する、等の様態がある。
【００５０】
相関性検出部２０１は、画像合成部２０３により作成された合成画像についても、部分画像の抽出元の画像（元画像）と同一のグループに関連付ける（ステップＳ７０６）。次に、相関性検出部２０１は、記録媒体１０５から記録媒体制御部１０６を介して１枚分の画像データを読み出す（ステップＳ７０７）。次に、相関性検出部２０１は、読み出した１枚分の画像データがステップ７０３で作成した管理テーブルによりいずれかのグループに関連付けられているかどうかを判定する（ステップＳ７０８）。
【００５１】
読み出した１枚分の画像データが管理テーブルによりいずれかのグループに関連付けられていない場合は、表示信号生成部２０４は、読み出した１枚分の画像データを表示部１０９に表示する（ステップＳ７１７）。その後、後述のステップＳ７１５に進む。他方、読み出した１枚分の画像データが管理テーブルによりいずれかのグループに関連付けられている場合は、表示信号生成部２０４は、ユーザに選択状態枠の表示方法を指定するよう促すメッセージを表示部１０９に表示する。
【００５２】
即ち、合成画面上で部分画像を選択したときに表示される選択状態枠の表示方法を、ユーザ操作部１０７を介してユーザに指定させる。選択状態枠の表示方法の具体例としては以下のような表示方法がある。選択された部分画像を縁取りする表示方法（図５、図６参照）。選択された部分画像以外の輝度を低下させる表示方法。選択された部分画像を画面上で最も手前側に移動して配置する表示方法。選択された部分画像を点滅させる表示方法。選択された部分画像を拡大する表示方法。
【００５３】
ユーザはユーザ操作部１０７から希望する表示方法を指定する（ステップＳ７０９）。選択された部分画像を縁取りする表示方法、選択された部分画像以外の輝度を低下させる表示方法のいずれかが指定された場合は、ステップＳ７１１に進む。その他の表示方法が指定された場合は、ユーザは別の希望する表示方法を指定する（ステップＳ７１０）。選択された部分画像を画面上で最も手前に移動させる表示方法、選択された部分画像を点滅させる表示方法、選択された部分画像を拡大する表示方法のいずれかが指定された場合は、ステップＳ７１１に進む。
【００５４】
次に、表示信号生成部２０４は、ステップＳ７０７で読み出した１枚分の画像データに関連付けられたグループに属する合成画像を画像合成部２０３から読み出す（ステップＳ７１１）。読み出す合成画像は、ステップＳ７０９またはステップＳ７１０で選択された表示方法に相応しい（適合する）様態の画像である。
【００５５】
例えば、選択された部分画像を縁取りする表示方法が選択されていれば、部分画像が重ならずに並べられた合成画像が相当する。また、選択された部分画像を画面上で最も手前に移動させる表示方法が選択されていれば、画面上で奥行き方向に重ね合わせた合成画像が相当する。
【００５６】
次に、表示信号生成部２０４は、ユーザがユーザ操作部１０７を介して合成画像上で選択状態枠を移動させることにより目的とする画像（部分画像）を選択したことを検知する（ステップＳ７１２）。目的とする画像の選択は、ユーザによりユーザ操作部１０７の決定ボタンが押下されるまで続く。表示信号生成部２０４は、決定ボタンが押下されたことを検知すると（ステップＳ７１３でＹＥＳ）、決定された部分画像を含む元画像を表示部１０９に表示する（ステップＳ７１４：制御手段）。
【００５７】
次に、表示信号生成部２０４は、ユーザがユーザ操作部１０７を介して表示部１０９の画面での画像送りを指定したかどうかを判断する（ステップＳ７１５）。画像送りの指定が無い場合は、表示信号生成部２０４は、表示部１０９に表示中の画像の再生を続ける。画像送りの指定がある場合は、表示信号生成部２０４は、表示部１０９に既に表示した画像と同一のグループに関連付けられた画像をスキップする（ステップＳ７１６）。
【００５８】
その後、ステップＳ７０７に戻り、相関性検出部２０１は、記録媒体１０５から記録媒体制御部１０６を介して別の１枚分の画像データを読み出し、ステップＳ７０８以降の処理を行う。
【００５９】
図８（ａ）〜（ｃ）は、図３（ｅ）、（ｂ）、（ｄ）の画像と同じ画像を示す図である。図８（ｄ）〜（ｆ）は、合成画像である図４（ｅ）と関連付けられた元画像である図３（ｇ）〜（ｉ）を合成画像と同一の画面内に表示した様子を示す図である。
【００６０】
図８において、合成画像である図４（ｅ）と関連付けられた元画像である図３（ｇ）〜（ｉ）が、図７ｂのステップＳ７１４において表示部１０９の同一の画面内に表示されている様子を示している。元画像である図３（ｇ）〜（ｉ）を表示しながら、画面右上の合成画像における該当する部分画像に対して選択表示枠（太線で示す外形線）を表示している。これにより、元画像である図３（ｇ）〜（ｉ）がそれぞれ一連の動きの中でどの瞬間に該当するかを容易に把握することが可能となる。
【００６１】
以上説明したように、本実施の形態によれば、相関性検出部２０１は、複数枚の画像の中で相関性が高い画像があると検出した場合、相関性が高い画像を同一のグループとして関連付ける。画像合成部２０３は、画像抽出部２０２により相関性が高い画像から抽出された複数の部分画像を合成して合成画像を作成する。表示信号生成部２０４は、合成画像に対してユーザにより選択された部分画像の選択状態枠を表示部１０９の画面に表示し、選択される部分画像の切り替えに従って選択状態枠を切り替える。
【００６２】
即ち、複数の元画像とそれらから合成された合成画像を関連付けて管理し、ユーザが合成画像を見ながら目的とする元画像を選択可能とする制御を実現することができる。これにより、複数の元画像同士の差異をより明確に識別して、より確実に目的とする画像を選択することが可能となる。特に、連写撮影などで得られた多量の画像の中から目的とする画像を容易に選択することが可能となる。
【００６３】
なお、表示信号演算部１０８の制御は１つのハードウェアが行ってもよいし、複数のハードウェアが処理を分担することで、装置全体の制御を行ってもよい。
【００６４】
また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。
【００６５】
また、上述した実施形態においては、複数枚の画像について相関性のある画像同士を同一のグループとして関連付ける（グループ分けする）ことで管理する場合を例に挙げたが、これに限定されるものではない。撮影画像が連写撮影されたものであれば、相関性に関わらず画像をグループ分けして管理する構成としてもよい。
【００６６】
また、上述した実施形態においては、本発明をデジタルカメラに適用した場合を例にして説明したが、これはこの例に限定されず、複数の画像を同時に表示するように制御可能な表示制御装置であれば適用可能である。即ち、本発明はパーソナルコンピュータやＰＤＡ、携帯電話端末や携帯型の画像ビューワ、ディスプレイを備えるプリンタ装置、デジタルフォトフレーム、音楽プレーヤ、ゲーム機、電子ブックリーダなどに適用可能である。
【００６７】
〔他の実施の形態〕
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶（格納）した記憶媒体は本発明を構成することになる。
【符号の説明】
【００６８】
１０８  表示信号演算部
１０９  表示部
２０１  相関性検出部
２０２  画像抽出部
２０３  画像合成部
２０４  表示信号生成部
【図１】
2012105195.tif 000003
【図２】
2012105195.tif 000004
【図３】
2012105195.tif 000005
【図４】
2012105195.tif 000006
【図５】
2012105195.tif 000007
【図６】
2012105195.tif 000008
【図７ａ】
2012105195.tif 000009
【図７ｂ】
2012105195.tif 000010
【図８】
2012105195.tif 000011