(57)【要約】【課題】ユーザが楽しく画像の分類を行うことができる画像整理装置を提供すること。【解決手段】表示部１０５に表示された画像３００の一部３００ａにユーザの指等がタッチすると、そのタッチ位置を含む小領域が画像片３００ｂとして抽出される。この画像片３００ｂを別画像に貼り付けることによって、マイマップ画像が作成される。ユーザは、このマイマップ画像を用いて画像の検索を行うことが可能である。【選択図】図５
2010252266.tif 000002
【特許請求の範囲】
【請求項１】
記録部に記録された第１の画像を表示する表示部と、
上記表示部に表示された第１の画像へのタッチ操作の有無と、該タッチ操作がなされた場合のタッチ位置とを検出するタッチパネルと、
上記タッチ操作がなされたときに、上記第１の画像内で且つ上記タッチ位置を含む小領域の画像である画像片を抽出する画像片抽出部と、
上記抽出した画像片を別の画像に貼り付けて第２の画像を作成する別画像作成部と、
を具備することを特徴とする画像整理装置。
【請求項２】
上記第２の画像は、複数の画像片が貼り付けられて構成されていることを特徴とする請求項１に記載の画像整理装置。
【請求項３】
上記画像片を分類する画像片分類部と、
上記分類の結果を分類情報として記録する分類情報記録部と、
をさらに具備し、
上記別画像作成部は、上記分類情報を参照し、同じ分類がなされている画像片のみから上記第２の画像を作成することを特徴とする請求項２に記載の画像整理装置。
【請求項４】
上記タッチパネルは、上記タッチ位置からのスライド操作をさらに検出し、
上記画像片分類部は、上記タッチパネルによって検出されたスライド操作に応じて上記画像片を分類することを特徴とする請求項３に記載の画像整理装置。
【請求項５】
上記第２の画像に貼り付けられた画像片が選択された場合に、該選択された画像片に対応した第１の画像を上記表示部に表示させる画像検索部をさらに具備することを特徴とする請求項１に記載の画像整理装置。
【請求項６】
上記タッチパネルは、上記タッチ位置における押圧力をさらに検出し、
上記画像片抽出部は、上記押圧力に応じて上記小領域を特定し、該特定された小領域に応じた画像片を抽出することを特徴とする請求項１に記載の画像整理装置。
【請求項７】
上記画像片抽出部は、上記小領域中の主要色を検出し、該検出した主要色を含まない領域の画像を透明画像化してから、上記画像片を抽出することを特徴とする請求項１に記載の画像整理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録媒体に記録された画像を整理する機能を有する画像整理装置に関する。
【背景技術】
【０００２】
近年、画像を記録する記録媒体の記録容量が増大してきており、この記録容量の増大に伴って大量の画像を記録できるようになってきている。この反面、記録媒体に大量に記録された画像の中から、ユーザが所望の画像を検索するのが困難になっている。このような事情を鑑みて、記録媒体に記録された画像を分類して整理する技術が各種提案されている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第３２００８１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ここで、特許文献１等の従来の画像の分類の技術は、手動で分類を行うことができるものや、自動で分類が行われるもの等、種々のものがあるが、画像の分類自体に楽しみがあるものではない。
【０００５】
本発明は、上記の事情に鑑みてなされたもので、ユーザが楽しく画像の分類を行うことができる画像整理装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記の目的を達成するために、本発明の第１の態様の画像整理装置は、記録部に記録された第１の画像を表示する表示部と、上記表示部に表示された第１の画像へのタッチ操作の有無と、該タッチ操作がなされた場合のタッチ位置とを検出するタッチパネルと、上記タッチ操作がなされたときに、上記第１の画像内で且つ上記タッチ位置を含む小領域の画像である画像片を抽出する画像片抽出部と、上記抽出した画像片を別の画像に貼り付けて第２の画像を作成する別画像作成部とを具備することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、ユーザが楽しく画像の分類を行うことができる画像整理装置を提供することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施形態に係る画像整理装置の構成を示す図である。
【図２】タッチパネルの一例としての光感応式のタッチパネルの構成を示した図である。
【図３】本発明の一実施形態に係るカメラのメインの動作を示すフローチャートである。
【図４】画像分類処理について示すフローチャートである。
【図５】画像片の抽出の概要を示す図である。
【図６】マイマップ画像の例を示す図である。
【図７】図７（ａ）は分類結果ファイルの一例を示しており、図７（ｂ）は分類結果ファイルに記録される顔の位置及び顔の大きさについて説明するための図である。
【図８】マイマップ画像再生処理について示すフローチャートである。
【図９】マイマップ画像再生処理の概要を示す図である。
【図１０】画像片抽出の変形例について示すフローチャートである。
【図１１】変形例の画像片の抽出の概要を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面を参照して本発明の実施形態を説明する。  
図１は、本発明の一実施形態に係る画像整理装置の構成を示す図である。ここで、図１に示す画像整理装置は、デジタルカメラ（以下、単にカメラという）を例としている。
【００１０】
図１に示すカメラ１００は、制御部１０１と、操作部１０２と、撮像部１０３と、顔検出部１０４と、表示部１０５と、タッチパネル１０６と、記録部１０７と、時計部１０８と、通信部１０９とを有している。
【００１１】
制御部１０１は、カメラ用に構成されたＬＳＩ等から構成されており、ユーザによる操作部１０２の操作を受けて図１のカメラ１００内部の各ブロックの制御を行う。また、制御部１０１は、撮像部１０３によって取得された画像に対してホワイトバランス補正等の画像処理や圧縮伸張処理等を施すことも行う。また、本実施形態の制御部１０１は、タッチパネル１０６の操作に応じて表示部１０５に表示されている画像（第１の画像）から画像片を抽出する画像片抽出部としての機能も有する。さらに、本実施形態の制御部１０１は、抽出した画像片の分類を行う画像片分類部としての機能、分類結果に従って画像片を整理して別画像（第２の画像）を作成する別画像作成部としての機能、別画像から画像の検索を行う画像検索部としての機能も有する。これらの各機能の詳細については後述する。
【００１２】
操作部１０２は、ユーザがカメラ１００の操作を行うための操作部材である。操作部１０２には、例えば、カメラ１００の電源のオン/オフを切り替えるための電源ボタン、ユーザが撮影の実行を指示するためのレリーズボタン、ユーザが画像の再生を指示するための再生ボタン、ユーザがカメラ１００に関する各種の選択操作を行うための選択ボタン等が含まれる。
【００１３】
撮像部１０３は、撮影レンズ、撮像素子、Ａ/Ｄ変換部等から構成されている。撮影レンズは、図示しない被写体からの光束を撮像素子に入射させるためのレンズである。撮像素子は、撮影レンズからの光束に基づく被写体の像を電気信号に変換する。Ａ/Ｄ変換部は、撮像素子で得られたアナログの電気信号をデジタルデータ（以降、画像データという）に変換する。
【００１４】
顔検出部１０４は、撮像部１０３において得られた画像データ中の顔領域を検出する。顔領域は、例えば目や鼻、口等の顔の特徴部分を画像中から検出することで行う。
【００１５】
表示部１０５は、例えばカメラ１００の背面に設けられ、撮像部１０３を介して取得された画像や記録部１０７に記録された画像等の各種の画像を表示する。この表示部１０５は、例えば液晶ディスプレイ等から構成されている。この表示部１０５により、ユーザは被写体の構図やシャッターチャンスを確認することができる。
【００１６】
タッチパネル１０６は、表示部１０５と一体的に設けられ、ユーザによる表示部１０５の表示画面上へのタッチ操作の有無と、タッチ操作がなされた際のタッチ位置とを検出する。さらに、タッチパネル１０６は、タッチ操作がなされた際のユーザの指等によるタッチパネル１０６の押圧量と、タッチ操作後のスライド操作がなされた場合のスライド操作方向及びスライド操作量も検出する。
【００１７】
図２は、タッチパネル１０６の一例としての光感応式のタッチパネルの構成を示した図である。図２（ａ）に示す表示部１０５は、液晶ディスプレイの例を示しており、表示パネル１０５ａとバックライト１０５ｂとを有している。表示パネル１０５ａは、液晶を含む画素が２次元に配列されて構成され、制御部１０１の制御に従って各画素の光の透過率を変化させるようになされている。バックライト１０５ｂは、例えば白色発光ダイオード（ＬＥＤ）を光源とし、制御部１０１の制御に従って表示パネル１０５ａの背面から光照射を行う。本実施形態の例において、タッチパネル１０６としての光センサは、表示パネル１０５ａの各画素に配置されている。
【００１８】
このような構成において、例えば、図２（ａ）に示すようにして、ユーザの指２００が表示パネル１０５ａに接触すると、指２００が接触している位置において、バックライト１０５ｂから出射された光が反射され、その反射光が光センサにおいて受光される。制御部１０１は、各画素に配置された光センサからの出力信号の有無を監視しており、信号の出力がなされた光センサの位置からユーザの指２００のタッチ位置を検出する。
【００１９】
また、図２（ｂ）の矢印Ａで示したようにして、ユーザの指２００によるタッチパネル１０６への押圧量が増加した場合には、押圧量が小さい場合に比べて、信号の出力がなされる光センサの位置が広い範囲に分布する。このような信号の出力がなされる光センサの分布から、ユーザの指２００によるタッチパネル１０６の押圧力を検出することが可能である。
【００２０】
さらに、図２（ｃ）の矢印Ｂで示すようにして、ユーザの指２００がスライドされた場合には、信号の出力がなされる光センサの位置も矢印Ｂ方向にずれる。この信号の出力がなされる光センサの位置変化方向及び位置変化量から、ユーザの指２００のスライド操作方向及びスライド操作量を検出することが可能である。
【００２１】
なお、タッチパネル１０６としては光感応式に限らず、ユーザの指等の接触圧力によりタッチ操作を検出する感圧式のタッチパネル等の各種の構成のタッチパネルを用いることも可能である。
【００２２】
記録部１０７は、撮像部１０３を介して取得され、制御部１０１において圧縮された画像データが記録される。なお、この記録部１０７には、時計部１０８によって計時された撮影日時等の撮影条件が付加された画像ファイルとして画像データが記録される。また、本実施形態における記録部１０７は、分類情報記録部１０７ａとしての記録領域、整理画像記録部１０７ｂとしての記録領域も有している。分類情報記録部１０７ａには、制御部１０１による画像データの分類結果を示す分類結果ファイルが記録される。また、整理画像記録部１０７ｂには、分類結果ファイルに従って画像片を整理した結果として作成される別画像（以下、マイマップ画像という）が記録される。
【００２３】
時計部１０８は、画像の撮影がなされた日時等を計時する。通信部１０９は、ＵＳＢインターフェース等のカメラ１００が外部機器と通信するための通信回路である。
【００２４】
次に、本実施形態に係るカメラ１００の動作について説明する。図３は、本実施形態に係るカメラ１００のメインの動作を示すフローチャートである。
【００２５】
図３において、カメラ１００の制御部１０１は、まず、カメラ１００の電源がオンされたか否かを判定する（ステップＳ１０１）。ステップＳ１０１の判定において、電源がオフされている場合に、制御部１０１は図３の処理を終了させる。
【００２６】
一方、ステップＳ１０１の判定において、電源がオンされた場合に、制御部１０１はカメラ１００の動作モードが撮影モードであるか否かを判定する（ステップＳ１０２）。ステップＳ１０２の判定において、カメラ１００の動作モードが撮影モードである場合に、制御部１０１は、スルー画表示を行うべく、撮像部１０３を動作させる。この際、制御部１０１は、顔検出部１０４を動作させ、撮像部１０３を介して得られる画像データ中の顔領域を検出する（ステップＳ１０３）。その後、制御部１０１は、露出演算を行う（ステップＳ１０４）。この露出演算において、制御部１０１は、撮像部１０３を介して得られる画像データに基づいて、被写体の明るさを測定する。そして、測定した被写体の明るさに基づき、制御部１０１は、後述する撮影時において撮像部１０３を介して得られる画像の明るさを適正な明るさとするような露出量を演算する。撮影時においては、ステップＳ１０４で得られた露出量に従って撮像部１０３の制御が行われる。
【００２７】
次に、制御部１０１は、表示部１０５にスルー画表示を行う（ステップＳ１０５）。このスルー画表示において、制御部１０１は、撮像部１０３を介して得られる画像を逐次処理して表示部１０５に表示させる。撮像部１０３を連続動作させ、該連続動作によって得られる画像を連続的にカメラ１００の表示部１０５に表示させることにより、表示部１０５を電子ファインダとして利用することが可能である。このようなスルー画表示により、ユーザは構図やシャッターチャンスを決定することが可能である。
【００２８】
スルー画表示の後、制御部１０１は、撮影者によってレリーズ操作がなされたか、即ち操作部１０２のレリーズボタンが押されたか否かを判定する（ステップＳ１０６）。ステップＳ１０６の判定において、レリーズボタンが押されていない場合には、処理がステップＳ１０１に戻る。この場合に、制御部１０１は、カメラ１００の電源がオンであるか否かを再び判定する。一方、ステップＳ１０６の判定において、レリーズボタンが押された場合に、制御部１０１は、ステップＳ１０４で演算された露出量に応じて撮影動作を実行し、撮影動作の結果、撮像部１０３を介して得られる画像データに対して各種の画像処理を施した上で画像ファイルを生成し、該生成した画像ファイルを記録部１０７に記録させる（ステップＳ１０７）。その後、制御部１０１は、記録部１０７に記録させた画像ファイルを再生して表示部１０５に撮影画像を表示させる（ステップＳ１０８）。
【００２９】
次に、制御部１０１は、記録部１０７に記録した画像ファイル中の画像データの分類を行う（ステップＳ１０９）。画像分類の後、制御部１０１は、分類結果に基づいて分類結果ファイルを作成して記録部１０７に記録させるか、或いは既に分類結果ファイルが作成されている場合には分類結果ファイルを更新する（ステップＳ１１０）。その後、処理がステップＳ１０１に戻る。なお、ステップＳ１０９の画像分類の詳細については後述する。
【００３０】
また、ステップＳ１０２の判定において、カメラ１００の動作モードが撮影モードでない場合に、制御部１０１は、カメラ１００の動作モードが再生モードであるか否かを判定する（ステップＳ１１１）。ステップＳ１１１の判定において、カメラ１００の動作モードが再生モードでない場合には、処理がステップＳ１０１に戻る。一方、ステップＳ１１１の判定において、カメラ１００の動作モードが再生モードである場合に、制御部１０１は再生モードの処理を行う。この場合に、制御部１０１は、記録部１０７に記録された画像ファイルの中で、最後に記録された（撮影日時が最新の）画像ファイルを再生して表示部１０５に表示させる（ステップＳ１１２）。
【００３１】
その後、制御部１０１は、ユーザの指示により、画像分類の指示がなされたか否かを判定する（ステップＳ１１３）。この判定は、例えばユーザによる操作部１０２の操作若しくはユーザの指等が表示部１０５の表示画面に表示された図示しない画像分類指示ボタンにタッチしたか否かから行う。ステップＳ１１３の判定において、画像分類の指示がなされた場合に、制御部１０１は、画像分類の処理を行う（ステップＳ１１４）。画像分類の後、制御部１０１は、分類結果に基づいて分類結果ファイルを作成して記録部１０７に記録させるか、或いは既に分類結果ファイルが作成されている場合には分類結果ファイルを更新する（ステップＳ１１５）。なお、ステップＳ１１４の画像分類処理はステップＳ１０９の画像分類処理と同一である。その詳細については後述する。
【００３２】
ステップＳ１１３又はステップＳ１１５の後、制御部１０１は、通常以外のその他の表示を行うか否かを判定する（ステップＳ１１６）。この判定は、例えばユーザによる操作部１０２の操作若しくはユーザの指等が表示部１０５の表示画面に表示された図示しないマイマップ再生ボタン又はサムネイル表示ボタンにタッチしたか否かから行う。ステップＳ１１６の判定において、その他の表示を行わない場合に、処理がステップＳ１０１に戻る。
【００３３】
一方、ステップＳ１１６の判定において、その他の表示を行う場合に、制御部１０１は、ユーザによってマイマップ再生指示がなされたか否かを判定する（ステップＳ１１７）。ステップＳ１１７の判定において、マイマップ再生指示がなされた場合に、制御部１０１は、記録部１０７の整理画像記録部１０７ｂに記録されたマイマップ画像の再生を行う（ステップＳ１１８）。マイマップ画像の再生処理の終了後は、処理がステップＳ１１６に戻る。なお、マイマップ画像の再生処理の詳細については後述する。
【００３４】
また、ステップＳ１１７の判定において、マイマップ再生指示がなされていない場合に、制御部１０１は、サムネイル表示指示がなされたか否かを判定する（ステップＳ１１９）。ステップＳ１１９の判定において、サムネイル表示指示がなされていない場合、所定時間の経過後に、制御部１０１は、記録部１０７に記録された画像ファイルの中で次に撮影日時の新しい画像を表示部１０５に表示させる（ステップＳ１２０）。その後、処理がステップＳ１１３に戻る。
【００３５】
また、ステップＳ１１９の判定において、サムネイル表示指示がなされた場合に、制御部１０１は、記録部１０７に記録された画像のサムネイル画像を表示部１０５に表示させる（ステップＳ１２１）。その後、制御部１０１は、タッチパネル１０６の出力から、サムネイル画像の選択がなされたか、即ちユーザの指等が表示部１０５に表示されたサムネイル画像の何れかにタッチしたか否かを判定する（ステップＳ１２２）。ステップＳ１２２の判定において、ユーザの指等が表示部１０５に表示されたサムネイル画像の何れかにタッチしていた場合に、制御部１０１は、そのタッチ位置のサムネイル画像に対応した画像を表示部１０５に拡大表示する（ステップＳ１２３）。その後、処理がステップＳ１１３に戻る。また、ステップＳ１２１の判定において、ユーザの指等が表示部１０５に表示されたサムネイル画像の何れにもタッチしていない場合にも、処理がステップＳ１１３に戻る。
【００３６】
次に、ステップＳ１０９、Ｓ１１４の画像分類の処理について図４を参照して説明する。画像分類の処理に先だって表示部１０５には図５（ａ）で示すようにして撮影画像又は再生画像（以下、単に画像という）３００が表示されている。画像分類処理が開始されると、制御部１０１は、図５（ａ）で示すように、ユーザが画像片の分類を行うための分類項目を示す表示３０１ａ〜３０１ｃ及びユーザが画像分類の終了指示を行うための終了ボタン３０２を表示部１０５に表示させる（ステップＳ２０１）。そして、タッチパネル１０６の出力から、ユーザの指等による表示部１０５の表示画面上へのタッチ操作がなされたか否かを判定する（ステップＳ２０２）。ステップＳ２０２の判定においてタッチ操作がなされるまで、制御部１０１は、ステップＳ２０２の判定を行いつつ、待機する。
【００３７】
ステップＳ２０２の判定において、ユーザの指等によるタッチ操作がなされた場合に、制御部１０１は、タッチパネル１０６の出力から、ユーザの指等のタッチ位置を検出する（ステップＳ２０３）。その後、制御部１０１は、検出したタッチ位置が終了ボタン３０２の位置であるか否かを判定する（ステップＳ２０４）。ステップＳ２０４の判定において、タッチ位置が終了ボタン３０２の位置である場合に、制御部１０１は、図４の処理を終了させる。この場合、ステップＳ１１０又はステップＳ１１５から処理を実行する。
【００３８】
また、ステップＳ２０４の判定において、タッチ位置が終了ボタン３０２の位置でない場合に、制御部１０１は、タッチ位置が画像３００内であるか否かを判定する（ステップＳ２０５）。ステップＳ２０５の判定において、タッチ位置が画像３００内でない場合には、処理がステップＳ２０２に戻る。
【００３９】
また、ステップＳ２０５の判定において、タッチ位置が画像３００内である場合に、制御部１０１は、そのタッチ位置を含む小領域を画像片として抽出する（ステップＳ２０６）。例えば、図５（ａ）に示す花３００ａの位置にユーザの指２００がタッチした場合には花３００ａを含む小領域として画像片３００ｂが抽出される。この画像片３００ｂの大きさはユーザの指２００の押圧力に応じて設定される。即ち、ユーザが表示部１０５の表示画面を押し込むことで、その押し込みの強さに応じた大きさの画像片３００ｂが抽出される。画像片３００ｂが抽出された際には、図５（ａ）に示すようにして、抽出された画像片３００ｂが視覚的に分かるような枠が表示される。なお、図５（ａ）の例では、矩形の画像片３００ｂを抽出するようにしている。しかしながら、画像片の形状は矩形に限らず、例えば円形であっても良い。
【００４０】
画像片３００ｂの抽出後、制御部１０１は、タッチパネル１０６の出力から、ユーザの指等のスライド操作がなされたか否かを検出する（ステップＳ２０７）。ステップＳ２０７の判定において、スライド操作がなされていない場合には、処理がステップＳ２０２に戻る。一方、ステップＳ２０７の判定において、スライド操作がなされた場合に、制御部１０１は、図５（ｂ）に示すようにして、ユーザの指２００等のスライド操作量に応じて画像片３００ｂの位置をシフトさせる（ステップＳ２０８）。その後、制御部１０１は、シフト後の画像片３００ｂの位置が分類項目表示３０１ａ〜３０１ｃの何れかと一致したか否かを判定する（ステップＳ２０９）。ステップＳ２０９の判定において、シフト後の画像片３００ｂの位置が分類項目表示３０１ａ〜３０１ｃの何れとも一致していない場合には、処理がステップＳ２０２に戻る。一方、ステップＳ２０９の判定において、シフト後の画像片３００ｂの位置が分類項目表示３０１ａ〜３０１ｃの何れかと一致した場合に、制御部１０１は、画像片３００ｂの位置に対応した分類項目に応じたマイマップ画像を作成（或いは更新）する（ステップＳ２１０）。
【００４１】
図６は、マイマップ画像の例を示す図である。ここで、図６（ａ）は分類項目が「花」の場合のマイマップ画像の例を示し、図６（ｂ）は分類項目が「ペット」の場合のマイマップ画像の例を示している。図６（ａ）、図６（ｂ）に示すように、本実施形態におけるマイマップ画像は、分類項目に応じた背景画像（例えば「花」の場合には花畑、「ペット」の場合にはペット小屋等）４０１に、画像片３０１ｂを貼り付けることによって作成される画像である。なお、図６（ａ）、図６（ｂ）においては、画像片３０１ｂの境界を示す枠を図示しているが、実際の貼り付けの際には、画像片３０１ｂの枠を消去してから貼り付けを行うことが望ましい。また、分類項目が人物のマイマップ画像については例示していないが、例えば人物の顔のサムネイル画像を額縁の画像に嵌め込んで絵画のようにしたり、人物の胴体の画像に人物の顔のサムネイル画像を貼り付けたりすれば良い。
【００４２】
以上のようなマイマップ画像は、ユーザが撮影或いは再生した画像の一部を自由に貼り付けることでユーザの好みに応じた形で発展する画像である。このため、ユーザは画像の分類を楽しみながら行うことが可能である。
【００４３】
なお、マイマップ画像には戻るボタン４０２も重畳しておく。この戻るボタン４０２は後述するマイマップ画像再生の際に用いられるボタンである。また、ユーザを示す画像であるアバター４０３を合成するようにし、このアバター４０３の操作によって後述するマイマップ画像再生の際に再生するマイマップ画像の選択等を行えるようにしても良い。
【００４４】
ステップＳ２１０において、マイマップ画像を作成した後、制御部１０１は、画像３００と画像片３０１とが対応している旨を示す分類情報を分類結果ファイルに記録する（ステップＳ２１１）。さらに、制御部１０１は、画像３００と画像片３０１との対応情報以外の情報（画像中の顔の数）等を分類結果ファイルに記録する（ステップＳ２１２）。その後、処理がステップＳ２０２に戻る。
【００４５】
図７（ａ）は分類結果ファイルの一例を示している。図７（ａ）に示す分類結果ファイルは、「顔の数」、「顔の位置、特徴、大きさ」、「画像片」、「撮影日時」の項目を有している。
【００４６】
「顔の数」はステップＳ１０３の顔検出時に検出された画像データ中の顔領域の数が記録される。「顔の位置、特徴、大きさ」は画像内のどの位置に、どの程度の大きさの、どのような顔が含まれているかが記録される。本実施形態においては、例えば、図７（ｂ）のようにして１画面をＡ１〜Ａ９の９つの領域に分割し、このＡ１〜Ａ９によって顔の位置を示すようにしている。また、顔の大きさは、Ａ１〜Ａ９の領域に対する大きさによってＤ１〜Ｄ３で示す３段階の大きさで示すようにしている。Ｄ１は、顔領域の大きさＡ１〜Ａ９の領域の大きさよりも小さい場合である。また、Ｄ２は、顔領域がＡ１〜Ａ９の領域に内接している（大きさがほぼ等しい）場合である。また、Ｄ３は、顔領域の大きさがＡ１〜Ａ９の領域の大きさよりも大きい場合である。さらに、顔の特徴については、顔の特徴を示す識別子を画像データ毎に記録する。例えば、画像１は、Ａ４の領域に特徴Ｐ−Ａ（例えば家族を示す）の顔がＤ２の大きさで存在し、且つＡ７の領域に特徴Ｐ−Ａの顔がＤ３の大きさで存在していることを示す。
【００４７】
「画像片」は、上述したようにして分類された画像片と画像との対応情報が記録される。この対応情報は、マイマップ画像が作成される毎に記録する。例えば、画像１は、マイマップ画像中の花Ａ又は人物Ａと対応していることを示す。
【００４８】
「撮影日時」は、時計部１０８によって記録された撮影日時が記録される。カメラ１００にＧＰＳ機能を設けることにより、撮影位置を記録できるようにしても良い。
【００４９】
次に、ステップＳ１１８のマイマップ画像再生処理について図８を参照して説明する。マイマップ画像再生の指示がなされたときに、制御部１０１は、マイマップ画像の選択画面を表示させる（ステップＳ３０１）。図９（ａ）は選択画面の例を示している。図９（ａ）に示すように、選択画面においては、上述した分類項目に対応したマイマップ画像の分類を示す項目表示５０１ａ〜５０１ｃを表示させる。なお、図９（ａ）の例において、花畑５０１ａは分類項目「花」と対応している。また、家５０１ｂは分類項目「人物」と対応している。さらに、ペットの家５０１ｃは分類項目「ペット」と対応している。さらに、選択画面においては終了ボタン５０２も表示させる。
【００５０】
図９（ａ）で示す選択画面を表示させた後、制御部１０１は、タッチパネル１０６の出力から、ユーザにより項目表示５０１ａ〜５０１ｃの何れかの項目が選択されたか否かを判定する（ステップＳ３０２）。ステップＳ３０２の判定において、項目表示５０１ａ〜５０１ｃの何れの項目も選択されていない場合、制御部１０１は、タッチパネル１０６の出力から、ユーザにより終了ボタン５０２が選択されたか否かを判定する（ステップＳ３０３）。ステップＳ３０３の判定において、終了ボタン５０２が選択されていない場合には処理がステップＳ３０１に戻る。一方、ステップＳ３０３の判定において、終了ボタン５０２が選択された場合に、制御部１０１は、図８の処理を終了させる。この後は、処理が図３のステップＳ１１６に戻る。
【００５１】
また、ステップＳ３０２の判定において、項目表示５０１ａ〜５０１ｃの何れかが選択された場合に、制御部１０１は、図９（ｂ）で示すようにして、選択された項目に対応したマイマップ画像を表示部１０５に表示させる（ステップＳ３０４）。ここで、図９（ｂ）は花畑の項目表示５０１ａが選択された場合に表示されるマイマップ画像の例を示している。このマイマップ画像は図６（ａ）で示したものである。
【００５２】
マイマップ画像の表示後、制御部１０１は、タッチパネル１０６の出力から、ユーザにより戻るボタン４０２が選択されたか否かを判定する（ステップＳ３０５）。ステップＳ３０５の判定において、戻るボタン４０２が選択された場合には処理がステップＳ３０１に戻る。この場合に、制御部１０１は、図９（ａ）で示した選択画面を再び表示させる。一方、ステップＳ３０５の判定において、戻るボタン４０２が選択されていない場合に、制御部１０１は、タッチパネル１０６の出力から、ユーザによりマイマップ画像中の何れかの画像片が選択されたか否かを判定する（ステップＳ３０６）。ステップＳ３０６の判定において、画像片が選択されていない場合には処理がステップＳ３０５に戻る。一方、ステップＳ３０６の判定において、画像片が選択された場合に、制御部１０１は、分類結果ファイルを参照してユーザによって選択された画像片に対応した画像を表示部１０５に表示させる（ステップＳ３０７）。図９（ｃ）は画像片が選択された場合の対応画像の表示例を示す。例えば、図９（ｂ）に示すようにして、画像片３００ｂが選択された場合には、この画像片３００ｂに対応した画像３００が表示部１０５に表示される。なお、このような表示を行う際には、表示部１０５に表示されている画像が電子アルバムとして記録されていることを示す表示６０１を行うようにしても良い。
【００５３】
以上説明したように、本実施形態によれば、画像の一部を画像片として抽出し、この画像片を用いてマイマップ画像を作成し、さらに、このマイマップ画像から所望の画像を検索可能としている。これにより、ユーザは、楽しみながら画像の分類を行うことができる。
【００５４】
また、本実施形態においては、抽出する画像片の大きさをタッチパネル１０６の押圧力によって変化させるようにしている。これにより、ユーザは任意の大きさの画像片を用いてマイマップ画像を作成することが可能である。
【００５５】
ここで、上述した実施形態においては、「花」、「人物」、「ペット」の３種類の分類に対応したマイマップ画像の作成について例示しているが、これ以外の分類を行えるようにしても良い。また、分類項目をユーザが作成できるようにしても良い。
【００５６】
また、上述の実施形態においては、単にユーザのタッチ位置を含む小領域を画像片として抽出している。この場合、花等の主要な対象物に加えて背景の画像も含まれた画像片が抽出されることになる。背景の画像が含まれたままで画像片をマイマップ画像に貼り付けてしまうと、作成されるマイマップ画像が見づらくなるおそれがある。これに対して以下の図１０で示すように画像片を抽出するようにしても良い。ここで、図１０の処理は、図４のステップＳ２０６の処理に代えて行われるものである。
【００５７】
図４のステップＳ２０５の判定において、ユーザの指等が表示部１０５に表示されている画像にタッチした場合に、制御部１０１は、図１１（ａ）に示すようにして、タッチ位置を含む所定の大きさの小領域（矩形、円形等）７０１を設定する（ステップＳ４０１）。次に、制御部１０１は、小領域７０１の大きさをユーザの指２００の押圧力に応じて変更する（ステップＳ４０２）。
【００５８】
次に、制御部１０１は、小領域７０１中の画像データを取得し、取得した画像データ中の主要色（最も多い色）を検出する（ステップＳ４０３）。その後、制御部１０１は、ステップＳ４０３で検出した主要色と近似する色の部分を小領域７０１中で検出する（ステップＳ４０４）。即ち、小領域７０１の主要色は小領域７０１中で最も重要な対象物であると考える。次に、制御部１０１は、小領域７０１中で、主要色及びその近似色の領域に囲まれていない領域を背景領域とし、この背景領域を透明画像化する（ステップＳ４０５）。例えば、図１１（ｂ）のようにして抽出された小領域７０１内の主要な対象物は花であり、この場合の主要色は花弁の色となる。したがって、ステップＳ４０５の処理においては、花弁の色を有する領域７０２で囲まれる部分以外の例えば枝７０３の部分が図１１（ｃ）に示すようにして透明画像化される。このようにして画像片が抽出される。画像片の抽出後は、図４のステップＳ２０７以後の処理が実行される。
【００５９】
このようにして画像片を抽出することにより、マイマップ画像に画像片の背景部分までもが貼り付けられてしまうことがない。
【００６０】
以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。上述の実施形態では、画像整理装置の例としてデジタルカメラを示している。しかしながら、本実施形態はタッチパネルを有する各種の装置に適用可能である。
【００６１】
また、上述した実施形態では、画像３００の再生時には常に項目表示３０１ａ〜３０１ｃを表示させるようにしている。これに対し、画像３００の再生後、ユーザの指等による画像３００へのタッチ時間が所定時間を超えた時点で項目表示を行うようにしても良い。
【００６２】
また、上述した実施形態では、主に静止画像からの画像片の抽出及びマイマップ画像の作成について説明している。しかしながら、上述した実施形態の手法は、動画像に対しても適用可能である。例えば、動画像の再生中にユーザの指等によって再生中の画像へのタッチがなされた時点で再生中の画像を一時停止させるようにすれば、以後は静止画像の場合と同様の画像片抽出及びマイマップ画像作成を行うことが可能である。このようにして作成されたマイマップ画像中の対応する画像片が選択された場合には、その画像片が対応している動画像中のコマから動画像が再生される。
【００６３】
さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、上述したような課題を解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。
【符号の説明】
【００６４】
１００…カメラ、１０１…制御部、１０２…操作部、１０３…撮像部、１０４…顔検出部、１０５…表示部、１０６…タッチパネル、１０７…記録部、１０７ａ…分類情報記録部、１０７ｂ…整理画像記録部、１０８…時計部、１０９…通信部
【図１】
2010252266.tif 000003
【図２】
2010252266.tif 000004
【図３】
2010252266.tif 000005
【図４】
2010252266.tif 000006
【図５】
2010252266.tif 000007
【図６】
2010252266.tif 000008
【図７】
2010252266.tif 000009
【図８】
2010252266.tif 000010
【図９】
2010252266.tif 000011
【図１０】
2010252266.tif 000012
【図１１】
2010252266.tif 000013