(57)【要約】【課題】簡単な操作で、オリジナリティのある楽しく賑やかなアルバムを作ることのできるカメラ及び表示装置並びに電子機器を提供することである。【解決手段】本カメラ１０は、複数の画像を表示部２０の画面の枠内に所定の順序で、順次、画像を表示し、上記画面の枠外に同時に他の画像を表示可能である。そして、上記表示部２０に表示されている画像は画像分類部１１ｅによって分類される。この画像分類部１１ｅによる分類結果に従って、表示制御部１１ａは、上記複数の画像の何れかを上記画面の枠外の画像とするかを決定して表示部２０の画面に表示するように制御する。【選択図】      図１
2010252156.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像を画面の枠内に所定の順序で、順次、画像を表示するもので、上記画面の枠外に同時に他の画像を表示可能な表示部を有するカメラに於いて、
上記表示部に表示中の画像を分類する分類部と、
上記分類部による分類結果に従って、上記複数の画像の何れかを上記枠外の画像とするかを決定して表示するように制御する表示制御部と、
を具備することを特徴とするカメラ。
【請求項２】
上記枠外の画像を選択可能な選択部を更に具備し、
上記表示制御部は、上記枠外の画像が選択された時に、上記所定の順序にかかわりなく、上記枠内に上記選部で選択された画像を拡大表示することを特徴とする請求項１に記載のカメラ。
【請求項３】
上記分類部は、上記表示部に表示される画像が人物画像か風景画像かに応じて画像を分類することを特徴とすることを特徴とする請求項１に記載のカメラ。
【請求項４】
複数の画像を記録する記録部と、上記記録部に記録された複数の画像を画面内の所定の枠内に所定の順序で表示し、上記所定の枠内の外側である枠外に同時に他の画像を表示可能な表示部と、を備えたカメラに於いて、
上記表示部に表示された表示画像を画像の内容に応じて分類する第１の分類部と、
上記表示部に表示された表示画像がどの画像群に含まれるかに応じて分類する第２の分類部と、
上記第１の分類部と第２の分類部による分類結果に従って、上記複数の画像の何れかを上記枠外の画像とするかを決定するように制御する表示制御部と、
を具備することを特徴とするカメラ。
【請求項５】
複数の画像を所定の順序で、順次、画像を表示する表示部を有するカメラに於いて、
上記表示部に表示中の画像を分類する分類部と、
上記表示部の同一画面の所定の枠内と枠外に画像を表示可能であって、上記分類部による分類結果に従って、上記複数の画像の何れを上記表示部の枠外に表示する枠外画像とするかを決定して表示する表示制御部と、
を具備することを特徴とするカメラ。
【請求項６】
上記枠外画像を選択可能な選択部を更に具備し、
上記表示制御部は、上記枠外画像が選択された時には、上記所定の順序にかかわりなく、上記表示部の画面の上記枠内に上記選択された画像を拡大表示するように制御することを特徴とする請求項５に記載のカメラ。
【請求項７】
上記分類部は、上記表示部の上記枠内に表示されている画像が人物画像か風景画像かに応じて画像分類することを特徴とすることを特徴とする請求項５に記載のカメラ。
【請求項８】
上記分類部は、上記表示部に表示中の画像の内容に応じて分類する第１の分類部と、上記表示部に表示中の画像がどの画像群に含まれるかに応じて分類する第２の分類部と、を有し、
上記表示制御部は、上記第１の分類部と上記第２の分類部の分類結果に従って、上記複数の画像の何れかを上記表示部の上記枠外に表示する画像とするかを決定するように制御することを特徴とする請求項５に記載のカメラ。
【請求項９】
上記表示制御部は、上記選択部によって上記表示部の枠外に表示された枠外画像が選択された場合には、上記表示部の画面の上記枠内に上記選択された画像を拡大表示すると共に、上記表示部の枠外に上記選択された画像を含む複数の画像を表す副画像を表示するように制御することを特徴とする請求項６に記載のカメラ。
【請求項１０】
上記表示制御部は、上記選択部によって上記表示部の枠外に表示された上記副画像が選択された場合には、上記表示部の画面の上記枠内に画像が拡大表示される前の画像の遷移状態を表示するように制御することを特徴とする請求項９に記載のカメラ。
【請求項１１】
上記第１の分類部で分類された画像と上記第２の分類部で分類された画像を、当該画像に関連した情報と共に記録する関連情報記録部を更に具備することを特徴とする請求項８に記載のカメラ。
【請求項１２】
複数の画像を所定の順序で、順次、画像を表示するもので、同一画面の所定の枠内と枠外に画像を表示可能な表示部と、
上記表示部に表示中の画像を分類する分類部と、
上記分類部による分類結果に従って、上記複数の画像の何れを上記表示部の枠外に枠外画像として表示するかを決定する表示制御部と、
を具備することを特徴とする表示装置。
【請求項１３】
上記枠外画像を選択可能な選択部を更に具備し、
上記表示制御部は、上記枠外画像が選択された時には、上記所定の順序にかかわりなく、上記表示部の画面の上記枠内に上記選択された画像を拡大表示するように制御することを特徴とする請求項１２に記載の表示装置。
【請求項１４】
上記分類部は、上記表示部の上記枠内に表示されている画像が人物画像か風景画像かに応じて画像分類することを特徴とすることを特徴とする請求項１２に記載の表示装置。
【請求項１５】
上記分類部は、上記表示部に表示中の画像の内容に応じて分類する第１の分類部と、上記表示部に表示中の画像がどの画像群に含まれるかに応じて分類する第２の分類部と、を有し、
上記表示制御部は、上記第１の分類部と上記第２の分類部の分類結果に従って、上記複数の画像の何れかを上記表示部の上記枠外に表示する画像とするかを決定するように制御することを特徴とする請求項１２に記載の表示装置。
【請求項１６】
上記第１の分類部で分類された画像と上記第２の分類部で分類された画像を、当該画像に関連した情報と共に記録する関連情報記録部を更に具備することを特徴とする請求項１５に記載の表示装置。
【請求項１７】
複数の画像を同一画面の枠内に所定の順序で、順次、画像を表示するもので、上記同一画面の枠外に同時に他の画像を表示可能な電子機器に於いて、
上記画面に表示中の画像を分類する分類部と、
上記分類部による分類結果に従って、上記複数の画像の何れかを枠外画像として上記画面の枠外に表示するように制御する表示制御部と、
を具備することを特徴とする電子機器。
【請求項１８】
上記枠外画像を選択可能な選択部を更に具備し、
上記表示制御部は、上記枠外画像が選択された時には、上記所定の順序にかかわりなく、上記画面の上記枠内に上記選択された画像を拡大表示するように制御することを特徴とする請求項１７に記載の電子機器。
【請求項１９】
上記分類部は、上記画面の上記枠内に表示されている画像が人物画像か風景画像かに応じて画像分類することを特徴とすることを特徴とする請求項１７に記載の電子機器。
【請求項２０】
上記分類部は、上記画面に表示中の画像の内容に応じて分類する第１の分類部と、上記画面に表示中の画像がどの画像群に含まれるかに応じて分類する第２の分類部と、を有し、
上記表示制御部は、上記第１の分類部と上記第２の分類部の分類結果に従って、上記複数の画像の何れかを上記画面の上記枠外に表示する画像とするかを決定するように制御することを特徴とする請求項１７に記載の電子機器。
【請求項２１】
上記第１の分類部で分類された画像と上記第２の分類部で分類された画像を、当該画像に関連した情報と共に記録する関連情報記録部を更に具備することを特徴とする請求項２０に記載の電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、所謂、デジタルカメラやカメラ付携帯電話など、表示部を有する撮影、表示機器の改良に関する。また、撮影後の画像を扱う表示機器に応用が可能なものである。
【背景技術】
【０００２】
近年、メモリの大容量化や低価格化が進み、カメラ内にこれを内蔵して、ここに大量の画像を保存することが可能となっている。
【０００３】
また、カメラ背面に設けられている液晶等、表示パネルも大型画面化が進み、保存された画像をここで表示して鑑賞するような用途が一般的になっている。
【０００４】
一方で、写真を装飾して楽しいアルバム作りを行いたいという要望も強い。そのため、画像の表示時に、このような装飾がついた画面をカメラの表示パネルに表示するような技術の登場が待たれていた。
【０００５】
また、撮影画像でアルバムを作成するような技術が追求されている。その一例として、本件出願人による下記特許文献１には、撮影時にテンプレートを表示してアルバム効果を確認しながら撮影するカメラが記載されている。
【０００６】
更に、下記特許文献２には、共通性のある画像に対してタイトルを選び、再生時には同一のタイトルをもつ画像を、そのタイトルによって特定される台紙に貼り付ける、という技術が開示されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００７−１０４３３６号公報
【特許文献２】特開平９−２１４６５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上記特許文献１に記載のカメラでは、撮影時に、テンプレート撮影モードの設定が必要であり、操作方法に改善の余地を有している。
【０００９】
また、上記特許文献２に記載の技術では、台紙が画一的になりがちであるという課題を有している。
【００１０】
したがって本発明は、上記実情に鑑みてなされたものであり、その目的は、簡単な操作で、オリジナリティのある楽しく賑やかなアルバムを作ることのできるカメラ及び表示装置並びに電子機器を提供することである。
【００１１】
また、本発明の他の目的は、興味ある画像に類似の画像のみを見ていくことのできるカメラ及び表示装置並びに電子機器を提供することである。
【課題を解決するための手段】
【００１２】
すなわち本発明は、複数の画像を画面の枠内に所定の順序で、順次、画像を表示するもので、上記画面の枠外に同時に他の画像を表示可能な表示部を有するカメラに於いて、上記表示部に表示中の画像を分類する分類部と、上記分類部による分類結果に従って、上記複数の画像の何れかを上記枠外の画像とするかを決定して表示するように制御する表示制御部と、を具備することを特徴とする。
【００１３】
また本発明は、複数の画像を記録する記録部と、上記記録部に記録された複数の画像を画面内の所定の枠内に所定の順序で表示し、上記所定の枠内の外側である枠外に同時に他の画像を表示可能な表示部と、を備えたカメラに於いて、上記表示部に表示された表示画像を画像の内容に応じて分類する第１の分類部と、上記表示部に表示された表示画像がどの画像群に含まれるかに応じて分類する第２の分類部と、上記第１の分類部と第２の分類部による分類結果に従って、上記複数の画像の何れかを上記枠外の画像とするかを決定するように制御する表示制御部と、を具備することを特徴とする。
【００１４】
本発明は、複数の画像を所定の順序で、順次、画像を表示する表示部を有するカメラに於いて、上記表示部に表示中の画像を分類する分類部と、上記表示部の同一画面の所定の枠内と枠外に画像を表示可能であって、上記分類部による分類結果に従って、上記複数の画像の何れを上記表示部の枠外に表示する枠外画像とするかを決定して表示する表示制御部と、を具備することを特徴とする。
【００１５】
更に本発明は、複数の画像を所定の順序で、順次、画像を表示するもので、同一画面の所定の枠内と枠外に画像を表示可能な表示部と、上記表示部に表示中の画像を分類する分類部と、上記分類部による分類結果に従って、上記複数の画像の何れを上記表示部の枠外に枠外画像として表示するかを決定する表示制御部と、を具備することを特徴とする。
【００１６】
本発明は、複数の画像を同一画面の枠内に所定の順序で、順次、画像を表示するもので、上記同一画面の枠外に同時に他の画像を表示可能な電子機器に於いて、上記画面に表示中の画像を分類する分類部と、上記分類部による分類結果に従って、上記複数の画像の何れかを枠外画像として上記画面の枠外に表示するように制御する表示制御部と、を具備することを特徴とする。
【発明の効果】
【００１７】
本発明によれば、簡単な操作で、オリジナリティのある楽しく賑やかなアルバムを作ることのできるカメラ及び表示装置並びに電子機器を提供することができる。
【００１８】
また、本発明によれば、興味ある画像に類似の画像のみを見ていくことのできるカメラ及び表示装置並びに電子機器を提供することができる。
【図面の簡単な説明】
【００１９】
【図１】本発明の一実施形態に係るカメラの概略構成を示すブロック図である。
【図２】本発明の一実施形態に於けるカメラ１０の再生モードによる表示を説明するための図である。
【図３】本発明の一実施形態に於けるカメラ１０の再生モードによる表示を説明するためのもので、（ａ）は風景写真の画像の表示例を示した図、（ｂ）は人物の写真の表示例を示した図である。
【図４】本発明の一実施形態に於けるカメラ１０の再生画像の表示例について説明するための図である。
【図５】本発明の一実施形態に於けるカメラ１０の制御動作を説明するためのフローチャートである。
【図６】図５のフローチャートのステップＳ８に於けるサブルーチン「画像分類」の詳細な動作について説明するためのフローチャートである。
【図７】（ａ）は、本発明の一実施形態のカメラの画像分類に於ける各画像の分類結果の例を表したグラフ、（ｂ）は表示画面上の顔の位置を特定するためのエリアを説明するための図、（ｃ）は（ｂ）のエリアに対する顔の大きさについて説明するための図である。
【図８】図５のフローチャートのステップＳ１４に於けるサブルーチン「アルバム再生」の処理動作について説明するためのフローチャートである。
【図９】イベント判定を説明するためのもので、日時と画像数の関係を示したグラフである。
【図１０】図８のフローチャートのサブルーチン「イベント判定」の詳細な処理動作について説明するためのフローチャートである。
【図１１】カメラの画像分類に於ける各動画の分類結果の例を表したグラフである。
【図１２】図１１の分類結果に基づいたカメラの動画再生モードによる表示を説明するための図である。
【発明を実施するための形態】
【００２０】
以下、図面を参照して本発明の実施形態について説明する。
【００２１】
図１は、本発明の一実施形態に係るカメラの概略構成を示すブロック図である。
【００２２】
本実施形態に於けるカメラ１０は、画像処理及び制御部１１と、撮像部１２と、顔検出部１３と、記録部１４と、操作判定部１６と、ＧＰＳ部１７と、時計部１８と、表示部２０と、タッチパネル２１と、通信部２２と、を有して構成される。
【００２３】
画像処理及び制御部１１は、このカメラ１０全体の制御動作を司ると共に、撮像部１２により取得された画像のエッジ強調、色補正、画像圧縮等の画像処理や、画像選択を行うものである。また、画像処理及び制御部１１は、その内部に表示制御部１１ａと、特徴抽出部１１ｂと、顔位置、大きさ判定部１１ｃと、画像検索部１１ｄと、画像分類部１１ｅと、を有している。
【００２４】
上記特徴抽出部１１ｂは、図示されない被写体の顔の特徴や色を抽出するものであり、顔位置、大きさ判定部１１ｃは、画像から顔画像の位置や大きさを判定する。また、画像検索部１１ｄは、画像分類部１１ｅによる画像分類の結果、各画像に対して検索を行うためのものである。また、この画像検索部１１ｄは、本発明の特徴たる消去画像検索も行う。更に、画像分類部１１ｅは後述するように、主要被写体の種類別に画像を分類するものである。
【００２５】
撮像部１２は、図示されないが撮影レンズや撮像素子等を有して構成されるもので、図示されない被写体からの撮影光束を取り込んで画像を取り込むためのものである。ここで取り込まれた画像は、画像処理及び制御部１１にて、エッジ強調、色補正、画像圧縮等の画像処理が行われた後、記録部１４に記録される。
【００２６】
顔検出部１３は、周知の顔画像認識処理等により、撮像部に取り込まれた画像中の顔画像を検出するためのものである。記録部１４は、上述した画像処理が施された画像や後述補する日時データ等を記憶するためのものである。
【００２７】
操作判定部１７は、カメラの各種モードのスイッチや電源スイッチ、レリーズスイッチ等の各種スイッチ及び判定部から構成される。ユーザが何れかのスイッチを操作すると、画像処理及び制御部１１がこれを検出するようになっている。また、操作判定部１７は、画像処理及び制御部１１と共に、後述する壁紙を選択する際の画像選択部としても機能する。
【００２８】
時計部１８は、撮影時の日時データを出力するためのものである。ＧＰＳ部１９は、撮影時の場所情報を出力するためのものである。これら撮影時の日時や場所の情報と画像が記録部１４に一緒に記録されて、画像整理や検索に利用できるようになっている。
【００２９】
表示部２０は、画像処理及び制御部１１内の表示制御部１１ａによって制御されるもので、上述した被写体の画像、日時データに対応する文字情報や、壁紙を表示する。タッチパネル２１は、画面下に配置された複数のタッチスイッチから構成されるもので、該タッチパネルをユーザが触れることによって、選択された部位のスイッチが操作されるように選択部を構成している。通信部２２は、本カメラ１０内と、例えば、パーソナルコンピュータ（ＰＣ）やテレビジョン（ＴＶ）等の外部機器と画像並びに付随した情報等の入出力を行うためのものであり、例えば、無線では赤外通信や無線ＬＡＮ等、有線ではＵＳＢ等が想定されている。
【００３０】
このような構成のカメラ１０に於いて、撮影モード時には、撮影前であってもカメラ電源がオンされた状態であれば、逐次撮像部１３から画像を取得し、表示部２０に表示することによって、ユーザがフレーミングやシャッタチャンスを確認できるようになっている。また、表示部２０は、単に、画面いっぱいに画像を表示するだけでなく、例えば、撮影モードに於いて、表示画像を装飾する背景画像を作成して、それと一緒に画像を表示したりできるようになっている。このような制御は、表示制御部１１ａにより行われる。
【００３１】
次に、図２を参照して、上述した構成のカメラ１０の再生モードによる表示について説明する。
【００３２】
図２は、上述した構成のカメラ１０を使用して、例えば、ユーザが旅行に行ったときに撮影した画像の例を示した図である。
【００３３】
ここで、例えば、旅行に行った時の写真が、図２（ａ）〜（ｆ）に示されるように６枚ある場合、大きく分けて、人物が主被写体である人物写真の画像２５ｃ、２５ｄ、２５ｆと、人物が主被写体ではない風景写真の画像２５ａ、２５ｂ、２５ｅと、に分類することができる。
【００３４】
このような写真を、カメラ１０で再生させて見ていく場合、画像２５ａ→画像２５ｂ→画像２５ｃ→…と、撮影した順序に従って見るのが普通である。ところが、この時、図３（ａ）に示されるように、風景写真の画像２５ａL を表示部２０の画面２０ａの枠内２０ｂに表示する時には、同時に、枠外２５ｃに同様に風景の写真の縮小画像２５ｂS 、２５ｅS を表示する。或いは、図３（ｂ）に示されるように、人物写真の画像２５ｃL の画像では、同時に人物の写真を枠外２０ｃに縮小画像２５ｄS 、２５ｆS として表示する。尚、本実施形態に於いては、画面２０ａに大きく表示されている画像２５ａL 、画像２５ｃL が表示されている部分を枠内２０ｂとし、この枠内２０ｂより外側（この場合上側）の部分を枠外２０ｃとする。
【００３５】
もちろん、この時、枠内２０ｂに大きく表示されている画像（２５ａL 、２５ｃL ）が、鑑賞されるべき画像で、枠外２０ｃに表示されている他の画像（２５ｂS 、２５ｅS 、２５ｄS 、２５ｆS ）がそれを邪魔しないようにする工夫が必要である。本実施形態に於いては、多くの面積を占めないように、縮小画像は、互いに重ね合せて表示するようにしている。また、このとき、顔が存在する画像は、他の写真によって顔が隠れないように重ねて表示するようにしている。
【００３６】
これによって、枠内２０ｂの表示中画像を枠外２０ｃの画像の類似画像で装飾するので、雰囲気を盛り上げて、楽しく写真の鑑賞ができる他、自分の興味の有る写真が枠外にあることに気づいた場合は、それを楽しみにして、画像を切り替えたり、その枠外にある画像を選択したりして、興味のある画像を先に見たり、興味あるものだけを見るような楽しみ方をすることができる。
【００３７】
次に、図４を参照して、本発明の一実施形態に於けるカメラ１０の再生画像の表示例について説明する。
【００３８】
上述した図３（ａ）、（ｂ）に示されるような画像表示を行う、アルバム表示は、以下のようにしてなされる。例えば、図４（ａ）に示されるように、表示画面２０ａ上にアルバム３１ａ、３１ｂ、３１ｃがその背表紙を並べて擬似的に表示されている。この背表紙、例えばアルバム３１ａの背表紙が選択されると、図４（ｂ）に示されるように、アルバム３１ａが開くような遷移画像が表示されながら、図３（ａ）、（ｂ）に示されるようなページの画像が表示される。
【００３９】
このとき、図４（ｃ）に示されるように、風景の画像２５ａL が画面２０ａの枠内２０ｂに大きく表示されると、その他の風景の画像が枠外２０ｃに縮小画像２５ｂS 、２５ｅS として表示される。したがって、その時の風景画像の写真が集約されて、旅先の風景が旅行ガイドのように並んで表示されるので、楽しい雰囲気が盛り上がる。
【００４０】
また、表示されている縮小画像の中で、興味のある画像があった場合は、図４（ｃ）に示されるように、指３３で該当する画像（この場合２５ｅS ）をタッチする。すると、画面２０ａ上に配置されているタッチパネル２１の当該部分が選択され、表示制御部１１ａにより当該画像が認識される。そして、そのタッチされた画像が検索された後、図４（ｅ）に示されるように、興味のあった画像が枠内２０ｂに大きな画像２５ｅL として表示される。この検索の際も、図４（ｄ）に示されるように、アルバムがめくられるような遷移表示が表示制御部１１ａによって行われる。
【００４１】
尚、図４（ａ）〜（ｅ）では、太線で表されている部分は、このページ相当の場所に当該画像があることを示している。
【００４２】
次に、図５のフローチャートを参照して、本実施形態に於けるカメラ１０の動作について説明する。
【００４３】
図５は、本発明の一実施形態に於けるカメラ１０の制御動作を説明するためのフローチャートである。
【００４４】
尚、この制御動作は、主に画像処理及び制御部１１によって行われる。
【００４５】
本シーケンスが開始されると、先ずステップＳ１に於いて、操作判定部１６内の図示されない電源スイッチの状態が判定される。ここで、電源がオンされている場合は、ステップＳ２に移行する。これにより、後述する撮影モード、再生モードが判定可能な状態となる。
【００４６】
ステップＳ２に於いては、カメラ１０が撮影モードであるか否かが判定される。ここで、撮影モードである場合は、ステップＳ３に移行し、撮像部１２からの画像信号によって、顔検出部１３により画像の中に人物の顔があるかの検出が行われる。次いで、ステップＳ４にて、この画像（特に顔部）が適正に表示されるように、画像処理及び制御部１１にて露出演算が行われる。そして、ステップＳ５にて、上記ステップＳ４で演算された画像が、表示部２０にスルー画として表示される。
【００４７】
このような顔検出の処理によって、人物の顔の場所や数、大きさ、更には顔のパーツの変化に従って、笑顔かどうかを判定することが可能となっている。
【００４８】
次に、ステップＳ６に於いて、図示されないレリーズスイッチによるレリーズ操作の状態が判定される。ここで、レリーズ操作が行われると、ステップＳ７に移行して撮像部１３による露出動作や、記録部１４への記録動作が行われる。次いで、ステップＳ８では、サブルーチン「画像分類」が実行される。尚、このサブルーチン「画像分類」の詳細な動作については後述する。そして、ステップＳ９にて、後述する図７（ａ）に示されるような分類結果の記録が、関連情報記録部１４ａに対して行われる。その後、上記ステップＳ１に移行する。
【００４９】
尚、上記ステップＳ６にて、レリーズ操作がされなかった場合は、上記ステップＳ１へ移行する。
【００５０】
また、上記ステップＳ２に於いて、撮影モードでない場合はステップＳ１０に移行する。そして、ステップＳ１０にて、再生モードであるか否かが判定される。ここで、再生モードでない場合は上記ステップＳ１に移行し、再生モードである場合はステップＳ１１に移行して、再生用のプログラムが作動する。
【００５１】
ステップＳ１１に於ける再生モードでは、先ず、最後に撮影された画像が表示される。次いで、ステップＳ１２にて、ユーザによって何らかの操作が行われたか否かが判定される。ここで、何も操作が行われない場合は上記ステップＳ１へ移行する。これに対し、何らかの操作が行われた場合は、ステップＳ１３に移行して、アルバム再生であるか否かが判定される。
【００５２】
ステップＳ１３にてアルバム再生が指定されると、ステップＳ１４に移行して、サブルーチン「アルバム再生」が実行された後、上記ステップＳ１２に移行する。尚、このサブルーチン「アルバム再生」の詳細な動作については後述する。
【００５３】
一方、上記ステップＳ１３にて、アルバム再生以外の操作が指定された場合は、ステップＳ１５に移行する。そして、このステップＳ１５にて、縮小画像を並べて一覧表示するサムネイル再生であるか否かが判定される。その結果、サムネイル再生が指定された場合は、ステップＳ１６に移行して、表示部２０にサムネイル画像の表示がなされる。
【００５４】
次いで、ステップＳ１７では、上記ステップＳ１６にてサムネイル表示された画像の中から選択画像があるか否かが、タッチパネル２１の操作により判定される。ここで、選択された画像がある場合は、ステップＳ１８に移行して、当該選択画像が拡大されて表示部２０に表示される。その後、上記ステップＳ１２に移行する。一方、サムネイル表示の状態で選択された画像が無い場合は、そのまま上記ステップＳ１１に移行する。
【００５５】
また、上記ステップＳ１５にてサムネイル再生で無い場合は、ステップＳ１９に移行して、単純に画像送りがなされる。この場合、先に最後に撮影された画像が再生されているので、１コマ前の画像が表示部２０に表示される。その後、上記ステップＳ１２に移行する。
【００５６】
次に、図６のフローチャートを参照して、図５のフローチャートのステップＳ８に於けるサブルーチン「画像分類」の詳細な動作について説明する。
【００５７】
上述したような画像検索を行う場合、迅速に対象となる画像を探し出す必要がある。そのため、本実施形態では、画像分類部１１ｅを有して、こうした画像分類を行うようにしている。これは、主に撮影時に得られた撮影画像情報を、図７（ａ）に示されるように、各画像と表形式で関連付け、その結果を、記録部１４内の関連情報記録部１４ａに記録しておくものである。
【００５８】
このような撮影画像の情報とは、時計や場所情報のみならず、図６に示されるようなフローチャートに従ってカテゴリ分けしておくことにより、検索の効率化を図ることができる。つまり、ピント合わせの信号等も利用して、被写体の距離を利用したり、画像の色情報を利用したり、顔検出部１３の顔検出結果を利用して、画像に顔が有るか否かや、顔の大きさや数、顔の特徴等の情報に従って、スナップ（人物が全身で背景も多く含む画像）、ポートレート（顔の表情などを中心としたもの）、花、小物、ペット、風景などを判定するようにしている。
【００５９】
これは画像から被写体を分析してもよいが、図６のフローチャートのステップＳ２４、Ｓ２５、Ｓ３１〜Ｓ３４のように、よく撮影されるシーンを想定して、大雑把に分類してもよい。
【００６０】
すなわち、本シーケンスが開始されると、先ずステップＳ２１に於いて、被写体に顔が存在するか否かが判定される。その結果で、大きく、人物の写真かどうかが大別される。ここで、顔が有る場合は、ステップＳ２２に移行して、顔の色ではなく、背景の色の特色が判定されて関連情報記録部１４ａに記録される。
【００６１】
次に、ステップＳ２３にて、顔の大きさが大きいか否かが、顔位置、大きさ判定部１１ｃによって判定される。
【００６２】
上記ステップＳ２３にて、顔の大きさが所定の値（例えば、後述する顔の大きさＤ１）よりも小さい場合は、ステップＳ２４に移行してスナップ写真であると判定される。一方、上記所定の値よりも大きい場合は、ステップＳ２５に移行してポートレート写真であると判定される。
【００６３】
そして、ステップＳ２６では、上述した、顔の数、位置、大きさ、特徴等が、関連情報記録部１４ａに記録される。その後、本サブルーチンを抜けて、図５のフローチャートのステップＳ９に移行する。
【００６４】
一方、上記ステップＳ２１にて、撮影した画像に顔が無い（人物がいない）と判定された場合は、ステップＳ２７に移行して、画面中央部等、画面の主要な色が判定される。次いで、ステップＳ２８〜Ｓ３０に於いて、画像の分類が行われる。すなわち、ステップＳ２８では被写体距離が判定され、その結果距離が近い場合にはステップＳ２９にて至近距離であるか否かが判定される。更に、至近距離である場合は、ステップＳ３０にて色の彩度が判定される。
【００６５】
上記ステップＳ２８に於いては、主にピント合わせ時の距離情報から被写体距離が判定される。ここで、遠距離であると判定された場合は、ステップＳ３４に移行して風景画像であると分類される。また、ステップＳ２８及びＳ２９にて、遠距離ではないが至近距離ではない場合は、ステップＳ３３に移行してペットなどの画像であると分類される。そして、ステップＳ３０にて色の彩度が高い場合はステップＳ３１に移行して、花などの画像であると分類される。また、ステップＳ３０にて色の彩度が低い場合は、ステップＳ３２に移行して小物であると分類される。その後、本サブルーチンを抜けて、図５のフローチャートのステップＳ９に移行する。
【００６６】
このように、ステップＳ２８〜Ｓ３０の判定により、「風景」や「小物」まで、大体の分類ができるが、人気のテーマである「花」や「ペット」も、色の彩度やその他の距離からテーマを憶測して分類しておくようにする。そして、例えば、ペットの画像を探す場合などは、このペット分類画像から検索すると目的の画像を早く探すことができる。
【００６７】
このように、各画像毎に分類結果をグラフ化したものが、図７（ａ）に示される。
【００６８】
図７（ａ）は、この画像分類に於ける各画像の分類結果を表したグラフである。この図７（ａ）のグラフに於いて、画像１〜画像５それぞれについて、画像の種類、顔の数、顔の位置と特徴・大きさ、主要色、日時・場所の各項目について分類されている。
【００６９】
画像の種類とは、スナップ写真であるか風景写真であるかといった写真の種類である。顔の数とは、その画像に於ける顔の総数である。
【００７０】
顔の位置と特徴・大きさは、以下のようになっている。すなわち、顔の位置は、例えば、図７（ｂ）に示されるように、表示画面２０ａを９分割した場合にＡ１〜Ａ９のどのエリアに存在しているかを表している。例えば、画像１の場合は、Ａ４のエリアとＡ６のエリアに顔が存在していることを表している。この顔の位置は、顔位置、大きさ判定部１１ｃにより判定される。
【００７１】
また、顔の特徴は、予め関連情報記録部１４ａに登録されている所定の顔のパターンの何れに該当しているかを表している。この場合、Ｐ−Ａは、登録されている顔のパターンＡであり、Ｐ−Ｂは同パターンＢであることを表している。そして、Ｐ−Ｘは判定不能、すなわち、登録されているパターン以外の顔のパターンであることを表している。所定の顔のパターンについては、例えば、家族の画像を予め登録しておくようにし、それと比較して分類すればよい。この顔の特徴は、特徴抽出部１１ｂにより抽出され、比較される。
【００７２】
更に、顔の大きさは、図７（ｃ）に示されるように、上述したエリアに対する顔の大きさをＤ１、Ｄ２、Ｄ３として表している。例えば、画像１の場合は、Ａ４のエリアにＤ２の大きさの顔と、Ａ６のエリアにＤ３の大きさの顔があることを表している。この顔の大きさは、顔位置、大きさ判定部１１ｃにより判定される。
【００７３】
主要色は、その画像の背景色に於ける主要色である。この主要色は、画像処理及び制御部１１により判定される。また、日時・場所は、撮影した日付や時間、場所を表している。但し、本実施形態に於いては、日付のみが示されているが、撮影した時間や場所が関連情報記憶部１４ａに記録されている場合はこれらを表すようにする。
【００７４】
すなわち、図７（ａ）の表によると、画像１は、９月１５日に撮影したスナップ写真で、エリアＡ４にパターンＡでＤ２の大きさの顔が１つ、エリアＡ６にパターンＸでＤ３の大きさの顔が１つ、が存在し、主要色が青色の画像であることがわかる。
【００７５】
このような画像関連情報を持っておくと、画像検索を迅速、効率的に行うことができる。
【００７６】
また、このような単純な分類だけでも、顔画像を探す場合は、ステップＳ３１〜Ｓ３４に分類された画像については対象から外せるので、検索の効率化が可能となる。
【００７７】
図７（ａ）に示されるようなグラフが、記録部１４内の関連情報部１４ａに記録される。
【００７８】
次に、図８のフローチャートを参照して、本実施形態の特徴であるサブルーチン「アルバム再生」の詳細な動作について説明する。
【００７９】
図８は、図５のフローチャートのステップＳ１４に於けるサブルーチン「アルバム再生」の処理動作について説明するためのフローチャートである。
【００８０】
本サブルーチンに入ると、先ず、ステップＳ４１にて、サブルーチン「イベント判定」が実行される。ここでは、カメラの時計部１８による時計機能が利用されて、所定期間中に撮影された画像が集められて、アルバムとして取り扱うことができるようにされる。これをイベント判定と称するが、これについては後述する。
【００８１】
このようにしておくと、続くステップＳ４２にて、図４（ａ）に示されるように、カメラの表示画面２０ａに、擬似的な本棚がアルバム背表紙として表示される。更に、ステップＳ４３に於いて、アルバムの選択操作が行われたか否かが判定される。
【００８２】
ここで、選択操作が行われない場合は、ステップＳ４４に移行し、本サブルーチンを終了するか否かが判定される。終了しない場合は上記ステップＳ４３へ移行し、終了する場合は本サブルーチンを抜けて図５のフローチャートのステップＳ１２へ移行する。
【００８３】
上記ステップＳ４３で選択操作が行われた場合、例えば、図４（ａ）に示されるアルバム３１ａ、３１ｂ、３１ｃの何れかが操作判定部１６によって選択された場合は、ステップＳ４５に移行して、上記ステップＳ４３で選択されたアルバムの中で、撮影時期が一番古い複数の画像群が選択されて表示画面２０ａに表示される。すなわち、図４（ｂ）に示されるように、アルバムが開かれてページ毎に見ていくような表示が可能となる。
【００８４】
図４（ｂ）は、図４（ａ）に示されるアルバム３１ａ、３１ｂ、３１ｃの何れかが開かれて台紙（ページ）が表示されている状態である。尚、図４（ｂ）では、太線部の台紙が選択されて表示される部分として示されている。
【００８５】
次に、ステップＳ４６では、表示画面２０ａに表示された画像の分類結果（図７（ａ）参照）が判定される。そして、続くステップＳ４７に於いて、選択された画像と同じアルバムから、同様の特徴を有する画像が検索される。ここで検索された画像は、縮小画像として、ステップＳ４８にて枠外に表示されるように準備する。尚、この際、縮小画像が人物の画像であった場合は、その顔の部分が重ならないようにして表示されるようにする。これは、顔検出等の処理により顔の部分が検出されることにより処理が可能である。
【００８６】
次いで、ステップＳ４９にて、上記ステップＳ４８で枠外表示用の縮小画像とされた画像が、図４（ｂ）に示されるようなアルバムを開く遷移効果を経て、図３（ａ）、（ｂ）に示されるように枠外２０ｃに表示される。例えば、図３（ａ）を例にとると、ステップＳ４５で選択された最も古い画像が、枠内２５ｂの風景の画像２５ａL である。そして、該画像２５ａL と同様の特徴、すなわち風景の画像が枠外２５ｃに縮小画像２５ｂS 、２５ｅS として表示される。或いは、通信部２２を介してカメラ１０の外部機器、例えばテレビ等の表示装置に送信されるようにしてもよい。
【００８７】
その後、ステップＳ５０に於いて、操作が判定されて終了であるか否かが判定される。ここで、操作終了の場合は、本サブルーチンを抜けて図５のフローチャートのステップＳ１２に移行する。一方、操作があった場合は、ステップＳ５１にて、図４（ｃ）に示されるような、枠外２０ｃの縮小画像のタッチであるか否かが判定される。
【００８８】
ここで、縮小画像がタッチされない場合は、ステップＳ５２に移行して、アルバムの台紙をめくる動作が行われるか否かが判定される。この動作は、例えば、タッチパネル２１がユーザの指３３で擦られると、タッチパネル２１及び画像処理及び制御部１１によりその動作が検出される、或いは、操作判定部１６により先に送るスイッチが操作される等である。これらの台紙をめくる動作がなければ上記ステップＳ５０に移行し、めくる動作が行われた場合は、ステップＳ５３に移行する。
【００８９】
ステップＳ５３では、次の画像があるか否かが判定される。その結果、次の画像がない場合は、ステップＳ５４に移行して、警告が行われる。これは、表示画面２０ａ上にその旨の告知が表示されるようにしてもよい。
【００９０】
一方、ステップＳ５３にて次の画像がある場合は、ステップＳ５５に移行して、撮影された順で、コマ送りがなされる。この台紙のめくり動作は先に進むのみならず、以前に見た画像を見直せるようにしてもよい。この場合、操作判定部１６内の戻しスイッチの操作検出や、タッチパネル２１の擦る方向によって、これを判定するようにすればよい。尚、これらの場合も、ステップＳ４６に移行して、遷移効果を出すようにする。
【００９１】
更に、上記ステップＳ５１に於いて、縮小画像がタッチされたならば、表示制御部１１ａがそれを検出し、ステップＳ５６に移行して、この縮小画像が次の拡大表示の候補画像とされる。図４（ｃ）に示される例では、枠外２０ｃの縮小画像２５ｅS がユーザの指３３によりタッチされている。すると、この位置に配置されたタッチパネル２１のスイッチが動作して、当該縮小画像２５ｅS が選択されたことが検出される。
【００９２】
次いで、ステップＳ５７では、図４（ｅ）に示されるように、アルバムを開く遷移効果を経て、図４（ｅ）に示されるような画像が表示されるように準備される。すなわち、上記ステップＳ５１にて、図４（ｃ）に示されるように、縮小画像２５ｅS がタッチされると、図４（ｅ）に示されるように、選択された拡大画像２５ｅL と共に縮小画像２５ａS 、２５ｂS が表示される。更に、図４（ｂ）に示されるアルバム３１ａに戻ることができるような戻り先を示した副画像３２が、枠外２０ｃに表示されるように準備される。
【００９３】
その後、上記ステップＳ４６に移行して、この画像にも、類似画像を縮小画像にしての装飾が行われて表示がなされるようにする。
【００９４】
このような制御によって、この画面表示操作は、古くから親しまれてきた紙のアルバムと同様の操作感で楽しむことが可能であると同時に、デジタル画像のメリットとして、個々の画像を装飾する小画像を表示でき、尚かつ、それを選択すれば、興味のある画像だけを見ていくような鑑賞も可能となる。
【００９５】
ここでは、カメラの表示画面に応用しているが、テレビ等、他の表示機器に応用が可能であることは言うまでもない。
【００９６】
次に、イベント判定について説明する。
【００９７】
上述したような、撮影日時や顔の検出結果を記録することができるカメラで撮影した画像では、撮影画像数と撮影日時の関係を、図９に示されるように、グラフ表示することが可能となる。このように、一日を、例えば６分割して、そのタイミングでどれだけ画像が撮影されたかを判定することによって、また、そこに含まれる人物画像の数によって、個々の画像がどのようなイベントで撮影されたかを類推することができる。
【００９８】
尚、ここでは、時間情報によって、画像が分類される様子をグラフ化している例が示されるが、顔検出の結果、顔が検出されたものについては、斜線で表示されている。
【００９９】
図９に示されるように、まとまった画像がある場合は、何かイベントがあったということが判定できる。例えば、「９／２１（９月２１日）」は運動会、「９／２５（９月２５日）」はパーティ等である。そして、「９月２５日」に撮影された画像が再生される場合、前日の画像と分類されて表示される。
【０１００】
次に、図１０のフローチャートを参照して、図８のフローチャートのサブルーチン「イベント判定」の詳細な処理動作について説明する。
【０１０１】
本サブルーチンに入ると、先ず、ステップＳ６１に於いて、図９のグラフに示されるように、一日を６分割するような画像整理が行われる。次いで、ステップＳ６２にて、個々の画像がどのグループに所属するかの判定処理が行われる。そして、ステップＳ６３に於いて、所定時間に集中して撮影されたか否かが判定される。ここで、図９のグラフの「９月２１日」や「９月２５日」のように、所定時間に集中して撮影された場合はステップＳ６４に移行し、そうでない場合はステップＳ６５に移行する。
【０１０２】
ステップＳ６４では、撮影された画像に顔のアップが多いか少ないかが判定される。その結果、顔のアップの画像が少ない（風景画像が多い）場合は、ステップＳ６６に移行して「学校行事」としてまとめられる。また、上記ステップＳ６４にて顔のアップが多い場合は、ステップＳ６７に移行して「パーティ」としてまとめられる。
【０１０３】
更に、上記ステップＳ６５では、連続した日時に複数の画像が撮影されたか否かが判定される。その結果、連続した日時に複数の画像が撮影された場合は、「旅行」としてまとめられる。これは、旅行などでは、一日のうちで画像が分散されることに基づいている。また、上記ステップＳ６５にて連続した日時に複数の画像が撮影されていない場合は、ステップＳ６９に移行して、まとまった画像数にて、日時別のアルバムとして作成される。つまり、ステップＳ６６、Ｓ６７、Ｓ６８以外のイベントは、ステップＳ６９にて、例えば１０枚以上の画像群となるように、月毎や、季節毎にまとめられる。
【０１０４】
つまり、撮影された画像の集中の度合や顔画像の有無に応じて、イベントの種類が分類される。そして、各画像が何れかのアルバムにまとめられると、ステップＳ７０にてイベント判定が終了であるか否かが判定される。その結果、終了しない場合は上記ステップＳ６２に移行して、上述した処理動作が繰り返される。一方、終了する場合は、本サブルーチンを抜けて図８のフローチャートのステップＳ４２に移行する。
【０１０５】
このように、本実施形態によれば、画面の枠内に大きく表示されている画像と同じグループの画像を枠外に縮小表示することができるようにしたので、雰囲気を盛り上げて、楽しく写真の鑑賞ができる他、自分の興味の有る写真が枠外にあることに気づいた場合は、それを楽しみにして、画像を切り替えたり、その枠外にある画像を選択したりして、興味のある画像を先に見たり、興味あるものだけを見るような楽しみ方をすることができる。
【０１０６】
尚、枠外に表示される縮小表示の画像は、特に限定されないが、画像数が多い場合は全てを表示するのではなく、例えば一定の枚数毎に表示するようにしたり、時系列上で選択された画像が表示されたりするようにしてもよい。
【０１０７】
ところで、このような検索機能を持った表示機器は、動画鑑賞時にも効力を発揮する。動画の場合、静止画と異なり、どの画像に誰が写っているかを探すのが難しい。しかしながら、前述した実施形態のように、台紙部に類似画像を表示する考え方を利用すれば、動画を鑑賞しながら、他の動画の類似部分を台紙部に表示して、別の動画を即座に鑑賞するような楽しみ方が可能となる。
【０１０８】
例えば、図１１に示されるように、動画１、動画２が、それぞれのコマが撮影された時の時刻情報、撮影されている顔の情報(画面中央の顔の特徴、大きさ；図７（ａ）〜（ｃ）参照)、画面の主要色の情報等を有しているものとする。この場合、例えば、枠内に動画１を再生しながら、そのコマに登場している人物が登場する別の動画を枠外に表示することにより、鑑賞者が、「そういえば、この時も、この人が写っていたな」と、思い出すことが可能となる。
【０１０９】
つまり、図１１の分類結果に基づいて、図１２（ａ）に示されるように、画面２０ａの枠内２０ｂに動画１（コマ１−１）３５1Lを再生している時に、枠外２０ｃに別の動画に含まれる同じ被写体のコマ（コマ２−３）３６3Sを表示する。このようにすれば、個々の画像を装飾することができると同時に、興味ある画像を見ていくような鑑賞が、動画に於いても可能となる。
【０１１０】
尚、ここでは、枠外２０ｃに表示される画像はコマ（静止画）として説明したが、これに限られるものではない。例えば、複数のコマ（静止画）を切り替えて表示するようにしてもよいし、縮小画像のままで動画を表示するようにしてもよい。
【０１１１】
また、ここでは、説明の簡易化のため、２つの動画だけで説明したが、対象動画が動画３，動画４のように増えると、図示されないが、枠外に表示される画像の数が増加する。
【０１１２】
更に、図１２（ｂ）に示されるように、枠内２０ｂに動画１（コマ１−３）３５3Lが再生されている時に、枠外２０ｃ、或いは縮小画像であるコマ（コマ２−１）３６1Sがタッチされると、動画２のコマ２−１から再生される。このような工夫により、同じ人物が写った動画だけを見ていくことが可能となる。いわば、その人のコマーシャルのような画像が得られる。
【０１１３】
尚、上述した実施形態ではカメラを例として説明したが、本発明は、カメラ以外の単なる表示装置や携帯電話等にも適用が可能であるのは勿論である。
【０１１４】
以上、本発明の実施形態について説明したが、本発明は上述した実施形態以外にも、本発明の要旨を逸脱しない範囲で種々の変形実施が可能である。
【０１１５】
更に、上述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件から幾つかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。
【産業上の利用可能性】
【０１１６】
本発明によれば、写真鑑賞時に、壁紙を自動作成するので、楽しく、賑やかなアルバム鑑賞が可能なカメラ及び表示装置並びに電子機器を得ることができる。
【符号の説明】
【０１１７】
１０…カメラ、１１…画像処理及び制御部、１１ａ…表示制御部、１１ｂ…特徴抽出部、１１ｃ…顔位置、大きさ判定部、１１ｄ…画像検索部、１１ｅ…画像分類部、１２…撮像部、１３…顔検出部、１４…記録部、１４ａ…関連情報記録部、１６…操作判定部、１７…ＧＰＳ部、１８…時計部、２０…表示部、２０ａ…表示画面、２１…タッチパネル、２２…通信部、２５ａ、２５ｂ、２５ｃ、２５ｄ、２５ｅ、２５ｆ…画像、２５ａS 、２５ｂS 、２５ｄS 、２５ｅS 、２５ｆS …縮小画像、３１ａ、３１ｂ、３１ｃ…アルバム、３２…戻り先画像。
【図１】
2010252156.tif 000003
【図２】
2010252156.tif 000004
【図３】
2010252156.tif 000005
【図４】
2010252156.tif 000006
【図５】
2010252156.tif 000007
【図６】
2010252156.tif 000008
【図７】
2010252156.tif 000009
【図８】
2010252156.tif 000010
【図９】
2010252156.tif 000011
【図１０】
2010252156.tif 000012
【図１１】
2010252156.tif 000013
【図１２】
2010252156.tif 000014