(57)【要約】  【課題】希望する人物のアルバムを簡単な操作で作成することを可能とする。  【解決手段】外部メモリが挿入されたと判定されると、Ｓ２において、自動作成が設定されているか否かが判定される。自動作成が設定されていると判定されると、Ｓ４において、画像の種類を選択するための画面の表示がなされる。Ｓ５、Ｓ６およびＳ７において、写真の種類が選択される。人物写真の場合、Ｓ１０において、顔認識ソフトウェアを使用して人物写真が検索される。Ｓ１１において、検索した人物写真が本体メモリにアルバムとして格納され、表示される。ＬＣＤには、検索された人物の写真の代表的画像のサムネイル画像が人物毎に表示される。さらに、特定の人物が選択され、特定の人物に関して、笑った表情の写真が検索され、特定の人物の特定の表情のアルバムが作成される。【選択図】図２
2011129033.tif 000002
【特許請求の範囲】
【請求項１】
外部メモリの挿入部と、
上記外部メモリまたは内部メモリに記憶されている画像を表示する表示部と、
ユーザインターフェースと、
上記挿入部に挿入された上記外部メモリから画像データを読み出す外部メモリコントローラと、
上記外部メモリから読み出された画像データに対して顔認識ソフトウェアによって顔認識を行い、各人物の画像を検索し、検索された各人物の画像の代表的画像を上記表示部に表示し、上記ユーザインターフェースによって人物を選択し、選択された人物の画像からなる集合体を作成する制御部と
からなるデジタルフォトフレーム。
【請求項２】
上記選択された人物の画像からなる集合体に対して、上記制御部が表情認識ソフトウェアによって、特定の表情の画像を選択し、選択された表情の画像の集合体を作成する請求項１に記載のデジタルフォトフレーム。
【請求項３】
上記制御部によって、作成された上記画像の集合体を内部メモリに記憶する請求項１または２に記載のデジタルフォトフレーム。
【請求項４】
上記制御部によって、作成された上記画像の集合体をスライドショーで表示する請求項１または２に記載のデジタルフォトフレーム。
【請求項５】
上記顔認識ソフトウェアによって顔認識を行うことができない画像のみを検索することが可能とされた請求項１に記載のデジタルフォトフレーム。
【請求項６】
上記制御部によって、外部のネットワークを介して受信された画像を内部メモリに記憶する請求項１または２に記載のデジタルフォトフレーム。
【請求項７】
外部メモリの挿入を検出するステップと、
顔認識ソフトウェアによって、人物の画像を検索するステップと、
検索された各人物の画像の代表的画像を表示部に表示するステップと、
ユーザインターフェースによって選択された人物の画像からなる集合体を作成するステップと
からなる画像表示方法。
【請求項８】
上記選択された人物の画像からなる集合体に対して、表情認識ソフトウェアによって、特定の表情の画像を選択し、選択された表情の画像の集合体を作成する請求項７に記載の画像表示方法。
【請求項９】
作成された上記画像の集合体を内部メモリに記憶する請求項７または８に記載の画像表示方法。
【請求項１０】
作成された上記画像の集合体をスライドショーで表示する請求項７または８に記載の画像表示方法。
【請求項１１】
上記顔認識ソフトウェアによって顔認識を行うことができない画像のみを検索することが可能とされた請求項７に記載の画像表示方法。
【請求項１２】
外部のネットワークを介して受信された画像を内部メモリに記憶する請求項７または８に記載の画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えばデジタルカメラにより撮影された写真を液晶ディスプレイ（ＬＣＤ（Liquid Crystal
Display) ）に表示するデジタルフォトフレーム（電子写真立て）および画像表示方法に関する。
【背景技術】
【０００２】
写真立てのように、ＬＣＤの表示画面が立った状態で写真を表示するデジタルフォトフレームが知られている。通常、デジタルフォトフレームには、ＵＳＢ(Universal Serial
Bus)インターフェース、メモリカードインターフェース等が備えられ、ＵＳＢメモリ、メモリカード等の外部メモリに記憶されている画像データが内蔵されている本体メモリに転送される。本体メモリに格納されている複数の画像データが複数の表示態様でもって表示される。例えば１枚の画像を表示する１枚表示、複数の画像を順次表示するスライドショー等が可能とされている
。
【０００３】
本体メモリに複数の画像を蓄積する場合に、ユーザが選択した複数の画像（写真）の集合体（以下、アルバムと適宜称する）が作成される。従来のデジタルフォトフレームにおいては、アルバムを作成する時に、１枚表示の画像をスイッチまたはリモートコントロールコマンダを操作して選択してアルバムに追加したり、検索した複数の画像の一覧からアルバムに追加する画像を指定するようになされていた。下記の特許文献１には、顔認識に基づいてデジタル写真を整理することが記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−１７４３０８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
従来のデジタルフォトフレームにおけるアルバム作成方法は、アルバムに追加する画像を探すための時間がかかり、操作が面倒であった。さらに、アルバム作成のためのメニューを設定する必要があり、自動的にアルバムを作成することができないものであった。特許文献１に記載されている媒体整理方法は、デジタルフォトフレームに適用される点については記載されてなく、従来のデジタルフォトフレームにおける問題点を解決することができるものではなかった。さらに、デジタル写真立てとしてのデジタルフォトフレームの場合には、風景のみ表示したい、気に入った表情のみを表示したい等の要請がある。特許文献１に記載のものは、このようなデジタル写真立て独特の要請に応えることができるものではない。さらに、特許文献１に記載のものは、顔認識を行っているが、人物の表情にまで認識できるものではなかった。
【０００６】
したがって、この発明の目的は、外部メモリを本体に対して挿入することによって、希望する人物のアルバムを自動的に作成することができ、さらに、その人物の特定の表情のアルバムを作成することができるデジタルフォトフレームおよび画像表示方法を提供することにある。
【課題を解決するための手段】
【０００７】
上述した課題を解決するために、この発明は、外部メモリの挿入部と、
外部メモリまたは内部メモリに記憶されている画像を表示する表示部と、
ユーザインターフェースと、
挿入部に挿入された外部メモリから画像データを読み出す外部メモリコントローラと、
外部メモリから読み出された画像データに対して顔認識ソフトウェアによって顔認識を行い、各人物の画像を検索し、検索された各人物の画像の代表的画像を表示部に表示し、ユーザインターフェースによって人物を選択し、選択された人物の画像からなる集合体を作成する制御部と
からなるデジタルフォトフレームである。
【０００８】
好ましくは、選択された人物の画像からなる集合体に対して、制御部が表情認識ソフトウェアによって、特定の表情の画像を選択し、選択された表情の画像の集合体を作成する。
【０００９】
この発明は、外部メモリの挿入を検出するステップと、
顔認識ソフトウェアによって、人物の画像を検索するステップと、
検索された各人物の画像の代表的画像を表示部に表示するステップと、
ユーザインターフェースによって選択された人物の画像からなる集合体を作成するステップと
からなる画像表示方法である。
【００１０】
好ましくは、選択された人物の画像からなる集合体に対して、表情認識ソフトウェアによって、特定の表情の画像を選択し、選択された表情の画像の集合体を作成する。
【発明の効果】
【００１１】
この発明では、外部メモリを本体に挿入することによって、自動的に画像の集合体の作成を開始することができる。外部メモリに記憶されている複数の写真が人物毎に検索される。したがって、希望する人物の写真の集合体を簡単な操作で短時間のうちに作成することができる。さらに、検索した人物の写真の中で、特定の表情の写真のみを検索し、特定の表情の写真の集合体を作成することができる。
【図面の簡単な説明】
【００１２】
【図１】この発明の一実施の形態の構成を示すブロック図である。
【図２】この発明の一実施の形態の動作を説明するフローチャートである。
【図３】この発明の一実施の形態の動作を説明するフローチャートである。
【図４】この発明の一実施の形態の外観および表示画面を示す略線図である。
【図５】この発明の一実施の形態の動作説明に用いる表示画面の略線図である。
【図６】この発明の一実施の形態の動作説明に用いる表示画面の略線図である。
【発明を実施するための形態】
【００１３】
以下、この発明の実施の形態について説明する。なお、説明は、以下の順序で行う。
＜１．第１の実施の形態＞
＜２．変形例＞
なお、以下に説明する実施の形態は、この発明の好適な具体例であり、技術的に好ましい種々の限定が付されているが、この発明の範囲は、以下の説明において、特にこの発明を限定する旨の記載がない限り、これらの実施の形態に限定されないものとする。
【００１４】
＜１．第１の実施の形態＞
「デジタルフォトフレームの構成」
図１で破線で全体の構成を囲んで示すように、デジタルフォトフレーム１は、外部メモリコントローラ２を備える。本体の筐体の一部に外部メモリ１１が挿入されるコネクタ、スロット等の挿入部が設けられている。スロットは、通常、デジタルカメラで使用されているメモリカードが挿入される挿入部である。メモリカード以外にＵＳＢメモリが挿入されるＵＳＢポートが設けられている。これらのメモリカードおよびＵＳＢメモリカード等の本体に対して装着自在のメモリを総称して外部メモリと称する。
【００１５】
外部メモリコントローラ２は、本体に挿入された外部メモリ１１に記憶されている画像データを読み出し、システムコントローラ３に供給する。さらに、外部メモリコントローラ２からシステムコントローラ３に対して、外部メモリ１１が挿入されたことを示す検出信号が供給される。
【００１６】
システムコントローラ３は、制御部の一例であり、デジタルフォトフレーム１の全体の動作を制御する。システムコントローラ３は、例えばＣＰＵ（Central Processing Unit
）４、ＲＡＭ（Random Access Memory）５およびＲＯＭ（Read Only Memory）６などにより構成されるマイクロコンピュータである。システムコントローラ３は、ＲＯＭ６に記憶されているプログラムを実行することにより、デジタルフォトフレーム１各部を統括的に制御する。
【００１７】
外部メモリコントローラ２を経由して取り込まれた画像データがシステムコントローラ３のＲＡＭ５に格納される。システムコントローラ３によって、取り込まれた画像が圧縮例えばＪＰＥＧ（Joint Photographic Experts Group)で圧縮されている場合に、復号を
行う。システムコントローラ３に対して本体メモリ７、スイッチ８およびＬＣＤ９が接続されている。ＬＣＤ９は、表示部の一例であって、ＬＣＤ以外の表示デバイスを使用しても良い。
【００１８】
本体メモリ７は、不揮発性の大容量メモリである。本体メモリ７は、画像データ格納用の領域と、プログラム格納用の領域とに分割されている。後述するように、システムコントローラ３は、顔認識ソフトウェア１０によって、外部メモリ１１から取り込まれる写真を人物ごとに分類する。図１では、顔認識ソフトウェア１０を別の構成要素として表しているが、実際には、顔認識ソフトウェア１０が本体メモリ７のプログラム格納領域に記憶される。さらに、顔認識ソフトウェア１０は、表情認識の機能をも有している。但し、表情認識ソフトウェアを別に備えるようにしても良い。ＬＣＤ９の画面上に、写真、メニュー等が表示される。システムコントローラ３がＬＣＤ９の表示を制御する。
【００１９】
さらに、インターネット等のネットワークを介して通信を行うための通信部１２をデジタルフォトフレーム１が備える。例えばデジタルフォトフレーム１に専用のアドレスが割り当てられ、携帯電話機、パーソナルコンピュータ等が送信した写真をデジタルフォトフレーム１が受信してＬＣＤ９に表示することができる。写真と共に、メッセージの送信も可能とされている。送信できるのは、特定の者、または予め設定した者である。さらに、図示を省略するが、電源部をデジタルフォトフレーム１が備える。
【００２０】
図４Ａに示すように、デジタルフォトフレーム１は、ケース２１にＬＣＤ９が取り付けられている。ケース２１には、スタンド２２が設けられている。図４Ｂに示すように、ケース２１の例えば上面２３にスイッチ８に含まれる複数のスイッチ２４ａ〜２４ｅが設置されている。
【００２１】
スイッチ２４ａが設定スイッチであり、スイッチ２４ａを押すことによって、各種の設定用メニューがＬＣＤ９に表示される。スイッチ２４ｂが削除スイッチであり、スイッチ２４ｂを押すことによって、本体メモリ７内の画像が削除される。スイッチ２４ｃおよび２４ｅは、方向スイッチであり、スイッチ２４ｃおよび２４ｅを押すことによって、カーソル、ハイライト部分、特定の色の部分等の選択位置を表す表示を上下または左右の方向に移動させることができる。スイッチ２４ｄが決定スイッチであり、スイッチ２４ｄを押すことによって、選択位置が決定される。なお、これらのスイッチは、ＬＥＤ(Light Emitting Diode)によってスイッチが押され時に点灯するようになされている。なお、スイッチ８は、個別のスイッチに限らず、タッチパネルとして構成しても良い。さらに、リモートコントロールによって操作可能としても良い。これらのユーザが操作する操作手段は、ユーザインターフェースである。
【００２２】
「デジタルフォトフレームの動作」
システムコントローラ３の制御の下でなされるこの発明の一実施の形態の動作について説明する。図２のフローチャートにおいて、ステップＳ１では、外部メモリ１１が本体のスロット、ポート等に対して挿入されたか否かが検出される。電源をオンとして外部メモリ１１が挿入されていない状態では、初期画面がＬＣＤ９に表示される。
【００２３】
ステップＳ１において、外部メモリコントローラ２からの検出信号によって、外部メモリ１１が挿入されたと判定されると、ステップＳ２において、自動作成が設定されているか否かが判定される。自動作成の設定については、予めメニューを開いて設定されている。自動作成の設定がされていない場合には、ステップＳ３（自動作成しない）に処理が移る。例えば挿入された外部メモリ１１に記憶されている画像がスライドショーで順々にＬＣＤ９に表示される。
【００２４】
ステップＳ２において、自動作成が設定されていると判定されると、ステップＳ４において、画像の種類を選択するための画面の表示がなされる。図４Ａに示すように、３個の種類に対応する項目２５ａ、２５ｂおよび２５ｃがＬＣＤ９に表示される。ＬＣＤ９に写真がスライドショー等で表示されている場合には、表示画像に対して各項目の表示がスーパーインポーズされる。
【００２５】
一実施の形態では、項目２５ａが風景写真のみを表し、項目２５ｂが人物写真のみを表し、項目２５ｃが全ての写真を表す。人物写真は、顔認識ソフトウェア１０によって顔を認識することができた写真を意味する。風景写真は、顔認識ソフトウェア１０によって、人物の顔を認識することができなかった写真を意味する。全ての写真は、外部メモリ１１に格納されている全ての写真を意味する。
【００２６】
方向スイッチ２４ｃおよび２４ｅによって項目の選択がなされる。選択された項目が他の非選択の項目と異なる色等によって強調表示される。ステップＳ５、ステップＳ６およびステップＳ７において、どの項目が選択されたかが判定される。ステップＳ５において、項目２５ａ（風景写真のみ）が選択されると判定されると、ステップＳ６において、風景写真が検索される。
【００２７】
外部メモリ１１から写真（画像データ）がシステムコントローラ３のＲＡＭ５に取り込まれ、ＣＰＵ４の制御の下で、顔認識ソフトウェア１０によって、顔認識動作がなされる。ステップＳ６において、顔認識ソフトウェアを使用して風景写真が検索される。顔認識ができた写真が人物の写真と判定され、顔認識ができなかった写真、すなわち、人物が写っていない写真が風景の写真と判定される。
【００２８】
ステップＳ７において、検索した風景のみの写真が本体メモリ７にアルバムとして格納し、表示する。アルバムは、画像（写真）の集合体を意味する。すなわち、風景の写真が検索されると、当該写真がＬＣＤ９に表示される。表示の方法としては、縮小画像（サムネイル画像）として表示する方法を使用できる。検索が終了すると、作成されたアルバムの写真（すなわち、検索された全ての写真）がスライドショーによって表示される（ステップＳ８）。
【００２９】
ステップＳ５において、項目２５ａ（風景写真のみ）が選択されていないと判定されると、ステップＳ９において、項目２５ｂ（人物写真のみ）が選択されているか否かが判定される。項目２５ｂ（人物写真のみ）が選択されている場合には、人物写真のみが検索される。
【００３０】
外部メモリ１１から取り込まれた画像に対して、ＣＰＵ４の制御の下で、顔認識ソフトウェア１０によって、顔認識動作がなされる。ステップＳ１０において、顔認識ソフトウェアを使用して人物写真が検索される。ステップＳ１１において、検索した人物写真が本体メモリ７にアルバムとして格納され、表示される。すなわち、人物写真が検索されると、当該写真がＬＣＤ９に表示される。
【００３１】
図５に示すように、ＬＣＤ９には、検索された人物の写真の代表的画像のサムネイル画像が人物毎に表示される。サムネイル画像３１ａ，３１ｂ，３１ｃ，・・・は、それぞれ検索された人物の写真の代表的写真である。代表的写真としては、例えば最初に検索された写真が使用される。さらに、複数の人物の顔が認識された場合には、優先順位にしたがって特定の人物の写真として分類するか、または集合写真の分類が作成される。優先順位は、例えば認識できた順番である。
【００３２】
ステップＳ９において、項目２５ｂ（人物写真のみ）が選択されていないと判定されると、ステップＳ１２において、項目２５ｃ（全ての写真）が選択されているか否かが判定される。項目２５ｃ（全ての写真）が選択されている場合には、顔認識が不要であり、ステップＳ１３において、全ての写真が本体メモリ７にアルバムとして格納され、表示される。すなわち、外部メモリ１１から写真が本体メモリ７に取り込まれるごとに、サムネイル画像が表示される。そして、全ての写真が取り込まれると、スライドショーによってＬＣＤ９に表示される。ステップＳ１２の判定結果か否定の場合では、選択が未だされていないことを意味するので、処理がステップＳ４（選択画面の表示）に戻る。
【００３３】
ステップＳ１１以降の処理の流れが図３に示される。ステップＳ２１では、検索された人物の中の特定の人物が選択される。図５に示すようなサムネイル画像の一覧表示において、ユーザが方向スイッチ２４ｃおよび２４ｅと、決定スイッチ２４ｄとを操作して、アルバムを作成したい人物を選択する。
【００３４】
次に、ステップＳ２２において、表情選択画面が表示される。例えば笑った写真と笑っていない写真との一方を選択するための画面表示がなされる。ユーザが方向スイッチ２４ｃおよび２４ｅと、決定スイッチ２４ｄとを操作して、アルバムとして作成したい表情を選択する。ステップＳ２３において、笑った写真が選択されたか否かが判定される。
【００３５】
笑った写真が選択された場合には、ステップＳ２４において、ステップＳ２１で選択された特定の人物の写真の中で、顔認識ソフトウェア１０の機能を使用して笑った写真のみが検索される。ステップＳ２５において、検索された写真が本体メモリ７に格納されると共に、サムネイル画像でもって表示される。本体メモリ７に、特定の人物の笑っている写真のアルバムが作成される。
【００３６】
例えば図５の人物のサムネイル画像の一覧表示において、サムネイル画像３１ｄの人物が選択されると、図６に示すように、その人物の写真の中で、笑った写真の画像データが本体メモリ７に格納されると共に、そのサムネイル画像３２ａ，３２ｂ，３２ｃ，・・・が検索される度に順に表示される。検索が終了すると、本体メモリ７に作成されているアルバムの写真がスライドショーでＬＣＤ９に表示される（ステップＳ２６）。
【００３７】
ステップＳ２３において、笑った写真が選択されていないと判定されると、ステップＳ２７において、笑っていない写真が選択されているか否かが選択される。笑っていない写真が選択されていないと判定されると、表示選択が完了していないことを意味するので、処理がステップＳ２２（表情選択画面の表示）に戻る。
【００３８】
ステップＳ２７において、笑っていない写真が選択されていると判定されると、本体メモリ７に格納されている特定の人物の写真の中で、笑っていない写真が検索される（ステップＳ２８）。検索された写真が本体メモリ７にアルバムとして格納されると共に、サムネイル画像でもって表示される（ステップＳ２９）。検索が終了すると、本体メモリ７に作成されたアルバム（特定の人物の笑っていない写真の集合体）がスライドショーでもって、ＬＣＤ９の画面に表示される（ステップＳ３０）。
【００３９】
なお、上述した実施の形態におけるシステムコントローラ３の機能は、磁気ディスク、光磁気ディスク、ＲＯＭ等の記録媒体にプログラムとして記録することができる。したがって、この記録媒体をコンピュータで読み取ってＭＰＵ(Micro Processing Unit)、ＤＳ
Ｐ(Digital Signal Processor)等で実行することによりデジタルフォトフレームの機能を実現することができる。
【００４０】
＜２．変形例＞
この発明は、上述したこの発明の実施の形態に限定されるものでは無く、この発明の要旨を逸脱しない範囲内で様々な変形や応用が可能である。例えば本体メモリには、人物毎の写真が格納されているので、アルバムの作成が終了した後に、再び人物の選択と表情の選択を行って別のアルバムを作成するようにしても良い。さらに、笑っているか否かの表情選択に限らず、泣いている、怒っている等の他の表情を選択するようにしても良い。この場合、表情選択画面として選択した人物の写真のいろいろな表情の写真をサムネイルとして表示し、その中の特定の表情を選択するようにしても良い。
【符号の説明】
【００４１】
１・・・デジタルフォトフレーム
２・・・外部メモリコントローラ
３・・・システムコントローラ
７・・・本体メモリ
９・・・ＬＣＤ
１０・・・顔認識ソフトウェア
１１・・・外部メモリ
１２・・・通信部
【図１】
2011129033.tif 000003
【図２】
2011129033.tif 000004
【図３】
2011129033.tif 000005
【図４】
2011129033.tif 000006
【図５】
2011129033.tif 000007
【図６】
2011129033.tif 000008