(57)【要約】公開される画像においてそれぞれの人物が写っている枚数をできるだけ均一化するために，どの画像を選択すればよいかをアシストする画像候補決定装置，その方法，そのプログラムおよびそのプログラムを格納した記録媒体を提供することを目的とする。複数の画像を入力すると，同一人物が含まれている画像がグループ化される。同一人物について，公開する画像の最高枚数以上の画像がある場合には（ステップ61でＹＥＳ），その同一人物が含まれている画像について総合画像評価値が算出される（ステップ62）。総合画像評価値が小さい画像について，最高枚数未満となるように非公開画像候補に決定する（ステップ63）。
2019069606.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像を受け付けて，同一人物が含まれている１以上の画像をグループ化する画像グルーピング手段，および
総合画像評価値と，上記同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，上記画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定する画像候補決定手段，
を備えた画像候補決定装置。
【請求項２】
上記画像候補決定手段によって決定した抽出画像候補または非抽出画像候補を表示画面に表示させる画像候補表示制御手段，
をさらに備えた請求項1に記載の画像候補決定装置。
【請求項３】
上記総合画像評価値は，上記画像に写っている人物ごとに算出される人物画像評価値に基づいて算出される，請求項１または２に記載の画像候補決定装置。
【請求項４】
上記人物画像評価値は，少なくとも顔に関する評価値に基づき算出され，
複数の画像のそれぞれの画像から顔の画像部分を抽出する顔画像部分抽出手段をさらに備え，
上記画像グルーピング手段は，
上記顔画像部分抽出手段によって抽出された顔の画像部分を，同一人物の顔の画像部分ごとにグループ化し，
上記画像候補決定手段は，
上記総合画像評価値と，同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，上記画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定する，
請求項３に記載の画像候補決定装置。
【請求項５】
同一人物が含まれている画像の枚数が少ないほど上記人物画像評価値を大きくする補正係数を用いて上記人物画像評価値を補正する補正手段，
をさらに備えた請求項３または４に記載の画像候補決定装置。
【請求項６】
上記画像候補表示制御手段の制御により表示された抽出画像候補の中から抽出画像または非抽出画像を決定する，あるいは上記画像候補表示制御手段の制御により表示された非抽出画像候補の中から非抽出画像または抽出画像を決定する画像決定手段，
をさらに備えた請求項２に記載の画像候補決定装置。
【請求項７】
上記画像決定手段によって決定された抽出画像および非抽出画像のそれぞれの枚数を，画像に含まれる人物ごとに報知する報知手段，
をさらに備えた請求項６に記載の画像候補決定装置。
【請求項８】
上記複数の画像が，画像に含まれる人物ごとにあらかじめ抽出画像または非抽出画像と規定されており，
上記画像決定手段によって抽出画像または非抽出画像と決定されたことに応じて，抽出画像および非抽出画像のそれぞれの枚数を，画像に含まれる人物ごとに更新して報知する報知手段，
をさらに備えた請求項６に記載の画像候補決定装置。
【請求項９】
上記画像候補決定手段によって決定される一の非抽出画像候補が非抽出画像とされる，あるいは一の抽出画像候補が抽出画像とされることに応じて，特定の人物が含まれている画像の抽出枚数が制限値から外れる場合に，上記一の非抽出画像候補または上記一の抽出画像候補を非抽出画像候補または抽出画像候補から外す画像候補停止手段，
をさらに備えた請求項１から８のうち，いずれか一項に記載の画像候補決定装置。
【請求項１０】
上記画像グルーピング手段は，
大人については非同一人物を同一人物とみなして画像ごとにグループ化する，
請求項１から９のうち，いずれか一項に記載の画像候補決定装置。
【請求項１１】
画像に含まれる人数が多いほど低い人物画像評価値を算出する第１の評価値算出手段，
をさらに備えた請求項１から10のうち，いずれか一項に記載の画像候補決定装置。
【請求項１２】
上記画像候補決定手段は，
上記総合画像評価値と，同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，同一人物が含まれている画像の抽出枚数が制限値内に収まるように，上記画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定する，
請求項１から11のうち，いずれか一項に記載の画像候補決定装置。
【請求項１３】
上記画像グルーピング手段によってグループ化された１以上の画像に含まれている同一人物の数が閾値以下である人物を検出する人物検出手段，および
上記人物検出手段において検出された人物の撮影指示を行う撮影指示手段，
をさらに備えた請求項１から12のうち，いずれか一項に記載の画像候補決定装置。
【請求項１４】
画像グルーピング手段が，複数の画像を受け付けて，同一人物が含まれている１以上の画像をグループ化し，
画像候補決定手段が，総合画像評価値と，上記同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，上記画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定する，
画像候補決定方法。
【請求項１５】
画像候補決定装置のコンピュータを制御するコンピュータが読み取り可能なプログラムであって，
複数の画像を受け付けて，同一人物が含まれている１以上の画像をグループ化させ，
総合画像評価値と，上記同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，上記画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定させるように画像候補決定装置のコンピュータを制御するコンピュータが読み取り可能なプログラム。
【請求項１６】
請求項15に記載のプログラムを格納した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は，画像候補決定装置，画像候補決定方法，ならびに画像候補決定装置を制御するプログラムおよびそのプログラムを格納した記録媒体に関する。
【背景技術】
【０００２】
卒業式や運動会などのイベントにおいて，多数の子供たちを撮影し，アルバムなどが作成されている。このために，学校で撮影されるすべての写真や生徒の作品等を一元的に管理し，閲覧，注文が可能なスクールフォト管理サーバなどが考えられている(特許文献１)。また，アルバムを作成するに際して，特定の個人が撮影されている写真画像が極端に多くなったり少なくなったりしないようすることも考えられている。このために，一覧画像の中から画像を選択し，選択された画像の中から人物を抽出し，抽出した人物の登場回数のカウントを行い，登場回数が５回を超えた場合に警告表示を行っている。警告表示が行われるとユーザは選択された画像のうち，削除する画像を選択する(特許文献２)。さらに，ユーザが公開または非公開の設定を行わなくても，所定のルールにしたがって公開または非公開を自動的に決定できる画像公開装置も考えられている(特許文献３)。さらに，複数の被写体をバランスよく撮影することも考えられている(特許文献４)。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開2014-102715号公報
【特許文献２】特開2010-57073号公報
【特許文献３】特開2013-191035号公報
【特許文献４】特許第5616819号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
元気の良い子供や目立つ子供はたくさんの写真に写る一方で，引っ込み思案な子供や大人しい子供はあまり写真に写らない。特許文献１に記載のものにおいて，そのような状態において写真を販売すると保護者から不平等であるとの苦情を受ける可能性がある。特許文献２に記載のものでは，選択した画像の中から削除する画像を選択するときに，どの画像を選択すればいいのか判断に迷うことがある。特許文献３に記載のものは，画像解析結果にもとづいて画像の公開，非公開を決定しており，特定の人物が多くなったり少なくなったりすることがある。さらに，特許文献４に記載のものは，撮影時において複数の被写体をバランスよく撮影するにすぎない。【０００５】
この発明は，公開される画像においてそれぞれの人物が写っている枚数をできるだけ均一化するために，どの画像を選択すればよいかをアシストすることを目的とする。
【課題を解決するための手段】
【０００６】
この発明による画像候補決定装置は，複数の画像を受け付けて，同一人物が含まれている１以上の画像をグループ化する画像グルーピング手段，および総合画像評価値と，同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定する画像候補決定手段を備えていることを特徴とする。【０００７】
なおここでグルーピング手段とは，画像候補決定装置が，同一人物が含まれている１以上の画像を認識できるようにすることができればいかなる手段でもよい。例えば，あるフォルダに格納することであってもよいし，あるフラグを立てることであってもよい。【０００８】
また，この発明による画像候補決定装置は，複数の画像を受け付けて，同一人物が含まれている１以上の画像をグループ化し，総合画像評価値と，同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，グループ化された画像の中から抽出画像候補または非抽出画像候補を決定するプロセッサを備えていてもよい。【０００９】
この発明は，画像候補決定装置に適した画像候補決定方法も提供している。すなわち，この方法は，画像グルーピング手段が，複数の画像を受け付けて，同一人物が含まれている１以上の画像をグループ化し，画像候補決定手段が，総合画像評価値と，同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定することを特徴とする。【００１０】
この発明は，画像候補決定装置のコンピュータを制御するコンピュータが読み取り可能なプログラムおよびそのプログラムを格納した記録媒体も提供している。【００１１】
画像候補決定手段によって決定した抽出画像候補または非抽出画像候補を表示画面に表示させる画像候補表示制御手段をさらに備えてもよい。【００１２】
総合画像評価値は，たとえば，画像に写っている人物ごとに算出される人物画像評価値に基づいて算出される。【００１３】
人物画像評価値は，たとえば，少なくとも顔に関する評価値に基づき算出される。この場合，複数の画像のそれぞれの画像から顔の画像部分を抽出する顔画像部分抽出手段をさらに備え，画像グルーピング手段は，顔画像部分抽出手段によって抽出された顔の画像部分を，同一人物の顔の画像部分ごとにグループ化し，画像候補決定手段は，たとえば，総合画像評価値と，同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定する。【００１４】
同一人物が含まれている画像の枚数が少ないほど人物画像評価値を大きくする補正係数を用いて人物画像評価値を補正する補正手段をさらに備えてもよい。【００１５】
画像候補表示制御手段の制御により表示された抽出画像候補の中から抽出画像または非抽出画像を決定する，あるいは画像候補表示制御手段の制御により表示された非抽出画像候補の中から非抽出画像または抽出画像を決定する画像決定手段をさらに備えてもよい。【００１６】
画像決定手段によって決定された抽出画像および非抽出画像のそれぞれの枚数を，画像に含まれる人物ごとに報知する報知手段をさらに備えてもよい。【００１７】
複数の画像が，画像に含まれる人物ごとにあらかじめ抽出画像または非抽出画像と規定されている場合には，画像決定手段によって抽出画像または非抽出画像と決定されたことに応じて，抽出画像および非抽出画像のそれぞれの枚数を，画像に含まれる人物ごとに更新して報知する報知手段をさらに備えてもよい。【００１８】
画像候補決定手段によって決定される一の非抽出画像候補が非抽出画像とされる，あるいは一の抽出画像候補が抽出画像とされることに応じて，特定の人物が含まれている画像の抽出枚数が制限値から外れる場合に，一の非抽出画像候補または一の抽出画像候補を非抽出画像候補または抽出画像候補から外す画像候補停止手段をさらに備えてもよい。【００１９】
画像グルーピング手段は，たとえば，大人については非同一人物を同一人物とみなして画像ごとにグループ化する。【００２０】
画像に含まれる人数が多いほど低い人物画像評価値を算出する第１の評価値算出手段をさらに備えてもよい。【００２１】
画像候補決定手段は，たとえば，総合画像評価値と，同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，同一人物が含まれている画像の抽出枚数が制限値内に収まるように，画像グルーピング手段によってグループ化された画像の中から抽出画像候補または非抽出画像候補を決定してもよい。【００２２】
画像グルーピング手段によってグループ化された１以上の画像に含まれている同一人物の数が閾値以下である人物を検出する人物検出手段，および人物検出手段において検出された人物の撮影指示を行う撮影指示手段をさらに備えてもよい。
【発明の効果】
【００２３】
この発明によると，複数の画像が受け付けられ，同一人物が含まれている１以上の画像がグループ化される。総合画像評価値と，同一人物が含まれている画像の抽出枚数の制限値(制限値とは上限値，下限値などをいう)と，にもとづいて，グループ化された画像の中から抽出画像候補(抽出画像候補とは画像の中からユーザが抽出するのに適した画像の候補をいう)または非抽出画像候補(非抽出画像候補とは画像の中からユーザが抽出しないのに適した画像の候補をいう)が決定される。抽出画像候補または非抽出画像候補が決定されるので，ユーザは，どの画像を抽出すると好ましいか，あるいはどの画像を抽出しないことが好ましいかが分かる。このため，ユーザは，抽出すると好ましいと考えられる画像の中から抽出する画像を指定したり，抽出すると好ましくないと考えられる画像の中から抽出しない画像を指定したりできる。
【図面の簡単な説明】
【００２４】
【図１】画像候補決定装置の電気的構成を示すブロック図である。
【図２】画像候補決定装置の処理手順を示すフローチャートである。
【図３】画像候補決定装置の処理手順を示すフローチャートである。
【図４】画像候補決定装置の処理手順を示すフローチャートである。
【図５】画像候補決定装置の処理手順を示すフローチャートである。
【図６】画像候補決定装置の処理手順を示すフローチャートである。
【図７】画像候補決定装置の処理手順を示すフローチャートである。
【図８】画像表示ウインドウの一例である。
【図９】画像表示ウインドウの一例である。
【図１０】画像表示ウインドウの一例である。
【図１１】画像表示ウインドウの一例である。
【図１２】画像表示ウインドウの一例である。
【図１３】画像表示ウインドウの一例である。
【図１４】画像表示ウインドウの一例である。
【図１５】画像表示ウインドウの一例である。
【図１６】画像表示ウインドウの一例である。
【図１７】画像表示ウインドウの一例である。
【図１８】画像表示ウインドウの一例である。
【図１９】抽出枚数入力ウインドウの一例である。
【図２０】撮影指示ウインドウの一例である。
【図２１】画像表示ウインドウの一例である。
【図２２】画像表示ウインドウの一例である。
【図２３】画像表示ウインドウの一例である。
【図２４】画像表示ウインドウの一例である。
【図２５】画像表示ウインドウの一例である。
【図２６】画像の一例である。
【図２７】画像表示ウインドウの一例である。
【発明を実施するための形態】
【００２５】
図１は，この発明の実施例を示し，画像候補決定装置１の電気的構成を示すブロック図である。
【００２６】
画像候補決定装置１の全体の動作は，ＣＰＵ(Central Processing Unit)２によって統括される。
【００２７】
画像候補決定装置１には，画像その他の情報を表示画面に表示する表示装置３およびインターネットその他のネットワークに接続して画像候補決定装置１以外の装置等と通信する通信装置４が含まれている。また，画像候補決定装置１には，ハードディスク５，ハードディスク５にアクセスするハードディスク・ドライブ６，データ等を記憶するメモリ７，コマンド等を入力するキーボード８およびマウス９も含まれている。さらに，画像候補決定装置１には，コンパクト・ディスク11にアクセスするコンパクト・ディスク・ドライブ10ならびにメモリ・カード13へのデータの書き込みおよびメモリ・カード13に記録されているデータの読み取りを行うメモリ・カード・リーダ・ライタ12も含まれている。
【００２８】
後述する画像候補決定装置１の動作プログラムは，インターネットを介して通信装置４において受信される。受信された動作プログラムが画像候補決定装置１にインストールされる。動作プログラムはインターネットなどのようなネットワークを介して画像候補決定装置１に受信されて画像候補決定装置１にインストールされずに，コンパクト・ディスク11などの可搬型記録媒体に記録され，その可搬型記録媒体から読み取られてもよい。その場合には，可搬型記録媒体から読み取られた動作プログラムが画像候補決定装置１にインストールされる。動作プログラムは，画像候補決定装置１のコンピュータ(ＣＰＵ２)が読み取り可能であることは言うまでもない。
【００２９】
図２から図７は，画像候補決定装置１の処理手順を示すフローチャートである。
【００３０】
この実施例は，人物を含む画像を多数撮像して画像を公開する場合に，特定人物の画像が多くなったり，少なくなったりするような不均衡をできるだけ解消する。
【００３１】
この実施例においては，画像候補決定装置１のユーザによって撮影対象となる人物の氏名が画像候補決定装置１に登録されている。次に述べる実施例では，幼稚園の卒園式における画像を多数撮像する。この実施例では，撮影対象となる園児の氏名がユーザ(例えば，幼稚園の教諭)によって画像候補決定装置１にあらかじめ登録されている。
【００３２】
複数の画像を表す画像データが格納されているメモリ・カード13が画像候補決定装置１に装填されると，メモリ・カード13に格納されている複数の画像を表す画像データがメモリ・カード・リーダ・ライタ12によって読み取られる（図２ステップ21）。読み取られた画像データによって表される画像に含まれる顔の画像部分がＣＰＵ２(顔画像部分抽出手段)によって抽出される（図２ステップ22）。また，抽出された顔の画像部分にもとづいて，ＣＰＵ２(画像グルーピング手段)によって同一人物が含まれている１以上の画像がグループ化される（図２ステップ23）。同じ画像が異なるグループに属するようにしてもよいし，同じ画像は一つのグループのみに属するようにしてもよい。また，抽出された顔の画像部分についてもＣＰＵ２(画像グルーピング手段)によって同一人物の顔の画像部分ごとにグループ化される（図２ステップ24）。
【００３３】
表示装置３の表示画面には，図８に示す画像表示ウインドウ80が表示される。画像表示ウインドウ80には，画像管理タブ91，顔分類タブ101および公開設定タブ102が含まれており，最初は，画像管理タブ91がクリックされている状態である。画像表示ウインドウ80には，メモリ・カード13から読み取られた画像データによって表される多数の画像(サムネイル画像)が画像表示領域90に一覧で表示されている（図３ステップ25）。
【００３４】
図８を参照して，画像表示ウインドウ80には，「編集」の文字列81が表示されており，この「編集」の文字列81の下にイベント管理領域82が形成されている。このイベント管理領域82には，「幼稚園」という文字列の下に「卒園式」という文字列が表示されている。イベント管理領域82の下には，「イベント追加」の文字列が表示されているイベント追加ボタン83および「イベント削除」の文字列が表示されているイベント削除ボタン84が形成されている。
【００３５】
イベント管理領域82には，すでに「卒園式」というイベントが生成されており，メモリ・カード13から読み取られた画像データによって表される画像が，「卒園式」というイベントとして管理されることとなる。具体的には，「幼稚園」という文字列がクリックされた後に，イベント追加ボタン83がクリックされると，画像表示ウインドウ80上にイベント入力ウインドウが現れ，そのイベント入力ウインドウを用いてユーザが新たなイベントを入力する。その時に「卒園式」という文字列をユーザがキーボード８を用いて入力すると，「幼稚園」という文字列の下に「卒園式」という文字列が表示されることとなる。
【００３６】
「卒園式」という文字列がクリックされた状態で，画像表示領域90に，メモリ・カード13から読み取られた画像データによって表される画像がドラッグ・アンド・ドロップされることにより，「卒園式」というイベントによってドラッグ・アンド・ドロップされた画像が管理されることとなる(この状態が図８に示す状態である)。図８においては「イベント管理領域82に表示されている「卒園式」の文字列の右側に「360」という数字が括弧内に表示されており，360枚の画像が「卒園式」のイベントの画像として管理されていることとなる。イベント管理領域82に表示されている文字列がクリックされた後にイベント削除ボタン84がクリックされると，クリックされている文字列によって特定されるイベントおよびそのイベントによって管理される画像が削除される。
【００３７】
画像管理タブ91の下には左矢印ボタン92および右矢印ボタン93が形成されている。右矢印ボタン93の右側には指定された画像を特定する画像特定番号94が表示されている。この画像特定番号94によって表される数字が指定されている画像を表している。図８に示す例では，画像特定番号94には，「11/360」の文字列が表示されているから，「卒園式」のイベントとして管理されている360枚の画像のうち11枚目の画像が指定されていることを示している。画像特定番号94は分数によって表されており，分母がイベントによって管理されている枚数を示し，分子が指定されている画像を番号順で特定している。左矢印ボタン92が１回クリックされると画像特定番号94の分子が一つ減り，右矢印ボタン93が１回クリックされると画像特定番号94の分子が一つ増える。好ましくは，画像特定番号94によって特定される画像を枠で囲むなどをして特定されている画像がユーザにわかるようにするとよい。
【００３８】
画像特定番号94の右には，「リスト表示」の文字列95が表示されている。「リスト表示」の文字列95の左側のチェック・ボックスにチェックが入っていると(初期状態ではチェックが入っている)図８に示すように画像表示領域90に複数の画像が一覧で表示される。「リスト表示」の文字列95の左側のチェック・ボックスが外されると画像特定番号94によって特定される一つの画像が画像表示領域90に表示される(図９参照)。
【００３９】
画像表示領域90に表示されている複数の画像のそれぞれの画像の下には，公開ステータスと画像ファイル名とが表示されている。この実施例では，公開ステータスとして「公開」，「非公開」および「保留」の３種類がある。公開ステータスのうち「公開」は画像を公開する状態を示し，公開ステータスのうち「非公開」は画像を非公開とする状態を示し，公開ステータスのうち「保留」は「公開」または「非公開」のいずれも決まっていない状態を示す。たとえば，ユーザは，「公開」の画像のみを用いてアルバムを制作したり，「公開」の画像のみをプリントしたりする。
【００４０】
画像表示領域90の右端部には，上矢印ボタン97，スライド・バー98および下矢印ボタン99が形成されている。上矢印ボタン97がクリックされる，あるいはスライド・バー98が上方向にドラッグされることにより画像表示領域90が上方向にスクロールされ，下矢印ボタン99がクリックされる，あるいはスライド・バー98が下方向にドラッグされることにより画像表示領域90が下方向にスクロールされる。
【００４１】
画像表示領域90に表示されている画像のうち，いずれかの画像がクリックされると（図３ステップ26でＹＥＳ），クリックされた画像の公開ステータスが，クリックに応じて変えられる（図３ステップ27）。初期状態では，すべての画像の公開ステータスは「保留」とされており，公開ステータスが「保留」とされている画像が１回クリックされると公開ステータスは「公開」となり，公開ステータスが「公開」となった画像が，さらに１回クリックされると公開ステータスは「非公開」となる。公開ステータスが「非公開」となった画像が，さらに１回クリックされると公開ステータスは「保留」となる。このように画像がクリックされるごとに公開ステータスが順に変わる。もっとも，公開ステータスから「保留」を無くし，「公開」と「非公開」としてもよい。その場合には，初期状態ではすべての画像の公開ステータスは「公開」または「非公開」とされ(画像に含まれる人物ごとにあらかじめ抽出画像または非抽出画像と規定され)，画像のクリックに応じて(抽出画像または非抽出画像との決定)公開ステータスが「公開」または「非公開」に切り替わる)。
【００４２】
左矢印ボタン92または右矢印ボタン93がクリックされると（図３ステップ28でＹＥＳ），左矢印ボタン92がクリックされた場合には画像特定番号94の分子が一つ減り，右矢印ボタン93がクリックされた場合には画像特定番号94の分子が一つ増えて，画像の指定が変わる（図３ステップ29）。
【００４３】
リスト表示の文字列95のチェック・ボックスのチェックが外されると（図３ステップ30でＹＥＳ），画像特定番号94によって特定される画像が画像表示領域90に拡大表示される（図３ステップ31）。
【００４４】
図９は，画像表示領域90に画像が拡大表示されている様子を示している。
【００４５】
図９において，図８に示す構成と同一の構成については同一符号を付して説明を省略する。
【００４６】
「リスト表示」の文字列95の右側には「顔情報表示」の文字列96が表示されている。「顔情報表示」の文字列96の左側にもチェック・ボックスが形成されている。
【００４７】
図９に示す例は，図８において画像特定番号94には「11/360」の文字列が表示されていた場合に「リスト表示」の文字列95のチェック・ボックスのチェックが外されたものとする。すると，図９に示す画像表示領域90には，「11/360」の文字列によって特定される画像ファイル名「0011.jpg」の画像が拡大されて表示されることとなる。画像表示領域90に拡大表示されている画像の下には公開ステータス（保留）と画像ファイル名（0011.jpg）とが表示されている。
【００４８】
「顔情報表示」の文字列96の左側のチェック・ボックスがチェックされると（図３ステップ32でＹＥＳ），画像表示領域90に表示されている画像に含まれている顔画像部分を囲む顔枠が表示される（図３ステップ33）。この顔枠の表示は，すでに行われている顔画像部分の抽出処理(図２ステップ22)にもとづいて行われる。画像候補決定装置１のユーザ(この場合は幼稚園の教諭)によって対象となる被写体(この場合は園児)の氏名が入力されており，詳しくは後述するように(図11，図12などを参照)，どの顔の画像が誰なのかがユーザによって特定される。ユーザによって特定された氏名の顔と同一人物の顔の画像が画像候補決定装置１において見つけられ，見つけられた顔の画像についても氏名と関連付けられる(たとえば，画像ファイルのヘッダに，その顔の氏名が顔の位置の情報に対応して格納される)。このようなユーザの処理により，顔の画像と氏名との関連付けがすでに行われている場合には，顔枠に対応して，その顔の人物の氏名も表示される。
【００４９】
図10は，顔情報表示の文字列96の左側のチェック・ボックスがチェックされ，画像表示領域90に表示されている画像に含まれている顔の画像部分が顔枠により囲まれている様子を示している。
【００５０】
顔枠Ｆ１，Ｆ４，Ｆ３およびＦ２によって囲まれている顔は，それぞれ「佐藤太郎」，「田中次郎」，「伊藤花子」および「鈴木春子」という氏名の人物(園児)であり，それぞれの顔枠Ｆ１，Ｆ４，Ｆ３およびＦ２の近く(上部)にそれぞれの氏名が表示されている。顔枠Ｆによって囲まれている顔は，ユーザによって氏名と関連づけがされていない(未分類)ため氏名が表示されていない。顔情報表示の文字列96の左側のチェック・ボックスがチェックされることにより，画像に含まれている人物の氏名が表示され，画像に含まれている人物の氏名をユーザが確認できる。
【００５１】
顔情報表示の文字列96の左側のチェック・ボックスのチェックが外されると（図３ステップ34でＹＥＳ），図10に示すように画像に含まれる顔が枠により囲まれており，氏名が関連づけられている顔については氏名が表示されている状態から，図９に示すように氏名が消去された状態に戻される（図３ステップ35）。
【００５２】
ユーザによって顔分類タブ101がクリックされると（図３ステップ36でＹＥＳ），画像表示ウインドウ80には，図11に示すように顔の画像部分が一覧で表示される（図４ステップ38）。また，ユーザによって公開設定タブ102がクリックされると（図３ステップ37でＹＥＳ），画像表示ウインドウ80は，図13に示すように画像の公開，非公開を設定する公開/非公開設定画像を表示する（図５ステップ49）。
【００５３】
ユーザによって顔分類タブ101がクリックされたた場合，表示装置３の表示画面には図11に示す画像表示ウインドウ80が表示される。図11において，図８から図10に示す構成と同一の構成については同一符号を付して説明を省略する。
【００５４】
画像表示領域90には，図２ステップ22の処理において抽出された顔の画像部分が一覧で表示される。顔の画像部分は，その顔の画像部分が含まれている画像のファイル名順で画像表示領域90に表示されるが，必ずしもそうでなくともよい。
【００５５】
画像表示領域90の左側には被写体リスト領域110が形成されている。被写体リスト領域110には，上述のようにユーザによってあらかじめ画像候補決定装置１に登録されている氏名が一覧で表示されている。また，その氏名に対応して，その氏名の人物が写っている画像の枚数も表示されている。被写体リスト領域110に表示されている氏名はユーザが選択(クリック)できる。
【００５６】
画像表示領域90の上部には，「顔分類」の文字列が表示されている顔分類ボタン111，「選択園児表示」の文字列112，「非選択園児表示」の文字列113および「未分類顔表示」の文字列114が表示されている。「選択園児表示」の文字列112，「非選択園児表示」の文字列113および「未分類顔表示」の文字列114のそれぞれの左側にはチェック・ボックスが形成されている。
【００５７】
顔分類ボタン111がクリックされると，同一人物の顔の画像部分がまとまって(隣接するように)画像表示領域90に表示される。「選択園児表示」の文字列112の左側のチェック・ボックスがチェックされると，被写体リスト領域110に表示されている氏名のうち，選択されている氏名の人物の顔画像が画像表示領域90に表示される。たとえば，被写体リスト領域110に表示されている氏名のうち「佐藤太郎」が選択されている状態で「選択園児表示」の文字列112の左側のチェック・ボックスがチェックされると，画像表示領域90には
「佐藤太郎」の顔画像が表示される。
【００５８】
「非選択園児表示」の文字列113の左側のチェック・ボックスがチェックされると，被写体リスト領域110に表示されている氏名のうち，選択されている氏名以外の人物の顔画像が画像表示領域90に表示される。たとえば，被写体リスト領域110に表示されている氏名のうち「佐藤太郎」が選択されている状態で「非選択園児表示」の文字列113の左側のチェック・ボックスがチェックされると，画像表示領域90には「佐藤太郎」以外の顔画像が表示される。「未分類顔表示」の文字列114の左側のチェック・ボックスがチェックされると，未分類(上述したようにユーザによって氏名と顔の画像とが関連づけられていない)の人物の顔画像が画像表示領域90に表示される。
【００５９】
顔分類タブ101がクリックされ，画像表示領域90に表示されている顔の画像部分が表示されると，その顔に氏名を関連づけることができる。顔の画像部分が含まれる画像を表す画像ファイルのヘッダに顔の画像部分の位置情報と関連付けられて氏名の情報が格納されることにより顔と氏名との関連付けが行われる。画像表示領域90に表示されている顔の画像部分のうち，氏名と関連付けられていない顔の画像部分については，その顔の画像部分が含まれている画像のファイル名のみが表示される。氏名と関連付けられている顔の画像部分については，その顔の画像部分が含まれて類画像のファイル名と氏名とが表示される。
【００６０】
画像表示領域90に表示されている顔の画像部分に氏名を関連付ける場合には，被写体リスト領域110に表示されている氏名のうち，いずれかの氏名がユーザによってクリックされ（図４ステップ39でＹＥＳ），その氏名の顔の画像部分がユーザによってクリックされる（図４ステップ40でＹＥＳ）。すると，上述したようにその顔の画像部分を含む画像ファイルのヘッダに顔の画像部分の位置情報とともに氏名情報が格納される。クリックされた顔の画像部分の上部に，その顔画像部分を含む画像のファイル名とともに選択された氏名が表示されるようになる（図４ステップ41）。
【００６１】
つづいて，氏名が関連付けられた第１画像評価値がＣＰＵ２によって算出される（図４ステップ42，第１画像評価値が本発明における人物画像評価値に相当する）。この第１画像評価値は，関連付けられた氏名の人物にとっての評価値である。ある画像に二人の人物が含まれている場合に，同じ画像であっても，一方の人物についての第１画像評価値と，他方の人物についての第１画像評価値とは異なる。
【００６２】
第１画像評価値は，画像に含まれる人数，画像に含まれる顔のサイズなどの評価パラメータにしたがって算出される。表１は，画像に含まれる人数による人数得点テーブルの一例である。
【００６３】
【表１】
2019069606.tif 000003
【００６４】
画像に含まれる人物の人数が少なすぎず，多すぎないほど，バランスよい画像であり画像に含まれている人物が適度に目立っていると考えられ，その人物にとっての画像の価値は高いと考えられる。このために，画像に含まれる人数が５人程度であれば人数得点が高くなり，画像に含まれる人数が少なくなったり，多くなったりすると人数得点が低くなるようにＣＰＵ２(第１の画像評価値算出手段)によって算出される。もっとも，画像に含まれる人数が少ないほど人数得点を高くし，画像に含まれる人数が多いほど得点を高くしてもよい。
【００６５】
表２は画像に含まれる顔のサイズによる顔サイズ得点テーブルの一例である。表２において顔のサイズは画像に対する顔のサイズを示している。たとえば，顔のサイズが「1/15」とあるのは，顔のサイズが画像のサイズに対して1/15であることを示している。サイズは顔を矩形の枠により囲んだ場合に，画像の横の画素数と顔の画像部分の横の画素数とを利用してもよいし，画像の縦の画素数と顔の画像部分の縦の画素数とを利用してもよいし，画像全体の領域の画素数と顔の領域の画素数とを利用してもよい。
【００６６】
【表２】
2019069606.tif 000004
【００６７】
画像に含まれる人物の顔のサイズが大きすぎても小さすぎても，画像のバランスが良くないので，適度な比率(ここでは1/6)のときに，顔サイズ得点が一番高くなり，その比率より離れるほど顔サイズ得点が低くなるように設定されている。
【００６８】
評価パラメータは，画像に含まれる人数，画像に含まれる顔のサイズなどのほかに，画像に含まれる顔の画像部分のピントの程度，画像に含まれる顔の中の目の開き具合，画像に含まれる顔の表情などから算出される表情得点も利用され，顔得点が算出される。顔の画像部分のピントが合っている顔ほど，表情得点は高くなり，目がきちんと開いているほど，表情得点は高くなり，顔の表情が笑顔であるほど，表情得点は高くなるように，評価パラメータに対応して表情得点が設定されている。
【００６９】
この実施例では，人数得点，顔サイズ得点，および表情得点の和により，第１画像評価値の素点が算出される。
【００７０】
この他に，１枚の画像全体の画質が良い(例えばピントが合っている)ほど，得点が高くなる，画質得点を定義して素点の算出に用いてもよい。
【００７１】
さらに，この実施例では，特定の人物が写っている画像の枚数に応じて第１画像評価値が補正される。このために，特定の人物が写っている画像の枚数が少ないほど，その人物にとっての第１画像評価値は高く，特定の人物が写っている画像の枚数が多いほど，その人物にとっての第１画像評価値は低くなるように重み付けが行われる。
【００７２】
表３は，重み付けテーブルの一例である。表３において最大値は，公開する画像の中で同一人物が写っている画像の最大値であり，たとえば「６」である。
【００７３】
【表３】
2019069606.tif 000005
【００７４】
人物ごとの第１画像評価値が画像ごとに算出されることとなる。
【００７５】
表４は，「佐藤太郎」の画像ごとの第１画像評価値を示している。
【００７６】
【表４】
2019069606.tif 000006
【００７７】
表４には，画像ファイル名「0022.jpg」，「0019.jpg」，「0021.jpg」，「0013.jpg」，「0020.jpg」および「0018.jpg」の６枚の画像について，「佐藤太郎」からとらえた第１画像評価値が示されている。「佐藤太郎」は，これらの６枚の画像に写っていることとなる。「佐藤太郎」にとって，たとえば，ファイル名「0022.jpg」の第１画像評価値の素点は「40」であり，他の第１画像評価値の素点も示されている。これらの素点が正規化され，かつ正規化された素点に重み付けされた点数が，「佐藤太郎」についてのそれぞれの第１画像評価値である。「佐藤太郎」は，６枚の画像(重み付けテーブルに規定されている最大値と同じ枚数の画像)に写っているので，重み付け係数は最大値の「×１」となり，重み付け係数による補正後の第１画像評価値が正規化された素点と同じとなる。もちろん，重み付け係数が「×１」でなければ重み付け係数による補正後の第１画像評価値と正規化された素点とは異なることとなる。このように，同一人物が含まれている画像の枚数が少ないほど第１画像評価値を大きくし，同一人物が含まれている画像の枚数が多いほど第１画像評価値を小さくする重み付け係数(補正係数)を用いて第１画像評価値をＣＰＵ２(補正手段)によって補正することが好ましい。
【００７８】
「佐藤太郎」だけでなく，他の氏名をもつ人物についても，人物にとっての画像評価値が画像ごとに算出される。
【００７９】
表５は，「佐藤太郎」が写っている６枚の画像について，それらの６枚の画像に含まれている人物にとっての第１画像評価値を示し，かつ，１枚の画像についての総合的な画像評価値である第２画像評価値を示している（第２画像評価値が本発明の総合画像評価値に相当する）。
【００８０】
【表５】
2019069606.tif 000007
【００８１】
画像ファイル名「0022.jpg」の画像には「佐藤太郎」のほかに「鈴木春子」が含まれており，画像ファイル名「0019.jpg」の画像には「佐藤太郎」のほかに「伊藤花子」が含まれており，画像ファイル名「0021.jpg」の画像には「佐藤太郎」のほかに「鈴木春子」および「田中次郎」が含まれており，画像ファイル名「0013.jpg」の画像には「佐藤太郎」のほかに「伊藤花子」が含まれており，画像ファイル名「0020.jpg」の画像には「佐藤太郎」のほかに「鈴木春子」，「伊藤花子」，「田中次郎」および「渡辺一郎」が含まれており，画像ファイル名「0018.jpg」の画像には「佐藤太郎」のほかに「渡辺一郎」が含まれていることが分かる。
【００８２】
たとえば，画像ファイル名「0022.jpg」の画像の第１画像評価値は「佐藤太郎」にとっては「20」であるが，「鈴木春子」にとっては「200」であり，画像ファイル名「0022.jpg」の画像の総合的な画像評価値である第２画像評価値は，「佐藤太郎」にとっての第１画像評価値である「20」と「鈴木春子」にとっての第１画像評価値である「200」のと和である，「220」となる。他の画像についても同様に，画像ファイル名「0019.jpg」の画像の第２画像評価値は「62.5」，画像ファイル名「0021.jpg」の画像の第２画像評価値は「367」，画像ファイル名「0013.jpg」の画像の第２画像評価値は「63」，画像ファイル名「0020.jpg」の画像の第２画像評価値は「1023」，画像ファイル名「0018.jpg」の画像の第２画像評価値は「414.5」であることが分かる。これらのことから，これらの６枚の画像のうち，第２画像評価値が最も高い画像ファイル名「0020.jpg」の画像が，画像としての重要度が最も高く，第２画像評価値が最も低い画像ファイル名「0019.jpg」の画像が，画像としての重要度が最も低いことが分かる。このように，画像に含まれる人物ごとに異なる第１画像評価値を画像ごとに加算し，加算して得られる総和をＣＰＵ２(第２の画像評価値算出手段)によって算出し，その総和を第２画像評価値とすることが好ましい。
なお，第２画像評価値は，画像に写っている人物ごとに算出される人物第１画像評価値に基づいて，第１画像評価値が高くなるほど第２画像評価値が高くなるような算出方法であればいかなる方法であってもよく，重み付けをした上で第１画像評価値を総和して算出してもよい。たとえば，全園児参加の行事における画像群について，今後の撮影機会の多少を考慮して，学年が上である園児ほど重く（したがって学年が下である園児ほど軽く）第１画像評価値に重み付けを行った上で，総和をとって第２画像評価値を算出することとしてもよい。
【００８３】
この実施例では，これらの６枚の画像のうち，非公開の画像を決定する場合には，第２画像評価値の低い画像の順に非公開画像候補(非抽出画像候補)と決定し，公開の画像を決定する場合には第２画像評価値の高い画像の順に公開画像候補(公開画像候補)と決定する。画像が公開または非公開に変わった場合には，改めて第１画像評価値および第２画像評価値が算出される。
【００８４】
上述の実施例において，画像に複数の顔の画像部分が含まれている場合，それらの顔の画像部分の評価値の和を算出し，算出した和を総合画像評価値としてもよい。たとえば，表５を参照して画像ファイル名「0022.jpg」の画像に「佐藤太郎」の氏名をもつ顔の画像部分が含まれ，その顔の画像部分の評価値が「20」であったとする。また，その画像ファイル名「0022.jpg」の画像に「鈴木春子」の氏名をもつ顔の画像部分が含まれ，その顔の画像部分の評価値が「200」であったとする。それらの顔の画像部分の評価値の和を算出し，得られた評価値の和「220」を総合画像評価値とすることができる。
【００８５】
左矢印ボタン92または右矢印ボタン93の矢印ボタンがクリックされると（図４ステップ43でＹＥＳ），これらの左矢印ボタン92または右矢印ボタン93のクリックに応じて，画像の指定が変わる（図４ステップ44）。画像特定番号94の数字も変わる。
【００８６】
顔分類ボタン111がクリックされると（図４ステップ45でＹＥＳ），図12に示すように顔の画像部分が同一人物ごとに分類して表示される（図４ステップ46）。
【００８７】
図12を参照して，顔画像グループＧ１には，画像ファイル名「0021.jpg」の画像に含まれる顔の画像部分，画像ファイル名「0019.jpg」の画像に含まれる顔の画像部分，画像ファイル名「0020.jpg」の画像に含まれる顔の画像部分，画像ファイル名「0018.jpg」の画像に含まれる顔の画像部分が含まれている。顔画像グループＧ１には，画像ファイル名「0022.jpg」の画像に含まれる顔の画像部分および画像ファイル名「0013.jpg」の画像に含まれる顔の画像部分も含まれているが，図12では見えない。顔画像グループＧ１は，「佐藤太郎」の顔画像部分が含まれていることとなる。
【００８８】
また，顔画像グループＧ２には，画像ファイル名「0027.jpg」の画像に含まれる顔の画像部分，画像ファイル名「0014.jpg」の画像に含まれ顔の画像部分および画像ファイル名「0028.jpg」の画像に含まれる顔の画像部分が含まれている。顔画像グループＧ２に含まれている顔の画像部分も同一人物を表している。同様に，顔画像グループＧ３には，画像ファイル名「0027.jpg」の画像に含まれる顔の画像部分および画像ファイル名「0014.jpg」の画像に含まれる顔の画像部分が含まれている。顔画像グループＧ３に含まれている顔の画像部分も同一人物を表している。
【００８９】
図12に示す状態の画像表示ウインドウ80においても，図11に示す状態の画像表示ウインドウ80と同様に，被写体リスト領域110に表示されている氏名がクリックされた後に（図４ステップ39でＹＥＳ），顔の画像部分がクリックされると（図４ステップ40），クリックされた顔の画像部分と氏名とが関連づけられる（図４ステップ41）。また，図12に示すように顔画像グループに分類されている場合には，被写体リスト領域110に表示されている氏名がクリックされた後に（図４ステップ39でＹＥＳ），いずれかの顔画像グループに含まれている顔の画像部分またはいずれかの顔画像グループの領域内であって顔の画像部分以外の領域がクリックされたことにより，クリックされた部分を含む顔画像グループに含まれるすべての顔の画像部分と氏名とが関連づけられてもよい。顔画像グループに含まれるすべての顔の画像部分について氏名との関連付けが比較的簡単にできるようになる。
【００９０】
また，画像管理タブ91がクリックされると（図４ステップ47でＹＥＳ），図３に示す処理に移行する。さらに，公開設定タブ102がクリックされると（図４ステップ48でＹＥＳ），画像表示ウインドウ80には図13に示すような公開/非公開設定画像が表示される（図５ステップ49）。
【００９１】
図13において，図８から図12に示す構成と同一の構成については同一符号を付して説明を省略する。
【００９２】
画像表示領域90には，公開設定タブ102がクリックされる前に画像特定番号94によって特定されていた画像が表示される。図13においては，画像ファイル名「0022.jpg」の画像が画像特定番号によって特定されていたものとする。画像表示領域90には，画像ファイル名「0022.jpg」の画像が表示されている。画像ファイル名「0022.jpg」の画像には，「佐藤太郎」と「鈴木春子」が含まれている。「佐藤太郎」の顔は顔枠Ｆ１により囲まれており，その顔枠Ｆ１の上部に「佐藤太郎」の氏名が表示されている。「鈴木春子」の顔は顔枠Ｆ２により囲まれており，その顔枠Ｆ２の上部に「鈴木春子」の氏名が表示されている。
【００９３】
画像表示領域90の左側には公開/非公開情報表示領域120が形成されている。公開/非公開情報表示領域120には，被写体の氏名が表示されている。被写体の氏名の左側にはチェック・ボックス121-126，129などが形成されている。チェック・ボックス129の右側には人物名として「教諭・保護者」と表示されている。幼稚園の卒園式の場合，園児が主役であり，教諭や保護者は脇役であることが多いため，人物ごとに分けずに同一人物として扱っているからである。このように，教諭や保護者のような大人については，同一人物とみなして画像ごとにＣＰＵ２(画像グルーピング手段)によってグループ化してもよい。もちろん，教諭および保護者を同一人物として扱わずに人物ごとに分けて扱ってもよい。画像表示領域90に表示されている画像に含まれている人物(氏名が表示されている人物)に対応する氏名のチェック・ボックスがチェックされている。図13に示す例では，画像表示領域90に表示されている画像には「佐藤太郎」と「鈴木春子」とが含まれており，「佐藤太郎」の氏名の左側のチェック・ボックス121と「鈴木春子」の氏名の左側のチェック・ボックス122とがチェックされている。
【００９４】
また，被写体の氏名の右側には，その被写体が含まれている画像のうち「非公開」に設定されている状態の枚数(非抽出画像の枚数)，「保留」の状態の枚数，「公開」に設定されている状態の枚数(抽出画像の枚数)が人物ごとにＣＰＵ２(表示制御手段)の制御のもとに表示装置３(報知手段)に表示されている画像表示ウインドウ80の被写体リスト領域110に表示されている。
【００９５】
画像表示領域90に表示されている画像がクリックされると（図５ステップ50でＹＥＳ），図３ステップ27の処理と同様にクリックに応じてクリックされた画像の公開ステータスが変わる（図５ステップ51）。画像の公開ステータスが「保留」の状態で画像が一回クリックされると公開ステータスは「公開」となる。公開/非公開情報表示領域120の「佐藤太郎」および「鈴木春子」のそれぞれの氏名の「公開」の枚数が「０」から「１」に変更される。また，「佐藤太郎」の氏名の「保留」の枚数が「６」から「５」となり，「鈴木春子」の氏名の「保留」の枚数が「３」から「２」となる。画像がさらに一回クリックされると，公開ステータスは「非公開」となる。公開/非公開情報表示領域の「佐藤太郎」および「鈴木春子」のそれぞれの氏名の「公開」の枚数が「１」から「０」に戻され，かつそれぞれの「非公開」の枚数が「０」から「１」に変更される。
【００９６】
公開ステータスに「保留」が含まれていず，「非公開」と「公開」との二種類の場合には，画像表示領域90に表示されている画像が一回クリックされるごとに，公開ステータスが「非公開」と「公開」との間で切り替わり，公開/非公開情報表示領域120に表示されている「非公開」の画像の枚数と「公開」の画像の枚数とが，画像に含まれる人物ごとにＣＰＵ２によって更新されて，表示装置３(報知手段)に表示されている画像表示ウインドウ80の公開/非公開情報表示領域120に表示(報知)される。
【００９７】
左矢印ボタン92または右矢印ボタン93のいずれかの矢印ボタンがクリックされると（図５ステップ52でＹＥＳ），画像特定番号94が減少したり，増加したりして画像の指定が変わる（図５ステップ53）。図13においては，「佐藤太郎」が含まれている６枚の画像のうちの１枚が画像表示ウインドウ80に表示されており，画像特定番号94は「1/6」となっている。これは，図12に示す画像表示ウインドウ80に含まれる被写体リスト領域110において「佐藤太郎」が選択されている状態で公開設定タブ102がクリックされたからである。
画像表示領域90に表示されている画像には「佐藤太郎」と「鈴木春子」とが含まれている。「佐藤太郎」の顔は顔枠Ｆ１によって囲まれており，その顔枠Ｆ１の上部に「佐藤太郎」という氏名が表示されている。同様に「鈴木春子」の顔は顔枠Ｆ２によって囲まれており，その顔枠Ｆ２の上部に「鈴木春子」という氏名が表示されている。
【００９８】
図13に示す画像表示ウインドウ80が表示されている状態で右矢印ボタン93がクリックされると，表示装置３の表示画面には図14に示す画像表示ウインドウ80が表示される。
【００９９】
図14を参照して，画像表示領域90に表示されている画像には，「佐藤太郎」と「伊藤花子」との他に氏名が決定されていない(図11，図12などを用いて顔の画像部分と氏名とが関連づけられていない)人物とが含まれている。「佐藤太郎」の顔は顔枠Ｆ１によって囲まれており，その顔枠Ｆ１の上部に「佐藤太郎」という氏名が表示されている。同様に「伊藤花子」の顔は顔枠Ｆ３によって囲まれており，その顔枠Ｆ３の上部に「伊藤花子」という氏名が表示されている。氏名が決定されていない未分類の人物の顔は顔枠Ｆによって囲まれている。未分類の顔枠Ｆの上部には顔の画像部分と氏名とが関連づけられていないことが分かるように「未分類」の文字列が表示されている。また，「佐藤太郎」が含まれている６枚の画像のうちの２枚目の画像であることが分かるように，画像特定番号94が「1/6」から「2/6」に変わっている。
【０１００】
図14に示す画像表示ウインドウ80が表示されている状態で右矢印ボタン93がクリックされると，表示装置３の表示画面には図15に示す画像表示ウインドウ80が表示される。
【０１０１】
図15を参照して，画像表示領域90に表示されている画像には，「佐藤太郎」と「鈴木春子」と「田中次郎」との他に氏名が決定されていない(図11，図12などを用いて顔の画像部分と氏名とが関連づけられていない)人物とが含まれている。「佐藤太郎」の顔は顔枠Ｆ１によって囲まれており，その顔枠Ｆ１の上部に「佐藤太郎」という氏名が表示されている。同様に「鈴木春子」の顔は顔枠Ｆ２によって囲まれており，その顔枠Ｆ２の上部に「鈴木春子」という氏名が表示されており，「田中次郎」の顔は顔枠Ｆ４によって囲まれており，その顔枠Ｆ４の上部に「田中次郎」という氏名が表示されている。氏名が決定されていない未分類の人物の顔は顔枠Ｆによって囲まれている。未分類の顔枠Ｆの上部には「未分類」の文字列が表示されている。また，「佐藤太郎」が含まれている６枚の画像のうちの３枚目の画像であることが分かるように，画像特定番号94が「2/6」から「3/6」に変わっている。
【０１０２】
図15に示す画像表示ウインドウ80が表示されている状態で右矢印ボタン93がクリックされると，表示装置３の表示画面には図16に示す画像表示ウインドウ80が表示される。
【０１０３】
図16を参照して，画像表示領域90に表示されている画像には，「佐藤太郎」と「伊藤花子」との他に氏名が決定されていない(図11，図12などを用いて顔の画像部分と氏名とが関連づけられていない)人物とが含まれている。「佐藤太郎」の顔は顔枠Ｆ１によって囲まれており，その顔枠Ｆ１の上部に「佐藤太郎」という氏名が表示されている。同様に「伊藤花子」の顔は顔枠Ｆ３によって囲まれており，氏名が決定されていない未分類の人物の顔は顔枠Ｆによって囲まれている。未分類の顔枠Ｆの上部には「未分類」の文字列が表示されている。また，「佐藤太郎」が含まれている６枚の画像のうちの４枚目の画像であることが分かるように，画像特定番号94が「3/6」から「4/6」に変わっている。
【０１０４】
図16に示す画像表示ウインドウ80が表示されている状態で右矢印ボタン93がクリックされると，表示装置３の表示画面には図17に示す画像表示ウインドウ80が表示される。
【０１０５】
図17を参照して，画像表示領域90に表示されている画像には，「佐藤太郎」，「鈴木春子」，「伊藤花子」，「田中次郎」および「渡辺一郎」との他に氏名が決定されていない(図11，図12などを用いて顔の画像部分と氏名とが関連づけられていない)人物とが含まれている。「佐藤太郎」の顔は顔枠Ｆ１によって囲まれており，その顔枠Ｆ１の上部に「佐藤太郎」という氏名が表示されている。同様に「鈴木春子」の顔は顔枠Ｆ２によって囲まれており，「伊藤花子」の顔は顔枠Ｆ３によって囲まれており，「田中次郎」の顔は顔枠Ｆ４によって囲まれており，「渡辺一郎」の顔は顔枠Ｆ５によって囲まれている。氏名が決定されていない未分類の人物の顔は顔枠Ｆによって囲まれており，未分類の顔枠Ｆの上部には「未分類」の文字列が表示されている。また，「佐藤太郎」が含まれている６枚の画像のうちの５枚目の画像であることが分かるように，画像特定番号94が「4/6」から「5/6」に変わっている。
【０１０６】
図17に示す画像表示ウインドウ80が表示されている状態で右矢印ボタン93がクリックされると，表示装置３の表示画面には図18に示す画像表示ウインドウ80が表示される。
【０１０７】
図18を参照して，画像表示領域90に表示されている画像には，「佐藤太郎」，「渡辺一郎」および大人または保護者が含まれている。また，画像表示領域90に表示されている画像には，氏名が決定されていない(図11，図12などを用いて顔の画像部分と氏名とが関連づけられていない)人物も含まれている。「佐藤太郎」の顔は顔枠Ｆ１によって囲まれており，その顔枠Ｆ１の上部に「佐藤太郎」という氏名が表示されている。同様に「渡辺一郎」の顔は顔枠Ｆ５によって囲まれており，大人または保護者の顔は顔枠Ｆ６によって囲まれている。氏名が決定されていない未分類の人物の顔は顔枠Ｆによって囲まれており，未分類の顔枠Ｆの上部には「未分類」の文字列が表示されている。また，「佐藤太郎」が含まれている６枚の画像のうちの６枚目の画像であることが分かるように，画像特定番号94が「5/6」から「6/6」に変わっている。
【０１０８】
図18に示す画像表示ウインドウ80が表示されている状態で，左矢印ボタン92がクリックされると，クリックされるごとに右矢印ボタン93がクリックされる前に表示されていた画像が画像表示ウインドウ80の画像表示領域90に表示されることとなる。
【０１０９】
図13から図18に示すように右矢印ボタン93または左矢印ボタン92がクリックされるごとに「佐藤太郎」の氏名を含む人物を順番に画像表示領域90に表示させることができる。図13から図18に示す画像表示ウインドウ80の画像表示領域90に表示されているいずれの画像においても画像がクリックされるごとに公開ステータスが「公開」，「非公開」または「保留」に順に変わり，画像表示領域90に表示されている画像を公開とするか非公開とするかをユーザが指定できる。「佐藤太郎」の氏名を含む人物が含まれていない画像についても同様に画像を公開とするか非公開とするかをユーザが指定できる。
【０１１０】
たとえば，図13から図18に示すように公開設定タブ102がクリックされている状態で，被写体リスト領域110に表示されている氏名がクリックされると(選択されると)，クリックされた氏名の人物が含まれている画像が画像表示領域90に表示される。たとえば，被写体リスト領域110に表示されている氏名のうち「鈴木春子」がクリックされると，「鈴木春子」が含まれている画像のうち１枚目の画像が画像表示領域90に表示される。「鈴木春子」が含まれている画像(「鈴木春子」の氏名と画像との関連付けが行われている画像)は，３枚であるから(被写体リスト領域110の「鈴木春子」の氏名に対応して表示されている非公開の画像の数，保留の画像の数および公開の画像の数の合計が３であるから３枚となる)，画像表示領域90に「鈴木春子」の画像が表示されている状態で右矢印ボタン93をクリックすると，それらの３枚の画像が順に画像表示領域90に表示される。
【０１１１】
枚数入力ボタン130がクリックされると（図５ステップ54でＹＥＳ），画像表示ウインドウ80が表示されている状態で(画像表示ウインドウ80が一時的に消えてもよい)表示装置３の表示画面には，図19に示す抽出枚数入力ウインドウ140が表示される（図５ステップ55）。
【０１１２】
図19を参照して，抽出枚数入力ウインドウ140は，同一人物が含まれている画像について公開する最低枚数と最高枚数(公開する画像の最低枚数と最高枚数とが画像の抽出枚数の制限値である)を入力するものである。抽出枚数入力ウインドウ140には「抽出枚数を入力して下さい。」との文字列が表示されており，最低枚数入力領域141および最高枚数入力領域142が形成されている。最低枚数入力領域141をクリックすることにより最低枚数入力領域141に，同一人物が含まれている画像について公開する最低枚数をキーボード８から入力でき，最高枚数入力領域142をクリックすることにより最高枚数入力領域142に，同一人物が含まれている画像について公開する画像の最高枚数をキーボード８から入力できる。抽出枚数入力ウインドウ140の右下には「決定」の文字列が表示されている決定ボタン143が形成されている。
【０１１３】
最低枚数入力領域141に最低枚数が入力され，最高枚数入力領域142に最高枚数が入力され(最低枚数または最高枚数のいずれかを入力してもよい)（図５ステップ56），かつ決定ボタン143がクリックされると（図５ステップ57でＹＥＳ），入力された抽出枚数(最低抽出枚数，最高抽出枚数)がメモリ７に記憶される（図５ステップ58）。抽出枚数入力ウインドウ140は表示装置３の表示画面から消える。
【０１１４】
同一人物が含まれており，かつ公開とされている画像の枚数が，入力された最高枚数よりも多い画像があるかどうかがＣＰＵ２によって確認される（図６ステップ61）。入力された最高枚数よりも多い画像がある場合には（図６ステップ61でＹＥＳ），その同一人物が含まれている画像について第１画像評価値および第２画像評価値がＣＰＵ２によって算出され（図６ステップ62），同一人物が含まれている画像の最高枚数内(制限値内)に収まるように，公開とされている画像の中から非公開画像候補がＣＰＵ２(画像候補決定手段)によって決定される（図６ステップ63）。
【０１１５】
たとえば，「佐藤太郎」が含まれている画像が，ファイル名「0022.jpg」，「0019.jpg」，「0021.jpg」，「0013.jpg」，「0020.jpg」および「0018.jpg」をもつ６枚の画像であるとする。すると，それらの６枚の第２画像評価値はたとえば，表５に示した値となる。また，入力された最高枚数が５枚であったとする。すると，非公開画像候補として６枚の画像のうち，１枚がＣＰＵ２によって決定される。表５からわかるように６枚の画像の第２画像評価値のうち，最も第２画像評価値が低い画像は「0019.jpg」の画像ファイル名をもつ画像であるから，その「0019.jpg」の画像ファイル名をもつ画像が非公開画像としてＣＰＵ２(画像候補決定手段)決定される。このようにして，第２画像評価値と同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，グループ化された画像の中から非公開画像候補(非抽出画像候補)が決定される。
【０１１６】
逆に，６枚の画像の第２画像評価値のうち，第２画像評価値の高い順に５枚の画像を公開画像候補(抽出画像候補)としてＣＰＵ２(画像候補決定手段)によって決定してもよい。たとえば，「0019.jpg」の画像ファイル名をもつ画像を非公開とすることを推奨します，という文字列を含むウインドウを，その「0019.jpg」の画像ファイル名をもつ画像(非抽出画像候補)とともにＣＰＵ２(画像候補表示制御手段)の制御のもとに表示画面に表示させるとよい。逆に，ファイル名「0022.jpg」，「0019.jpg」，「0021.jpg」，「0013.jpg」，「0020.jpg」および「0018.jpg」をもつ６枚の画像のうち，画像ファイル名「0019.jpg」以外の画像ファイル名をもつ画像(抽出画像候補)を，「公開することを推奨します。」という文字列とともにＣＰＵ２(画像候補表示制御手段)の制御のもとに表示画面に表示させてもよい。ユーザは，左矢印ボタン92または右矢印ボタン93をクリックすることにより，図14に示すように画像ファイル名「0019.jpg」を持つ画像が画像表示領域90に表示されている画像表示ウインドウ80が表示装置３の表示画面に表示させられる。
【０１１７】
ユーザは，画像表示領域90に表示されている画像を確認して，その画像を非公開とする場合には，画像をクリックすることにより公開ステータスをＣＰＵ２(画像決定手段)によって非公開と決定する。これにより非公開画像が指定されたこととなる（図６ステップ64でＹＥＳ，ステップ65）。終了指令が与えられなければ（ステップ66でＮＯ），ステップ61からの処理が繰り返される。
【０１１８】
上述の実施例では，非公開画像候補を決定しているが，非公開画像候補を決定する代わりに，公開画像候補を決定するようにしてもよい。たとえば，画像ファイル名「0022.jpg」，「0021.jpg」，「0013.jpg」，「0020.jpg」および「0018.jpg」の画像を公開画像候補としてもよい。公開画像候補の中から公開する画像を決定する場合には，その画像をクリックすることにより公開ステータスをＣＰＵ２(画像決定手段)によって公開と決定する。
【０１１９】
また，非公開画像候補または公開画像候補を決定する場合において，その決定された非公開画像候補が非公開画像とされる，あるいは，その決定された公開画像候補が公開画像とされることに応じて，特定の人物が含まれる画像の抽出枚数が最高枚数を超える，あるいは最低枚数未満となってしまう場合(決定される一の非抽出画像候補が非抽出画像とされる，あるいは一の抽出画像候補が抽出画像とされることに応じて，特定の人物が含まれている画像の抽出枚数が制限値から外れる場合)には，そのような画像について非公開画像候補(非抽出画像候補)または公開画像候補(抽出画像候補)から外すようにＣＰＵ２(画像候補停止手段)によって制御されることが好ましい。たとえば，表５において，上述のように画像ファイル名「0019.jpg」の画像が非公開画像として決定されると，特定の人物(例えば，「伊藤花子」)の公開画像の枚数が最低枚数未満となってしまう場合には，画像ファイル名「0019.jpg」の画像を非公開画像候補とは決定しないで，他の画像を非公開画像候補と決定したり，画像ファイル名「0019.jpg」の画像を公開画像候補と決定したりすることが好ましい。
【０１２０】
プログラムの終了指令が画像候補決定装置１に与えられなければ（図６ステップ66でＮＯ），図６ステップ61の処理から繰り返される。公開とされている画像であって同一人物が含まれている画像の数が最高枚数よりも多いような画像が，まだあれば（図６ステップ61でＹＥＳ），そのような画像についての画像評価値が再び算出される（図６ステップ62）。
【０１２１】
公開とされている画像であって同一人物が含まれている画像の数が最高枚数よりも多いような画像が無ければ（図６ステップ61でＮＯ），処理は終了する。
【０１２２】
上述の実施例では，行事が終わった後において，公開のために使用できる画像群が確定している状態を想定している。しかしながら，行事の最中にリアルタイムで上記の処理を行い，写っている画像の数が少ない人物を撮影するようにしてもよい。この場合，図６のステップ61の処理において，入力された最高枚数よりも多い画像が無い場合には（ステップ61でＮＯ），図７に示すステップ67の処理に移行する。
【０１２３】
図７に示すステップ67の処理においては，公開とされている画像であって同一人物が含まれている画像の数が最低枚数よりも少ない画像があるかどうかが確認される（図７ステップ67）。最低枚数よりも少ない画像があると（図７ステップ67でＹＥＳ），表示装置３の表示画面には図20に示す撮影指示ウインドウ150が表示される（図７ステップ68）。
すなわち，グループ化された１以上の画像に含まれている同一人物の数が閾値以下である人物がＣＰＵ２(人物検出手段)によって検出され，その人物について撮影指示がＣＰＵ２(撮影指示手段)によって撮影指示が行われることとなる。
【０１２４】
図20を参照して，撮影指示ウインドウ150は，写っている画像の数が最低枚数よりも少ない人物の撮影をユーザに促すものである。
【０１２５】
撮影指示ウインドウ150には，写っている画像の数が不足している人物の氏名をユーザに知らせるために「〇〇さんの画像が足りません」(〇〇には画像の数が不足している人物の氏名が入る)の文字列および不足枚数をユーザに知らせるために「あと１枚から５枚撮影してください」(不足枚数は状況に応じて変わるが好ましくは撮影後の枚数が，上述のように入力された最低枚数以上であり最高枚数以下とする)の文字列が表されている。
撮影指示ウインドウ150の右下には「確認」の文字が表示されている確認ボタン151が形成されている。ユーザは，誰の画像がどのくらいの枚数が足りないかを確認すると，確認ボタン151をクリックする。すると，撮影指示ウインドウ150は表示装置３の表示画面から消える。
【０１２６】
最低撮影枚数よりも少ない画像がなければ（図７ステップ67でＮＯ），図20に示す撮影指示ウインドウ150の表示はスキップされる。
【０１２７】
画像候補決定装置１にプログラムの終了指令が与えられれば（図７ステップ69でＹＥＳ），プログラムは終了し（図７ステップ69でＹＥＳ），プログラムの終了指令が与えられなければ（図７ステップ69でＮＯ），図６ステップ61からの処理が繰り返される。もっとも，終了指令が与えられない場合には（図６ステップ66でＮＯまたは図７ステップ69でＮＯ），図５ステップ49の処理に戻ってもよい。
【０１２８】
公開/非公開設定画像が表示されている場合に（図５ステップ49），画像管理タブ91がクリックされると（図５ステップ59でＹＥＳ），図３ステップ25からの処理が行われる。また，公開/非公開設定画像が表示されている場合に（図５ステップ49），顔分類タブ101がクリックされると（図５ステップ60でＹＥＳ），図４ステップ38からの処理が行われる。
【０１２９】
上述の実施例において，図６ステップ66におけるプログラムの終了の判断処理および図７におけるプログラムの終了の判断処理が行われる場合に画像候補決定プログラムが終了するが，他の処理においても画像候補決定装置１に終了指令が与えられると，その終了指令が割り込むことにより画像候補決定プログラムが終了する。
【０１３０】
また，上述の実施例においては，メモリ・カード13に格納されている複数の画像を表す画像データをメモリ・カード・リーダ・ライタ12によって読み取っているが，画像候補決定装置１とは別のデータベース・サーバに複数の画像を表す画像データを格納しておき，そのデータベース・サーバと画像候補決定装置１とが通信することにより，データベース・サーバから送信される画像データによって表される画像を，上述のように画像候補決定装置１の表示装置３の表示画面に表示してもよい。
【０１３１】
さらに，上述の実施例においては，メモリ・カード13に記録されている画像データを読み取っているが，画像候補決定装置１の通信装置４が無線通信手段によりディジタル・カメラ(図示略)と通信可能であれば，ディジタル・カメラを用いて撮影した画像を表す画像データを，ディジタル・カメラから画像候補決定装置１に送信し，上述した処理が行われるようにしてもよい。同様に，スマートフォンにおいて撮影した画像を表す画像データを，スマートフォンから画像候補決定装置１の通信装置４に送信し，上述した処理が行われるようにしてもよい。ディジタル・カメラ，スマートフォンにより撮影した画像を表す画像データをリアルタイムで画像候補決定装置１に送信し，撮影しながら上述の処理を行うこともできるし，すべての撮影が終了した後にディジタル・カメラ，スマートフォンにより撮影した画像を表す画像データを画像候補決定装置１に送信するようにしてもよい。
【０１３２】
さらに，上述の実施例においては，第１画像評価値の素点を算出する際に，顔サイズ得点や表情得点などの顔に関する評価値と人数得点や画質得点など顔以外に関する評価値とを利用しているが，顔に関する評価値のみを利用して第１画像評価値の素点としてもよいし，顔以外に関する評価値のみを利用して第１画像評価値の素点としてもよい。
【０１３３】
さらに，上述の実施例においては，顔の画像部分をユーザが見ながら顔の画像部分と氏名とを関連づけているが，あらかじめ顔の画像と，その顔の人物の氏名とを関連付けておき，氏名に関連付けられた顔の画像と比較することにより自動的にだれの顔か自動的に決定して顔の画像部分と氏名とを関連づけるようにしてもよい。さらに，上述の実施例では，顔の画像部分を利用して氏名を関連づけているが，顔の画像部分ではなく，人物が名札を付けている場合には，その名札をユーザが確認して顔の画像部分と氏名とを関連づけてもよいし，名札に記載の氏名を自動的に解析して顔の画像部分と氏名とを関連づけてもよい。
【０１３４】
図21から図26は，変形例を示している。
【０１３５】
図21から図23は，画像表示ウインドウ80の一例である。図21から図23は，図11などの画像表示ウインドウ80に対応しており，同一の構成については同一符号を付して説明を省略する。図21から図23に示される画像表示ウインドウ80では，同一人物の複数の顔画像と氏名とを一括で関連付ける。
【０１３６】
ユーザは，一括で氏名を関連付けしようとする画像を，マウス９を用いて選択する。具体的には，カーソル171を，マウス９を用いて一括で指名を関連付けしようとする顔画像上をドラッグする。すると，選択された画像の枠が太枠172となる。図21においては，画像表示領域90に三行で表示されている画像のうち，二行目(中央の行)の３つの画像が選択されたものとする。
【０１３７】
つづいて，選択された顔画像の氏名が被写体リスト領域110に表示されている名前の中からユーザによって選択される。ここでは，選択された顔画像の氏名は「田中次郎」であったとし，「田中次郎」が選択されたものとする。すると，選択された「田中次郎」の名前の周りの色が変わる。
【０１３８】
図22は，選択された「田中次郎」の名前の周りが変わった様子を示している。図22においては，「田中次郎」の名前の周りがハッチング173により示されており，選択された「田中次郎」の名前の周りが変化している。また，選択された「田中次郎」の代表的な顔画像175(あらかじめ登録されている)が被写体リスト領域110の上に表示される。ユーザは，代表的な顔画像175と画像表示領域90に表示されている顔画像のうち選択された顔画像とを比較することにより，同一人物かどうかを確認できる。つづいて，選択した「田中次郎」の名前の上にカーソル171を移動させ，選択された顔画像上にドラッグする。すると，カーソル171が，選択した「田中次郎」の名前を表す氏名表示領域174に一時的に変化する。その後，図23に示すように，選択された画像のそれぞれに，氏名表示領域176が表示される。
【０１３９】
図21から図23においては，被写体リスト領域110に表示されている名前のうち，公開が禁止されている人物の名前に禁止マーク170が付されている。禁止マーク170を見ることにより，誤って公開してしまうことが未然に防止できる。
【０１４０】
さらに，図21から図23において，顔画像として認識されているが，顔が横向き過ぎたり，顔の画像がボケていたりする画像については，「横向き過ぎ」，「ボケ過ぎ」，「公開に不適」などのフラグを画像に付与してもよい。公開する画像として選択する場合に，そのようなフラグを参照して公開するか非公開するか判断できるようになる。
【０１４１】
さらに，図21から図23の画像表示領域90に表示される画像は，被写体の登場回数が多いほど上方向に表示され，かつ撮影時刻が早いほど左側側に表示されるように，登場回数順，撮影順に表示してもよい。
【０１４２】
図24は，画像表示ウインドウ80の他の一例である。図24において図８等に示す構成と同一の構成については同一符号を付して説明を省略する。
【０１４３】
イベント管理領域82には，「卒業式」というイベントの下層に「卒園証書授与」のサブイベントと「園長先生の言葉」のサブイベントとが生成されている。「卒園式」というイベントとして管理されている画像が，「卒園証書授与」，「園長先生の言葉」などのサブイベントとして管理される。また，イベント追加ボタン83の右側に「サブイベント追加」の文字列が形成されているサブイベント追加ボタン85が形成されている。
【０１４４】
たとえば，「卒園式」という文字列がクリックされた後に，サブイベント追加ボタン85がクリックされると画像表示ウインドウ80上にサブイベント入力ウインドウが現れ，そのサブイベント入力ウインドウを用いてユーザが新たなサブイベントを入力する。その時に「卒園証書授与」という文字列をユーザがキーボード８を用いて入力すると，「卒園式」という文字列の下に「卒園証書授与」という文字列が表示されることとなる。同様にして，「卒園式」という文字列の下に「園長先生の言葉」という文字列が表示される。
【０１４５】
「卒園証書授与」という文字列がクリックされた状態で，画像表示領域90に，「卒園式」のイベントとして管理されている画像がドラッグ・アンド・ドロップされることにより，「卒園証書授与」というイベントによってドラッグ・アンド・ドロップされた画像が管理されることとなる。イベント管理領域82に表示されているサブイベントを示す文字列がクリックされた後にイベント削除ボタン84がクリックされると，クリックされている文字列によって特定されるサブイベントおよびそのサブイベントによって管理される画像が削除される。
【０１４６】
図24に示す画像表示ウインドウ80においては公開設定タブ102がクリックされており，画像表示領域90には「卒園式」という名称のイベントにより管理されている多数の画像165が表示されている。
【０１４７】
画像表示領域90の右上には，表示切替プルダウン160が形成されている。表示切替プルダウン160は，画像表示領域90に表示される画像を，その撮影時間などに区切って表示するときに利用される。プルダウン・ボタン161がクリックされることにより，「１時間区切り」，「２時間区切り」などの複数の時間，日にち表示切替メニューが現われ，その中から表示の区切りがユーザによって選択される。表示切替プルダウン160によって指定された表示区切りにしたがって，画像表示領域90に画像が表示される。
【０１４８】
表示切替プルダウン160によって１時間区切りが選択されたものとする。すると，画像表示領域90は，１時間ごとに領域が区切られる。図24においては，第１の画像表示領域90Ａと第２の画像表示領域90Ｂが現われている。第１の画像表示領域90Ａと第２の画像表示領域90Ｂとは破線によって区切られているが，他の方法により区切られていてもよい。これらの画像表示領域90Ａおよび90Ｂ以外の領域もスライド・バー98を動かすことにより，画像表示領域90に現れる。
【０１４９】
第１の画像表示領域90Ａの左上には，第１の画像表示領域90Ａに表示される表示時間163が表示されている。図24においては，表示時間163として「11:00」の文字が表示されている。表示区切りは１時間区切りであるから，第１の画像表示領域90Ａには，イベント管理領域82に表示されているイベント等により管理されている画像のうち，11時台に撮影された画像が表示される。
【０１５０】
表示時間163の左側にはチェック・ボックス162が形成されており，第１の画像表示領域90Ａに表示されている画像165の右上にもチェック・ボックス164が形成されている。いずれのチェック・ボックス162および164も画像の公開を指定する。表示時間163の左側に形成されているチェック・ボックス162がチェックされると，その表示時間163によって特定される画像165(第１の画像表示領域90Ａに表示されているすべての画像165)の右上に形成されているチェック・ボックス164がチェックされ，それらの画像165の公開が指定される。画像165の右上に形成されているチェック・ボックス164がチェックされると，そのチェックされた画像の公開が指定される。画像165の右上に形成されているチェック・ボックス164のチェックが外されると，その画像は非公開となる。チェック・ボックス164がチェックされると，その画像165の周りは太枠166によって囲まれる。チェック・ボックス164がチェックされた画像とチェックされていない画像とが分かりやすくなるためであり，枠の色を変えてもよい。
【０１５１】
第２の画像表示領域90Ｂの表示時間163には「12:00」の文字列が表示されており，第２の画像表示領域90Ｂには12時台に撮影された画像165が表示される。表示時間163の左側にチェック・ボックス162が形成され，画像165の右上にもチェック・ボックス164が形成されている。これらのチェック・ボックス162または164をチェックすることにより，チェックされた画像が公開されるのは，第１の画像表示領域90Ａに表示されている画像について説明したのと同様である。
【０１５２】
図25は，画像表示ウインドウ80の他の一例である。図25においても図８などと同一の構成については同一符号を付して説明を省略する。
【０１５３】
図25に示す画像表示ウインドウ80の画像表示領域90に表示されている画像にも右上にチェック・ボックス195が形成されており，これらのチェック・ボックス195をチェックすることにより対応する画像が公開に設定される。チェック・ボックス195がチェックされている画像は太枠196により囲まれている。チェック・ボックス195がチェックされなければ非公開である。
【０１５４】
画像表示領域90の左側の上には，最低公開枚数設定領域180が形成されている。最低公開枚数設定領域180は，公開される画像の最低枚数を設定するものである。最低公開枚数設定領域180の右側には上矢印ボタン181および下矢印ボタン182が形成されている。上矢印ボタン181がクリックされるごとに最低公開枚数設定領域180に表示される数字が１つずつ増え，下矢印ボタン182がクリックされるごとに最低公開枚数設定領域180に表示される数字が１つずつ減る。
【０１５５】
画像表示領域90の左側には，公開枚数表示領域190が形成されている。公開枚数表示領域190は，公開される画像の枚数を公開される画像に含まれる人物の氏名に対応して表示するものである。
【０１５６】
公開枚数表示領域190には，画像に含まれる被写体の名前(たとえば，佐藤太郎)，公開枚数(たとえば，６)および被写体の代表的な顔画像194が表示されている。また，公開枚数表示領域190には，最低公開枚数設定領域180において設定された最低公開枚数の目安となるマーク191およびライン193も表示されている。さらに，被写体の名前ごとに公開枚数が棒グラフ(ハッチングで示す)192によって示されている。公開枚数が少ないほど棒グラフ192の長さが短く，公開枚数が多いほど棒グラフ192の長さが長い。棒グラフ192が右に伸びるほど公開枚数が多いことを示す。棒グラフ192の右端がライン193を超えていなければ，その棒グラフ192よって示される被写体の公開枚数は最低公開枚数に達していず，棒グラフ192の右端がライン193と合致すると，その棒グラフ192によって示される被写体の公開枚数は最低公開枚数と一致し，棒グラフ192の右端がライン193を超えると，その棒グラフ192によって示される被写体の公開枚数は最低公開枚数を超えていることとなる。棒グラフ192の右端がライン193を超えているかどうかを確認することにより，最低公開枚数以上の画像を公開するように設定したかどうかを被写体ごとに確認できる。
【０１５７】
さらに，最低公開枚数に足りていない画像に対応する被写体の名前にはユーザに注意を喚起するためにマーク197が表示される。マーク197を見ることにより，最低公開枚数に達するように公開する画像を選択するようになる。最低公開枚数に足りていない画像に対応する被写体の名前の色と最低公開枚数に足りている画像に対応する被写体の名前の色とを変えるようにしてもよい。さらに，公開枚数表示領域190に表示される氏名に対応して禁止マーク170も表示されている。非公開の被写体が含まれる画像を誤って公開対象に設定してしまうことが未然に防止できる。
【０１５８】
図26は，チェック・ボックス195がチェック等されることにより公開対象に設定された画像の一例である。
【０１５９】
公開対象に設定された画像の中に，非公開の被写体198が含まれていたものとする。そのような場合には，非公開の被写体198を画像からトリミングする。公開される画像からは非公開の被写体198が除かれることとなる。
【０１６０】
図27は，画像表示ウインドウ80の他の一例である。
【０１６１】
画像表示領域90には，画像200が表示されている。この画像200には，被写体201，202および203の３人が含まれている。画像200に，被写体201，202および203が含まれていれば，それぞれの被写体201，202および203の顔画像が認識され，被写体201，202および203に対応して顔画像が検出されるはずである。しかしながら，被写体の人数分に対応する顔画像が検出されないことがある。たとえば，被写体201の顔画像が検出されて顔枠Ｆ１が表示され，被写体203の顔画像が検出されて顔枠Ｆ３が表示されたが，被写体202の顔画像が表示されない場合がある。
【０１６２】
画像200の上には被写体検出人数210が表示されている。画像200から検出された被写体の人数として２人が表示されている。画像の下には画像200から検出された人数が合っているかの確認メッセージ211が表示されている。ユーザは，確認メッセージを見ることにより，検出されていない顔が画像200に含まれていないことが分かる。たとえば，検出されていない顔の被写体202の名前に対応する名前を，たとえば，公開/非公開情報表示領域120に表示されている名前の中から選択し，対応する顔をクリックすることにより，選択された名前(氏名)と画像200とが関連づけられる。
【０１６３】
上述の処理を実行する処理部には，ソフトウエアを実行して各種の処理部として機能するＣＰＵ２のほかに，FPGA（field-programmable gate array）などのように製造後に回路構成を変更可能なプログラマブル・ロジック・ディバイス，ASIC（application specific integrated circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。
【０１６４】
１つの処理部は，これらの各種のプロセッサのうちの１つで構成されてもよいし，同種または異種の２つ以上のプロセッサの組合せ（たとえば，複数のFPGA，ＣＰＵとFPGAの組合せ）で構成されてもよい。複数の処理部を１つのプロセッサで構成する例としては，第１に，クライアント・コンピュータやサーバなどのコンピュータに代表されるように，１つ以上のＣＰＵとソフトウエアの組合せで１つのプロセッサを構成し，このプロセッサが複数の処理部として機能する形態がある。第２に，システム・オン・チップなどに代表されるように，複数の処理部を含むシステム全体の機能を１つのＩＣ（integrated circuit）チップで実現するプロセッサを使用する形態がある。このように，各種の処理部は，ハードウエア的な構造として各種のプロセッサを１つ以上用いて構成される。
【０１６５】
さらに，これらの各種のプロセッサのハードウエア的な構造は，より具体的には，半導体素子などの回路素子を組合せた電気回路である。
【０１６６】
画像候補決定装置はパーソナル・コンピュータによって構成されてもよいし，スマートフォン，タブレット装置のようないわゆるスマート・デバイスによって構成されてもよいし，フィーチャーフォンのような携帯電話によって構成されてもよい。
【符号の説明】
【０１６７】
１：画像候補決定装置，２：ＣＰＵ，３：表示装置，４：通信装置，５：ハードディスク，６：ハードディスク・ドライブ，７：メモリ，８：キーボード，９：マウス，10：コンパクト・ディスク・ドライブ，11：コンパクト・ディスク，12：メモリ・カード・リーダ・ライタ，13：メモリ・カード，80：画像表示ウインドウ，81：文字列，82：イベント管理領域，83：イベント追加ボタン，84：イベント削除ボタン，90：画像表示領域，91：画像管理タブ，92：左矢印ボタン，93：右矢印ボタン，94：画像特定番号，95：文字列，96：文字列，97：上矢印ボタン，98：スライド・バー，99：下矢印ボタン，101：顔分類タブ，102：公開設定タブ，110：被写体リスト領域，111：顔分類ボタン，112：文字列，113：文字列，114：文字列，120：公開/非公開情報表示領域，121-126：チェック・ボックス，129：チェック・ボックス，130：枚数入力ボタン，140：抽出枚数入力ウインドウ，141：最低枚数入力領域，142：最高枚数入力領域，143：決定ボタン，150：撮影指示ウインドウ，151：確認ボタン，160：表示切替プルダウン，161：プルダウン・ボタン，162：チェック・ボックス，163：表示時間，164：チェック・ボックス，165：画像，166：太枠，170：禁止マーク，171：カーソル，172：太枠，173：ハッチング，174：氏名表示領域，175：顔画像，176：氏名表示領域，180：最低公開枚数設定領域，181：上矢印ボタン，182：下矢印ボタン，190：公開枚数表示領域，191：マーク，192：棒グラフ，193：ライン，194：顔画像，195：チェック・ボックス，196：太枠，197：マーク，198：被写体，200  ：画像，201-203  ：被写体，210：被写体検出人数，211：確認メッセージ，Ｆ：顔枠，Ｆ１-Ｆ６：顔枠，Ｇ１-Ｇ３：顔画像グループ
【図１】
2019069606.tif 000008
【図２】
2019069606.tif 000009
【図３】
2019069606.tif 000010
【図４】
2019069606.tif 000011
【図５】
2019069606.tif 000012
【図６】
2019069606.tif 000013
【図７】
2019069606.tif 000014
【図８】
2019069606.tif 000015
【図９】
2019069606.tif 000016
【図１０】
2019069606.tif 000017
【図１１】
2019069606.tif 000018
【図１２】
2019069606.tif 000019
【図１３】
2019069606.tif 000020
【図１４】
2019069606.tif 000021
【図１５】
2019069606.tif 000022
【図１６】
2019069606.tif 000023
【図１７】
2019069606.tif 000024
【図１８】
2019069606.tif 000025
【図１９】
2019069606.tif 000026
【図２０】
2019069606.tif 000027
【図２１】
2019069606.tif 000028
【図２２】
2019069606.tif 000029
【図２３】
2019069606.tif 000030
【図２４】
2019069606.tif 000031
【図２５】
2019069606.tif 000032
【図２６】
2019069606.tif 000033
【図２７】
2019069606.tif 000034
【手続補正書】
【提出日】令和2年3月11日(2020.3.11)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００３
【補正方法】変更
【補正の内容】
【０００３】
【特許文献１】特開2014-102715号公報
【特許文献２】特開2010-057073号公報
【特許文献３】特開2013-191035号公報
【特許文献４】特許第5616819号
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００４１
【補正方法】変更
【補正の内容】
【００４１】
画像表示領域90に表示されている画像のうち，いずれかの画像がクリックされると（図３ステップ26でＹＥＳ），クリックされた画像の公開ステータスが，クリックに応じて変えられる（図３ステップ27）。初期状態では，すべての画像の公開ステータスは「保留」とされており，公開ステータスが「保留」とされている画像が１回クリックされると公開ステータスは「公開」となり，公開ステータスが「公開」となった画像が，さらに１回クリックされると公開ステータスは「非公開」となる。公開ステータスが「非公開」となった画像が，さらに１回クリックされると公開ステータスは「保留」となる。このように画像がクリックされるごとに公開ステータスが順に変わる。もっとも，公開ステータスから「保留」を無くし，「公開」と「非公開」としてもよい。その場合には，初期状態ではすべての画像の公開ステータスは「公開」または「非公開」とされ(画像に含まれる人物ごとにあらかじめ抽出画像または非抽出画像と規定され)，画像のクリックに応じて(抽出画像または非抽出画像との決定)公開ステータスが「公開」または「非公開」に切り替わる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００８２
【補正方法】変更
【補正の内容】
【００８２】
たとえば，画像ファイル名「0022.jpg」の画像の第１画像評価値は「佐藤太郎」にとっては「20」であるが，「鈴木春子」にとっては「200」であり，画像ファイル名「0022.jpg」の画像の総合的な画像評価値である第２画像評価値は，「佐藤太郎」にとっての第１画像評価値である「20」と「鈴木春子」にとっての第１画像評価値である「200」との和である，「220」となる。他の画像についても同様に，画像ファイル名「0019.jpg」の画像の第２画像評価値は「62.5」，画像ファイル名「0021.jpg」の画像の第２画像評価値は「367」，画像ファイル名「0013.jpg」の画像の第２画像評価値は「63」，画像ファイル名「0020.jpg」の画像の第２画像評価値は「1023」，画像ファイル名「0018.jpg」の画像の第２画像評価値は「414.5」であることが分かる。これらのことから，これらの６枚の画像のうち，第２画像評価値が最も高い画像ファイル名「0020.jpg」の画像が，画像としての重要度が最も高く，第２画像評価値が最も低い画像ファイル名「0019.jpg」の画像が，画像としての重要度が最も低いことが分かる。このように，画像に含まれる人物ごとに異なる第１画像評価値を画像ごとに加算し，加算して得られる総和をＣＰＵ２(第２の画像評価値算出手段)によって算出し，その総和を第２画像評価値とすることが好ましい。なお，第２画像評価値は，画像に写っている人物ごとに算出される第１画像評価値に基づいて，第１画像評価値が高くなるほど第２画像評価値が高くなるような算出方法であればいかなる方法であってもよく，重み付けをした上で第１画像評価値を総和して算出してもよい。たとえば，全園児参加の行事における画像群について，今後の撮影機会の多少を考慮して，学年が上である園児ほど重く（したがって学年が下である園児ほど軽く）第１画像評価値に重み付けを行った上で，総和をとって第２画像評価値を算出することとしてもよい。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００８３
【補正方法】変更
【補正の内容】
【００８３】
この実施例では，これらの６枚の画像のうち，非公開の画像を決定する場合には，第２画像評価値の低い画像の順に非公開画像候補(非抽出画像候補)と決定し，公開の画像を決定する場合には第２画像評価値の高い画像の順に公開画像候補(抽出画像候補)と決定する。画像が公開または非公開に変わった場合には，改めて第１画像評価値および第２画像評価値が算出される。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００８８
【補正方法】変更
【補正の内容】
【００８８】
また，顔画像グループＧ２には，画像ファイル名「0027.jpg」の画像に含まれる顔の画像部分，画像ファイル名「0014.jpg」の画像に含まれる顔の画像部分および画像ファイル名「0028.jpg」の画像に含まれる顔の画像部分が含まれている。顔画像グループＧ２に含まれている顔の画像部分も同一人物を表している。同様に，顔画像グループＧ３には，画像ファイル名「0027.jpg」の画像に含まれる顔の画像部分および画像ファイル名「0014.jpg」の画像に含まれる顔の画像部分が含まれている。顔画像グループＧ３に含まれている顔の画像部分も同一人物を表している。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００９５
【補正方法】変更
【補正の内容】
【００９５】
画像表示領域90に表示されている画像がクリックされると（図５ステップ50でＹＥＳ），図３ステップ27の処理と同様にクリックに応じてクリックされた画像の公開ステータスが変わる（図５ステップ51）。画像の公開ステータスが「保留」の状態で画像が一回クリックされると公開ステータスは「公開」となる。公開/非公開情報表示領域120の「佐藤太郎」および「鈴木春子」のそれぞれの氏名の「公開」の枚数が「０」から「１」に変更される。また，「佐藤太郎」の氏名の「保留」の枚数が「６」から「５」となり，「鈴木春子」の氏名の「保留」の枚数が「３」から「２」となる。画像がさらに一回クリックされると，公開ステータスは「非公開」となる。公開/非公開情報表示領域120の「佐藤太郎」および「鈴木春子」のそれぞれの氏名の「公開」の枚数が「１」から「０」に戻され，かつそれぞれの「非公開」の枚数が「０」から「１」に変更される。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０１１５
【補正方法】変更
【補正の内容】
【０１１５】
たとえば，「佐藤太郎」が含まれている画像が，ファイル名「0022.jpg」，「0019.jpg」，「0021.jpg」，「0013.jpg」，「0020.jpg」および「0018.jpg」をもつ６枚の画像であるとする。すると，それらの６枚の第２画像評価値はたとえば，表５に示した値となる。また，入力された最高枚数が５枚であったとする。すると，非公開画像候補として６枚の画像のうち，１枚がＣＰＵ２によって決定される。表５からわかるように６枚の画像の第２画像評価値のうち，最も第２画像評価値が低い画像は「0019.jpg」の画像ファイル名をもつ画像であるから，その「0019.jpg」の画像ファイル名をもつ画像が非公開画像としてＣＰＵ２(画像候補決定手段)によって決定される。このようにして，第２画像評価値と同一人物が含まれている画像の抽出枚数の制限値と，にもとづいて，グループ化された画像の中から非公開画像候補(非抽出画像候補)が決定される。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】０１３６
【補正方法】変更
【補正の内容】
【０１３６】
ユーザは，一括で氏名を関連付けしようとする画像を，マウス９を用いて選択する。具体的には，カーソル171を，マウス９を用いて一括で氏名を関連付けしようとする顔画像上をドラッグする。すると，選択された画像の枠が太枠172となる。図21においては，画像表示領域90に三行で表示されている画像のうち，二行目(中央の行)の３つの画像が選択されたものとする。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０１６２
【補正方法】変更
【補正の内容】
【０１６２】
画像200の上には被写体検出人数210が表示されている。画像200から検出された被写体の人数として２人が表示されている。画像の下には画像200から検出された人数が合っているかの確認メッセージ211が表示されている。ユーザは，確認メッセージを見ることにより，検出されていない顔が画像200に含まれていることが分かる。たとえば，検出されていない顔の被写体202の名前に対応する名前を，たとえば，公開/非公開情報表示領域120に表示されている名前の中から選択し，対応する顔をクリックすることにより，選択された名前(氏名)と画像200とが関連づけられる。
【国際調査報告】
2019069606.tif 000035
2019069606.tif 000036
2019069606.tif 000037
2019069606.tif 000038