(57)【要約】【課題】撮像画像内に存在する人物へ撮像画像を配信すること。【解決手段】デジタルカメラ１５において、顔認識部２ａは、撮像部１で撮像された撮像画像に含まれる人物の顔情報を認識し、無線部１０は当該顔情報をサーバー１２へ送信する。サーバー１２では、受信した顔情報に基づいて、撮像画像内に存在する人物の顔写真と電子メールアドレスを取得して、デジタルカメラ１５へ送信する。デジタルカメラ１５では、ＲＩＳＣ４は、サーバー１２から受信した情報を表示部１１に表示して使用者に通知し、通知に対するユーザからの応答に基づいて、サーバー１２からの受信結果が正しいか否かを判定する。受信結果が正しい場合に、無線部１０は電子メールアドレスを送信先として撮像画像を送信する【選択図】図１
2007102683.tif 000002
【特許請求の範囲】
【請求項１】
個人の顔を識別するための顔情報、人物を特定するための人物特定情報、および撮像画像の送信先を特定するための送信先特定情報を対応付けて記憶する記憶手段と、
前記撮像画像に含まれる人物の顔を認識する顔認識手段と、
前記顔認識手段で認識した人物の顔と、前記記憶手段に記憶されている前記顔情報とを比較して、一致する顔情報を抽出する抽出手段と、
前記抽出手段で抽出した一致する顔情報に対応する前記人物特定情報、および前記送信先特定情報をユーザへ通知する通知手段と、
前記通知手段による通知に対するユーザからの応答に基づいて、前記抽出手段による抽出結果が正しいか否かを判定する判定手段と、
前記判定手段によって、前記抽出手段による抽出結果が正しいと判定された場合に、前記撮像画像を前記送信先特定情報で特定される送信先へ送信する送信手段とを備えることを特徴とする画像配信システム。
【請求項２】
請求項１に記載の画像配信システムにおいて、
前記判定手段によって、前記抽出手段による抽出結果が誤っていると判定された場合に、前記送信先特定情報の修正を受け付けて修正する修正手段をさらに備えることを特徴とする画像配信システム。
【請求項３】
請求項１に記載の画像配信システムにおいて、
前記人物特定情報は顔写真であり、
前記通知手段は、前記顔写真、および前記送信先特定情報をモニタに表示することによってユーザに通知することを特徴とする画像配信システム。
【請求項４】
個人の顔を識別するための顔情報、人物を特定するための人物特定情報、および撮像画像の送信先を特定するための送信先特定情報を対応付けて記憶手段に記憶しておき、
前記撮像画像に含まれる人物の顔を認識する顔認識工程と、
前記顔認識工程で認識した人物の顔と、前記記憶手段に記憶されている前記顔情報とを比較して、一致する顔情報を抽出する抽出工程と、
前記抽出工程で抽出した一致する顔情報に対応する前記人物特定情報、および前記送信先特定情報をユーザへ通知する通知工程と、
前記通知工程による通知に対するユーザからの応答に基づいて、前記抽出工程による抽出結果が正しいか否かを判定する判定工程と、
前記判定工程によって、前記抽出工程による抽出結果が正しいと判定された場合に、前記撮像画像を前記送信先特定情報で特定される送信先へ送信する送信工程とを有することを特徴とする画像配信方法。
【請求項５】
請求項４に記載の画像配信方法において、
前記判定工程によって、前記抽出工程による抽出結果が誤っていると判定された場合に、前記送信先特定情報の修正を受け付けて修正する修正工程をさらに有することを特徴とする画像配信方法。
【請求項６】
請求項４に記載の画像配信方法において、
前記人物特定情報は顔写真であり、
前記通知工程は、前記顔写真、および前記送信先特定情報をモニタに表示することによってユーザに通知することを特徴とする画像配信方法。
【請求項７】
個人を識別するための第１の識別情報および第２の識別情報と、人物を特定するための人物特定情報と、撮像画像の送信先を特定する送信先特定情報とを対応付けて記憶する記憶手段と、
前記第１の識別情報、および前記第２の識別情報のいずれか一方に基づいて個人を識別する識別手段と、
前記識別手段による識別結果に基づいて、識別した個人に対応する前記人物特定情報、および前記送信先特定情報をユーザへ通知する通知手段と、
前記通知手段による通知に対するユーザからの応答に基づいて、前記識別手段による識別結果が正しいか否かを判定する判定手段と、
前記判定手段によって、前記識別手段による識別結果が正しいと判定された場合に、前記撮像画像を前記送信先特定情報で特定される送信先へ送信する送信手段とを備え、
前記識別手段は、前記第１の識別情報に基づいて個人を識別した結果、前記判定手段によって識別結果が誤っていると判定された場合に、前記第２の識別情報に基づいて個人を識別することを特徴とする画像配信システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像を配信するための画像配信システム、画像配信方法、および画像配信装置に関する。
【背景技術】
【０００２】
次のような画像配信サーバが特許文献１によって知られている。この画像配信サーバでは、画像に写った人物の顔を認識し、その人物の電子メールアドレスをデータベースから取得して、当該人物に画像を送信する。
【０００３】
【特許文献１】特開２００４−３２６２８１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の画像配信サーバでは、画像に写った人物の顔が誤認識された場合でも、そのままデータベースから取得した電子メールアドレスに画像を送信してしまうため、誤った人物に画像を送信してしまう可能性があるという問題が生じていた。
【課題を解決するための手段】
【０００５】
本発明は、個人の顔を識別するための顔情報、人物を特定するための人物特定情報、および撮像画像の送信先を特定するための送信先特定情報を対応付けて記憶手段に記憶しておき、撮像画像に含まれる人物の顔を認識し、認識した人物の顔と、記憶手段に記憶されている顔情報とを比較して一致する顔情報を抽出し、抽出された一致する顔情報に対応する人物特定情報、および送信先特定情報をユーザへ通知し、通知に対するユーザからの応答に基づいて抽出工程による抽出結果が正しいか否かを判定し、抽出結果が正しいと判定された場合に、撮像画像を送信先特定情報で特定される送信先へ送信することを特徴とする。
また、抽出結果が誤っていると判定された場合に、送信先特定情報の修正を受け付けて修正するようにしてもよい。
さらに、人物特定情報は顔写真であり、顔写真、および送信先特定情報をモニタに表示することによってユーザに通知するのが好ましい。
本発明はまた、個人を識別するための第１の識別情報および第２の識別情報と、人物を特定するための人物特定情報と、撮像画像の送信先を特定する送信先特定情報とを対応付けて記憶手段に記憶しておき、第１の識別情報、または第２の識別情報に基づいて個人を識別し、識別結果に基づいて、識別した個人に対応する人物特定情報、および送信先特定情報をユーザへ通知し、通知に対するユーザからの応答に基づいて、識別手段による識別結果が正しいか否かを判定し、識別手段による識別結果が正しいと判定された場合に、撮像画像を送信先特定情報で特定される送信先へ送信する。このとき、第１の識別情報に基づいて個人を識別した結果、判定手段によって識別結果が誤っていると判定された場合に、第２の識別情報に基づいて個人を識別することを特徴とする。
【発明の効果】
【０００６】
本発明によれば、人物特定情報、および送信先特定情報をあらかじめユーザへ通知し、その結果得られるユーザからの応答に基づいて通知した内容が正しいか否かを判定し、通知した内容が正しい場合のみ画像を送信するようにしたため、誤った人物に画像を送信することを防ぐことができる。
【発明を実施するための最良の形態】
【０００７】
図１は、本実施の形態における画像配信システムの一実施の形態の構成を示すブロック図である。画像配信システムは、例えば画像配信機能を備えたデジタルカメラ１５と、サーバー１２とが所定の無線回線を介して接続されている。この画像配信システムにおいては、デジタルカメラ１５で撮像した撮像画像内に含まれる人物の顔を抽出して、抽出した人物の顔に関する情報（顔情報）をサーバー１２へ無線送信する。
【０００８】
サーバー１２は、デジタルカメラ１５から受信した顔情報に基づいて、人物を特定し、その人物の顔写真とメールアドレスをデジタルカメラ１５へ無線送信する。そして、デジタルカメラ１５は、サーバー１２から送信した顔情報に対応する人物の顔写真とメールアドレスを受信した場合には、受信した顔写真とメールアドレスをモニタに表示して、使用者に通知する。
【０００９】
その結果、使用者によって、受信した顔写真とメールアドレスが、撮像画像に含まれている人物のものと一致するか否かの確認が行われ、一致すると判断された場合には、その人物のメールアドレス宛てに撮像画像を配信する。一方、一致しないと判断された場合には、使用者によるメールアドレスの修正を受け付けて、修正されたその人物の正しいメールアドレス宛てに撮像画像を配信する。以下、本実施の形態の画像配信システムについて詳細に説明する。
【００１０】
デジタルカメラ１５は、撮像部１と、画像処理部２と、記録部３と、ＲＩＳＣ４と、音声入力部５と、ＵＳＢＩ／Ｆ６と、フラッシュメモリ７と、ＳＤＲＡＭ８と、顔認識データ格納メモリ９と、無線部１０と、表示部１１と、音声認識部１３と、操作部材１４とを備えている。
【００１１】
ＲＩＳＣ４は、上述したデジタルカメラ１５を構成する各部を制御することによって、デジタルカメラ１５を制御するマイクロプロセッサである。このＲＩＳＣ４は、フラッシュメモリ７に記憶されている制御プログラムを、一時記憶領域としてのＳＤＲＡＭ８へ読み込んで、デジタルカメラ１５を制御する。
【００１２】
撮像部１は、例えばＣＣＤなどの撮像素子やレンズなどで構成されており、撮像可能な範囲内に存在する被写体を撮像する。そして撮像された撮像画像の画像データを画像処理部２へ出力する。本実施の形態では、撮像部１は、使用者によって操作部材１４に含まれるレリーズスイッチが半押しされると、その時点で撮像した撮像画像の画像データを画像処理部２へ出力する。さらに、使用者によってレリーズスイッチが全押しされると、撮像部１はレリーズを行い、その時点で撮像した撮像画像の画像データを画像処理部２へ出力する。
【００１３】
画像処理部２は、顔認識部２ａを含んでいる。画像処理部２は、レリーズスイッチ半押し時に撮像部１によって撮像された撮像画像の画像データが入力された場合には、当該画像データをＡＤ変換した後に、顔認識部２ａへ出力する。顔認識部２ａは、入力された画像データを画像処理して、撮像画像内に含まれる人物の顔を認識する。なお、撮像画像内に含まれる人物の顔を認識する顔認識処理については、公知の技術のため、詳細な説明は省略するが、例えば、特開２００４−３２６２８１号公報に開示されている手法を使用する。
【００１４】
顔認識部２ａは、顔認識処理を実行した結果得られる、個々の顔の特徴点の位置関係を表す情報、すなわち、個人の顔を識別するための特徴点としての目、鼻、口などの位置関係を表す情報を、顔情報として顔認識データ格納メモリ９に記憶する。例えば、図２に示すように、撮像画像内に３人の人物Ａ、Ｂ、Ｃが映っている場合には、各人物の顔情報、すなわち人物Ａの顔２ａの顔情報、人物Ｂの顔２ｂの顔情報、および人物Ｃの顔２ｃの顔情報を顔認識データ格納メモリ９に記憶する。なお、ＳＤＲＡＭ８を顔認識データ格納メモリ９として兼用してもよい。
【００１５】
ＲＩＳＣ４は、無線部１０を制御して、顔認識データ格納メモリ９に記憶された顔情報をサーバー１２へ送信する。このとき、無線部１０は、例えば無線ＬＡＮや携帯電話回線を介してサーバー１２へ接続し、顔情報を送信する。なお、顔認識部２ａによって、撮像画像内から複数の人物の顔が含まれていた場合には、全ての顔の顔情報がサーバー１２へ送信される。
【００１６】
画像処理部２はまた、レリーズスイッチ全押し時に撮像部１で撮像された撮像画像の画像データが入力された場合には、当該画像データをＡＤ変換した後に、ガンマ処理などの種々の画像処理を施して、記録部３に出力する。記録部３は、入力された画像処理後の画像データを記録メディアに保存する。記録メディアとしては、例えば、種々のメモリーカードやハードディスクが使用される。この記録部３に記憶された撮像画像が、後述する処理で撮像画像内に存在する人物への配信する配信用撮像画像となる。なお、記録メディアに保存された画像データは、ＵＳＢＩ／Ｆ６を介してＵＳＢ接続された外部機器、例えばパソコンに転送することができる。
【００１７】
次に、デジタルカメラ１５から顔情報を受信したサーバー１２における処理について説明する。このサーバー１２は、テーブルメモリ１２ａと、人物抽出部１２ｂと、通知部１２ｃとを備えている。
【００１８】
テーブルメモリ１２ａには、デジタルカメラ１５から受信した顔情報を照合して人物を識別するための情報を格納した顔情報テーブルがあらかじめ記憶されている。顔情報テーブルには、デジタルカメラ１５から受信した顔情報がどの人物のものであるかを特定するための顔情報、判定した人物を使用者が特定するための人物特定情報としての顔写真データ、その人物に対して撮像画像を配信するに当たっての送信先を特定するための送信先特定情報としての電子メールアドレス、および当該人物の声を識別するための声紋情報が対応付けられて記憶されている。
【００１９】
人物抽出部１２ｂは、デジタルカメラ１５から受信した顔情報（入力顔情報）と、テーブルメモリ１２ａに記憶されている顔情報（判定用顔情報）とを比較して、一致する判定用顔情報を抽出する。これによって、デジタルカメラ１５から受信した入力顔情報がどの人物のものであるかを特定することができる。そして、人物抽出部１２ｂは、テーブルメモリ１２ａから、抽出した判定用顔情報に対応する人物特定情報、および送信先特定情報を取得する。すなわち特定した人物の顔写真、および電子メールアドレスを取得する。
【００２０】
通知部１２ｃは、人物抽出部１２ｂによって取得された入力顔情報と一致する人物の顔写真、および電子メールアドレスを、上述した無線回線を介してデジタルカメラ１５へ送信して、人物の特定結果を通知する。
【００２１】
なお、人物抽出部１２ｂは、デジタルカメラ１５から複数の入力顔情報を受信した場合には、全ての入力顔情報に対して上述した処理を行う。そして、通知部１２ｃは、人物抽出部１２ｂによって取得された全ての人物の顔写真、および電子メールアドレスをデジタルカメラ１５へ送信する。
【００２２】
また、人物抽出部１２ｂで入力顔情報に対して上述した処理を行った結果、一部、または全部の入力顔情報が、テーブルメモリ１２ａ内に含まれる判定用顔情報のいずれとも一致しない場合には、通知部１２ｃは、一致しない顔情報については、デジタルカメラ１５へ情報を送信しない。あるいは、一致しない顔情報については、デジタルカメラ１５へ入力顔情報と一致する判定用顔情報がテーブルメモリ１２ａに存在しない旨、すなわち顔写真、および電子メールアドレスが取得できない旨を通知してもよい。
【００２３】
サーバー１２から撮像画像内に写っている人物の顔写真、および電子メールアドレスを受信したデジタルカメラ１５における処理について説明する。ＲＩＳＣ４は、表示部１１、例えばモニタにサーバー１２から受信した撮像画像内に写っている人物の顔写真、および電子メールアドレスを表示する。具体的には、図３に示すように、サーバー１２から受信した顔写真３ａと電子メールアドレス３ｂとを対応付けて、各人物ごとに一覧表示する。このとき、人物の顔写真、および電子メールアドレスの背景には、撮像画像を表示しておく。
【００２４】
使用者は、表示部１１への表示内容を確認して、表示部１１に表示されている顔写真、および電子メールアドレスが、撮像画像内に存在する人物のものであるか否かを判断する。すなわち、サーバー１２から受信した顔写真、および電子メールアドレスが正しいか誤っているかを判断する。その結果、サーバー１２から受信した顔写真、および電子メールアドレスが正しいと判断した場合には、使用者は、図３に示す「転送する」ボタン３ｃを入力部材１４、例えば操作スイッチを操作して選択する。
【００２５】
使用者によって入力部材１４が操作され、「転送する」ボタン３ｃが選択された場合には、ＲＩＳＣ４は無線部１０を制御して、表示部１１に表示されている全人物の電子メールアドレスを送信先に設定する。そして、記録部３に記憶されている配信用撮像画像を撮像画像内に存在する人物へ一括して配信（送信）する。これによって、撮像画像内に存在している人物を特定し、特定した人物の電子メールアドレスを取得して、自動的に撮像画像内に存在している人物に画像を配信することができる。なお、表示部１１に表示されている全人物に一括して送る以外に、使用者は表示部１１に表示されている任意の人物を選択できるようにし、使用者によって選択された人物のみに配信用撮像画像を配信するようにしてもよい。
【００２６】
次に、サーバー１２において、テーブルメモリ１２ａ内に該当する判定用顔情報が存在しなかったことにより、人物抽出部１２ｂが顔写真、および電子メールアドレスを取得できなかった場合について説明する。この場合には、デジタルカメラ１５は、サーバー１２から撮像画像内に写っている人物の顔写真、および電子メールアドレスを受信しないことから、そのままでは撮像画像内に存在する人物に画像を配信することができない。よって、ＲＩＳＣ４は次のように処理する。
【００２７】
まず、ＲＩＳＣ４は、上述した顔認識部２ａで認識した撮像画像内に含まれる人物の顔部分の画像を抽出して、図３に示すように、その顔画像を顔写真３ａとして表示部１１に表示し、電子メールアドレス３ｂは空欄（非表示）にしておく。そして、使用者は操作部材１４を操作して、電子メールアドレス３ｂが非表示の人物を選択した後、「手入力」ボタン３ｅを選択する。ＲＩＳＣ４は、使用者によって「手入力」ボタン３ｅが選択されると、表示部１１に表示された選択済みの人物の電子メールアドレス欄への入力の受付を開始する。
【００２８】
その結果、使用者が操作部材１４を操作して顔写真３ａに対応する電子メールアドレスを入力すると、ＲＩＳＣ４は、無線部１０を制御し、使用者によって入力された電子メールアドレスを送信先に設定して、記録部３に記憶されている配信用撮像画像を配信する。
【００２９】
ＲＩＳＣ４はさらに、使用者によって入力された電子メールアドレス、その電子メールアドレスに対応する顔写真３ａ、および上述した処理で顔認識部２ａで認識され、顔認識データ格納メモリ９に記憶された顔写真３ａに対応する人物の顔情報を登録情報として無線部１０を制御してサーバー１２へ送信する。
【００３０】
サーバー１２においては、人物抽出部１２ｂは、デジタルカメラ１５から受信した登録情報を、テーブルメモリ１２ａに記憶して登録する。これによって、デジタルカメラ１５で認識された撮像画像内に存在する人物の顔写真と顔情報、および使用者によって手入力された当該人物の電子メールアドレスを使用して、テーブルメモリ１２ａへ新たな人物の情報を登録することができる。なお、この時点でテーブルメモリ１２ａに登録されるデータには、人物の声を識別するための声紋情報が含まれていないため、声紋情報には何も登録しない。
【００３１】
次に、ＲＩＳＣ４が、表示部１１にサーバー１２から受信した顔写真、および電子メールアドレスを表示した結果、使用者が表示部１１に表示されているいずれかの顔写真、および電子メールアドレスが誤っていると判断した場合に、誤りを修正する方法について説明する。この場合には、使用者は、入力部材１４を使用して誤っている人物の顔写真または電子メールアドレスを選択して、入力部材１４を操作して「声入力」ボタン３ｄを選択する。
【００３２】
使用者によって「声入力」ボタン３ｄが選択された場合には、ＲＩＳＣ４は、音声入力部５からの音声入力の受付を開始する。なお、音声入力部５は例えばマイクであり、この音声入力部５は、使用者によって入力された音声をＲＩＳＣ４へ出力し、さらにＲＩＳＣ４から音声認識部１３へ出力される。
【００３３】
使用者は、「声入力」ボタン３ｄを選択した後に、顔写真、および電子メールアドレスが誤っている人物の声を音声入力部５を介して入力する。具体的には、実際に撮像画像を配信したい相手、すなわち撮像画像に実際に含まれている人物に音声入力部５に向けた発話を依頼し、当該人物の声を入力する。ＲＩＳＣ４は、音声入力部５から入力された発話音声を音声認識部１３へ出力する。音声入力部１３は入力された発話音声を音声認識して、発話者の声紋情報に変換した後、ＲＩＳＣ４へ出力する。ＲＩＳＣ４は、入力された発話者の声紋情報を、無線部１０を制御してサーバー１２へ送信する。
【００３４】
声紋情報を受信したサーバー１２では、人物抽出部１２ｂは、受信した声紋情報（入力声紋情報）と、テーブルメモリ１２ａに記憶されている声紋情報（判定用声紋情報）とを比較して、一致する判定用声紋情報を抽出する。これによって、顔情報を用いた場合には正確に特定できなかった人物を、声紋情報を用いて正確に特定することができる。すなわち、顔情報に基づく人物特定結果の誤りを、声紋情報を用いて修正することができる。そして、人物抽出部１２ｂは、テーブルメモリ１２ａから抽出した判定用声紋情報に対応する顔写真、および電子メールアドレスを取得する。
【００３５】
通知部１２ｃは、人物抽出部１２ｂによって取得された顔写真、および電子メールアドレスを、無線回線を介してデジタルカメラ１５へ送信して、人物の特定結果を通知する。このとき、人物抽出部１２ｂによって、テーブルメモリ１２ａ内に入力声紋情報と一致する入力顔情報が存在しないと判定された場合には、通知部１２ｃは、デジタルカメラ１５へ情報を送信しない。あるいは、テーブルメモリ１２ａに入力声紋情報と一致する判定用声紋情報が存在しないことから、顔写真、および電子メールアドレスが取得できない旨を通知してもよい。
【００３６】
サーバー１２から撮像画像内に写っている人物の顔写真、および電子メールアドレスを受信したデジタルカメラ１５では、ＲＩＳＣ４は、図３に示した表示方法により、撮像画像内に写っている人物の顔写真３ａ、および電子メールアドレスｂを表示部１１に一覧表示する。そして、使用者によって入力部材１４が操作され、「転送する」ボタン３ｃが選択された場合には、ＲＩＳＣ４は無線部１０を制御して、表示部１１に表示されている全人物の電子メールアドレスを送信先に設定して、記録部３に記憶されている配信用撮像画像を撮像画像内に存在する人物へ配信する。
【００３７】
これによって、顔情報を第１の識別情報としてサーバー１２で人物の特定を試みた結果、人物が特定できず撮像画像の送信先として設定する電子メールアドレスが取得できなかった場合でも、声紋情報を第２の識別情報としてサーバー１２で人物を特定して、電子メールアドレスを取得することができる。このため、判定用顔情報の元となった人物の表情と、画像撮像時の人物の表情とが異なり、顔情報を使用して人物の特定ができない場合でも、生体認証の一手法である声紋情報を利用した人物特定方法によって、確実に人物を特定して、当該人物に撮像画像を配信することができる。
【００３８】
なお、声紋情報を使用してもなお、サーバー１２で人物が特定できず、デジタルカメラ１５がサーバー１２から顔写真、および電子メールアドレスを受信しない場合には、次のように処理する。この場合には、ＲＩＳＣ４は、上述したように、表示部１１に顔認識部２ａで認識した撮像画像内に含まれる人物の顔画像を顔写真３ａとして表示部１１に表示し、電子メールアドレス３ｂは空欄（非表示）にしておく。
【００３９】
そして、使用者によって操作部材１４が操作され、電子メールアドレスを手入力する対象の人物が選択された後、「手入力」ボタン３ｅが選択されると、ＲＩＳＣ４は、選択された人物の電子メールアドレス欄への入力の受付を開始する。その結果、使用者が操作部材１４を操作して顔写真３ａに対応する電子メールアドレスを入力すると、ＲＩＳＣ４は、無線部１０を制御し、使用者によって入力された電子メールアドレスを送信先に設定して、記録部３に記憶されている配信用撮像画像を配信する。
【００４０】
ＲＩＳＣ４はさらに、使用者によって入力された電子メールアドレス、その電子メールアドレスに対応する人物の顔写真３ａ、当該人物の声紋情報、および顔認識データ格納メモリ９に記憶された当該人物の顔情報を登録情報として無線部１０を制御してサーバー１２へ送信する。
【００４１】
また、サーバー１２から声紋情報に基づいて特定された人物の顔写真、および電子メールアドレスを受信したにも関わらず、使用者がサーバー１２からの受信結果が誤っていると判断した場合には、次のように処理する。この場合には、使用者は、操作部材１４を操作して受信結果が誤っている人物を選択した後に、「手入力」ボタン３ｅを選択する。
【００４２】
ＲＩＳＣ４は、あらかじめ選択されている人物の電子メールアドレスの修正の受付を開始する。その結果、使用者が操作部材１４を操作して顔写真３ａに対応する正しい電子メールアドレスを入力すると、ＲＩＳＣ４は、無線部１０を制御し、使用者によって修正された電子メールアドレスを送信先に設定して、記録部３に記憶されている配信用撮像画像を配信する。
【００４３】
ＲＩＳＣ４はさらに、使用者によって修正された電子メールアドレス、その電子メールアドレスに対応する人物の顔写真３ａ、当該人物の声紋情報、および顔認識データ格納メモリ９に記憶された当該人物の顔情報を登録情報として無線部１０を制御してサーバー１２へ送信する。
【００４４】
上記いずれかの場合にデジタルカメラ１５から登録情報を受信したサーバー１２では、人物抽出部１２ｂは、デジタルカメラ１５から受信した登録情報を、テーブルメモリ１２ａに記憶して登録する。これによって、デジタルカメラ１５で認識された撮像画像内に存在する人物の顔写真、顔情報、声紋情報、および使用者によって手入力された当該人物の電子メールアドレスを使用して、テーブルメモリ１２ａへ新たな人物の情報を登録することができる。
【００４５】
図４は、本実施の形態におけるデジタルカメラ１５の処理を示すフローチャートである。図４に示す処理は、デジタルカメラ１５の電源がオンされると起動するプログラムとして、ＲＩＳＣ４によって実行される。
【００４６】
ステップＳ１０において、ＲＩＳＣ４は、使用者によって操作部材１４が操作され、レリーズスイッチが半押しされたか否かを判断する。レリーズスイッチが半押しされたと判断した場合には、ステップＳ２０へ進む。ステップＳ２０では、撮像部１は、レリーズスイッチ半押し時に撮像された画像の画像データを画像処理部２へ出力する。そして画像処理部２は、画像データをＡＤ変換した後に顔認識部２ａへ出力する。顔認識部２ａは、入力された画像データを画像処理して、撮像画像内に含まれる人物の顔を認識する。その後、ステップＳ３０へ進む。
【００４７】
ステップＳ３０では、顔認識部２ａは、認識した人物の顔の顔情報を顔認識データ格納メモリ９に記憶する。その後、ステップＳ４０へ進み、ＲＩＳＣ４は、顔認識データ格納メモリ９に記憶した顔情報を無線部１０を制御してサーバー１２へ送信して、ステップＳ５０へ進む。ステップＳ５０では、ＲＩＳＣ４は、使用者によって操作部材１４が操作され、レリーズスイッチが全押しされたか否かを判断する。レリーズスイッチが全押しされたと判断した場合には、ステップＳ６０へ進む。
【００４８】
ステップＳ６０では、撮像部１は、レリーズスイッチ全押し時に撮像された画像の画像データを画像処理部２へ出力する。そして画像処理部２は、画像データをＡＤ変換した後に、ガンマ処理などの種々の画像処理を施して、記録部３に出力する。その後、ステップＳ７０へ進む。ステップＳ７０では、ＲＩＳＣ４は、無線部１０を介して、サーバー１２から送信した顔情報に対応する顔写真と電子メールアドレスを受信したか否かを判断する。
【００４９】
サーバー１２から顔写真と電子メールアドレスを受信していないと判断した場合には、ステップＳ１００へ進む。ステップＳ１００では、ＲＩＳＣ４は、上述したように、図３に示す画面で、使用者によって「手入力」ボタン３ｅが選択され、入力部材１４を使用して電子メールアドレスが手入力されたか否かを判断する。使用者によって電子メールアドレスが手入力されたと判断した場合には、ステップＳ１１０へ進む。
【００５０】
ステップＳ１１０では、ＲＩＳＣ４は、無線部１０を制御して、使用者によって入力された電子メールアドレス、撮像画像から抽出した顔写真、および顔認識部２ａで認識された人物の顔情報を登録情報としてサーバー１２へ送信する。その後、ステップＳ２００へ進み、ＲＩＳＣ４は、無線部１０を制御し、使用者によって入力された電子メールアドレスを送信先に設定して、記録部３に記憶されている配信用撮像画像を配信する。その後、処理を終了する。
【００５１】
これに対して、ステップＳ７０で、サーバー１２から顔写真と電子メールアドレスを受信したと判断した場合には、ステップＳ８０へ進む。ステップＳ８０では、ＲＩＳＣ４は、図３に示したように、表示部１１にサーバー１２から受信した撮像画像内に写っている人物の顔写真、および電子メールアドレスを一覧表示する。その後、ステップＳ９０へ進み、ＲＩＳＣ４は、使用者による表示部１１への表示内容の確認結果に対する応答に基づいて、サーバー１２から受信した顔写真、および電子メールアドレスが正しいか、あるいは誤っているかを判断する。すなわち、使用者が操作部材１４を使用して「転送する」ボタン３ｃを選択したか、あるいは「声入力」ボタン３ｄを選択したかを判断する。
【００５２】
サーバー１２から受信した顔写真、および電子メールアドレスが正しいと判断した場合には、ステップＳ２００へ進み、ＲＩＳＣ４は、無線部１０を制御し、サーバー１２から受信した電子メールアドレスを送信先に設定して、記録部３に記憶されている配信用撮像画像を配信する。その後、処理を終了する。
【００５３】
一方、サーバー１２から受信した顔写真、および電子メールアドレスが誤っていると判断した場合には、ステップＳ１２０へ進む。ステップＳ１２０では、ＲＩＳＣ４は、音声入力部５を制御して、音声入力の受付を開始し、音声入力部５を介して発話音声が入力されたか否かを判断する。発話音声が入力されたと判断した場合には、ＲＩＳＣ４は、音声入力部５から入力された発話音声を音声認識部１３へ出力して、ステップＳ１３０へ進む。
【００５４】
ステップＳ１３０では、音声入力部１３は入力された発話音声を音声認識して、発話者の声紋情報に変換した後、ＲＩＳＣ４へ出力する。その後、ステップＳ１４０へ進み、ＲＩＳＣ４は、入力された発話者の声紋情報を無線部１０を制御してサーバー１２へ送信して、ステップＳ１５０へ進む。ステップＳ１５０では、ＲＩＳＣ４は、無線部１０を介して、ステップＳ１４０において送信した顔情報に対応する顔写真と電子メールアドレスをサーバー１２から受信したか否かを判断する。
【００５５】
サーバー１２から顔写真と電子メールアドレスを受信していないと判断した場合には、ステップＳ１８０へ進む。ステップＳ１８０では、ＲＩＳＣ４は、上述したように、図３に示す画面で、使用者によって「手入力」ボタン３ｅが選択され、入力部材１４を使用して電子メールアドレスが手入力されたか否かを判断する。使用者によって電子メールアドレスが手入力されたと判断した場合には、ステップＳ１９０へ進む。
【００５６】
ステップＳ１９０では、ＲＩＳＣ４は、無線部１０を制御して、使用者によって入力された電子メールアドレス、撮像画像から抽出した顔写真、顔認識部２ａで認識された人物の顔情報、および音声入力部１３で認識された発話者の声紋情報を登録情報としてサーバー１２へ送信する。その後、ステップＳ２００へ進み、ＲＩＳＣ４は、無線部１０を制御し、使用者によって入力された電子メールアドレスを送信先に設定して、記録部３に記憶されている配信用撮像画像を配信する。その後、処理を終了する。
【００５７】
また、ステップＳ１５０で、サーバー１２から顔写真と電子メールアドレスを受信したと判断した場合には、ステップＳ１６０へ進む。ステップＳ１６０では、ＲＩＳＣ４は、図３に示したように、表示部１１にサーバー１２から受信した撮像画像内に写っている人物の顔写真、および電子メールアドレスの一覧を再表示する。その後、ステップＳ１７０へ進み、ＲＩＳＣ４は、使用者による「転送する」ボタン３ｃ、または「手入力」ボタン３ｅの選択状況を監視して、サーバー１２から受信した顔写真、および電子メールアドレスが正しいか、あるいは誤っているかを判断する。
【００５８】
サーバー１２から受信した顔写真、および電子メールアドレスが正しいと判断した場合には、ステップＳ２００へ進み、ＲＩＳＣ４は、無線部１０を制御し、サーバー１２から受信した電子メールアドレスを送信先に設定して、記録部３に記憶されている配信用撮像画像を配信する。その後、処理を終了する。一方、サーバー１２から受信した顔写真、および電子メールアドレスが誤っていると判断した場合には、上述したステップＳ１８０へ進み、使用者による電子メールアドレスの修正を受け付ける。
【００５９】
図５は、本実施の形態におけるサーバー１２の処理を示すフローチャートである。この図５に示す処理は、サーバー１２が備えている不図示のメモリ上に常駐するプログラムとして、不図示のＣＰＵにより実行される。そして、後述するように、デジタルカメラ１５から送信される種々の情報の受信を監視して、受信した情報に応じた処理を実行する。
【００６０】
ステップＳ２１０において、人物抽出部１２ｂは、デジタルカメラ１５から上述した顔情報、声紋情報、および登録情報のいずれかの情報を受信したか否かを判断する。デジタルカメラ１５から情報を受信したと判断した場合には、ステップＳ２２０へ進む。ステップＳ２２０では、デジタルカメラ１５から受信した情報が、顔情報、声紋情報、および登録情報のいずれであるかを判断する。
【００６１】
デジタルカメラ１５から受信した情報が顔情報であると判断した場合には、ステップＳ２３０へ進む。ステップＳ２３０では、人物抽出部１２ｂは、デジタルカメラ１５から受信した入力顔情報と、テーブルメモリ１２ａに記憶されている判定用顔情報とを比較して、一致する判定用顔情報を抽出する。その後、ステップＳ２４０へ進む。
【００６２】
ステップＳ２４０では、人物抽出部１２ｂは、テーブルメモリ１２ａから、抽出した判定用顔情報に対応する顔写真、および電子メールアドレスを取得する。その後、ステップＳ２５０へ進み、通知部１２ｃは、人物抽出部１２ｂによって取得された顔写真、および電子メールアドレスをデジタルカメラ１５へ送信して、人物の特定結果を通知する。その後、処理を終了する。
【００６３】
また、ステップＳ２２０でデジタルカメラ１５から受信した情報が声紋情報であると判断した場合には、ステップＳ２６０へ進む。ステップＳ２６０では、人物抽出部１２ｂは、デジタルカメラ１５から受信した入力声紋情報と、テーブルメモリ１２ａに記憶されている判定用声紋情報とを比較して、一致する判定用声紋情報を抽出する。
【００６４】
その後、ステップＳ２７０へ進み、人物抽出部１２ｂは、テーブルメモリ１２ａから、抽出した判定用声紋情報に対応する顔写真、および電子メールアドレスを取得する。その後、ステップＳ２８０へ進み、通知部１２ｃは、人物抽出部１２ｂによって取得された顔写真、および電子メールアドレスをデジタルカメラ１５へ送信して、人物の特定結果を通知する。その後、処理を終了する。
【００６５】
また、ステップＳ２２０でデジタルカメラ１５から受信した情報が登録情報であると判断した場合には、ステップＳ２９０へ進む。ステップＳ２９０では、人物抽出部１２ｂは、デジタルカメラ１５から受信した登録情報を、テーブルメモリ１２ａに記憶して登録する。その後、処理を終了する。
【００６６】
以上説明した本実施の形態によれば、以下のような作用効果を得ることができる。
（１）デジタルカメラ１５から入力顔情報を受信したサーバー１２では、テーブルメモリ１２ａに記憶されている判定用顔情報と、入力顔情報とを比較して、一致する判定用顔情報を抽出する。そして、一致する判定用顔情報に対応する顔写真と電子メールアドレスとをテーブルメモリ１２ａから取得して、デジタルカメラ１５へ送信する。使用者はデジタルカメラ１５が備える表示部１１に表示された顔写真と電子メールアドレスとを確認して、正しければその電子メールアドレス宛てに配信用撮像画像を配信するようにした。これによって、撮像画像内に存在する人物の電子メールアドレスを自動的に取得して、各人物に撮像画像を配信することができる。また、使用者に対して顔写真と電子メールアドレスを提示し、使用者による正誤の確認結果を受けて、配信用撮像画像を配信するようにしたため、間違った相手に画像を配信するのを防止することができる。
【００６７】
（２）使用者によってサーバー１２から受信した顔写真と電子メールアドレスとが誤っていると判断された場合には、誤っている人物の発話に基づいて認識された声紋情報をサーバー１２へ送信し、再度、顔写真と電子メールアドレスとを取得するようにした。これによって、顔情報に基づく人物の特定結果が誤っている場合でも、人物特定結果の誤りを修正することができる。さらに生体認証の一手法として用いられる声紋情報に基づいて人物を特定することにより、精度高く人物を特定して顔写真と電子メールアドレスとを取得することが可能となる。
【００６８】
（３）声紋情報に基づいて人物の特定を試みても、なお人物が特定できない場合には、使用者からの電子メールアドレスの入力（修正）を受け付けて、使用者によって入力された電子メールアドレスを送信先として、撮像画像を配信するようにした。これによって、顔情報に基づいて取得した電子メールアドレス、および声紋情報に基づいて取得した電子メールアドレスのいずれもが間違っている場合であっても、使用者は電子メールアドレスを手入力して修正することができ、間違った相手に撮像画像を配信することを防止することができる。
【００６９】
（４）使用者によって電子メールアドレスが手入力された場合には、その電子メールアドレスと、対応する顔情報、顔写真、および発話音声が入力されている場合には声紋情報をサーバー１２へ送信し、テーブルメモリ１２ａへ登録するようにした。これによって、テーブルメモリ１２ａに未登録の人物を随時追加登録していくことができ、テーブルメモリ１２ａ内のデータを常に最新の状態に保つことができる。
【００７０】
―変形例―
なお、上述した実施の形態の画像配信システムは、以下のように変形することもできる。
（１）上述した実施の形態では、レリーズスイッチが半押しされたときに撮像した１枚の画像を処理対象とし、当該１枚の撮像画像内に存在する人物に対して撮像画像を配信する例について説明した。しかしこれに限定されず、レリーズスイッチが半押しされたときに撮像した画像、またはレリーズスイッチが全押しされたときに撮像した画像を記録部３に蓄積しておき、蓄積された複数枚の画像をまとめて処理の対象とするようにしてもよい。
【００７１】
（２）上述した実施の形態では、サーバー１２で顔情報に基づいて取得された顔写真と電子メールアドレスが使用者によって誤っていると判定された場合には、誤っている人物の声紋情報をサーバー１２へ送信して、再度顔情報と電子メールアドレスを取得する例について説明した。しかしこれに限定されず、顔情報に基づく取得結果が誤っている場合には、声紋情報以外の生体認証可能な情報、例えば指紋情報などをサーバー１２へ送信して、再度顔情報と電子メールアドレスを取得するようにしてもよい。なお、声紋情報以外の情報を用いる場合には、その情報を取得するための装置をデジタルカメラ１５に搭載する必要がある。例えば、声紋情報に替えて指紋情報を使用する場合には、人物の指先から指紋情報を読み取るための読み取り装置をデジタルカメラ１５に搭載する必要がある。
【００７２】
（３）上述した実施の形態では、画像配信システムは、図１に示したように、デジタルカメラ１５とサーバー１２とを無線接続する構成とした。そして、デジタルカメラ１５上で、撮像画像内に存在する人物の顔認識処理、サーバー１２からの受信結果の使用者への通知処理、使用者からの応答に基づくサーバー１２からの受信結果の正誤判定処理、受信結果が誤っていた場合の修正処理、および撮像画像の配信処理を実行する。そして、サーバー１２上で、デジタルカメラ１５から受信した入力顔画像、およびテーブルメモリ１２ａに記憶されている判定用顔情報とを比較して、撮像画像内に存在する人物の顔写真と電子メールアドレスを取得（抽出）する取得処理を実行する例について説明した。しかしこれに限定されず、画像配信システムをその他の構成により実現してもよい。例えば、次の（Ａ）〜（Ｄ）のいずれかに示す構成としてもよい。
【００７３】
（Ａ）画像配信システムは、上述した実施の形態と同様に、デジタルカメラ１５とサーバー１２とを無線接続する構成とし、使用者が介在しない処理を全てサーバー１２上で行うようにしてもよい。すなわち、デジタルカメラ１５は、撮像した画像をサーバー１２へ送信し、サーバー１２上で、撮像画像内に存在する人物の顔認識処理、テーブルメモリ１２ａを参照して撮像画像内に存在する人物の顔写真と電子メールアドレスを取得する取得処理を行って、取得結果をデジタルカメラ１５へ送信する。デジタルカメラ１５では、取得結果の使用者への通知処理、使用者からの応答に基づく取得結果の正誤判定処理、取得結果が誤っていた場合の修正処理を実行して、正誤判定結果処理の結果および修正処理の結果をサーバー１２へ送信する。そしてサーバー１２は、デジタルカメラ１５から受信した正誤判定結果処理の結果および修正処理の結果に基づいて、撮像画像の配信処理を実行するようにしてもよい。
【００７４】
（Ｂ）画像配信システムは、デジタルカメラ１５のみで構成するようにしてもよい。すなわちデジタルカメラ１５に、上述した実施の形態におけるサーバー１２のテーブルメモリ１２ａおよび人物抽出部１２ｂを搭載するようにする。そして、デジタルカメラ１５上で、撮像画像内に存在する人物の顔認識処理、テーブルメモリ１２ａを参照して撮像画像内に存在する人物の顔写真と電子メールアドレスを取得する取得処理、その取得結果の使用者への通知処理、使用者からの応答に基づく取得結果の正誤判定処理、取得結果が誤っていた場合の修正処理、および撮像画像の配信処理を実行するようにしてもよい。
【００７５】
（Ｃ）画像配信システムは、上述した実施の形態におけるデジタルカメラ１５とサーバー１２とを、例えばＵＳＢ接続などによって有線接続する構成としてもよい。またサーバー１２に替えて他の情報端末、例えばパーソナルコンピュータ（ＰＣ）をデジタルカメラ１５と接続して、情報端末上に上述した実施の形態におけるサーバー１２の機能を実装するようにしてもよい。
【００７６】
（Ｄ）また、画像配信システムをデジタルカメラ１５とＰＣとを有線接続する構成とした場合に、ＰＣ上で、上述した実施の形態におけるデジタルカメラ１５の処理、およびサーバー１２の処理を全て行うようにしてもよい。すなわち、デジタルカメラ１５で撮像した画像を、ＰＣへ転送し、ＰＣ上で撮像画像内に存在する人物の顔認識処理、テーブルメモリ１２ａを参照して撮像画像内に存在する人物の顔写真と電子メールアドレスを取得する取得処理、その取得結果の使用者への通知処理、使用者からの応答に基づく取得結果の正誤判定処理、取得結果が誤っていた場合の修正処理、および撮像画像の配信処理を実行するようにしてもよい。
【００７７】
なお、本発明の特徴的な機能を損なわない限り、本発明は、上述した実施の形態における構成に何ら限定されない。
【図面の簡単な説明】
【００７８】
【図１】画像配信システムの一実施の形態の構成を示すブロック図である。
【図２】顔認識の具体例を示す図である。
【図３】顔写真と電子メールアドレスの表示例を示す図である。
【図４】デジタルカメラ１５の処理を示すフローチャート図である。
【図５】サーバー１２の処理を示すフローチャート図である。
【符号の説明】
【００７９】
１  撮像部、２  画像処理部、３  記録部、４  ＲＩＳＣ、５  音声入力部、６  ＵＳＢＩ／Ｆ、７  フラッシュメモリ、８  ＳＤＲＡＭ、９  顔認識データ格納メモリ、１０  無線部、１１  表示部、１２  サーバー、１２ａ  テーブルメモリ、１２ｂ  人物抽出部、１２ｃ  通知部、１３  音声認識部、１４  操作部材、１５  デジタルカメラ
【図１】
2007102683.tif 000003
【図２】
2007102683.tif 000004
【図３】
2007102683.tif 000005
【図４】
2007102683.tif 000006
【図５】
2007102683.tif 000007