(57)【要約】【課題】端末装置の演算能力またはメモリ容量が高くなくても短時間で多数の人認証を行うことができる認証システムおよび端末装置を提供する。【解決手段】端末装置と、端末装置と通信接続されるサーバー装置とを備える認証システムであって、端末装置は、認証部が認証を行う際に用いるリファレンス情報であって、端末装置の使用条件を表す情報に応じたリファレンス情報を、サーバー装置から取得するリファレンス情報取得部を備え、サーバー装置は、人物各々に関するリファレンス情報を記憶するリファレンス情報記憶部と、リファレンス情報記憶部が記憶しているリファレンス情報のうち、端末装置の使用条件を表す情報に応じたリファンス情報を、端末装置に提供するリファレンス情報提供部とを備えることを特徴とする。【選択図】図１
2016019144.tif 000002
【特許請求の範囲】
【請求項１】
端末装置と、前記端末装置と通信接続されるサーバー装置とを備える認証システムであって、
前記端末装置は、
認証対象の認証情報を取得する対象情報取得部と、
前記対象情報取得部が取得した認証情報を認証する認証部と、
前記認証部が認証を行う際に用いるリファレンス情報であって、前記端末装置の使用条件を表す情報に応じたリファレンス情報を、前記サーバー装置から取得するリファレンス情報取得部と
を備え、
前記サーバー装置は、
人物各々に関するリファレンス情報を記憶するリファレンス情報記憶部と、
前記リファレンス情報記憶部が記憶しているリファレンス情報のうち、前記端末装置の使用条件を表す情報に応じたリファンス情報を、前記端末装置に提供するリファレンス情報提供部と
を備えることを特徴とする認証システム。
【請求項２】
前記端末装置の使用条件を表す情報は、前記端末装置を識別する識別情報、前記端末装置が位置する場所を示す利用場所情報、前記端末装置の通信相手を示す通信相手情報、認証済みの人物を示す情報のうち、少なくとも一つを含むことを特徴とする請求項１に記載の認証システム。
【請求項３】
前記サーバー装置は、前記使用条件を表す情報の項目毎に、その項目を参照して抽出したリファレンス情報で人が判定される可能性の高さを表す情報を記憶する情報記憶部を備え、
前記リファレンス情報提供部は、前記情報記憶部を参照して、前記使用条件を表す情報の項目を選択し、選択した前記項目に応じたリファンス情報を、前記端末装置に提供すること
を特徴とする請求項１に記載の認証システム。
【請求項４】
前記リファレンス情報取得部は、前記サーバー装置からのリファレンス情報の取得を、前記端末装置が前記サーバー装置と通信接続されると行うこと
を特徴とする請求項１に記載の認証システム。
【請求項５】
人物各々に関するリファレンス情報を記憶するサーバー装置と通信接続される端末装置であって、
認証対象の認証情報を取得する対象情報取得部と、
前記対象情報取得部が取得した認証情報を認証する認証部と、
前記認証部が認証を行う際に用いるリファレンス情報であって、自装置の使用条件を表す情報に応じたリファレンス情報を、前記サーバー装置から取得するリファレンス情報取得部と
を備えることを特徴とする端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、認証システムおよび端末装置に関する。
【背景技術】
【０００２】
近年、デジタルカメラなどの商品において、操作者の顔を撮影し、事前に登録した操作者のリファレンスデータ（顔画像や顔の特徴点データ）と比較することで、操作者が誰であるかを判断し、操作者に応じて、設定やアクションを変える手法が提案されている。例えば、特許文献１にはデジタルカメラにおいて、操作者を撮影できる位置に撮像素子を配置し、操作者に応じて、撮影のための条件、たとえば低速シャッタ限界やＡＦ測距点など、を容易に設定する技術が記載されている。
【０００３】
また、その場にいる人を撮影し、事前に登録したリファレンスデータと比較し、その場にいる人が誰であるかを特定するようなサービスも望まれている。この様なサービスに関する技術として、例えば、特許文献２には、多数の出席者が集まる室内において、カメラによる顔認証装置を使用し、着席状態で複数の顔画像を撮影し、そのデータを出席管理装置へ取り込むことにより、登録された人が出席したか否かを把握する技術が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−２９０２６０号公報
【特許文献２】特開２０１２−０４３３８９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述のように人を判定する認証方法においては、認証可能な人数が多くなると、短時間で認証を行うためには、高い演算能力やメモリ容量が要求されてしまうという問題がある。
【０００６】
本発明は、このような事情に鑑みてなされたもので、端末装置の演算能力またはメモリ容量が高くなくても短時間で多数の人認証を行うことができる認証システムおよび端末装置を提供する。
【課題を解決するための手段】
【０００７】
この発明は上述した課題を解決するためになされたもので、本発明の一態様は、端末装置と、前記端末装置と通信接続されるサーバー装置とを備える認証システムであって、前記端末装置は、認証対象の認証情報を取得する対象情報取得部と、前記対象情報取得部が取得した認証情報を認証する認証部と、前記認証部が認証を行う際に用いるリファレンス情報であって、前記端末装置の使用条件を表す情報に応じたリファレンス情報を、前記サーバー装置から取得するリファレンス情報取得部とを備え、前記サーバー装置は、人物各々に関するリファレンス情報を記憶するリファレンス情報記憶部と、前記リファレンス情報記憶部が記憶しているリファレンス情報のうち、前記端末装置の使用条件を表す情報に応じたリファンス情報を、前記端末装置に提供するリファレンス情報提供部とを備えることを特徴とする認証システムである。
【０００８】
また、本発明の他の態様は、人物各々に関するリファレンス情報を記憶するサーバー装置と通信接続される端末装置であって、認証対象の認証情報を取得する対象情報取得部と、前記対象情報取得部が取得した認証情報を認証する認証部と、前記認証部が認証を行う際に用いるリファレンス情報であって、自装置の使用条件を表す情報に応じたリファレンス情報を、前記サーバー装置から取得するリファレンス情報取得部とを備えることを特徴とする。
【発明の効果】
【０００９】
この発明によれば、端末装置の演算能力またはメモリ容量が高くなくても短時間で多数の人認証を行うことができる。
【図面の簡単な説明】
【００１０】
【図１】この発明の第１の実施形態に係るテレビ会議システムの構成を示す概略ブロック図である。
【図２】同実施形態に係るサーバー装置１の機能構成を示す概略ブロック図である。
【図３】同実施形態に係る第１撮像装置２の機能構成を示す概略ブロック図である。
【図４】同実施形態に係るテレビ会議システムの利用シーン例を説明する模式図である。
【図５】同実施形態に係る第２表示装置５での表示画像の例ＧＢである。
【図６】同実施形態に係るリファレンス情報記憶部２０２に保存されるデータの内容例である。
【図７】同実施形態に係る第１撮像装置２の動作を説明するフロー図である。
【図８】この発明の第２の実施形態に係るサーバー装置１の構成を示す概略ブロック図である。
【図９】同実施形態に係る撮像装置情報記憶部２０６に保存されるデータの内容例である。
【図１０】同実施形態に係るある撮像装置における、直近の１１回の利用状況を示す表である。
【図１１】同実施形態に係るテレビ会議システムの動作を説明するフロー図である。
【図１２】この発明の第３の実施形態に係る撮像システムの利用シーン例を説明する模式図である。
【図１３】同実施形態に係る撮像システムの構成を示す概略ブロック図である。
【図１４】同実施形態に係る第１撮像装置２の構成を示す概略ブロック図である。
【図１５】同実施形態に係る認証結果記憶部３１０に保存されるデータの内容例である。
【図１６】同実施形態に係る第１撮像装置２の動作を説明するフロー図である。
【発明を実施するための形態】
【００１１】
［第１の実施形態］
以下、図面を参照して、本発明の第１の実施形態について説明する。本実施形態では認証システムを用いたテレビ会議システムを例にとり説明する。図１は本実施形態に係るテレビ会議システムの構成を示す概略ブロック図である。図１に示すテレビ会議システムは、認証システム１０、第１表示装置３、第２撮像装置４、第２表示装置５、入力装置６を含む。認証システム１０は、サーバー装置１、第１撮像装置２（端末装置）を含む。サーバー装置１、第１撮像装置２、第２撮像装置４、入力装置６は、ネットワーク７により、互いに通信可能に接続されている。
【００１２】
サーバー装置１は、第１撮像装置２が、人認証を行う際に用いるリファレンス情報を記憶し、第１撮像装置２からの要求に応じて、リファレンス情報を提供する。リファレンス情報には、例えば、顔画像、顔の特徴点データなどがある。第１撮像装置２は、地点Ａに設置されており、地点Ａにおけるテレビ会議の出席者などテレビ会議用の画像を撮像する。第１撮像装置２は、撮像した画像を、ネットワーク７を介して第２撮像装置４に送信する。また、第１撮像装置２は、第２撮像装置４から受信した画像に、自装置が撮像した画像を合成し、第１表示装置３に表示させる。また、第１撮像装置２は、撮像した画像から人の顔を検出し、検出した顔の画像を用いて、人認証を行う。第１表示装置３は、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、有機ＥＬ（Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイなどの表示デバイスを有する。第１表示装置３は、第１撮像装置２に接続されており、第１撮像装置２から入力された画像を、表示デバイスに表示する。
【００１３】
第２撮像装置４は、第１表示装置３および第１撮像装置２が設置されている地点Ａとは異なる地点Ｂに設置されており、地点Ｂにおけるテレビ会議の出席者などテレビ会議用の画像を撮像する。第２撮像装置４は、撮像した画像を、ネットワーク７を介して第１撮像装置２に送信する。また、第２撮像装置４は、第１撮像装置２から受信した画像に、自装置が撮像した画像を合成し、第２表示装置５に表示させてもよい。第２表示装置５は、第１表示装置３と同様に、ＬＣＤ、有機ＥＬディスプレイなどの表示デバイスを有する。第２表示装置５は、第２撮像装置４に接続されており、第２撮像装置４から入力された画像を、表示デバイスに表示する。入力装置６は、オペレータの操作入力を受け付けて、サーバー装置１が記憶するリファレンス情報を管理する。
【００１４】
ネットワーク７は、インターネットなどの接続された装置が相互に通信可能なネットワークである。ネットワーク７は、無線ＬＡＮ（Local Area Network）やＢｌｕｅｔｏｏｔｈ（登録商標）などの短距離無線通信、携帯電話回線、有線ＬＡＮ、またはこれらの組み合わせから構成される。ネットワーク７には、サーバー装置１、第１撮像装置２、第２撮像装置４、入力装置６が接続されている。なお、図１では、第１表示装置３、第２表示装置５は、それぞれ、第１撮像装置２、第２撮像装置４を介してネットワーク７に接続されているが、それぞれが直接、ネットワーク７に接続されていてもよい。また、逆に、第１撮像装置２、第２撮像装置４が、それぞれ、第１表示装置３、第２表示装置５を介してネットワーク７に接続されていてもよい。
【００１５】
図２は、サーバー装置１の機能構成を示す概略ブロック図である。図２に示すようにサーバー装置１は、サーバー制御部２０１、リファレンス情報記憶部２０２、リファレンス情報提供部２０３、リファレンス情報管理部２０４を含む。サーバー制御部２０１は、サーバー装置１全体の制御を行う。リファレンス情報記憶部２０２は、複数の人の名前と、各人のリファレンス情報と、各人がテレビ会議システムを使用したときの使用条件とを記憶する。リファレンス情報提供部２０３は、第１撮像装置２からの要求に応じて、リファレンス情報を提供する。リファレンス情報管理部２０４は、入力装置６からの要求に従い、リファレンス情報を登録するなど、リファレンス情報記憶部２０２が記憶するリファレンス情報を管理する。
【００１６】
図３は、第１撮像装置２の機能構成を示す概略ブロック図である。第１撮像装置２は、遠隔地の人とコミュニケーションを取る為に、撮影、データの送受信など行う。また、第１撮像装置２は、撮影している人の人認証を行う。図３に示すように、第１撮像装置２は、撮像装置制御部３０１、撮像部３０２、人検出部３０３、記憶部３０４、人認証部３０５、リファレンス情報取得部３０６、外部ＩＦ部３０７、映像出力部３０８、操作部３０９を含む。撮像装置制御部３０１は、第１撮像装置２全体の制御及び信号処理をする。撮像部３０２は、第１撮像装置２が設置されている地点の撮影を行う。人検出部３０３は、撮像部３０２が撮影した画像の中から人の顔を検出する。記憶部３０４は、撮影した画像と、人認証を行う為のリファレンス情報と、第１撮像装置２の起動データとを保持する。
【００１７】
人認証部３０５は、人検出部３０３が検出した人の顔と、記憶部３０４が保持しているリファレンス情報とを比較し、リファレンス情報の中から、人検出部３０３が検出した人の顔と一致する情報を検出する。リファレンス情報取得部３０６は、第１撮像装置２の使用条件を表す情報を含むリファレンス情報の取得要求を、サーバー装置１に送信する。リファレンス情報取得部３０６は、送信した取得要求に対応する応答として受信したリファレンス情報を、記憶部３０４に記憶させる。これにより、リファレンス情報取得部３０６は、第１撮像装置２の使用条件を表す情報に応じたリファレンス情報を、サーバー装置１から取得している。
【００１８】
外部ＩＦ部３０７は、ネットワーク７に通信可能に接続され、第１撮像装置２の各部と、ネットワーク７を介した他装置との通信を行う。映像出力部３０８は、第２撮像装置４から受信した映像に、撮像部３０２が撮像した画像を合成した映像の映像信号を、第１表示装置３に入力する。操作部３０９は、操作ボタンなどの入力デバイスを有し、通信先の指定など、第１撮像装置２に対する操作入力を取得する。なお、第２撮像装置４は、第１撮像装置２と同様の構成であるが、人検出部３０３、人認証部３０５を有していなくてもよい。
【００１９】
図４は、本実施形態に係るテレビ会議システムの利用シーン例を説明する模式図である。テレビ会議の出席者Ｓ、Ｔ、Ｖ、Ｕは、テレビ会議システムを利用して、距離的に離れた位置にある地点Ａと地点Ｂとで映像コミュニケーションを取る。第１撮像装置２、第１表示装置３は地点Ａに、第２撮像装置４、第２表示装置５は地点Ｂに、サーバー装置１は地点Ｃに、入力装置６は地点Ｄに設置されている。尚、サーバー装置１と入力装置６は、これに寄らずたとえば地点Ａや地点Ｂなど、どこに設置されていても良い。また、これらの装置はネットワーク７を介して、接続される。
【００２０】
また、テレビ会議システムは、映像コミュニケーションの他に音声コミュニケーションをとるための機能を有していてもよい。また、地点Ａ、地点Ｂの２地点間の通信だけではなく、図示しない撮像装置および表示装置を加えて、３地点や、４地点、５地点と更に増やしても良い。
【００２１】
地点Ａには、第１表示装置３と、第１表示装置３の上部に配置された第１撮像装置２とが設置され、第１表示装置３の前には地点Ｂとコミュニケーションを取る出席者Ｓ、Ｔがいる。また、地点Ｂには、第２表示装置５と、第２表示装置５の上部に配置された第２撮像装置４とが設置され、第２表示装置５の前には地点Ａとコミュニケーションを取る出席者Ｕ、Ｖがいる。また、地点Ａの第１撮像装置２と地点Ｂの第２撮像装置４とは、ネットワーク７を介してサーバー装置１と接続されており、それぞれの映像が伝達される。
【００２２】
図５は、第２表示装置５での表示画像の例ＧＢである。図５の表示画像ＧＢは、テレビ会議システムを図４の利用シーンのように利用しているときの表示画像の例である。第１撮像装置２において、出席者Ｓ、Ｔが撮影されているので、第２表示装置５は、出席者Ｓ、Ｔと、第１撮像装置２で認識された出席者の名前を含む表示画像ＧＢを表示する。この表示画像ＧＢは、第１撮像装置２が生成し、ネットワーク７を介して伝送された画像である。図示した例では名前は、右側に設けられた名前表示エリアＮＡに表示されているが、映し出されている人の近くにオーバーレイさせる形で表示されるようにしても良い。また、第２表示装置５が表示する画像は、第２撮像装置４が撮像した映像が、第１撮像装置２から伝送された映像内に、第２撮像装置４により合成された画像であっても良い。
【００２３】
図６は、リファレンス情報記憶部２０２に保存されるデータの内容例である。リファレンス情報記憶部２０２で管理される項目としては、人の名前、顔画像、あるいは顔の特徴点データなど人認証に必要なリファレンス情報、テレビ会議システムを利用した日時及び場所とその時に利用した端末ＩＤ、通信相手ＩＤ、テレビ会議出席者がある。図６は、リファレンス情報が、顔を含む画像である場合の例である。
図６の例では、リファレンス情報記憶部２０２は、出席者Ｓの名前「Ｓ」と、リファレンス情報である出席者Ｓの顔を含む画像と、利用日時「２０１４年１月２０日（月）９：００」、「２０１４年１月２１日（火）１５：００」、「２０１４年１月２２日（水）１３：００」と、利用日時各々に対応する利用場所「Ｘ」、「Ｙ」、「Ｚ」、端末ＩＤ「Ａ」、「Ｂ」、「Ａ」、通信相手ＩＤ「０９０−ＮＮＮＮ−ＭＭＭＭ」、「０９０−ＰＰＰＰ−ＱＱＱＱ」、「０９０−ＰＰＰＰ−ＱＱＱＱ」、テレビ会議出席者「Ｓ、Ｔ、Ｕ、Ｖ」、「Ｓ、Ｔ、Ｕ」、「Ｓ」とを対応付けて記憶している。同様に、リファレンス情報記憶部２０２は、出席者Ｔ、Ｕ、Ｖなどの情報についても記憶している。
【００２４】
リファレンス情報記憶部２０２に保存されたリファレンス情報は、第１撮像装置２のリファレンス情報取得部３０６からの要求を受けたリファレンス情報提供部２０３により抽出される。この要求には、例えば、利用場所、端末ＩＤ、通信相手ＩＤなどの利用条件を表す情報が含まれており、リファレンス情報提供部２０３は、この利用条件を表す情報のいずれかと対応付けられているリファレンス情報と名前とを抽出する。抽出されたリファレンス情報と名前とは、ネットワーク７、外部ＩＦ部３０７を介して受信したリファレンス情報取得部３０６により、記憶部３０４に保存される。
【００２５】
次に、リファレンス情報記憶部２０２へのデータの登録及び更新方法について、詳細に説明する。リファレンス情報記憶部２０２への登録は、入力装置６や第１撮像装置２の操作部３０９などによって行われる。初期登録に必要な情報は名前と顔画像であり、入力装置６によって行われる場合は、名前の入力と、顔画像の入力とがオペレータにより行われる。初期登録は、会議に初めて出席する前や、第１撮像装置２を使用して顔画像を撮影した後などに行われる。
【００２６】
名前の入力は、入力装置６に備え付けられたキーボードや操作ボダンにより行われてもよいし、オペレータなどが発音した名前を、音声認識によりデータに変換することで行われても良い。顔画像の入力は、以前に撮った画像からオペレータが選択することで行われてもよいし、第１撮像装置２、第２撮像装置４などが撮影することで行われてもよい。第１撮像装置２、第２撮像装置４などが撮影する場合は、撮像装置で撮影した映像をサーバー装置１にアップして選択する他、撮像装置内の記憶部３０４のデータから顔画像を選択しても良い。また、第１撮像装置２、第２撮像装置４にキーボード等の名前を入力する手段を設ける事で、第１撮像装置２、第２撮像装置４で名前の登録と顔画像の選択し、ネットワーク７を介して初期登録を行っても良い。リファレンス情報記憶部２０２に登録するリファレンス情報が顔の特徴点データの場合は、第１撮像装置２、第２撮像装置４の人検出部３０３が、選択した顔画像から特徴点データを抽出し、抽出された特徴点データは、リファレンス情報記憶部２０２に保存される。
【００２７】
尚、リファレンス情報は、一人に対して１つだけではなく、撮影条件の異なる複数のリファレンス情報を登録しても良い。異なる撮影条件とは、例えば撮影した時の顔の向きや照明の位置を変えた時などである。また一度登録すると、テレビ会議に出席した毎に利用日時や利用場所情報や使用した端末ＩＤなどが更新される。
【００２８】
図７は、本実施形態における第１撮像装置２の動作を説明するフロー図である。まず、第１撮像装置２の撮像装置制御部３０１は、通信相手（例えば、第２撮像装置４）を表す情報を取得し、その通信相手との通信を開始する（ステップＳａ１）。なお、通信相手は、例えば、テレビ会議の出席者が、操作部３０９を操作することで指定される。その後、第１撮像装置２のリファレンス情報取得部３０６は、外部ＩＦ部３０７、ネットワーク７を介して、サーバー装置１のリファレンス情報提供部２０３にアクセスする。このアクセスにより、第１撮像装置２の端末ＩＤと、通信相手を識別する通信相手ＩＤと、第１撮像装置２が位置する場所を表す利用場所情報とを含むリファレンス情報要求コマンドが、リファレンス情報取得部３０６からサーバー装置１に送信される。なお、端末ＩＤおよび通信相手ＩＤは、テレビ会議システムにより各撮像装置に割り振られた識別情報、電話番号、ＭＡＣアドレス等、各撮像装置を識別する情報である。
【００２９】
また、利用場所情報は、ＧＰＳ（Global Positioning System）により取得された緯度経度やＩＰ（Internet Protocol）アドレスなど位置を識別する情報である。なお、ＧＰＳにより取得された緯度経度を用いる場合、第１撮像装置２は、ＧＰＳの衛星からの信号を受信するＧＰＳ受信部と、受信した信号から位置を算出する位置算出部とを有する。
【００３０】
サーバー装置１のリファレンス情報提供部２０３は、リファレンス情報要求コマンドを受信すると、リファレンス情報要求コマンドに含まれる端末ＩＤにより識別される装置、すなわち第１撮像装置２の利用頻度が高い人のうち、上位から所定の人数のリファレンス情報と名前とを、リファレンス情報要求コマンドの送信元、すなわち第１撮像装置２に送信する。例えば、２０人分を送る場合は、リファレンス情報提供部２０３は、リファレンス情報記憶部２０２内に登録されている人毎に第１撮像装置２の利用頻度（回数）を算出し、算出した利用頻度の上位２０人のリファレンス情報及び名前を、第１撮像装置２に送信する。ここで人毎の利用頻度はリファレンス情報記憶部２０２の端末ＩＤの「Ａ」の数をカウントする事で算出できる。
【００３１】
第１撮像装置２のリファレンス情報取得部３０６は、リファレンス情報提供部２０３が送信したリファレンス情報及び名前を受信し、記憶部３０４に保存する（ステップＳａ２）。なお、リファレンス情報を送る人数は、第１撮像装置２の記憶部３０４の容量や、人認証部３０５の処理能力に応じたものであればよく、２０人に限らない。また、第１撮像装置２の記憶部３０４の残り容量によって変えてもよく、その場合、リファレンス情報取得部３０６は、リファレンス情報要求コマンドに、取得する人数もしくは記憶部３０４の残り容量を含める。
【００３２】
次に、第１撮像装置２の人認証部３０５は、撮像部３０２が撮像した画像から人検出部３０３が検出した人の顔画像について、記憶部３０４を参照して人認証を行う。具体的には、人認証部３０５は、人検出部３０３が検出した人の顔画像と、ステップＳａ２にて記憶部３０４に保存されたリファレンス情報とを比較し、リファレンス情報のいずれかが表す人が、人検出部３０３が検出した人と一致するか否かの判断を行う（ステップＳａ３）。
【００３３】
ステップＳａ３における人認証について詳細に説明する。人検出部３０３は、撮像部３０２が撮影した画像に対して、探索窓（例えば８ピクセル×８ピクセルのような判定領域)を左上から走査し、探索窓の領域毎に顔と認識できる特徴点を持つ領域があるかどうかを判定する。これにより、人検出部３０３は、撮像部３０２が撮影した画像から、人の顔画像を検出している。顔の特徴点としては、顔の輪郭、眼、鼻、口などの顔器官と呼ばれる特徴点を利用する。そして、人検出部３０３は、それらの位置関係を、特徴点データとして検出する。この検出の方法としては、Ｖｉｏｌａ−Ｊｏｎｅｓ法など、様々なアルゴリズムが提案されているが、いずれを用いてもよい。
【００３４】
リファレンス情報が、顔画像である場合は、人検出部３０３は、リファレンス情報に対しても同様に、顔の特徴点を検出し、それらの位置関係を検出する。なお、リファレンス情報が、特徴点データである場合は、サーバー装置１により予め同様の処理が行われて、特徴点データが検出されている。リファレンス情報が、特徴点データである場合は、そのまま、人認証部３０５における人認証に用いられる。
その後、人認証部３０５は、リファレンス情報の顔器官の特徴点データと、検出した顔器官の特徴データとをマッチング処理して、撮像部３０２が撮像した画像中の人が、記憶部３０４に保存されているどの人であるかを判定する人認証を行う。
【００３５】
次に、人認証部３０５は、地点Ａでの出席者、すなわち人検出部３０３で検出した人の中に、どの人であるか判定できなかった人がいるか、すなわち未認証の出席者があるか否かを判定する（ステップＳａ４）。未認証の出席者がないと判定したとき、すなわち、取得したリファレンス情報で、地点Ａでの全ての出席者を認証できたときは（Ｓａ４−Ｎ）、処理は終了する。また、未認証の出席者があると判定したとき、すなわち、どの人であるか判定できなかった出席者があるときは（Ｓａ４−Ｙ）、リファレンス情報取得部３０６は、外部ＩＦ部３０７、ネットワーク７を介して、リファレンス情報提供部２０３にアクセスする。このアクセスにより、１回目のリファレンス情報再要求コマンドが、リファレンス情報取得部３０６からサーバー装置１に送信される。
【００３６】
サーバー装置１のリファレンス情報提供部２０３は、リファレンス情報再要求コマンドを受信すると、ステップＳａ２のリファレンス情報要求コマンドに含まれていた利用場所、すなわち第１撮像装置２の現在の利用場所での利用頻度が多い人のうち、ステップＳａ２でリファレンス情報を送信した人を除く、上位から所定の人数のリファレンス情報と名前とを、リファレンス情報再要求コマンドの送信元、すなわち第１撮像装置２に送信する。
【００３７】
例えば、２０人分を送る場合は、リファレンス情報提供部２０３は、リファレンス情報記憶部２０２内に登録されている人毎に、リファレンス情報要求コマンドに含まれていた利用場所と同じ利用場所での利用頻度を算出する。そして、リファレンス情報提供部２０３は、ステップＳａ２において第１撮像装置２にリファレンス情報を送信済みの人を除いた、算出した利用頻度が上位２０人のリファレンス情報及び名前を第１撮像装置２に送信する。第１撮像装置２のリファレンス情報取得部３０６は、リファレンス情報提供部２０３が送信したリファレンス情報及び名前を受信し、記憶部３０４に保存する（ステップＳａ５）。なお、ステップＳａ２と同様に、リファレンス情報を送る人数は、２０人に限らない。
【００３８】
次に、第１撮像装置２の人認証部３０５は、未認証の人の顔画像について、ステップＳａ３と同様にして、記憶部３０４を参照して人認証を行う（ステップＳａ６）。次に、人認証部３０５は、地点Ａでの出席者に、ステップＳａ４と同様にして、未認証の出席者があるか否かを判定する（ステップＳａ７）。
【００３９】
未認証の出席者がないと判定したときは（Ｓａ７−Ｎ）、処理は終了する。また、未認証の出席者があると判定したときは（Ｓａ７−Ｙ）、リファレンス情報取得部３０６は、外部ＩＦ部３０７、ネットワーク７を介して、リファレンス情報提供部２０３にアクセスする。このアクセスにより、２回目のリファレンス情報再要求コマンドが、リファレンス情報取得部３０６からサーバー装置１に送信される。
【００４０】
サーバー装置１のリファレンス情報提供部２０３は、リファレンス情報再要求コマンドを受信すると、ステップＳａ２のリファレンス情報要求コマンドに含まれていた通信相手ＩＤが示す装置を通信相手とする利用頻度が多い人のうち、ステップＳａ２、Ｓａ５でリファレンス情報を送信した人を除く、上位から所定の人数のリファレンス情報と名前とを、リファレンス情報再要求コマンドの送信元、すなわち第１撮像装置２に送信する。
【００４１】
例えば、２０人分を送る場合は、リファレンス情報提供部２０３は、リファレンス情報記憶部２０２内に登録されている人毎に、リファレンス情報要求コマンドに含まれていた通信相手ＩＤと同じ通信相手ＩＤであるときの利用頻度を算出する。そして、リファレンス情報提供部２０３は、ステップＳａ２、Ｓａ５において第１撮像装置２にリファレンス情報を送信済みの人を除いた、算出した利用頻度が上位２０人のリファレンス情報及び名前を第１撮像装置２に送信する。第１撮像装置２のリファレンス情報取得部３０６は、リファレンス情報提供部２０３が送信したリファレンス情報及び名前を受信し、記憶部３０４に保存する（ステップＳａ８）。なお、ステップＳａ２と同様に、リファレンス情報を送る人数は、２０人に限らない。
【００４２】
次に、第１撮像装置２の人認証部３０５は、未認証の人の顔画像について、ステップＳａ３と同様にして、記憶部３０４を参照して人認証を行う（ステップＳａ９）。次に、人認証部３０５は、地点Ａでの出席者に、ステップＳａ４と同様にして、未認証の出席者があるか否かを判定する（ステップＳａ１０）。
【００４３】
未認証の出席者がないと判定したときは（Ｓａ１０−Ｎ）、処理は終了する。また、未認証の出席者があると判定したときは（Ｓａ１０−Ｙ）、リファレンス情報取得部３０６は、外部ＩＦ部３０７、ネットワーク７を介して、リファレンス情報提供部２０３にアクセスする。このアクセスにより、３回目のリファレンス情報再要求コマンドが、リファレンス情報取得部３０６からサーバー装置１に送信される。この３回目のリファレンス情報再要求コマンドは、ステップＳａ３、Ｓａ６、Ｓａ９にて認証した人の名前を含む。なお、認証した人の名前に、通信相手である第２撮像装置４が認証した人の名前が含まれていてもよい。また、名前ではなく、その他の、人を識別する情報であってもよい。
【００４４】
サーバー装置１のリファレンス情報提供部２０３は、リファレンス情報再要求コマンドを受信すると、リファレンス情報再要求コマンドに含まれる名前が示す人をテレビ会議出席者に含む利用頻度が多い人のうち、ステップＳａ２、Ｓａ５、Ｓａ８でリファレンス情報を送信した人を除く、上位から所定の人数のリファレンス情報と名前とを、リファレンス情報再要求コマンドの送信元、すなわち第１撮像装置２に送信する。
【００４５】
例えば、２０人分を送る場合は、リファレンス情報提供部２０３は、リファレンス情報記憶部２０２内に登録されている人毎に、リファレンス情報再要求コマンドに含まれている出席者のいずれかが出席しているテレビ会議に出席した回数を算出する。なお、リファレンス情報提供部２０３は、リファレンス情報再要求コマンドに含まれている出席者の全てが出席しているテレビ会議に出席した回数を算出してもよい。
【００４６】
そして、リファレンス情報提供部２０３は、ステップＳａ２、Ｓａ５、Ｓａ８において第１撮像装置２にリファレンス情報を送信済みの人を除いた、算出した回数が上位２０人のリファレンス情報及び名前を第１撮像装置２に送信する。第１撮像装置２のリファレンス情報取得部３０６は、リファレンス情報提供部２０３が送信したリファレンス情報及び名前を受信し、記憶部３０４に保存する（ステップＳａ１１）。なお、ステップＳａ２と同様に、リファレンス情報を送る人数は、２０人に限らない。
【００４７】
人認証部３０５が出席者Ｓを既に認証済であり、リファレンス情報記憶部２０２の記憶内容が図６に示す例であるときを例に説明する。リファレンス情報記憶部２０２が記憶するテレビ会議出席者から、出席者Ｔは、２０１４年１月２０日と２０１４年１月２１日に出席者Ｓとテレビ会議に同席しているので、出席者Ｔが、出席者Ｓが出席しているテレビ会議に出席した回数は、２回である。また、出席者Ｕは、２０１４年１月２０日と２０１４年１月２１日に同席しているので、出席者Ｕが、出席者Ｓが出席しているテレビ会議に出席した回数は、２回である。また、出席者Ｖは、２０１４年１月２０日に同席しているので、出席者Ｖが、出席者Ｓが出席しているテレビ会議に出席した回数は、１回である。なお、既に認証した２人の人と同じ会議に出席していたときは、カウントする回数を２としても、１としても良い。
【００４８】
ステップＳａ１１の次に、第１撮像装置２の人認証部３０５は、未認証の出席者の顔画像について、ステップＳａ３と同様にして、記憶部３０４を参照して人認証を行う（ステップＳａ１２）。ステップＳａ１２の後、処理は終了する。
【００４９】
なお、ステップＳａ１２にて人認証を行った結果、未認証の出席者があるときは、ステップＳａ２に戻って、リファレンス情報が第１撮像装置２に送信されていない人のうち、第１撮像装置２の利用頻度が高い人、上位２０人について、リファレンス情報取得部３０６が取得するようにしてもよい。これにより、人検出部３０３が検出した人の顔画像全てを認証するまで、処理を続けるようにすることができる。
また、認証ができなかったときは、リファレンス情報記憶部２０２に、出席者またはオペレータが、認証できなかった出席者のリファレンス情報および名前を登録する必要がある。
【００５０】
図７において、リファレンス情報を取得する利用条件を表す情報の優先順位は、高い方から順に、第１撮像装置２の利用頻度、利用場所、通信相手、会議出席者としたが、異なる順であってもよい。また、利用条件を表す情報として、他の情報、例えば利用時間帯、利用した曜日などの条件を加えても良いし、利用頻度、利用場所、通信相手、会議出席者のうち、一部もしくは全部が含まれていなくてもよい。
また、ステップＳａ２におけるリファレンス情報要求コマンドは、利用場所と通信相手ＩＤを含まず、ステップＳａ５におけるリファレンス情報再要求コマンドが、利用場所を含み、ステップＳａ８におけるリファレンス情報再要求コマンドが、通信相手ＩＤを含むようにしてもよい。
【００５１】
このように、第１撮像装置２は、第１撮像装置２の使用条件を表す情報に応じたリファレンス情報を、サーバー装置１から取得するリファレンス情報取得部３０６を含む。また、サーバー装置１は、リファレンス情報記憶部２０２が記憶しているリファレンス情報のうち、第１撮像装置２の使用条件を表す情報に応じたリファンス情報を、第１撮像装置２に提供するリファレンス情報提供部２０３を含む。
これにより、リファレンス情報が多数存在する場合であっても、第１撮像装置２における認証の処理量を低減することができ、第１撮像装置２における演算能力またはメモリ容量が高くなくても短時間で多数の人認証を行うことができる。
【００５２】
また、使用条件を表す情報は、第１撮像装置２の端末ＩＤ、利用場所、通信相手ＩＤ、認証済みの人の名前のうち、少なくとも一つを含む。
これにより、第１撮像装置２の端末ＩＤ、利用場所、通信相手ＩＤ、または、認証済みの人の名前と、認証される人とに相関性があるときには、リファレンス情報が多数存在する場合であっても、第１撮像装置２における認証の処理量を低減することができる。
【００５３】
［第２の実施形態］
以下、図面を参照して、本発明の第２の実施形態について説明する。なお、以下の各図において、第１の実施形態における各部と同一の部分については同一の符号を付して説明を省略する。本実施形態におけるテレビ会議システム、および第１撮像装置２、第２撮像装置４は、第１の実施形態と同じである。
【００５４】
図８は、本実施形態におけるサーバー装置１の構成を示す概略ブロック図である。本実施形態におけるサーバー装置１は、図２のサーバー装置１とは、リファレンス情報提供部２０３に代えてリファレンス情報提供部２０３ａを有する点と、撮像装置情報管理部２０５および撮像装置情報記憶部２０６を有する点とが異なる。リファレンス情報提供部２０３は、リファレンス情報要求コマンドまたはリファレンス情報再要求コマンドを受信したときに、いずれの使用条件を表す情報を参照して、送信するリファレンス情報を決定するかを、撮像装置情報記憶部２０６を参照して決定する。
【００５５】
撮像装置情報管理部２０５は、撮像装置情報記憶部２０６への撮像装置情報の登録と、撮像装置情報記憶部２０６が記憶する撮像装置情報の更新とを行う。撮像装置情報記憶部２０６は、撮像装置毎に、使用条件を表す情報各々と、認証ヒット率とを対応付けている撮像装置情報を記憶している。認証ヒット率は、その使用条件を表す情報を参照して抽出したリファレンス情報で人が判定される可能性の高さを表す。
【００５６】
図９は、撮像装置情報記憶部２０６に保存されるデータの内容例である。撮像装置情報記憶部２０６で管理される項目としては、撮像装置毎の利用場所ヒット率、利用端末ヒット率、通信相手ヒット率がある。利用場所ヒット率、利用端末ヒット率、および通信相手ヒット率の各々は、前述した認証ヒット率の一例である。例えば、図９では、撮像装置情報記憶部２０６は、撮像装置の端末ＩＤ「Ａ」と、利用場所ヒット率「０．９５」と、利用端末ヒット率「０．９」と、通信相手ヒット率「０．８５」とを対応付けて記憶している。同様に、撮像装置情報記憶部２０６は、撮像装置の端末ＩＤ「Ｂ」と、利用場所ヒット率「０．８」と、利用端末ヒット率「０．９５」と、通信相手ヒット率「０．９」とを対応付けて記憶している。これらの認証ヒット率は、撮像装置情報管理部２０５により、以下のようにして算出される。
【００５７】
テレビ会議終了後、終了した会議の出席状況を含めて、利用端末（端末ＩＤ）、利用場所、通信相手毎に上位例えば２０人の人をピックアップする。その２０人の中に終了した会議の参加者が何割入ったか示した出席率を利用端末、利用場所、通信相手毎に算出する。そして算出した出席率の例えば直近１０回の平均値で取ったものを認証ヒット率とする。
【００５８】
認証ヒット率の算出方法を具体的に説明する。図１０は、ある撮像装置における、直近の１１回の利用状況を示す表である。この利用状況は、リファレンス情報記憶部２０２が記憶する利用日時と、端末ＩＤと、テレビ会議出席者とから得られる。前回会議の出席者は、出席者Ｓ、Ｔ、Ｕであり、この時点における会議出席者の出席状況は１位が出席者Ｔ、２位が出席者Ｕ、３位が出席者Ｖ、２０位が出席者Ｓ、２１位が出席者Ｗであった。したがって前回会議は、出席者３人が上位２０人に入っているので、この回の出席率は１．０となる。
【００５９】
前々回会議の出席者は、出席者Ｔ、Ｗであり、この時点における会議出席者の出席状況は１位が出席者Ｔ、２位が出席者Ｕ、３位が出席者Ｖ、２０位が出席者Ｓ、２１位が出席者Ｗであった。したがって前々回会議は、出席者２人のうちが上位２０人に１人しか入っていないので、この回の出席率は０．５となる。
【００６０】
また１０回前の会議の出席者は、出席者Ｔ、Ｖ、Ｓであり、この時点における会議出席者の出席状況は１位が出席者Ｔ、２位が出席者Ｕ、３位が出席者Ｖ、２０位が出席者Ｗ、２１位が出席者Ｓであった。したがって１０回前の会議は、出席者３人のうちが上位２０人に２人しか入っていないので、この回の出席率は０．６７となる。
【００６１】
また１１回前の会議の出席者は、出席者Ｔ、Ｕであり、この時点における会議出席者の出席状況は１位が出席者Ｔ、２位が出席者Ｕ、３位が出席者Ｖ、２０位が出席者Ｗ、２１位が出席者Ｓであった。したがって１１回前の会議は、出席者２人のうちが上位２０人に２人とも入っているので、この回の出席率は１．０となる。
【００６２】
ここで、認証ヒット率は算出した出席率の例えば直近１０回の平均値とした時、今回の利用端末ヒット率は前回から１０回前までの出席率の平均値になるので、（１．０＋０．５＋…＋０．６７）／１０となり、前回の利用端末ヒット率は前々回から１１回前までの出席率の平均値になるので、（０．５＋…＋０．６７＋１．０）／１０となる。
【００６３】
したがって認証ヒット率が１０割（１．０）であれば、平均値の高い順に２０人のリファレンス情報を取れば、ほぼ間違いなく人認証ができ、また５割であれば、出席者の半分がおそらく認証できる。したがって認証ヒット率が高ければ高くなる程、人認証率が高くなるという事が言える。利用場所ヒット率が高いという事は、会議出席者と会議利用場所の相関性が高いことを示している。また、利用端末ヒット率が高いという事は、会議出席者と利用端末（端末ＩＤ）の相関性が高いことを示している。また、通信相手ヒット率が高いという事は、会議出席者と通信相手との相関性が高いことを示している。したがって、相関性の高い項目のリファレンス情報を優先して人認証する事により、全員の人認証に要する時間が確率的に短くなる。
【００６４】
図１１は、本実施形態におけるテレビ会議システムの動作を説明するフロー図である。まず、第１撮像装置２の撮像装置制御部３０１は、通信相手（例えば、第２撮像装置４）の指定を取得し、その通信相手との通信を開始する（ステップＳｂ１）。その後、第１撮像装置２のリファレンス情報取得部３０６は、外部ＩＦ部３０７、ネットワーク７を介して、サーバー装置１のリファレンス情報提供部２０３ａにアクセスする。このアクセスにより、第１撮像装置２の端末ＩＤと、通信相手を識別する通信相手ＩＤと、第１撮像装置２が位置する場所を表す利用場所情報とを含むリファレンス情報要求コマンドが、リファレンス情報取得部３０６からサーバー装置１に送信される。
【００６５】
サーバー装置１のリファレンス情報提供部２０３ａは、リファレンス情報要求コマンドを受信すると、撮像装置情報記憶部２０６にアクセスし、リファレンス情報要求コマンドの送信元である第１撮像装置２における認証ヒット率の一番高い項目（例えば、利用場所ヒット率）を取得する（ステップＳｂ２）。
次に、リファレンス情報提供部２０３ａは、ステップＳｂ２にて取得した項目に関する利用頻度が多い人、上位から所定の人数のリファレンス情報と名前とを、リファレンス情報再要求コマンドの送信元、すなわち第１撮像装置２に送信する。
【００６６】
上述の所定の人数が２０人である場合を説明する。例えば、ステップＳｂ２にて取得した項目が利用場所ヒット率であるときは、リファレンス情報提供部２０３ａは、リファレンス情報記憶部２０２内に登録されている人毎に、リファレンス情報要求コマンドに含まれていた利用場所と同じ利用場所での利用頻度を算出する。そして、リファレンス情報提供部２０３ａは、算出した利用頻度が上位２０人のリファレンス情報及び名前を第１撮像装置２に送信する。第１撮像装置２のリファレンス情報取得部３０６は、リファレンス情報提供部２０３ａが送信したリファレンス情報及び名前を受信し、記憶部３０４に保存する（ステップＳｂ３）。
【００６７】
次に、第１撮像装置２の人認証部３０５は、図７のステップＳａ３と同様にして、撮像部３０２が撮像した画像から人検出部３０３が検出した人の顔画像について、記憶部３０４を参照して人認証を行う（ステップＳｂ４）。次に、人認証部３０５は、地点Ａでの出席者、すなわち人検出部３０３で検出した人の中に、どの人であるか判定できなかった人がいるか、すなわち未認証の出席者があるか否かを判定する（ステップＳｂ５）。
【００６８】
未認証の出席者がないと判定したとき、すなわち、取得したリファレンス情報で、地点Ａでの全ての出席者を認証できたときは（Ｓｂ５−Ｎ）、処理は終了する。また、未認証の出席者があると判定したとき、すなわち、どの人であるか判定できなかった出席者があるときは（Ｓｂ５−Ｙ）、リファレンス情報取得部３０６は、外部ＩＦ部３０７、ネットワーク７を介して、リファレンス情報提供部２０３ａにアクセスする。このアクセスにより、１回目のリファレンス情報再要求コマンドが、リファレンス情報取得部３０６からサーバー装置１に送信される。
【００６９】
サーバー装置１のリファレンス情報提供部２０３ａは、リファレンス情報再要求コマンドを受信すると、撮像装置情報記憶部２０６にアクセスし、リファレンス情報再要求コマンドの送信元である第１撮像装置２における認証ヒット率の二番目に高い項目（例えば、利用端末ヒット率）を取得する（ステップＳｂ６）。
次に、リファレンス情報提供部２０３ａは、ステップＳｂ６にて取得した項目に関する利用頻度が多い人、上位から所定の人数のリファレンス情報と名前とを、リファレンス情報再要求コマンドの送信元、すなわち第１撮像装置２に送信する。
【００７０】
上述の所定の人数が２０人である場合を説明する。例えば、ステップＳｂ６にて取得した項目が利用端末ヒット率であるときは、リファレンス情報提供部２０３ａは、リファレンス情報記憶部２０２内に登録されている人毎に、ステップＳｂ２のリファレンス情報要求コマンドに含まれていた端末ＩＤと同じ端末ＩＤであるときの利用頻度を算出する。そして、リファレンス情報提供部２０３ａは、ステップＳｂ３において第１撮像装置２にリファレンス情報を送信済みの人を除いた、算出した利用頻度が上位２０人のリファレンス情報及び名前を第１撮像装置２に送信する。第１撮像装置２のリファレンス情報取得部３０６は、リファレンス情報提供部２０３ａが送信したリファレンス情報及び名前を受信し、記憶部３０４に保存する（ステップＳｂ７）。
【００７１】
次に、第１撮像装置２の人認証部３０５は、図７のステップＳａ３と同様にして、撮像部３０２が撮像した画像から人検出部３０３が検出した人の顔画像について、記憶部３０４を参照して人認証を行う（ステップＳｂ８）。次に、人認証部３０５は、地点Ａでの出席者、すなわち人検出部３０３で検出した人の中に、どの人であるか判定できなかった人がいるか、すなわち未認証の出席者があるか否かを判定する（ステップＳｂ９）。
【００７２】
未認証の出席者がないと判定したとき、すなわち、取得したリファレンス情報で、地点Ａでの全ての出席者を認証できたときは（Ｓｂ９−Ｎ）、処理は終了する。また、未認証の出席者があると判定したとき、すなわち、どの人であるか判定できなかった出席者があるときは（Ｓｂ９−Ｙ）、リファレンス情報取得部３０６は、外部ＩＦ部３０７、ネットワーク７を介して、リファレンス情報提供部２０３ａにアクセスする。このアクセスにより、２回目のリファレンス情報再要求コマンドが、リファレンス情報取得部３０６からサーバー装置１に送信される。
【００７３】
サーバー装置１のリファレンス情報提供部２０３ａは、リファレンス情報再要求コマンドを受信すると、撮像装置情報記憶部２０６にアクセスし、リファレンス情報再要求コマンドの送信元である第１撮像装置２における認証ヒット率の三番目に高い項目（例えば、通信相手ヒット率）を取得する（ステップＳｂ１０）。
次に、リファレンス情報提供部２０３ａは、ステップＳｂ６にて取得した項目に関する利用頻度が多い人、上位から所定の人数のリファレンス情報と名前とを、リファレンス情報再要求コマンドの送信元、すなわち第１撮像装置２に送信する。
【００７４】
上述の所定の人数が２０人である場合を説明する。例えば、ステップＳｂ６にて取得した項目が通信相手ヒット率であるときは、リファレンス情報提供部２０３ａは、リファレンス情報記憶部２０２内に登録されている人毎に、ステップＳｂ２のリファレンス情報要求コマンドに含まれていた通信相手ＩＤと同じ通信相手ＩＤであるときの利用頻度を算出する。そして、リファレンス情報提供部２０３ａは、ステップＳｂ３、Ｓｂ７において第１撮像装置２にリファレンス情報を送信済みの人を除いた、算出した利用頻度が上位２０人のリファレンス情報及び名前を第１撮像装置２に送信する。第１撮像装置２のリファレンス情報取得部３０６は、リファレンス情報提供部２０３ａが送信したリファレンス情報及び名前を受信し、記憶部３０４に保存する（ステップＳｂ１１）。
【００７５】
次に、第１撮像装置２の人認証部３０５は、図７のステップＳａ３と同様にして、撮像部３０２が撮像した画像から人検出部３０３が検出した人の顔画像について、記憶部３０４を参照して人認証を行う（ステップＳｂ１２）。ステップＳｂ１２の後、処理は終了する。
【００７６】
なお、ステップＳｂ１２にて人認証を行った結果、未認証の出席者があるときは、ステップＳｂ２に戻って、リファレンス情報が第１撮像装置２に送信されていない人のうち、認証ヒット率の一番高い項目に関する利用頻度が高い人、上位２０人について、リファレンス情報取得部３０６が取得するようにしてもよい。これにより、人検出部３０３が検出した人の顔画像全てを認証するまで、処理を続けるようにすることができる。
【００７７】
また、ステップＳｂ１２にて人認証を行った結果、未認証の出席者があるときは、図７のステップＳａ１０からＳａ１２の処理を行うようにしてもよい。
また、本実施形態における認証ヒット率は、撮像装置毎の値としたが、利用場所毎、あるいは通信相手毎など、その他の項目毎であってもよい。
【００７８】
なお、撮像装置情報管理部２０５が生成し、撮像装置情報記憶部２０６が記憶する認証ヒット率は、利用場所ヒット率、利用端末ヒット率、通信相手ヒット率に限らず、その他の項目の認証ヒット率であっても良い。その他の項目としては、例えば、利用時間帯、利用した曜日などがある。
また、認証ができなかったときは、リファレンス情報記憶部２０２に、出席者またはオペレータが、認証できなかった出席者のリファレンス情報および名前を登録する必要がある。
【００７９】
なお、本実施形態において、撮像装置情報記憶部２０６は、撮像装置各々について、各認証ヒット率を記憶しているが、利用場所各々について、各認証ヒット率を記憶していてもよいし、通信相手各々について、各認証ヒット率を記憶していてもよい。
【００８０】
本実施形態においても、第１の実施形態と同様に、リファレンス情報が多数存在する場合であっても、第１撮像装置２における認証の処理量を低減することができ、第１撮像装置２における演算能力またはメモリ容量が高くなくても短時間で多数の人認証を行うことができる。
【００８１】
さらに、撮像装置情報記憶部２０６は、使用条件を表す情報の項目各々について、その項目を参照して抽出したリファレンス情報で人が判定される可能性の高さを表す認証ヒット率を記憶する。リファレンス情報提供部２０３ａは、認証ヒット率を参照して、使用条件を表す情報のうち、いずれの項目に応じたリファレンス情報を、第１撮像装置２に提供するかを判定する。
【００８２】
これにより、リファレンス情報提供部２０３ａが提供するリファレンス情報のうち、早い段階に提供されたもので、人が認証される可能性が高くなるので、第１撮像装置２における認証の処理量を低減することができ、第１撮像装置２における演算能力が高くなくても短時間で多数の人認証を行うことができる。
【００８３】
［第３の実施形態］
以下、図面を参照して、本発明の第３の実施形態について説明する。なお、以下の各図において、第１の実施形態および第２の実施形態における各部と同一の部分については同一の符号を付して説明を省略する。
【００８４】
第１および第２の実施形態におけるテレビ会議システムでは、第１撮像装置２は、常にネットワーク７に接続された状態で人認証を行っていた。しかし、第３の実施形態では、第１撮像装置２は、ネットワーク７に、常時は接続されておらず、人認証時にリファレンス情報をサーバー装置１から取得できないことがある。例えば、第１撮像装置２が無線ＬＡＮによりネットワーク７と接続する場合、第１撮像装置２を使用する環境において、無線ＬＡＮのアクセスポイントが周辺にない場合がこれにあたる。たとえば、会議の様子を撮影する撮像システムやデジタルカメラなどである。
【００８５】
図１２は、本実施形態に係る撮像システムの利用シーン例を説明する模式図である。利用者は、本実施形態に係る撮像システムを使用して、会議の様子を撮影する。地点Ａには、第１表示装置３と、第１表示装置３の上部に配置された第１撮像装置２とが位置している。また、第１表示装置３および第１撮像装置２の前には会議をしている出席者Ｓ、Ｔがいる。
【００８６】
地点Ｃには、サーバー装置１が設置され、地点Ｄには、入力装置６が設置されている。なお、サーバー装置１と入力装置６とは、これに寄らずたとえば地点Ａなど、どこに設置されても良い。また、これらの装置はネットワーク７を介して接続されるが、第１撮像装置２とネットワーク７が接続されていない状況においても、第１撮像装置２は動作する。また、撮像システムは、映像の撮像だけでなく、他に音声の録音を行ってもよい。
【００８７】
図１３は、本実施形態に係る撮像システムの構成を示す概略ブロック図である。本実施形態に係る撮像システムは、認証システム１０、第１表示装置３、入力装置６を含む。認証システム１０は、サーバー装置１、第１撮像装置２（端末装置）を含む。サーバー装置１、第１撮像装置２、入力装置６は、ネットワーク７により互いに通信可能に接続されている。サーバー装置１は、図２、図８のいずれの構成であってもよいが、本実施形態では、図８の構成であるとして説明する。第１表示装置３、入力装置６は、第１および第２の実施形態と同様である。第１撮像装置２は、図３とほぼ同様であるが、ネットワーク７と接続されているときに、サーバー装置１からリファレンス情報を取得して記憶している点が、第１および第２の実施形態と異なる。これにより、ネットワーク７と接続されていないときでも、人認証を行うことができる。
【００８８】
図１４は、本実施形態に係る第１撮像装置２の構成を示す概略ブロック図である。本実施形態に係る第１撮像装置２は、図３の第１撮像装置２とは、撮像装置制御部３０１、記憶部３０４、リファレンス情報取得部３０６に代えて、それぞれ、撮像装置制御部３０１ｂ、不揮発性記憶部３０４ｂ、リファレンス情報取得部３０６ｂを有する点と、認証結果記憶部３１０を有する点とが異なる。不揮発性記憶部３０４ｂは、図３の記憶部３０４と同様であるが、フラッシュＲＯＭなどの不揮発性メモリで構成されており、第１撮像装置２の電源が切れても、記憶内容を保持する点が異なる。なお、第１撮像装置２内にはこの不揮発性メモリの他にＤＲＡＭなどの揮発性メモリがあっても良い。
【００８９】
撮像装置制御部３０１ｂは、第１撮像装置２がネットワーク７と接続され、サーバー装置１と通信可能になると、リファレンス情報取得部３０６ｂに対して、動作を指示する。リファレンス情報取得部３０６ｂは、撮像装置制御部３０１ｂから動作を指示されると、後述する認証結果ファイルの送信と、リファレンス情報の取得とを行う。リファレンス情報取得部３０６ｂによるリファレンス情報の取得は、図３のリファレンス情報取得部３０６と同様に、リファレンス情報要求コマンドをサーバー装置１に送信することで行う。
認証結果記憶部３１０は、第１撮像装置２による認証の結果を記憶する。なお、認証結果記憶部３１０は、前回の認証結果ファイルの送信以後に行われた認証の結果を全て記憶していることが望ましい。
【００９０】
図１５は、認証結果記憶部３１０に保存されるデータ（認証結果ファイル）の内容例である。図１５に示すように、認証結果ファイルで管理される項目としては、人の名前、顔画像、利用日時、利用場所、端末ＩＤがある。なお、認証結果記憶部３１０は、人認証部３０５が、認証できたときは人の名前を記憶し、認証できなかったときは、顔画像を記憶する。また、顔画像に代えて、特徴点データを記憶してもよい。
【００９１】
図１５では、認証できたときの認証結果の例として、認証結果記憶部３１０は、名前「Ｓ」と、利用日時「２０１４年２月２０日（木）９：００」、「２０１４年２月２１日（金）１５：００」、「２０１４年２月２２日（土）１３：００」と、利用場所「Ｘ」、「Ｙ」、「Ｚ」と、端末ＩＤ「Ａ」、「Ａ」、「Ａ」とを記憶している。また、認証できなかったときの認証結果の例として、認証結果記憶部３１０は、顔画像と、利用日時「２０１４年２月２０日（木）９：００」、「２０１４年２月２１日（金）１５：００」と、利用場所「Ｘ」、「Ｙ」と、端末ＩＤ「Ａ」、「Ａ」とを記憶している。
認証結果ファイルはネットワーク７に繋がっていない状態における、認証結果を纏めたファイルである。この認証結果ファイルを事前に纏めておくことにより、短いネットワーク接続時間でも、リファレンス情報記憶部２０２のデータの更新が可能になる。
【００９２】
図１６は、本実施形態における第１撮像装置２の動作を説明するフロー図である。第１撮像装置２の電源が投入されると、撮像装置制御部３０１ｂは、まず、割り込み信号の検出処理を行う（Ｓｃ１）。割り込み信号とは、第１撮像装置２内のモジュールから撮像装置制御部３０１ｂへ送られる信号であり、割り込み信号をトリガに、撮像装置制御部３０１ｂは処理を行う。撮像装置制御部３０１ｂは、ユーザー操作により撮影が指示されると送られる撮影開始割り込み信号、ネットワーク接続したときに送られるネットワーク接続割り込み信号、ユーザー操作により電源ＯＦＦが指示されたときに送られる電源ＯＦＦ割り込み信号を使用する。
【００９３】
撮像装置制御部３０１ｂは、検出した割り込み信号が、撮影開始割り込み信号であるか否かを判定する（ステップＳｃ２）。撮影開始割り込み信号であると判定したときは（Ｓｃ２−Ｙ）、撮像装置制御部３０１ｂは、撮像部３０２に撮影開始を指示する（ステップＳｃ３）。ここで撮影とは、動画でも、静止画でもどちらでも良い。次に、人検出部３０３が、撮像部３０２が撮影した画像から人の顔画像を検出する。そして、人認証部３０５が、人検出部３０３が検出し顔画像と、不揮発性記憶部３０４ｂに保存されているリファレンス情報とを用いて、人認証を行う（ステップＳｃ４）。
【００９４】
人認証の結果、一致するリファレンス情報が不揮発性記憶部３０４ｂに保存されている人であるときは、人認証部３０５は、一致するリファレンス情報に対応付けられている名前を読み出して、その名前と撮影日時（利用日時）と利用場所と利用端末（端末ＩＤ）とを、認証結果記憶部３１０の認証結果ファイルに追加（更新）する。一致するリファレンス情報が不揮発性記憶部３０４ｂに保存されていないときは、名前が分からないので、人認証部３０５は、顔画像と撮影日時（利用日時）と利用場所と利用端末（端末ＩＤ）とを、認証結果記憶部３１０の認証結果ファイルに追加（更新）する。（ステップＳｃ５）。
【００９５】
このように認証結果ファイルを更新した後、処理は、割り込み検出のステップＳｃ１に戻る。したがって、ネットワーク７に接続されていない状態で連続して撮影しているときは、第１撮像装置２は、ステップＳｃ１からステップＳｃ５を繰り返し、認証結果を認証結果ファイルに蓄積していく。
【００９６】
一方、ステップＳｃ２において、割り込み信号が撮影開始割り込み信号でないと判定したときは、撮像装置制御部３０１ｂは、割り込み信号がネットワーク接続割り込み信号であるか否かを判定する（ステップＳｃ６）。ネットワーク接続割り込み信号であると判定したときは（Ｓｃ６−Ｙ）、リファレンス情報取得部３０６ｂは、認証結果ファイルとリファレンス情報要求コマンドとをサーバー装置１に送信する（ステップＳｃ７）。
【００９７】
サーバー装置１では、認証結果ファイルを受け取ったリファレンス情報管理部２０４ａが、認証結果ファイルの情報を元にリファレンス情報記憶部２０２の内容を更新する。また、リファレンス情報要求コマンドを受け取ったリファレンス情報提供部２０３ａが、撮像装置情報記憶部２０６にアクセスし、第１撮像装置２における認証ヒット率の一番高い項目を取得する。リファレンス情報提供部２０３ａは、取得した項目に関する利用頻度が多い人、上位から所定の人数のリファレンス情報と名前とを、リファレンス情報要求コマンドの送信元、すなわち第１撮像装置２に送信する。例えば、第１撮像装置２における認証ヒット率が一番高い項目が利用場所ヒット率で、２０人分のリファレンス情報を送る場合、リファレンス情報提供部２０３ａはリファレンス情報記憶部２０２内に登録されている人毎に、リファレンス情報要求コマンドに含まれる利用場所と同じ利用場所での利用頻度を算出し、上位２０名のリファレンス情報及び名前を第１撮像装置２に送信する。リファレンス情報取得部３０６ｂは、リファレンス情報要求コマンドの応答として、これらのリファレンス情報及び名前を受信し、不揮発性記憶部３０４ｂが記憶するリファレンス情報と名前とを更新する（ステップＳｃ８）。不揮発性記憶部３０４ｂの更新後、処理は、割り込み検出のステップＳｃ１に戻る。
【００９８】
したがってネットワーク７に接続される毎に、第１撮像装置２は、ステップＳｃ６からステップＳｃ８を繰り返し、リファレンス情報記憶部２０２の情報が更新されるとともに、第１撮像装置２において、出席者と最も相関性の高い使用条件の項目すなわち認証ヒット率の高いリファレンス情報が不揮発性記憶部３０４ｂに保存される。
また、ステップＳｃ６においてネットワーク接続割り込み信号でないと判定したときは、撮像装置制御部３０１ｂは、割り込み信号が電源ＯＦＦ割り込み信号であるか否かを判定する（ステップＳｃ９）。
電源ＯＦＦ割り込み信号でないと判定したときは（Ｓｃ９−Ｎ）、割り込み検出のステップＳｃ１に戻り、電源ＯＦＦ割り込みのときは（Ｓｃ９−Ｙ）、処理は終了する。
【００９９】
本実施形態においても、第１の実施形態と同様に、リファレンス情報が多数存在する場合であっても、第１撮像装置２における認証の処理量を低減することができ、第１撮像装置２における演算能力またはメモリ容量が高くなくても短時間で多数の人認証を行うことができる。
【０１００】
さらに、リファレンス情報管理部２０４ａは、第１撮像装置２がネットワーク７に接続する毎に、リファレンス情報記憶部２０２の情報を更新し、リファレンス情報記憶部２０２を最新のデータで保つ。また、リファレンス情報取得部３０６ｂは、第１撮像装置２がネットワーク７に接続する毎に、更新されたリファレンス情報記憶部２０２からリファレンス情報を取得する。
これにより、第１撮像装置２のネットワーク７への接続が常時でなくても、短時間で多数の人認証を行うことができる。
【０１０１】
上述の各実施形態において、リファレンス情報は、顔画像または顔画像の特徴点データであり、認証は、顔画像の特徴点による認証（顔認証）であるとして説明したが、これらに限らない。認証が、例えば、指紋認証、声紋認証、虹彩認証、静脈認証などの認証であり、リファレンス情報がこれらの認証で用いられる画像や特徴量などのデータであってもよい。また、第1撮像装置２は、例えば、認証に声紋認証を用いる場合は、マイクロフォンなどの音声取得部を有し、指紋認証を用いる場合は、指紋を読み取る指紋読み取り部を有するなど、認証対象の認証情報を取得する対象情報取得部を有する。
また、上述の各実施形態では、ステップＳａ１２あるいはＳｂ１２の処理を行った後、処理を終了しているが、これに限らない。例えば、人認証部３０５は、ステップＳａ１２あるいはＳｂ１２の処理を行った後、出席者の中に未認証の人がいるときは、その人の顔画像あるいは特徴点データをリファレンス情報とし、仮の名前と、その時の使用条件とともに、ネットワーク７を介してリファレンス情報記憶部２０２に記憶させるようにしてもよい。
【０１０２】
また、図１における第１撮像装置２、サーバー装置１の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより第１撮像装置２、サーバー装置１を実現してもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
【０１０３】
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバーやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
【０１０４】
また、上述した図１における第１撮像装置２、サーバー装置２の各機能ブロックは個別にチップ化してもよいし、一部、または全部を集積してチップ化してもよい。また、集積回路化の手法はＬＳＩに限らず、専用回路、または汎用プロセッサで実現しても良い。ハイブリッド、モノリシックのいずれでも良い。一部は、ハードウェアにより、一部はソフトウェアにより機能を実現させても良い。
また、半導体技術の進歩により、ＬＳＩに代替する集積回路化等の技術が出現した場合、当該技術による集積回路を用いることも可能である。
【０１０５】
以上、この発明の実施形態を図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等も含まれる。
【０１０６】
（１）本発明の一態様は、端末装置と、前記端末装置と通信接続されるサーバー装置とを備える認証システムであって、前記端末装置は、認証対象の認証情報を取得する対象情報取得部と、前記対象情報取得部が取得した認証情報を認証する認証部と、前記認証部が認証を行う際に用いるリファレンス情報であって、前記端末装置の使用条件を表す情報に応じたリファレンス情報を、前記サーバー装置から取得するリファレンス情報取得部とを備え、前記サーバー装置は、人物各々に関するリファレンス情報を記憶するリファレンス情報記憶部と、前記リファレンス情報記憶部が記憶しているリファレンス情報のうち、前記端末装置の使用条件を表す情報に応じたリファンス情報を、前記端末装置に提供するリファレンス情報提供部とを備えることを特徴とする。
【０１０７】
（２）また、本発明の他の態様は、（１）に記載の認証システムであって、前記端末装置の使用条件を表す情報は、前記端末装置を識別する識別情報、前記端末装置が位置する場所を示す利用場所情報、前記端末装置の通信相手を示す通信相手情報、認証済みの人物を示す情報のうち、少なくとも一つを含むことを特徴とする。
【０１０８】
（３）また、本発明の他の態様は、（１）に記載の認証システムであって、前記サーバー装置は、前記使用条件を表す情報の項目毎に、その項目を参照して抽出したリファレンス情報で人が判定される可能性の高さを表す情報を記憶する情報記憶部を備え、前記リファレンス情報提供部は、前記情報記憶部を参照して、前記使用条件を表す情報の項目を選択し、選択した前記項目に応じたリファンス情報を、前記端末装置に提供することを特徴とする。
【０１０９】
（４）また、本発明の他の態様は、（１）に記載の認証システムであって、前記リファレンス情報取得部は、前記サーバー装置からのリファレンス情報の取得を、前記端末装置が前記サーバー装置と通信接続されると行うことを特徴とする。
【０１１０】
（５）また、本発明の他の態様は、人物各々に関するリファレンス情報を記憶するサーバー装置と通信接続される端末装置であって、認証対象の認証情報を取得する対象情報取得部と、前記対象情報取得部が取得した認証情報を認証する認証部と、前記認証部が認証を行う際に用いるリファレンス情報であって、自装置の使用条件を表す情報に応じたリファレンス情報を、前記サーバー装置から取得するリファレンス情報取得部とを備えることを特徴とする。
【０１１１】
（６）また、本発明の他の態様は、人物の認証を行う端末装置と通信接続されるサーバー装置であって、人物各々に関するリファレンス情報を記憶するリファレンス情報記憶部と、前記リファレンス情報記憶部が記憶しているリファレンス情報のうち、前記端末装置の使用条件を表す情報に応じたリファンス情報を、前記端末装置に提供するリファレンス情報提供部とを備えることを特徴とする。
【０１１２】
（７）また、本発明の他の態様は、人物各々に関するリファレンス情報を記憶するサーバー装置と通信接続される端末装置における認証方法であって、認証対象の認証情報を取得する第１の過程と、前記第１の過程にて取得した認証情報を認証する第２の過程と、前記第２の過程にて認証を行う際に用いるリファレンス情報であって、前記端末装置の使用条件を表す情報に応じたリファレンス情報を、前記サーバー装置から取得する第３の過程とを有することを特徴とする。
【０１１３】
（８）また、本発明の他の態様は、人物の認証を行う端末装置と通信接続され、人物各々に関するリファレンス情報を記憶するサーバー装置における情報提供方法であって、前記サーバー装置が記憶しているリファレンス情報のうち、前記端末装置の使用条件を表す情報に応じたリファンス情報を、前記端末装置に提供する過程を有することを特徴とする。
【０１１４】
（９）また、本発明の他の態様は、人物各々に関するリファレンス情報を記憶するサーバー装置と通信接続される端末装置のコンピュータを、認証対象の認証情報を取得する対象情報取得部、前記対象情報取得部が取得した認証情報を認証する認証部、前記認証部が認証を行う際に用いるリファレンス情報であって、自装置の使用条件を表す情報に応じたリファレンス情報を、前記サーバー装置から取得するリファレンス情報取得部として機能させるためのプログラムである。
【０１１５】
（１０）また、本発明の他の態様は、人物の認証を行う端末装置と通信接続されるコンピュータを、人物各々に関するリファレンス情報を記憶するリファレンス情報記憶部、前記リファレンス情報記憶部が記憶しているリファレンス情報のうち、前記端末装置の使用条件を表す情報に応じたリファンス情報を、前記端末装置に提供するリファレンス情報提供部として機能させるためのプログラムである。
【符号の説明】
【０１１６】
１…サーバー装置
２…第１撮像装置
３…第１表示装置
４…第２撮像装置
５…第２表示装置
６…入力装置
７…ネットワーク
１０…認証システム
２０１…サーバー制御部
２０２…リファレンス情報記憶部
２０３、２０３ａ…リファレンス情報提供部
２０４、２０４ａ…リファレンス情報管理部
２０５…撮像装置情報管理部
２０６…撮像装置情報記憶部
３０１、３０１ｂ…撮像装置制御部
３０２…撮像部
３０３…人検出部
３０４…記憶部
３０４ｂ…不揮発性記憶部
３０５…人認証部
３０６、３０６ｂ…リファレンス情報取得部
３０７…外部ＩＦ部
３０８…映像出力部
３０９…操作部
３１０…認証結果記憶部
【図１】
2016019144.tif 000003
【図２】
2016019144.tif 000004
【図３】
2016019144.tif 000005
【図４】
2016019144.tif 000006
【図５】
2016019144.tif 000007
【図６】
2016019144.tif 000008
【図７】
2016019144.tif 000009
【図８】
2016019144.tif 000010
【図９】
2016019144.tif 000011
【図１０】
2016019144.tif 000012
【図１１】
2016019144.tif 000013
【図１２】
2016019144.tif 000014
【図１３】
2016019144.tif 000015
【図１４】
2016019144.tif 000016
【図１５】
2016019144.tif 000017
【図１６】
2016019144.tif 000018