(57)【要約】【課題】  大画面表示装置を利用した会議アプリケーションにおいて、大画面表示装置に付属した入力装置からの入力を行った人物を特定し、入力装置からの入力と関連付け、アプリケーションで操作対象とユーザを関連付けて管理する。【解決手段】  すくなくともパン・チルト・ズーム制御が可能な回転カメラを含む複数のカメラが連携して移動体の映像を捕捉する監視システムを利用する会議システムであって、会議参加者の会議室への入退室を認識し、前記認識された会議参加者をカメラで追跡する。前記会議参加者が入力装置を付属した大画面表示装置の前で操作するときに、該会議参加者のユーザIDを大画面表示装置に表示しているアプリケーションプログラムに通知し、該ユーザIDと前記アプリケーションの操作を関連付ける。【選択図】  図１
2007074532.tif 000002
【特許請求の範囲】
【請求項１】
すくなくともパン・チルト・ズーム制御が可能な回転カメラを含む複数のカメラが連携して移動体の映像を捕捉する監視システムを利用する会議システムであって、
会議参加者の会議室への入退室を認識する手段と、
前記認識された会議参加者をカメラで追跡する手段と、
前記会議参加者が入力装置を付属した大画面表示装置の前で操作するときに、該会議参加者のユーザIDを大画面表示装置に表示しているアプリケーションプログラムに通知する手段と
該ユーザIDと前記アプリケーションの操作を関連付ける手段と
を備えることを特徴とする会議システム。
【請求項２】
すくなくともパン・チルト・ズーム制御が可能な回転カメラを含む複数のカメラが連携して移動体の映像を捕捉する監視システムを利用する会議の方法であって、
会議参加者の会議室への入退室を認識する工程と、
前記認識された会議参加者をカメラで追跡する工程と、
前記会議参加者が入力装置を付属した大画面表示装置の前で操作するときに、該会議参加者のユーザIDを大画面表示装置に表示しているアプリケーションプログラムに通知する工程と
該ユーザIDと前記アプリケーションの操作を関連付ける工程と
を備えることを特徴とする会議方法。
【請求項３】
すくなくともパン・チルト・ズーム制御が可能な回転カメラを含む複数のカメラが連携して移動体の映像を捕捉する監視システムを利用する会議プログラムであって、
会議参加者の会議室への入退室を認識する認識モジュールと、
前記認識された会議参加者をカメラで追跡する追跡モジュールと、
前記会議参加者が入力装置を付属した大画面表示装置の前で操作するときに、該会議参加者のユーザIDを大画面表示装置に表示しているアプリケーションプログラムに通知するユーザID通知モジュールと
該ユーザIDと前記アプリケーションの操作を関連付ける操作管理モジュールと
を備えることを特徴とする会議プログラム。
【請求項４】
請求項3に記載のプログラムをコンピュータ読み取り可能に格納したことを特徴とする記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の監視カメラを備える監視システムと、このシステムで使用する監視カメラに関し、特に、会議室内において監視カメラで、移動する人物を追跡するシステムに関する。さらに特定された人物と、該人物が行った操作とを関連付けて管理する会議システムを実現するものである
【背景技術】
【０００２】
従来から、建物などの入退出を監視する、監視カメラシステムが開発されている。
【０００３】
特許文献1には、監視カメラの映像から顔の特徴を抽出し、データベースに登録されている顔マスクと一致するかを比較する監視システムが記載されている。このシステムでは、監視カメラの画像信号を解析する制御手段が、監視カメラに映る人物の顔の位置を確認し、顔が画面の中央に位置するように、パン、チルト、ズームを制御し、顔の追跡を行う。そして、顔の停止画像から目、鼻、口、眉毛の輪郭線を抽出し、この輪郭線を基準として顔の特徴点を抽出し、データベースに登録されている顔マスクと比較する。
【０００４】
また、特許文献2には、認識対象者の画像から顔領域を抽出し、該顔領域に係る情報に基づいて、認識対象者の顔の個人差を示す特徴量を計算する顔画像認識装置が記載されている。このシステムでは、顔部位から抽出された特徴量と、登録情報保持部に予め登録された特徴量との類似度を計算して、認識対象者を認識し、この認識結果に基づいて、所定の操作を許可するか否かを制御する。
【０００５】
さらに、特許文献3には、複数の監視カメラ装置が連携して移動体の映像を補足するシステムが買い維持されている。監視カメラ装置の各々が、撮影した映像より移動体の特徴情報を抽出する画像認識機能を備え、撮影した映像の中に移動体の特徴情報を認識したカメラ装置がその映像をネットワークを介して接続されたモニター装置に伝送する。前記移動体の特徴情報が認識されなくなった場合は他の監視カメラ装置に追跡対象として前記移動体の特徴情報を認識した他の監視カメラ装置は、その映像をネットワークを介して接続されたモニター装置に伝送する。また、映像を撮影してデジタル映像データとして出力し、該デジタル映像データを、画像認識技術を用いて分析し、移動体の特徴を示す特徴情報を抽出する手段も開示している。
【０００６】
ところで、会議室等で使用される電子黒板やデジタルホワイトボードでは、描画ペンのIDにより、描画オブジェクトを描画した人を認識するシステムが一般的に開示されている。予め描画ペンのIDをユーザIDと関連付けることで、電子黒板やデジタルホワイトボードのデータ内の各描画オブジェクトを描画したユーザを管理している。
【特許文献１】特開２０００−１６３６００号公報
【特許文献２】特開２００１−２５６４９６号公報
【特許文献３】特開２００３−３２４７２０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、描画ペンIDに関連付けられた人が描画するとは限らず、描画ペンIDに関連付けられていない人が描画する場合に、描画オブジェクトのユーザ管理に不整合が生じることがあった。
【０００８】
特許文献1、および特許文献2で開示された方法では、複数のカメラ装置が連携して会議参加者の映像を補足する監視カメラシステムにおいて、各々のカメラ装置は、撮影した映像より会議参加者の顔の特徴を抽出し、データベースに登録されている顔データと一致するかを比較し、一致する場合は会議参加者のIDと関連付ける。
【０００９】
また、特許文献3で開示された方法では、カメラ装置が会議参加者の特徴情報が認識されなくなった場合は他の監視カメラ装置に追跡対象として前記会議参加者の特徴情報を認識した他の監視カメラ装置に監視を引き継ぐ。
【００１０】
しかしながら、大画面を利用した会議室において、監視カメラを使用してユーザ認識を行い、さらにユーザを追跡して画面操作と関連付けるシステムはなかった。
【００１１】
本発明の目的は、大画面表示装置を利用した会議アプリケーションにおいて、大画面表示装置に付属した入力装置からの入力があった場合に、監視カメラシステムから大画面表示装置の前に立っている人物のIDを取得することである。さらに、取得した前記IDと前記大画面表示装置に付属した入力装置からの入力を関連付け、該アプリケーションでユーザIDを管理することである。
【課題を解決するための手段】
【００１２】
本発明は、上記目的を達成するため、すくなくともパン・チルト・ズーム制御が可能な回転カメラを含む複数のカメラが連携して移動体の映像を捕捉する監視システムを利用する会議システムであって、会議参加者の会議室への入退室を認識する手段と、前記認識された会議参加者をカメラで追跡する手段と、前記会議参加者が入力装置を付属した大画面表示装置の前で操作するときに、該会議参加者のユーザIDを大画面表示装置に表示しているアプリケーションプログラムに通知する手段と、該ユーザIDと前記アプリケーションの操作を関連付ける手段とを備えることを特徴とする会議システムを提供する。
【００１３】
本発明は、上記目的を達成するため、すくなくともパン・チルト・ズーム制御が可能な回転カメラを含む複数のカメラが連携して移動体の映像を捕捉する監視システムを利用する会議の方法であって、会議参加者の会議室への入退室を認識する工程と、
前記認識された会議参加者をカメラで追跡する工程と、前記会議参加者が入力装置を付属した大画面表示装置の前で操作するときに、該会議参加者のユーザIDを大画面表示装置に表示しているアプリケーションプログラムに通知する工程と、該ユーザIDと前記アプリケーションの操作を関連付ける工程とを備えることを特徴とする会議方法を提供する。
【００１４】
本発明は、上記目的を達成するため、すくなくともパン・チルト・ズーム制御が可能な回転カメラを含む複数のカメラが連携して移動体の映像を捕捉する監視システムを利用する会議プログラムであって、会議参加者の会議室への入退室を認識する認識モジュールと、前記認識された会議参加者をカメラで追跡する追跡モジュールと、前記会議参加者が入力装置を付属した大画面表示装置の前で操作するときに、該会議参加者のユーザIDを大画面表示装置に表示しているアプリケーションプログラムに通知するユーザID通知モジュールと、該ユーザIDと前記アプリケーションの操作を関連付ける操作管理モジュールとを備えることを特徴とする会議プログラムを提供する。
【００１５】
本発明は、上記目的を達成するため、上記プログラムをコンピュータ読み取り可能に格納したことを特徴とする記憶媒体を提供する。
【発明の効果】
【００１６】
本発明では、会議参加者が会議室に入室するだけで、カメラ装置が撮影した映像より会議参加者の顔の特徴を抽出し、データベースに登録されている顔データと一致するかを比較し、一致する場合は会議参加者のIDと関連付けることができる。
【００１７】
さらに、カメラ装置が会議参加者の特徴情報が認識されなくなった場合は他の監視カメラ装置に追跡対象として前記会議参加者の特徴情報を認識した他の監視カメラ装置に監視を引き継ぐことができる。
【００１８】
また、大画面表示装置を利用した会議アプリケーションにおいて、大画面表示装置に付属した入力装置からの入力があった場合に、監視カメラシステムから大画面表示装置の前に立っている人物のIDを取得する。取得した前記IDと前記大画面表示装置に付属した入力装置からの入力を関連付け、該アプリケーションでユーザIDを管理することができる。
【発明を実施するための最良の形態】
【００１９】
以下、図面を参照しながら発明を実施するための最良の形態について詳細に説明する。
【実施例１】
【００２０】
本発明の第1の実施例を図1、図3および図4を用いて説明する。
【００２１】
図1は本発明で提供される会議室および電子会議システムの構成を模式的に示す図である。大画面表示装置1に会議アプリケーションの画面を表示し、光学式デジタイザ2により座標入力を行う。従来のホワイトボード4を使用しても良い。
【００２２】
会議参加者は会議室の出入り口3から入室する。監視カメラ10〜40が会議室の四隅に配置されており、奥の監視カメラ30および40が会議室に入室した人物の認証を行う。監視カメラ10〜40は連携して会議参加者のトラッキングを行う。
【００２３】
図3は本発明の実施の形態に係る会議システムの会議参加者の認証方法のフローチャートである。本発明の会議参加者の認証方法について図3のフローチャートに従って説明する。ステップＳ１0において会議室に入ってきた人物を従来から知られている手段である顔貌認識で特定する。次にステップS20で会議参加者として登録された人物であるかを判定し、登録済みの会議参加者であると判定された場合は、ステップS30においてこの人物と会議参加者IDを関連付ける。ステップS20で会議参加者として登録されていない場合は、仮のIDをこの人物に関連付ける。
人物とIDを関連付けた後、ステップS50において、会議中は監視カメラの連携によるトラッキングで人物の位置を把握し、どのIDの人物がどこにいるかを把握する。
【００２４】
図4は本発明の実施の形態に係る会議システムの操作と会議参加者とを関連付ける方法のフローチャートである。本発明の会議システムの操作と会議参加者とを関連付ける方法について図4のフローチャートに従って説明する。ステップS110において本発明の会議システムは、大画面表示装置上の光学式デジタイザからの入力を受付ける。ステップS120において光学式デジタイザからの入力があったかを判定する。入力があった場合、ステップS130において本発明の会議室に設置された監視カメラによってトラッキングされている会議参加者のうち大画面表示装置の前にいる人物のIDを監視カメラ装置に問い合わせる。監視カメラ装置からIDを受け取るとステップS140において大画面上の操作を記録する際に、受け取ったIDを関連付けて記録する。ステップS120において入力がない場合は、ステップS120において、継続して入力の判定を行う。
【００２５】
このように大画面を利用した会議室において、監視カメラを使用してユーザ認識を行い、さらにユーザを追跡して画面操作と関連付けることができる。
【実施例２】
【００２６】
本発明の第1の実施例を図2、図3および図4を用いて説明する。
【００２７】
図2は本発明で提供される会議室および電子会議システムの構成を模式的に示す図である。図1との違いは監視カメラ11〜14、および監視カメラ21〜24が会議室出入り口の左右に設置されている点である。奥の監視カメラ30および40が会議室に入室した人物の認証を行う。監視カメラ10〜40は連携して会議参加者のトラッキングを行う。カメラが多くなることで常に人物のトラッキングを行うことが可能となる。
【００２８】
会議参加者の認証方法は図3に記載されたとおりで実施例１と同様である。
【００２９】
会議システムの操作と会議参加者とを関連付ける方法は図4に記載されたとおりで実施例１と同様である。
【００３０】
このように大画面を利用した会議室において、監視カメラを使用してユーザ認識を行い、さらに多数の追跡用監視カメラにより多人数のユーザを追跡して画面操作と関連付けることができる。
【００３１】
上記の第１および第２の実施形態では大画面表示装置上の座標入力装置が光学式デジタイザであったが、方式にこだわるものではない。
【００３２】
尚、本発明の目的は、実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出して実行することによっても達成される。
【００３３】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコード及び該プログラムコードを記憶した記憶媒体は本発明を構成することになる。
【００３４】
また、プログラムコードを供給するための記憶媒体としては、例えば、フロッピー（登録商標）ディスク、ハードディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−Ｒ、ＤＶＤ＋Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、ＨＤ−ＤＶＤ、Ｂｌｕ−ｒａｙ  Ｄｉｓｃ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。または、プログラムコードを、ネットワークを介してダウンロードしてもよい。
【００３５】
また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。
【００３６】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。
【図面の簡単な説明】
【００３７】
【図１】本発明の第１の実施の形態に係る電子会議システムの構成を模式的に示す図である。
【図２】本発明の第2の実施の形態に係る電子会議システムの構成を模式的に示す図である。
【図３】本発明の実施の形態に係る会議システムの会議参加者の認証方法のフローチャートである。
【図４】本発明の実施の形態に係る会議システムの操作と会議参加者とを関連付ける方法のフローチャートである。
【符号の説明】
【００３８】
1  入力装置を付属した大画面表示装置
2  光学式デジタイザ
3  会議室の出入り口
4  ホワイトボード
10  入り口右手前の監視カメラ
11  入り口右手前の監視カメラ
12  入り口右手前の監視カメラ
13  入り口右手前の監視カメラ
14  入り口右手前の監視カメラ
20  入り口左手前の監視カメラ
21  入り口左手前の監視カメラ
22  入り口左手前の監視カメラ
23  入り口左手前の監視カメラ
24  入り口左手前の監視カメラ
30  入り口右奥の監視カメラ
40  入り口左奥の監視カメラ
【図１】
2007074532.tif 000003
【図２】
2007074532.tif 000004
【図３】
2007074532.tif 000005
【図４】
2007074532.tif 000006