(57)【要約】      （修正有）【課題】同席した会議の参加者の個人情報を容易に検索することができる情報検索システムを提供する。【解決手段】システムユーザが出席した会議で取得した出席者の個人情報を検索する情報検索システムであって、会議の様子を記録した会議記録情報から、個人情報を検索する手掛かりとするエピソディック情報を抽出する情報抽出装置５０と、情報抽出装置５０により抽出されたエピソディック情報とそれに関連付けられた個人情報とを蓄積する情報データベース７０とを備える。【選択図】図１
2007094544.tif 000002
【特許請求の範囲】
【請求項１】
システムユーザが出席した会議で取得した出席者の個人情報を検索する情報検索システムであって
前記会議の様子を記録した会議記録情報から、前記個人情報を検索する際に手掛かりにする為のエピソディック情報を抽出する情報抽出手段と、
前記情報抽出手段により抽出されたエピソディック情報と前記情報抽出手段により前記エピソディック情報に関連付けられた前記個人情報とを蓄積する情報蓄積手段と
を備えることを特徴とする情報検索システム。
【請求項２】
前記情報抽出手段は、前記出席者の収音音声の解析により、互いに関連付けられた前記会議記録情報である収音音声又は撮像画像から前記エピソディック情報を抽出することを特徴とする請求項１に記載の情報検索システム。
【請求項３】
前記情報抽出手段は、前記システムユーザと前記出席者との対話回数を前記エピソディック情報として抽出することを特徴とする請求項１又は２に記載の情報検索システム。
【請求項４】
前記情報抽出手段は、前記出席者の収音音声から抽出された対話音声を前記エピソディック情報として抽出することを特徴とする請求項２または３のいずれかに記載の情報検索システム。
【請求項５】
前記情報抽出手段は、前記出席者の撮像画像から抽出された対話画像を前記エピソディック情報として抽出することを特徴とする請求項２ないし４のいずれかに記載の情報検索システム。
【請求項６】
前記情報抽出手段は、前記出席者の発言回数を前記エピソディック情報として抽出することを特徴とする請求項１ないし５のいずれかに記載の情報検索システム。
【請求項７】
前記情報抽出手段は、前記出席者の収音音声から抽出された発言音声を前記エピソディック情報として抽出することを特徴とする請求項２ないし６のいずれかに記載の情報検索システム。
【請求項８】
前記情報抽出手段は、前記出席者の撮像画像から抽出された発言画像を前記エピソディック情報として抽出することを特徴とする請求項２ないし７のいずれかに記載の情報検索システム。
【請求項９】
前記情報抽出手段は、前記出席者の位置情報を前記エピソディック情報として抽出することを特徴とする請求項１ないし８のいずれかに記載の情報検索システム。
【請求項１０】
検索条件としての前記情報蓄積手段に蓄積されたエピソディック情報又は個人情報を配列する情報検索手段を更に有することを特徴とする請求項１ないし９のいずれかに記載の情報検索システム。
【請求項１１】
前記検索手段は、検索条件としての前記情報蓄積手段に蓄積されたエピソディック情報又は個人情報を、前記出席者の個人情報に含まれる氏名に基づいて配列することを特徴とする請求項１０に記載の情報検索システム。
【請求項１２】
前記検索手段は、検索条件としての前記情報蓄積手段に蓄積されたエピソディック情報又は個人情報を、前記システムユーザの出席した会議の開催日に基づいて配列する情報検索手段を更に有することを特徴とする請求項１０又は１１に記載の情報検索システム。
【請求項１３】
前記情報蓄積手段に蓄積されたエピソディック情報に対するシステムユーザの忘却度を判断する忘却度判断手段をさらに有し、
前記検索手段は、検索条件としての前記情報蓄積手段に蓄積されたエピソディック情報を、忘却度判断手段が判断した忘却度に基づいて一覧表示する
ことを特徴とする請求項１０ないし１２のいずれかに記載の情報検索システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、個人の言動に関する情報、音声又は画像に基づいて個人情報を容易に検索できる情報検索システムに関する。
【背景技術】
【０００２】
例えば、会議や会合で初対面の人と接した場合においては、名刺等により氏名、所属又は連絡先といった個人情報を交換することが行われる。さらに、出席した会議等に関する情報をメモ書きし、名刺等と関連付けて保管、管理することが行われる。これは、名刺等に記載された個人情報と会議等に関する情報とを相互に補完し、個人情報及び会議等に関する情報の管理、検索を容易にする為である。
しかし、名刺等は紛失及び破損の危険がある為、個人情報を電子的に管理等する必要がある。このような、電子的な個人情報の交換、管理、検索が可能な情報システムとしては、例えば、携帯端末を用いて個人情報を電子的に交換する電子名刺交換技術が知られている。（例えば、特許文献１参照）。
しかし、電子名刺のみからでは、出席した会議等に関する情報を管理等することができず、電子的に個人情報と会議に関する情報とを相互に補完し、個人情報及び会議等に関する情報の管理等を容易にする必要がある。このような蓄積、管理、検索をすることができる情報管理システムとしては、電子名刺と会議等に関する情報とを関連付けて蓄積、管理し、検索結果として電子名刺を表示すると共に、会議に関する情報及び会議の出席者の電子名刺をも表示する技術が知られている。
（例えば、特許文献２参照）。
【特許文献１】特開２００２‐５８０６９
【特許文献２】特開２００２‐９９６７５
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、上記のような情報管理システムでは、会議等に関する情報から個人情報を容易に検索することができる一方で、システムユーザが、多数の会議に出席したような場合には、会議に関する情報を記憶しておくことは困難である。
よって、会議に関する情報の記憶が薄れた場合には、個人情報を検索する事が困難になると言う問題があった。
【０００４】
本発明は、上記問題に鑑みて成されたものであり、その目的とするところは、システムユーザと同席した会議の参加者の個人情報を容易に検索することができる情報検索システムを提供することにある。
【課題を解決するための手段】
【０００５】
本発明に係る情報検索システムは、システムユーザが出席した会議で取得した出席者の個人情報を検索する情報検索システムであって、会議の様子を記録した会議記録情報から、個人情報を検索する手掛かりとするエピソディック情報を抽出する情報抽出手段と、情報抽出手段により抽出されたエピソディック情報と情報抽出手段によりエピソディック情報に関連付けられた個人情報とを蓄積する情報蓄積手段とを備えることを特徴としている。
この構成によれば、例えば、会議に関する情報や個人情報を完全に忘却した場合であっても、エピソディック情報から個人情報を検索することができる。また逆に、エピソディック情報を完全に忘却した場合であっても、会議に関する情報や個人情報からエピソディック情報を検索することができる。
【０００６】
上記構成において、情報抽出手段は、出席者の収音音声の解析により、互いに関連付けられた会議記録情報である収音音声若しくは撮像画像からエピソディック情報を抽出する構成を採用できる。
この構成によれば、エピソディック情報を自動で取得する為、システム管理者等の労力を軽減できる。
【０００７】
上記構成において、情報抽出手段は、システムユーザと出席者との対話回数をエピソディック情報として抽出する構成を採用できる。
この構成によれば、例えば、システムユーザは、会議の出席者の内でシステムユーザとの対話回数が最も多かった人物について、個人情報を検索することができる。特に、対話回数が多かったと言う事は記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【０００８】
上記構成において、情報抽出手段は、出席者の収音音声から抽出された対話音声をエピソディック情報として抽出する構成を採用できる。
この構成によれば、システムユーザは、会議の出席者の個人情報を対話時の音声や対話内容に基づいて検索することができる。特に、対話内容は記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【０００９】
上記構成において、情報抽出手段は、出席者の撮像画像から抽出された対話画像をエピソディック情報として抽出する構成を採用できる。
この構成によれば、システムユーザは、会議の出席者の個人情報を対話時の容姿等に基づいて検索することができる。特に、対話時における人物の容姿は印象に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【００１０】
上記構成において、情報抽出手段は、出席者の発言回数をエピソディック情報として抽出する構成を採用できる。
この構成によれば、例えば、システムユーザは、会議の出席者の内で発言回数が最も多かった人物について、個人情報を検索することができる。特に、発言回数が多かったと言う事は、対話回数が多かった事に次いで記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【００１１】
上記構成において、情報抽出手段は、出席者の収音音声から抽出された発言音声をエピソディック情報として抽出する構成を採用できる。
この構成によれば、システムユーザは、会議の出席者の個人情報を発言時の音声や発言内容に基づいて検索することができる。特に、発言内容は対話内容に次いで記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【００１２】
上記構成において、情報抽出手段は、出席者の撮像画像から抽出された発言画像をエピソディック情報として抽出する構成を採用できる。
この構成によれば、システムユーザは、会議の出席者の個人情報を発言時の容姿等に基づいて検索することができる。特に、発言時における人物の容姿は、対話時の容姿に次いで印象に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【００１３】
上記構成において、情報抽出手段は、出席者の位置情報をエピソディック情報として抽出する構成を採用できる。
この構成によれば、例えば、システムユーザは、会議において隣席した者の個人情報を検索することができる。特に、会議における配席等は記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【００１４】
上記構成において、検索条件としての情報蓄積手段に蓄積されたエピソディック情報又は個人情報を配列する情報検索手段を更に備える構成を採用できる。
この構成によれば、システムユーザは個人情報を検索する為の検索条件を容易に設定することができる。
【００１５】
上記構成において、検索手段は、検索条件としての情報蓄積手段に蓄積されたエピソディック情報又は個人情報を、出席者の個人情報に含まれる氏名に基づいて配列する構成を採用できる。
この構成によれば、システムユーザは、例えば、個人情報の氏名の一部しか記憶していない会議出席者について、個人情報を検索する為の検索条件を容易に設定することができる。
【００１６】
上記構成において、検索手段は、検索条件としての情報蓄積手段に蓄積されたエピソディック情報又は個人情報を、システムユーザの出席した会議の開催日に基づいて配列する情報検索手段を更に有する構成を採用できる。
この構成によれば、システムユーザは、例えば、大まかな会議の開催日しか記憶していない会議出席者の個人情報を検索する検索条件を容易に設定することができる。
【００１７】
上記構成において、情報蓄積手段に蓄積されたエピソディック情報に対するシステムユーザの忘却度を判断する忘却度判断手段をさらに有し、検索手段は、検索条件としての情報蓄積手段に蓄積されたエピソディック情報を、忘却度判断手段が判断した忘却度に基づいて一覧表示する構成を採用できる。
この構成によれば、システムユーザは、忘却したエピソディック情報を検索する検索条件を容易に設定することができる。
【発明の効果】
【００１８】
本発明によれば、会議の参加者のエピソディック情報と会議において取得した個人情報とを関連付けられて蓄積するので、システムユーザは参加者の個人情報を検索し易くなる。
【発明を実施するための最良の形態】
【００１９】
以下、本発明の最良の実施形態について、添付図面を参照しつつ説明する。
図１は、本発明の情報検索システムの一実施形態を示す構成図である。
この情報検索システムは、図１に示すように、取得装置１０、記録解析装置２０、個人データベース３０、会議データベース４０、情報抽出手段としての情報抽出装置５０、忘却度判断手段としての忘却度判断装置６０、情報蓄積手段としての情報データベース７０、情報検索手段としての情報検索装置８０、表示装置９０及び出音装置１００を備えている。
【００２０】
ここで、取得装置１０の構成について図２に示す構成図を参照して説明する。
ここで、図２は取得装置１０の構成の一例を示す図である。
図２に示すように、取得装置１０は、マイクロフォンＭ、ビデオカメラＣ、ＲＦＩＤリーダＲ及びスライド制御装置Ｓから成る。
ビデオカメラＣ、マイクロフォンＭ、ＲＦＩＤリーダＲ及びスライド制御装置Ｓは記録解析装置２０と接続している。
【００２１】
マイクロフォンＭは、例えば、圧電マイクで構成される。
マイクロフォンＭは、各出席者に１つ以上携帯され、各出席者の音声を収音可能に配置、携帯されている。尚、本実施例では、各出席者は１つのマイクロフォンＭを携帯する場合について説明する。
また、マイクロフォンＭは、収音音声及び収音したマイクロフォンＭを識別する情報（以下、マイクＩＤと言う）を記録解析装置２０へ送信する。
【００２２】
ビデオカメラＣは、例えば、ＣＣＤカメラで構成される。
ビデオカメラＣは１台又は複数台設置され、会議の様子を撮像可能に設置されている。複数のビデオカメラＣを設置する理由は、複数の撮像画像から出席者が最も鮮明に撮像された画像を選択する為である。尚、本実施例においてはビデオカメラＣを３台設置する場合について説明する。
また、ビデオカメラＣは、撮像画像及び撮像したビデオカメラＣを識別する情報（以下、カメラＩＤと言う）を記録解析装置２０へ送信する。
【００２３】
尚、１台又は複数台のビデオカメラＣ及び１つ又は複数個のマイクロフォンＭは、会議の開始と同時に撮像及び収音を開始するものとする。
これにより、ビデオカメラＣによる撮像画像とマイクロフォンＭによる収音音声とを時刻によって対応及び関連付けることができる。
詳細については後述するが、この対応関係により、収音音声の解析により抽出された時間区間における画像を撮像画像から抽出することができる。
【００２４】
ＲＦＩＤリーダＲは、会議会場内に複数台設置される。
また、各出席者はＲＦＩＤタグを携帯する。尚、本実施例では、各出席者は１つのＲＦＩＤタグを携帯する場合について説明する。
ＲＦＩＤリーダＲは、出席者の携帯するＲＦＩＤタグと通信可能に設置されている。
【００２５】
また、ＲＦＩＤリーダＲは、ＲＦＩＤタグが発する個人を識別する情報（以下、人物ＩＤと言う）を受信する。その後、受信した個人情報を記録解析装置２０へ送信する。
これにより、各出席者が携帯するＲＦＩＤタグが発信する情報を読取る事ができる。また、複数のＲＦＩＤリーダＲが受信する電波の強弱により、会場内における出席者の位置情報を取得する事もできる。
【００２６】
スライド制御装置Ｓは、例えば、パーソナルコンピュータで構成される。
スライド制御装置Ｓは、１台又は複数台設置される。尚、本実施例では１台のみ設置する場合について説明する。
スライド制御装置Ｓは、記録解析装置２０及びプロジェクタＰに接続されている。
スライド制御装置Ｓは、オペレータＨＯにより会議において使用されるスライドを入力され、そのスライドを記憶する。
【００２７】
また、スライド制御装置Ｓは、オペレータにより又は自動で、記憶したスライドをプロジェクタＰに送信すると共に、表示スライドを切替えた事を表す信号（以下、スライド切替信号と言う）を記録解析装置２０へ送信する。
尚、プロジェクタは受信したスライドをスクリーンＳＣに投影する。
【００２８】
次に、記録解析装置２０について説明する。
記録解析装置２０は、例えば、パーソナルコンピュータで構成される。
記録解析装置２０は、取得装置１０、個人データベース３０及び会議データベース４０に接続している。
【００２９】
記録解析装置２０は、取得装置１０から収音音声とマイクＩＤ、撮像画像とカメラＩＤ、個人情報、スライド切替情報及びスライドを受信する。
また、オペレータＨＯ等から会議を識別する情報（以下、会議ＩＤと言う）、会議の開催場所や日時等の書誌的情報（以下、会議書誌情報と言う）及び本システムの環境情報を入力される。
尚、会議書誌情報及び環境情報とはどのような情報を言うかについては後述する。
【００３０】
その後、取得装置１０から受信した収音音声を収音ファイルとして会議データベース４０へ蓄積する。
次に、取得装置１０から受信した収音ファイルを識別する収音ファイルＩＤをマイクＩＤと会議ＩＤと関係付けて会議データベース４０へ蓄積する。
【００３１】
尚、収音ファイルＩＤを会議ＩＤに関連付けて蓄積するのは、同じマイクＩＤで識別されるマイクロフォンＭを複数の会議において使用することを考慮した為である。
さらに、記録解析装置２０は、取得装置１０から受信した収音音声の音圧レベルを解析することで、出席者が発言を行った時間区間（以下、発言セグメントと言う）を抽出する。
【００３２】
次に、記録解析装置２０が収音音声の解析結果を会議データベース４０に蓄積する方法の一例について図３を参照して説明する。
ここで、図３は記録解析装置と情報データベースの発言イベント表との関係を説明するための図である。
【００３３】
図３に示すように、記録解析装置２０は、上記解析により抽出された発言セグメントの開始時刻ＴＳＳと終了時刻ＴＳＥ（以下、セグメント情報と言う）を、マイクＩＤと会議ＩＤとに関係付けて会議データベース４０の発言イベント表ＴＶＳへ蓄積する。
【００３４】
また、記録解析装置２０は、取得装置１０から受信した撮像画像を撮像ファイルとして会議データベース４０へ蓄積する。
その後、記録解析装置２０は、撮像画像ファイルと会議ＩＤ及びカメラＩＤを関連付けて会議データベース４０へ蓄積する。
【００３５】
上記蓄積方法の一例について図４を参照して説明する。
図４は記録解析装置と会議カメラ表との関係を説明する為の図である。
図４に示すように、記録解析装置２０は、撮像ファイルを識別する撮像ファイルＩＤとカメラＩＤとオペレータにより入力された会議ＩＤとを関係付けて、撮像画像を会議データベース４０の会議カメラ表ＴＢＣへ蓄積する。
【００３６】
また、記録解析装置２０は、取得装置１０から受信した個人情報を個人データベース３０に蓄積する。
さらに、記録解析装置２０は、取得装置１０で受信したＲＦＩＤタグの電波を解析することで、会議出席者の位置情報を、会議データベース４０に蓄積する。
【００３７】
ここで、記録解析装置２０が個人情報を個人データベース３０へ蓄積する方法の一例及び出席者の位置情報を会議データベース４０に蓄積する方法の一例について図５を参照して説明する。
【００３８】
図５は個人情報と位置情報と情報データベースの関係を説明する為の図である。
図５に示すように、会議の各出席者はＲＦＩＤタグＴＲを有している。
出席者の有するＲＦＩＤタグＴＲは、人物ＩＤ、氏名、所属する会社名、部門、職階、肩書き及び連絡先としての内線番号、電話番号やＥメールアドレス等の個人情報を電波発信している。
【００３９】
記録解析装置２０は、取得装置１０のＲＦＩＤリーダＲが出席者の携帯するＲＦＩＤタグＴＲから読取った個人情報を受信する。その後、記録解析装置２０は、個人データベース３０の個人情報表ＴＩＤへ追加又は更新する。
【００４０】
これにより、システムユーザが会議において初めて対面した人物に関する個人情報を、本情報システムに自動的に追加することができる。
また、例えば、婚姻等により氏が変更した場合においても、自動的に最新の個人情報に更新することができる。
【００４１】
また、記録解析装置２０は、ＲＦＩＤリーダが受信したＲＦＩＤタグの電波強度を距離情報に変換し、三点測量や位置補正をすることで出席者の位置情報を取得する。
【００４２】
さらに、記録解析装置２０は、取得した位置情報によって会議出席者の移動を検知する。
その後、記録解析装置２０は、取得した出席者の位置情報、移動開始時刻、移動終了時刻、移動元及び移動先を、会議ＩＤと人物ＩＤとに関連付けて会議データベース４０の移動イベント表ＴＶＭへ蓄積する。
【００４３】
また、記録解析装置２０は、取得装置１０から受信したスライドをスライドファイルとして会議データベース４０へ蓄積する。
また、記録解析装置２０は、スライドを識別する情報（以下、スライドＩＤと言う）を会議ＩＤ及び各スライドが表示された時刻等の情報とを関連付けて会議データベース４０の会議スライド表ＴＢＬに蓄積する。
【００４４】
ここで、記録解析装置２０がスライドが表示された時刻等の情報を会議データベース４０へ蓄積する方法の一例について図６を参照して説明する。
図６は、記録解析装置とスライド表示イベント表との関係を説明する為の図である。
【００４５】
図６に示すように、記録解析装置２０は、取得装置１０から受信したスライド表示切替信号によって特定のスライドが表示されている時間を判断する。
その後、表示開始時刻及び表示終了時刻を、スライドＩＤと会議ＩＤとに関連付けて会議データベース４０のスライド表示イベント表ＴＶＬへ蓄積する。
【００４６】
また、記録解析装置２０は、オペレータ等により入力された環境情報を会議データベース４０へ蓄積する。
ここで、環境情報とは、領域環境情報、カメラ環境情報及び人物環境情報を言う。
【００４７】
領域環境情報とは、会議室を複数の領域に分割した際の分割領域に関する環境情報を言う。
カメラ環境情報とは、ビデオカメラの撮像範囲に関する環境情報を言う。
人物環境情報とは、人物に関する環境情報を言う。
【００４８】
会議室の分割領域に関する環境情報について図７を参照して説明する。
図７は、記録解析装置と領域環境表との関係を説明する為の図である。
図７に示すように、会議室ＡＭはそれぞれ重複しない領域に分割されている。
また、分割領域は、会議室の特定の位置を原点として二次元座標で表される。本実施例では、分割領域は方形であるとした。よって、分割領域は原点に最も近い頂点との原点から最も遠い頂点の二次元座標で特定される。
【００４９】
オペレータＨＯは記録解析装置２０へ領域環境情報を入力する。
記録解析装置２０は、オペレータにより入力された領域環境情報である分割領域を特定する情報と分割領域を識別する情報とを関連付けて会議データベース４０へ蓄積する。
【００５０】
次に、ビデオカメラの撮像範囲に関する環境情報について図８を参照して説明する。
図８は、記録解析装置とカメラ環境表との関係を説明する為の図である。
図８に示すように、ビデオカメラＣはそれぞれ異なった分割領域を撮像可能に設置されている。
【００５１】
また、撮像領域は、撮像される人物を鮮明に撮像できる距離に位置する分割領域とそうでない分割領域の二領域に分類されている。
記録解析装置２０は、上記二領域とビデオカメラを識別する情報（以下、カメラＩＤと言う）とを関連付けて会議データベース４０のカメラ環境表ＴＮＣへ蓄積する。
尚、ビデオカメラＣが撮像する分割領域は、上記分割領域表で特定される領域で表されるとする。
【００５２】
次に、人物に関する環境情報について図９を参照して説明する。
図９は、記録解析装置と人物環境表との関係を説明する為の図である。
図９に示すように、会議の出席者は、それぞれマイクロフォンＭ及びＲＦＩＤタグＴＲを有している。
【００５３】
それぞれのマイクロフォンＭにはマイクＩＤが、ＲＦＩＤタグには人物ＩＤがそれぞれ付されている。
記録解析装置２０は、オペレータＨＯにより入力された人物ＩＤと会議ＩＤとマイクＩＤとを関連付けて会議データベース４０の人物環境表ＴＮＨへ蓄積する。
【００５４】
また、記録解析装置２０は、オペレータ等により入力された会議書誌情報を会議データベース４０の会議書誌表ＴＢＭへ蓄積する。
ここで、会議データベース４０に蓄積された会議書誌情報について図１０を参照して説明する。
図１０は、会議データベース４０に蓄積された会議書誌情報を説明する為の図である。
【００５５】
図１０に示すように、記録解析装置２０は、会議ＩＤと会議書誌情報とをオペレータＨＯにより入力される。
その後、記録解析装置２０は、会議ＩＤと会議書誌情報とを関連付けて会議データベース４０の会議書誌表ＴＢＭへ蓄積する。
【００５６】
会議書誌情報とは、会議に関する書誌的情報を言う。
具体的には、会議の開催された年月日、開始時刻、終了時刻、開催場所の地区名、会議室名、参加人数、各出席者の人物ＩＤ、欠席者の人物ＩＤ、会議の種類、司会者の人物ＩＤ、発表・講演者の人物ＩＤ、利用した機器、休憩の有無、休憩開始時刻、休憩終了時刻、議題、決定事項等を言う。
尚、会議カラムＣＭには会議ＩＤを、人物カラムＣＨには会議の出席者を識別する人物ＩＤを蓄積する。
【００５７】
個人データベース３０は、例えば、リレーショナルデータベースで構成される。
個人データベース３０は、記録解析装置２０及び情報抽出装置５０に接続されている。
個人データベース３０は、会議出席者の個人情報を蓄積する。
【００５８】
会議データベース４０は、例えば、リレーショナルデータベースで構成される。
会議データベース４０は、記録解析装置２０、情報抽出装置５０及び情報検索装置８０に接続されている。
【００５９】
ここで、会議データベース４０の構成ついて図１１を参照して説明する。
図１１は、会議データベース４０の構成を説明する為の図である。
図１１に示すように、会議データベース４０は、データテーブルとデータファイルを有する。
【００６０】
データテーブルは、書誌的情報を蓄積する書誌表グループＧＢ、会議におけるイベント情報を蓄積するイベント表グループＧＶ及び本システムの環境情報を蓄積する環境表グループＧＮに分類される。
【００６１】
書誌表グループは、会議書誌表ＴＢＭ、会議カメラ表ＴＢＣ及び会議スライド表ＴＢＬから成る。
イベント表グループＧＶは、発言イベント表ＧＶＳ、移動イベント表ＧＶＭ、スライド表示イベント表ＧＶＬから成る。
環境表グループＧＮは、領域環境表ＴＮＡ、カメラ環境表ＴＮＣ及び人物環境表ＴＮＨから成る。
データファイルは、撮像ファイルＦＭ、収音ファイルＦＡ及びスライドファイルＦＳが蓄積されている。
【００６２】
情報抽出装置５０は、例えば、パーソナルコンピュータで構成される。
情報抽出装置５０は、個人データベース３０、会議データベース４０及び情報データベース７０に接続されている。
【００６３】
情報抽出装置５０は、個人データベース３０及び会議データベース４０を参照する事で、システムユーザが出席した会議の会議書誌情報、同席者の個人情報及び同席者のエピソディック情報の一部を取得する。更に、取得した上記情報を情報データベース７０へ、システムユーザ毎に蓄積する。
【００６４】
ここで、エピソディック情報とは、システムユーザが出席した会議の様子を記録した会議記録情報から、個人情報を検索する手掛かりとする情報を言う。尚、会議記録情報については後述する。
本実施例では、エピソディック情報として、代表ショット、サムネイル、対話回数、発言回数、会議総対話時間、会議平均対話時間、会議総発言時間、会議平均発言時間、会議座席距離、会議平均距離、総対話回数、平均対話回数、総対話時間、平均総対話時間、平均対話時間、総発言回数、平均発言回数、総発言時間、平均総発言時間、平均発言時間、平均座席距離及び平均距離を取得する。
尚、上記エピソディック情報の詳細については、後述する。
【００６５】
また、会議記録情報とは、システムユーザが出席した会議の様子を記録した情報を言う。
本実施例では、収音音声及び撮像画像並びに発言イベント表ＧＶＳ、移動イベント表ＧＶＭ及びスライド表示イベント表ＧＶＬに蓄積された情報を言う。
【００６６】
ここで、上記構成の情報抽出装置５０の動作について、図１２ないし図１４を参照して説明する。
ここで、図１２は情報抽出装置の動作を示すフローチャートであり、図１３は情報抽出装置がユーザ情報を更新する処理を示すフローチャートであり、図１４は情報抽出装置が代表ショットを取得する処理を示すフローチャートである。
【００６７】
先ず、図１２に示すように、情報抽出装置５０は、一定期間が経過するまで又は何らかのシグナルを受領するまでスリープする（ステップＳＴ１）。
次いで、情報抽出装置５０は、システムユーザによって情報抽出コマンドを入力されたかを判断する（ステップＳＴ２）。
【００６８】
これは、定期的なバッチ処理により実行される情報データベース７０の更新を、システムユーザに任意のタイミングで行う為に必要とされる処理である。
その後、情報抽出装置５０は、情報抽出コマンドを受領した場合にはステップＳＴ３を実行する。そうでない場合にはステップＳＴ５を実行する。
【００６９】
ステップＳＴ２において、情報抽出装置５０は、受領したコマンドが情報抽出コマンドであると判断した場合には、情報データベース７０に登録された全システムユーザに対し、ステップＳＴ４の処理を実行したかを順次に判断する（ステップＳＴ３）。
情報抽出装置５０は、未処理のユーザが存在する場合にはステップＳＴ４の処理を実行する。そうでない場合には、ステップＳＴ１の処理に戻り上記処理を繰り返す。
【００７０】
ステップＳＴ３において、情報抽出装置５０は、未処理のユーザが存在すると判断した場合には、未処理だと判断したユーザの一人（以下、処理対象ユーザと言う）に対してユーザ情報更新処理を実行する（ステップＳＴ４）。尚、ユーザ情報更新処理については後述する。
その後、ステップＳＴ３に戻り上記処理を繰り返す。
【００７１】
ここで、ステップＳＴ２において、受領したコマンドが情報抽出コマンドでないと判断した場合には、情報抽出装置５０はバッチ処理を行うべき所定時刻を経過したかを判断する（ステップＳＴ５）。
これは、ステップＳＴ４におけるユーザ情報更新処理を定期的に行う為である。
情報抽出装置５０は、所定時刻を経過した場合には、ステップＳＴ３の処理を実行する。そうでない場合には、ステップＳＴ６の処理を実行する。
【００７２】
ステップＳＴ５において、情報抽出装置５０は、所定時刻を経過していないと判断した場合には、システムユーザによって終了コマンドを入力されたかを判断する（ステップＳＴ６）。
情報抽出装置５０は、終了コマンドを入力された場合には処理を終了する。そうでない場合にはステップＳＴ７の処理を実行する。
【００７３】
ステップＳＴ６において、情報抽出装置５０は、終了コマンドを受領していないと判断した場合には、表示集計コマンドを受領したかを判断する（ステップＳＴ７）。
情報抽出装置５０は、表示集計コマンドを入力された場合にはステップＳＴ８の処理を実行する。そうでない場合にはステップＳＴ１に戻り上記処理を繰り返す。
【００７４】
ステップＳＴ７において、情報抽出装置５０は、表示集計コマンドを受領したと判断した場合には、表示集計処理を実行する。
その後、ステップＳＴ１に戻り上記処理を繰り返す。
【００７５】
ここで、表示集計処理について説明する。
表示集計処理とは、情報検索装置８０による検索処理を容易にする為に、情報抽出装置５０によって行われる集計処理である。
先ず、情報抽出装置５０は、会議データベース４０及び情報データベース７０に蓄積された情報を参照し、表示集計コマンドで指定された各種の会議指標及び忘却度を除く全体指標を集計する。
尚、会議指標、全体指標及び忘却度については、後述する。
【００７６】
その後、情報抽出装置８０は、上記集計結果である各種の指標を情報データベース７０へ蓄積する。
蓄積が終了した後、情報抽出装置５０は、情報検索装置８０へ集計終了通知を送信する。
【００７７】
ここで、会議指標とは、会議座席距離、会議平均距離、会議総対話時間、会議平均対話時間、会議総発言時間及び会議平均発言時間を言う。
会議指標は、処理済会議について会議の出席者毎に情報抽出装置５０によって集計、蓄積される。
【００７８】
全体指標とは、同席回数、同席率、総同席時間、時間同席率、平均座席距離、平均距離、総対話回数、平均対話回数、総対話時間、平均総対話時間、平均対話時間、総発言回数、平均発言回数、総発言時間、平均総発言時間、平均発言時間、最初の同席会議ＩＤ、最後の同席会議ＩＤ及び忘却度を言う。
忘却度を除く全体指標は、処理済会議の出席者毎に情報抽出装置５０によって集計、蓄積される。
【００７９】
ここで、本実施例では、情報抽出装置５０は、エピソディック情報として、会議指標である会議座席距離、会議平均距離、会議総対話時間、会議平均対話時間、会議総発言時間及び会議平均発言時間、並びに、全体指標として、平均座席距離、平均距離、総対話回数、平均対話回数、総対話時間、平均総対話時間、平均対話時間、総発言回数、平均発言回数、総発言時間、平均総発言時間及び平均発言時間を集計する。
この構成によれば、エピソディック情報を自動で取得する為、システム管理者等の労力を軽減できる。
【００８０】
以下、会議指標について説明する。
会議座席距離とは、処理済会議におけるシステムユーザと会議出席者との座席領域の距離を言う。
ここで、座席領域とは、会議において出席者が最も長い時間滞在した領域を言う。
【００８１】
座席領域は会議データベース４０の移動イベント表ＴＶＭを集計することで得られる。
また、座席領域の距離は、会議データベース４０の領域環境表ＴＮＡからそれぞれの座席領域の中心座標を得ることで計算される。
【００８２】
会議平均距離とは、処理済会議におけるシステムユーザと会議出席者との所在領域の距離に対する平均を言う。
会議総対話時間とは、処理済会議におけるシステムユーザと会議出席者との対話時間の総和を言う。
会議平均対話時間とは、処理済会議におけるシステムユーザと会議出席者との対話時間の平均を言う。つまり、１回の対話で平均どの程度の長さの対話をするかを言う。
会議総発言時間とは、処理済会議における会議出席者の発言時間の総和を言う。
会議平均発言時間とは、処理済会議における会議出席者の発言時間の平均を言う。
【００８３】
次に、全体指標について説明する。
同席回数とは、システムユーザとその他の出席者が処理済会議に同席した回数を言う。
同席率とは、システムユーザとその他の出席者が処理済会議に同席した率を言い、同席回数をシステムユーザが出席した処理済会議の数で割ることで求められる。
総同席時間とは、システムユーザとその他の出席者が同席した処理済会議の開催時間を総和したものである。
時間同席率とは、総同席時間をシステムユーザが出席した処理済会議の開催時間の総和で割ることで求められる。
【００８４】
平均座席距離とは、会議座席距離の全体平均を言う。
平均距離とは、会議平均距離の全体平均を言う。
総対話回数とは、対話回数の総和を言う。
平均対話回数とは、対話回数の全体平均を言う。
総対話時間とは、会議総対話時間の総和を言う。
平均総対話時間とは、会議総対話時間の全体平均を言う。
平均対話時間とは、会議平均対話時間の全体平均を言う。
【００８５】
総発言回数とは、発言回数の総和を言う。
平均発言回数とは、発言回数の全体平均を言う。
総発言時間とは、会議総発言時間の総和を言う。
平均総発言時間とは、会議総発言時間の全体平均を言う。
平均発言時間とは、会議平均発言時間の全体平均を言う。
【００８６】
最初の同席会議ＩＤとは、最初にシステムユーザと出席者が同席した処理済会議の会議ＩＤを言う。
最後の同席会議ＩＤとは、最後にシステムユーザと出席者が同席した処理済会議の会議ＩＤを言う。
忘却度とは、忘却度判断装置６０により特定される値であり、使用ユーザが出席者の個人情報を忘却している度合いを表す。
【００８７】
次に、情報抽出装置５０の実行するユーザ情報更新処理について図１３を参照して説明する。
情報抽出装置５０は、処理対象ユーザが参加した会議であり、未だユーザ情報更新処理の対象となっていない会議（以下、新規参加会議と言う）を検出する。（ステップＳＴ１１）。以下、この検出処理について説明する。
【００８８】
先ず、情報抽出装置５０は、情報データベース７０から処理対象ユーザを識別する情報（以下、処理対象ユーザＩＤと言う）を参照する。
次に、情報データベース７０から、処理対象ユーザが参加した会議としてユーザ情報更新処理の結果蓄積された会議（以下、処理済会議と言う）を識別する情報（以下、処理済会議ＩＤと言う）を取得する。
【００８９】
その後、情報抽出装置５０は、会議データベース４０の会議書誌表ＴＢＭから、人物カラムＣＨに処理対象ユーザＩＤを蓄積し、且つ、会議カラムＣＭに処理済会議ＩＤを蓄積していないと言う条件でレコードを検索する。
これにより、情報抽出装置５０は、検索されたレコードの会議カラムＣＭに蓄積する会議ＩＤを取得する。この取得した会議ＩＤによって識別される会議が新規参加会議である。
【００９０】
次に、情報抽出装置５０は、ステップ１１の検出処理により新規参加会議を検出したかを判断する（ステップＳＴ１２）。
情報抽出装置５０は、新規参加会議を検出した場合にはステップ１３の処理を実行する。そうでない場合には、処理を終了する。
【００９１】
ステップＳＴ１２において新規参加会議を検出した場合、情報抽出装置５０は、新規参加会議に関する会議書誌情報を取得する（ステップＳＴ１３）。
尚、会議書誌情報を取得するには、会議データベース４０の会議書誌表ＴＢＭから、新規参加会議ＩＤを蓄積したレコードを参照すれば良い。
【００９２】
その後、情報抽出装置５０は、ステップ１３で取得した会議書誌情報を新規参加会議ＩＤ及び処理対象ユーザＩＤと関連付けて情報データベース７０へ追記する。
【００９３】
本来ならば、情報抽出装置５０は、新規参加会議ＩＤのみを情報データベース７０に追記するべきである。
これにより、本情報システムは、情報データベース７０に蓄積された会議ＩＤと会議データベース４０の会議書誌表ＴＢＭに蓄積された会議ＩＤとを関連付けることで、会議書誌情報について整合を維持することができる。
【００９４】
しかし、本情報システムは、検索処理時間を短縮する必要がある。
また、本情報システムにおいては会議書誌情報の更新は考えられない。
よって、本実施例においてはそのような構成を採用しない事とした。
【００９５】
次に、情報抽出装置５０は、新規参加会議の出席者それぞれについてステップ１６ないし１９の処理を行ったかを判断する（ステップＳＴ１５）。
ステップ１６ないし１９の処理を行っていない新規参加会議の出席者（以下、未処理出席者と言う）が存在する場合には、未処理出席者についてステップ１６の処理を実行する。そうでない場合には処理を終了する。
【００９６】
ステップ１５において、情報抽出装置５０は、未処理出席者が存在すると判断した場合には、未処理出席者について個人情報を取得する（ステップＳＴ１６）。
ここで、個人情報は、情報抽出装置５０が、未処理出席者の人物ＩＤに基づいて個人データベース３０の個人情報表ＴＩＤを検索することで得られる。
【００９７】
次に、情報抽出装置５０は、未処理出席者の個人情報を新規参加会議ＩＤ及び処理対象ユーザＩＤと関連付けて情報データベース７０に追記する（ステップＳＴ１７）。
【００９８】
ここで、このような構成を採用した為、個人データベース３０に蓄積された個人情報と情報データベース７０に蓄積された会議出席者の個人情報との整合性は保たれない。
つまり、個人データベース３０に蓄積された個人情報は、記録解析装置２０により最新の個人情報に更新されるが、情報データベース７０に蓄積された会議出席者の個人情報は、ユーザ情報更新処理の行われた時点に個人データベース３０に蓄積されていた個人情報を維持し続ける。
【００９９】
これは、例えば、会議出席者の一人が会議で対面した後に婚姻等により氏を変更した場合であっても、その事実を知らないシステムユーザは、会議において紹介された氏に基づいて個人情報を検索することができるような構成を採用した為である。
【０１００】
次に、情報抽出装置５０は、未処理出席者の代表ショットを取得する処理を実行する（ステップＳＴ１８）。
尚、代表ショットの定義及び代表ショットを取得する処理については後述する。
【０１０１】
その後、情報抽出装置５０は、取得した代表ショット情報等を処理対象ユーザＩＤ、新規参加会議の会議ＩＤ及び未処理出席者の人物ＩＤに関連付けて情報データベース７０へ蓄積する（ステップＳＴ１９）。
【０１０２】
尚、代表ショット情報等とは、ステップ１８の代表ショット取得処理で取得した処理対象出席者との対話回数、発言回数、代表ショット情報及びサムネイルを言う。尚、代表ショット情報については後述する。
その後、情報抽出装置５０は、ステップＳＴ１５の処理に戻り上記処理を繰り返す。
【０１０３】
次に、情報抽出装置５０の実行する代表ショット取得処理について図１４を参照して説明する。
情報抽出装置５０は、会議の様子を撮像した撮像画像の内から代表ショットを抽出することができる時間区間（以下、抽出可能区間と言う）を取得する（ステップＳＴ２１）。
【０１０４】
本実施例では、抽出可能区間であるかの判断は以下の条件を満たす時間区間であるかをもって判断することとした。
条件とは、処理対象出席者がビデオカメラにより撮像可能な領域に位置している時間区間であり、且つ、スライドが表示されていない時間区間であると言うものである。
【０１０５】
ここで、スライドが表示されていないと言う条件の意味するところは、スライドが表示されている時間区間においては、室内が薄暗い為にビデオカメラによる撮像が鮮明ではないと考えられるために条件として追加した。
【０１０６】
次に、抽出可能区間の取得方法について説明する。
先ず、会議データベース４０のカメラ環境表ＴＮＣからビデオカメラＣの撮像可能領域を取得する。その後、会議データベース４０の移動イベント表ＧＶＭから処理対象出席者の位置情報及びそれに関連した時間区間を取得する。
これにより、処理対象出席者が上記で取得した撮像可能領域に位置していた時間区間を取得する。
【０１０７】
さらに、会議データベース４０のスライド表示イベント表ＧＶＬからスライドが表示されていた時間区間を取得することで抽出可能区間を得ることができる。
尚、会議において常にスライドが表示されていた等して抽出可能区間を得ることができなかった場合には、抽出可能区間を会議の行われた時間区間に一致させる事とする。
【０１０８】
次に情報抽出装置５０は、処理対象出席者の発言回数を取得する（ステップＳＴ２２）。
ここで、発言回数を取得するには、会議データベース４０の人物環境表ＴＮＨから、処理対象出席者ＩＤで識別される人物が処理対象会議で使用したマイクロフォンＭのマイクＩＤを取得する。
その後、情報抽出装置５０は、会議データベース４０の発言イベント表ＴＶＳから、上記取得マイクＩＤ及び新規参加会議ＩＤを蓄積したレコードを取得する。
【０１０９】
このようにして得られたレコードのレコード数が発言セグメントの数であり、すなわち発言回数である。
この構成によれば、エピソディック情報を自動で取得する為、システム管理者等の労力を軽減できる。
【０１１０】
次に、情報抽出装置５０は、処理対象出席者が新規参加会議において発言をしていないかを判断する（ステップＳＴ２３）。
これは、発言回数が０であるかによって判断される。
発言回数が０である場合には、ステップ２４の処理を実行する。そうでない場合には、ステップ２５の処理を実行する。
【０１１１】
ステップ２３において、情報抽出装置５０は、発言回数が０であると判断した場合には、対話回数を０とする（ステップＳＴ２４）。
これは、処理対象出席者が発言をしていない以上、処理対象ユーザと対話をしていない為である。
また、この構成によれば、エピソディック情報を自動で取得する為、システム管理者等の労力を軽減できる。
その後、情報抽出装置５０は、ステップＳＴ２６を実行する。
【０１１２】
ここで、ステップ２３において、情報抽出装置５０は、発言回数が０でないと判断した場合には、処理対象ユーザと処理対象出席者との対話回数を取得する（ステップＳＴ２５）。
【０１１３】
情報抽出装置５０が処理対象出席者と処理対象ユーザとの対話回数を取得する方法について図１５に示す図を参照して説明する。
ここで、図１５は、処理対象ユーザ及び処理対象出席者の発言セグメントを時間的関係に基づいて比較した図である。
【０１１４】
図１５に示すように、情報抽出装置５０は、処理対象ユーザの発言セグメントの終了時刻ＴＳＥと処理対象出席者の発言セグメントの開始時刻ＴＳＳとのセグメント時間間隔ＳＰＳ、又は、処理対象出席者の発言セグメントの終了時刻ＴＳＥと処理対象ユーザ処理対象ユーザの発言セグメントの開始時刻ＴＳＳとのセグメント時間間隔ＳＰＳを求める。
その後、セグメント時間間隔ＳＰＳが予め定められた閾値を超ない場合には、対話であると判断する。そうでない場合には発言であると判断する。
【０１１５】
ここで、本実施例では閾値を３秒として説明する。
図１５に表した処理対象ユーザの発言セグメントＳＧＳ１１と処理対象出席者の発言セグメントＳＧＳ２１とのセグメント時間間隔ＳＰＳ１は１秒である。
よって、処理対象ユーザと処理対象出席者は対話をしたと判断される。ここで、対話と判断された発言セグメントの事を特に対話セグメントと言う。
【０１１６】
また、図１５に示した処理対象出席者の発言セグメントＳＧＳ２２と処理対象ユーザの発言セグメントＳＧＳ１１とのセグメント時間間隔ＳＰＳ２は１２秒であり、閾値である３秒を超える。
よって、発言セグメントＳＧＳ１１と発言セグメントＳＧＳ２２の関係は対話ではない。
【０１１７】
また、処理対象出席者の発言セグメントＳＧＳ２２とセグメント時間間隔ＳＰＳ３が閾値である３秒以内となるような処理対象ユーザの発言セグメントＳＧＳは存在しない。
よって、処理対象出席者の発言セグメントＳＧＳ２２は対話セグメントではないと判断される。
【０１１８】
尚、処理対象ユーザ及び処理対象出席者の発言セグメント開始時刻ＴＳＳ及び終了時刻ＴＳＥを取得するには、会議データベース４０の発言イベント表ＧＶＳと人物環境表ＧＮＨを、マイクＩＤ及び会議ＩＤで関連付ければ良い。
この構成によれば、エピソディック情報を自動で取得する為、システム管理者等の労力を軽減できる。
【０１１９】
次に、情報抽出装置５０は、処理対象ユーザと処理対象出席者が新規参加会議において対話をしたかを判断する。これは、対話回数が０より大きいかにより判断する（ステップＳＴ２６）。
対話回数が０より大きいで場合には、情報抽出装置５０はステップ２７を実行し、そうでない場合には、ステップ２９を実行する。
【０１２０】
ステップ２６において、情報抽出装置５０は、対話回数が０より大きいと判断した場合には、対話セグメントの中から抽出可能区間に属する代表セグメントに関する情報（以下、代表セグメント情報と言う）を抽出する。（ステップＳＴ２７）。
【０１２１】
ここで、代表セグメントとは、抽出対象のセグメントの内で最もセグメント長が長いセグメントを言う。ただし、代表セグメント長が予め定めた閾値を超える場合には、セグメント長が予め定めたの閾値となるように開始時刻から連続的に抽出されたものとする。
【０１２２】
次に、情報抽出装置５０は、代表セグメント情報を抽出できたかを判断する（ステップＳＴ２８）。
情報抽出装置５０が代表セグメント情報を抽出できた場合には、情報抽出装置５０は、ステップ３５を実行する。そうでない場合には、ステップ３０を実行する。
【０１２３】
尚、情報抽出装置５０が代表セグメント情報を抽出できないと言うことは、例えば、処理対象ユーザと処理対象出席者が対話をしたが、対話時に常にスライドが表示されていた場合等に生じる。
そのような場合には、以下で説明するように発言セグメント等から代表セグメントを抽出する。
【０１２４】
ステップ２６において、対話回数が０より大きいと判断した場合は、情報抽出装置５０は、発言回数が０より大きいか判断する（ステップＳＴ２９）。
情報抽出装置５０は、発言回数が０より大きい場合にはステップ３０の処理を実行する。そうでない場合には、ステップ３２の処理を実行する。
【０１２５】
ステップ２８において、情報抽出装置５０が対話セグメントから代表セグメント情報を抽出することできなかったと判断した場合、又は、ステップ２９において、情報抽出装置５０が処理対象出席者の発言回数が０より大きいと判断した場合には、処理対象出席者の発言セグメントから抽出可能区間に属する代表セグメントを抽出する。（ステップＳＴ３０）。
【０１２６】
次に、情報抽出装置５０は、代表セグメント情報を抽出できたかを判断する（ステップＳＴ３１）。
情報抽出装置５０が代表セグメント情報を抽出できた場合には、情報抽出装置５０は、ステップ３５を実行する。そうでない場合には、ステップ３２を実行する。
【０１２７】
ステップ３１において、情報抽出装置５０が発言セグメントから代表セグメントを抽出できなかったと判断した場合には、情報抽出装置５０は、新規参加会議における出席者の誰一人として発言をしていないセグメントから抽出可能区間に属する代表セグメントを取得する（ステップＳＴ３２）。
【０１２８】
次に、情報抽出装置５０は、代表セグメント情報を抽出できたかを判断する（ステップＳＴ３３）。
情報抽出装置５０が代表セグメント情報を抽出できた場合には、情報抽出装置５０は、ステップ３５を実行する。そうでない場合には、ステップ３４を実行する。
【０１２９】
ステップ３３において、情報抽出装置５０が代表セグメント情報を抽出できなかったと判断した場合には、抽出可能区間から代表セグメント情報を抽出する（ステップＳＴ３４）。
その後、情報抽出装置５０は、ステップ３５を実行する。
【０１３０】
情報抽出装置５０は、ステップ２８、３１、３３において、代表セグメント情報を抽出することができたと判断した場合、又は、ステップ３４で代表セグメント情報を抽出した後には、出席者を撮像した撮像ファイルの内から出席者が最も鮮明に撮像された撮像ファイルを選択する（ステップＳＴ３５）。
【０１３１】
以下、撮像ファイルを選択する処理について説明する。
先ず、情報抽出装置５０は、会議データベース４０の移動イベント表ＴＶＭを参照し、代表セグメントにおける出席者の位置情報を取得する。
【０１３２】
次に、情報抽出装置５０は、会議データベース４０のカメラ環境表を参照し、取得した位置情報から出席者を最も鮮明に撮像したカメラのカメラＩＤを取得する。
ここで、複数のビデオカメラによって処理対象出席者が撮像されていた場合には、情報抽出装置５０は、撮像距離が近いものほど出席者を鮮明に撮像したと判断する。
【０１３３】
その後、情報抽出装置５０は、会議データベース４０の会議カメラ表ＴＢＣを参照し、会議ＩＤが新規参加会議ＩＤでありカメラＩＤが上記で取得したカメラＩＤで検索される撮像ファイルＩＤを取得する。
【０１３４】
これにより、代表セグメントにおける出席者の撮像画像（以下、代表ショット画像と言う）を取得することができる。
同様にして、代表セグメントにおける出席者の収音音声（以下、代表ショット音声と言う）をも取得することができる。
尚、代表ショット画像と代表ショット音声を合わせて代表ショットと言う。
また、この構成によれば、エピソディック情報を自動で取得する為、システム管理者等の労力を軽減できる。
【０１３５】
さらに、代表ショット情報とは、代表セグメントの開始時刻、終了時刻及びの上記により選択された撮像ファイル及び収音ファイルの所在を表す情報を言う。
尚、情報データベース７０に蓄積するのは、代表ショット情報であって代表ショットそのものではない。
このような構成を採用したのは、情報データベース７０において使用されるディスク容量を節約する為及びユーザ情報更新処理を処理を高速化する為である。
【０１３６】
さらに、対話セグメントから得られた代表セグメントにより、撮像画像から抽出された代表ショット画像を対話画像と言い、収音音声から抽出された代表ショット音声を対話音声と言う。
同様に、発言セグメントから得られた代表セグメントにより、撮像画像から抽出された代表ショット画像を発言画像と言い、収音音声から抽出された代表ショット音声を発言音声と言う。
【０１３７】
次に、情報抽出装置５０は、処理対象出席者のサムネイルを取得する（ステップＳＴ３６）。
これは、ステップ３５において取得された代表ショット画像の先頭フレームを取得し、それを縮小化することで取得できる。
その後、情報抽出装置５０は、代表ショット取得処理を終了する。
【０１３８】
この構成により、代表ショットを取得するシステム管理者等の労力を軽減できるばかりか、代表ショットの撮像及び収音をされる会議出席者の心理的抵抗を軽減することができる。
【０１３９】
忘却度判断装置６０は、例えば、パーソナルコンピュータにより成される。
忘却度判断装置６０は、情報データベース７０に接続されている。
忘却度判断装置６０は、図示は省略するが、表示画面、スピーカ、ポインティングディバイス（以下、単にマウスと言う）及びキーボードに接続されている。
【０１４０】
忘却度判断装置６０は、システムユーザが過去に対面した処理済会議の出席者に対する忘却度を特定する。
また、忘却度判断装置６０は、情報データベース７０へ忘却度を蓄積する。
ここで、忘却度とは、システムユーザが出席者の個人情報を忘却している度合いを表す値である。
【０１４１】
具体的には、忘却度判断装置６０は、過去に対面した処理済会議の出席者に関するエピソディック情報であるサムネイル又は代表ショットを情報データベース７０から取得する。
【０１４２】
その後、忘却度判断装置６０は、表示画面にサムネイル又は代表ショット画像を表示し、スピーカから代表ショット音声を出音する。
使用ユーザは、マウス又はキーボードを操作し、表示又は出音されたエピソディック情報に基づいて、個人情報である氏名等を忘却度判断装置６０に入力する。
【０１４３】
忘却度判断装置６０は、個人情報の入力に対する正誤を、エピソディック情報を表示した人物の人物ＩＤに関連付けて記憶する。
忘却度判断装置６０は、また、記憶した正誤に基づいて会議出席者毎に忘却度を特定する。
【０１４４】
その後、忘却度判断装置６０は、忘却度を情報データベース７０へ、システムユーザを識別する情報と参加者の人物ＩＤと関連付けて蓄積する。
【０１４５】
情報データベース７０は、例えば、リレーショナルデータベースで構成される。
情報データベース７０は、情報抽出装置５０、忘却度判断装置６０及び情報検索装置８０に接続されている。
【０１４６】
ここで、情報データベース７０の構成ついて図１６を参照して説明する。
図１６は、情報データベース７０の構成を観念的に説明する為の図である。
図１６に示すように、情報データベース７０は、本システムのシステムユーザそれぞれに対しユーザ情報ＩＵを蓄積している。
【０１４７】
ユーザ情報ＩＵは、会議情報ＩＭと全体指標ＩＸＡからなる。
会議情報ＩＭは、処理済会議毎に蓄積された会議書誌情報、会議の出席者の個人情報及びエピソディック情報ＩＥから成る。
【０１４８】
エピソディック情報ＩＥは、代表ショット情報、サムネイル、対話回数、発言回数及び会議指標ＩＸＭから成る。
会議指標ＩＸＭ及び全体指標ＩＸＡは、情報検索装置８０による検索処理を容易にする為、情報抽出装置５０又は忘却度判断装置６０によって集計、蓄積される情報である。
尚、全体指標ＩＸＡは処理済会議の出席者毎に情報データベース７０へ蓄積される。
【０１４９】
情報検索装置８０は、例えば、パーソナルコンピュータで構成される。
情報検索装置８０は、情報データベース７０、情報抽出装置５０、表示装置９０及び出音装置１００と接続している。
【０１５０】
また、図示は省略するが、情報検索装置８０はマウス及びキーボードにも接続されている。
オペレータは、情報検索装置８０に接続されたポインティングディバイスやキーボードを操作することで、情報検索装置８０へ検索条件又は表示条件入力する。
【０１５１】
次に、情報検索装置８０は、情報抽出装置５０へ表示集計コマンドを送信する。
情報検索装置８０が情報抽出装置５０へ表示集計コマンドを送信した場合には、情報検索装置８０は、情報抽出装置５０から集計終了通知を受信した後に検索処理を実行する。
情報検索装置８０の実行する検索処置は、入力された検索条件及び表示条件に従ってなされる。
尚、検索処理の具体的な説明は後述する。
【０１５２】
表示装置９０は、例えば、液晶表示装置又はＣＲＴ等で構成される。
表示装置９０は、情報検索装置８０に接続されている。
表示装置９０は、情報検索装置８０の行った検索の結果を表示する。
尚、表示処理の具体的な説明は後述する。
【０１５３】
出音装置１００は、例えば、スピーカ等で構成される。
出音装置１００は、情報検索装置８０に接続されている。
出音装置１００は、情報検索装置８０の行った検索の結果を出音する。
【０１５４】
ここで、情報検索装置８０の検索動作、表示装置９０の表示及び出音装置１００の出音について図１７ないし２１に示す画面構成図を参照して説明する。
ここで、図１７は、名簿表示画面を説明する為の画面構成図である。
図１８は、名簿表示画面におけるエピソディック情報表示画面を説明する為の図である。
図１９は、出席者表示画面を説明する為の画面構成図である。
図２０は、出席者表示画面おけるエピソディック情報表示画面を説明する為の図である。
図２１は、時系列表示画面を説明する為の画面構成図である。
図２２は、検索表示画面を説明する為の画面構成図である。
図２３は、忘却者表示画面を説明する為の画面構成図である。
【０１５５】
先ず、本情報システムを使用するシステムユーザ（以下、使用ユーザと言う）が最初にログインした場合に表示される初期画面の表示方法及び操作方法について説明する。
図１７に示すように、初期画面の表示画面９１はエピソディック情報表示画面９２、個人情報表示画面９３、会議書誌情報表示画面９４及びメニューバー９６から成る。
【０１５６】
また、エピソディック情報表示画面９２は、表示すべきサムネイル及び氏名を氏名の五十音順に基づいて分類表示する。
ここで、この様に氏名の五十音順に基づいて分類表示された表示画面９１を名簿表示画面と言う。
【０１５７】
以下、情報検索装置８０が検索する方法、検索結果を表示装置９０が表示する方法及び出音装置１００が出音する方法について説明する。
先ず、情報検索装置８０は、情報抽出装置５０へ表示集計コマンドを送信する。
この表示コマンドは、情報データベース７０に蓄積された使用ユーザのユーザ情報ＩＵに対して全体指標である最後に同席した会議ＩＤ及び同席回数を情報抽出装置５０が集計するよう命令するものである。
【０１５８】
その後、情報抽出装置５０からの集計終了通知を受領する。
次に、情報検索装置８０は、個人情報である氏名が五十音のあ行から始まる人物の人物ＩＤ、最後に同席した会議で作成されたサムネイル、同席回数及び氏名を、情報データベース７０に蓄積された使用ユーザのユーザ情報ＩＵから検索する。
【０１５９】
ここで、最後に同席した会議で作成されたサムネイルは、情報検索装置８０が、最後の同席会議ＩＤ及び人物ＩＤに基づいて、使用ユーザのユーザ情報ＩＵの会議情報ＩＭを検索することで得られる。
【０１６０】
尚、本実施例の様に、最後に同席した会議で作成されたサムネイルではなく、最初に同席した会議で作成されたサムネイルとする構成を採用する事も可能である。
その後、検索結果を表示装置９０へ送信する。また、情報検索装置８０は、上記サムネイルと人物ＩＤとの関係を記憶しておく。
【０１６１】
表示装置９０は検索結果を受領し、図１７に示すように、エピソディック情報表示画面９２へ検索結果であるサムネイル、同席回数及び氏名を表示する。
また、個人情報表示画面９３及び会議書誌情報表示画面９４には何ら情報を表示しない。
【０１６２】
これにより、表示装置９０は、名簿表示画面を初期状態で表示する。
また、この構成によれば、例えば、会議に関する情報や個人情報を完全に忘却した場合であっても、エピソディック情報から個人情報である氏名を検索することができる。また逆に、エピソディック情報を完全に忘却した場合であっても、個人情報である氏名からエピソディック情報を検索することができる。
【０１６３】
次に、五十音順の「あ」行について表示されたエピソディック情報表示画面９２の表示を使用ユーザが変更させる為の操作について説明する。
【０１６４】
先ず、使用ユーザは、マウス等を操作して表示画面９１上のポインタＰｔを移動させ、五十音ボタンＢＴＧを操作する。
例えば、氏名が五十音の「か行」から始まる人物のサムネイル等をエピソディック情報表示画面９２へ表示させるには、使用ユーザは、「か」と表示された五十音ボタンＢＴＧ２を選択する。
【０１６５】
その後、情報検索装置８０は、個人情報である氏名が五十音の「か行」から始まる人物のサムネイル、同席回数、氏名を情報データベース７０から検索し、検索結果を表示装置９０へ送信する。
表示装置９０は、検索結果を受領し、エピソディック情報表示画面９２へ検索結果を表示する。
【０１６６】
次に、エピソディック情報表示画面９２に表示されたサムネイル又は氏名で識別される出席者について、使用ユーザが、個人情報及び会議書誌情報を検索する為の操作について説明する。
図１８に示すように、システムユーザは、ポインタＰｔによりエピソディック情報表示画面９２のサムネイルＭＳＮを操作する。
【０１６７】
その後、情報検索装置８０は、選択されたサムネイルによって識別される人物の人物ＩＤに基づいて、選択された人物が出席した会議の開催日、会議書誌情報及び選択された人物の個人情報を情報データベース７０の使用ユーザのユーザ情報ＩＵから検索する。
また、取得した会議書誌情報を会議の開催日でソートする。
次に、情報検索装置８０は検索結果を表示装置９０へ送信する。
【０１６８】
尚、選択された人物が出席した会議を検索するには、情報検索装置８０は、情報データベース７０に蓄積された使用ユーザのユーザ情報ＩＵに蓄積された会議書誌情報から、会議書誌情報の会議出席者に、選択された人物の人物ＩＤを蓄積していると言う条件で検索する。
【０１６９】
また、選択された人物の個人情報を検索するには、情報検索装置８０は、情報データベース７０に蓄積された使用ユーザのユーザ情報ＩＵから、全体指標である最後の同席会議ＩＤを取得する。
【０１７０】
その後、情報検索装置８０は、使用ユーザのユーザ情報ＩＵから、取得した会議ＩＤで識別される会議情報ＩＭに蓄積された個人情報を、選択された人物の人物ＩＤに基づいて検索する。
【０１７１】
次に、表示装置９０は検索結果を受領し、図１７に示すように、個人情報表示画面９３へ選択された人物の個人情報を表示する。
また、会議書誌情報表示画面９４へ選択された人物が出席した会議の会議書誌情報を時系列に沿って一覧表示する。
【０１７２】
この構成によれば、例えば、会議に関する情報や個人情報を完全に忘却した場合であっても、エピソディック情報から個人情報である氏名を検索することができる。
【０１７３】
次に、使用ユーザが選択した人物の代表ショットを確認する為の操作について説明する。
図１８に示すように、使用ユーザは、ポインタにより代表ショット表示ボタンＢＴＰを操作し、代表ショットを表示又は出音する人物を選択する。
【０１７４】
その後、情報検索装置８０は、使用ユーザのユーザ情報ＩＵに対して全体指標である総対話回数及び総発言回数を集計するように、情報抽出装置５０へ表示集計コマンドを送信する。
その後、情報抽出装置５０から集計終了通知を受領する。
【０１７５】
次に、情報検索装置８０は、使用ユーザのユーザ情報ＩＵから、選択された人物の人物ＩＤに基づいて、全体指標ＩＸＡである最後の同席会議ＩＤ、総対話回数及び総発言回数取得する。
さらに、情報検索装置８０は、使用ユーザのユーザ情報ＩＵから、最後の同席会議ＩＤに基づいて、会議情報ＩＭを検索し、代表ショット情報を取得する。
【０１７６】
その後、会議データベース４０から代表ショット情報で識別される撮像ファイルＦＭ及び収音ファイルＦＡを取得し、代表ショットを取得する。
【０１７７】
次に、情報検索装置８０は、表示装置９０へ検索結果及び取得した代表ショット画像を送信し、出音装置１００（以下、単にスピーカと言う）に代表ショット音声を送信する。
表示装置９０は、選択された人物の総対話回数、総発言回数及び代表ショット画像を表示し、スピーカ１００は代表ショット音声を出音する。
【０１７８】
この構成によれば、例えば、エピソディック情報を完全に忘却した場合であっても、会議に関する情報や個人情報からエピソディック情報を検索することができる。
【０１７９】
さらに、この構成によれば、システムユーザは、会議の出席者の個人情報を対話時の音声や対話内容に基づいて検索することができる。特に、対話内容は記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
同様に、この構成によれば、システムユーザは、会議の出席者の個人情報を発言時の音声や発言内容に基づいて検索することができる。特に、発言内容は対話内容に次いで記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【０１８０】
さらに、この構成によれば、システムユーザは、会議の出席者の個人情報を対話時の容姿に基づいて検索することができる。特に、対話時における人物の容姿は印象に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
同様に、この構成によれば、システムユーザは、会議の出席者の個人情報を発言時の容姿に基づいて検索することができる。特に、発言時における人物の容姿は、対話時の容姿に次いで印象に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【０１８１】
また、この構成によれば、システムユーザは、例えば、個人情報の氏名の一部しか記憶していない会議出席者について個人情報を検索する為の検索条件を容易に設定することができる。
【０１８２】
次に、使用ユーザが、会議書誌情報からエピソディック情報を検索する為の操作について説明する。
先ず図１９に示すように、使用ユーザは、ポインタＰｔにより会議書誌情報表示画面９４に一覧表示された会議書誌情報の一を選択する。
これにより、会議の出席者に関するサムネイル等の情報を、エピソディック情報表示画面９２へ表示する。
ここで、これにより選択された会議を選択会議を言い、このような画面を出席者表示画面と言う。
【０１８３】
その後、情報検索装置８０は、選択会議の参加者の個人情報である氏名、エピソディック情報であるサムネイル及び対話回数並びに会議で使用されたスライドを検索する。
また、情報検索装置８０は、サムネイルと人物ＩＤの関係を記憶しておく。
【０１８４】
上記検索の方法について以下説明する。
情報検索装置８０は、情報データベース７０に蓄積された使用ユーザのユーザ情報ＩＵから、選択された会議の会議ＩＤに基づいて会議情報ＩＭを検索する。
次に、情報検索装置８０は、検索された会議情報ＩＭから会議の出席者全員の個人情報である氏名及びエピソディック情報であるサムネイル及び対話回数を取得する。
また、スライドは、会議データベース４０に蓄積された会議スライド表ＴＢＬから、選択会議の会議ＩＤを蓄積したレコードを検索することで得られる。
これにより、上記の選択会議の参加者の氏名、サムネイル、対話回数及びにスライドを検索できる。
【０１８５】
その後、情報検索装置８０は、検索結果を表示装置９０へ送信する。
表示装置９０は、図１７に示した名簿表示画面の画面構成から、図１９に示した出席者表示画面の画面構成へ変更する。
【０１８６】
出席者表示画面は、名簿表示画面の有するエピソディック情報表示画面９２、個人情報表示画面９３及び会議書誌情報表示画面９４の他にスライド表示画面９５をさらに表示する点で異なる。
また、出席者表示画面は、エピソディック情報表示画面９２に五十音ボタンＢＴＧを表示しない点で名簿表示画面と異なる。
【０１８７】
その後、表示装置９０は、受信した検索結果であるスライドのサムネイルをスライド表示画面９５に表示する。
その後、使用ユーザがポインタでスライドサムネイルを操作すると、表示画面１００はスライドを表示する。
また、選択会議の出席者の氏名、サムネイル及び対話回数をエピソディック情報表示画面９２へ表示する。
【０１８８】
この構成によれば、例えば、エピソディック情報を完全に忘却した場合であっても、会議に関する情報や個人情報からエピソディック情報を検索することができる。
【０１８９】
次に、使用ユーザが、選択した会議において選択した人物の代表ショットを確認する為の操作について説明する。
尚、上記で説明した代表ショットを確認する為の操作と以下で説明する操作とは、選択した会議における代表ショットを確認する点で異なる。
先ず、図２０に示すように、使用ユーザは、ポインタにより代表ショット表示ボタンＢＴＰを操作することで、代表ショットを表示及び出音する出席者を選択する。
【０１９０】
その後、情報検索装置８０は、選択された人物の人物ＩＤ及び選択会議の会議ＩＤに基づいて、情報データベース７０の使用ユーザのユーザ情報ＩＵから、選択会議における選択された人物の代表ショット情報、対話回数及び発言回数を取得する。
次に、会議データベース４０から代表ショット情報で識別される撮像ファイルＦＭ及び収音ファイルＦＡを取得し、代表ショットを取得する。
【０１９１】
情報検索装置８０は、表示装置９０へ検索結果である対話回数、発言回数及び取得した代表ショット画像を送信し、スピーカ１００へ代表ショット音声を送信する。
表示装置９０は、検索結果を受信する。その後、表示装置９０は、検索結果である対話回数、発言回数及び代表ショット画像を表示し、スピーカ１００は代表ショット音声を出音する。
【０１９２】
この構成によれば、例えば、エピソディック情報を完全に忘却した場合であっても、会議に関する情報や個人情報からエピソディック情報を検索することができる。
【０１９３】
尚、五十音順で表される初期画面へ表示を切替える場合には、使用ユーザは、ポインタにより名簿順表示切替ボタンＢＴＮを操作する。これにより、表示装置９０は名簿表示画面を表示する。
【０１９４】
次に、最後の同席会議の開催日に基づいてサムネイル等を時系列表示する為の使用ユーザの行う操作について説明する。
図１９に示すように、使用ユーザは、ポインタＰｔによりメニューバー９４の表示メニューから時系列表示画面を選択する。
その後、表示装置９０は、図２１に示す時系列表示画面を表示する。
【０１９５】
その後、情報検索装置８０は、使用ユーザのユーザ情報ＩＵに対して全体指標である最後の同席会議ＩＤを集計するように、情報抽出装置５０へ表示集計コマンドを送信する。
その後、情報抽出装置５０から集計終了通知を受領する。
【０１９６】
次に、情報検索装置８０は、使用ユーザのユーザ情報ＩＵから、最後の同席会議ＩＤに基づいて、会議の開催日を取得する。
取得した最後の会議同席日が本年に属すると言う検索条件で、会議同席者のサムネイル及び氏名を検索し、最後の同席日を時系列に従ってソートする。
また、情報検索装置８０は、サムネイルと人物ＩＤの関係を記憶しておく。
【０１９７】
その後、情報検索装置８０は、表示装置９０へ検索結果を送信し、表示装置９０は検索結果を受信する。
次いで、表示装置９０は、サムネイルを最後の同席日の時系列に基づいて一覧表示する。表示できなかった検索結果は、使用ユーザが表示月選択ボタンＢＴＭをポインタＰｔで操作することで表示される。
【０１９８】
さらに、使用ユーザは、ポインタにより代表ショット表示ボタンＢＴＰを操作し、代表ショットを表示する人物を選択する。
これによる情報検索装置８０、表示装置９０及びスピーカ１００の動作及び機能は、上記出席者表示画面におけるものと同一の動作及び機能である。
【０１９９】
また、使用ユーザは、表示年選択ボタンＢＴＹをポインタＰｔで操作する。
その後、情報検索装置８０は、検索条件を、最後の同席日が選択された年に属すると言う条件に変更して再検索する。
その後、検索結果を表示装置９０へ送信し、表示装置９０は受信した検索結果を表示する。
【０２００】
この構成によれば、システムユーザは、例えば、大まかな会議の開催日しか記憶していない会議出席者の個人情報を検索する検索条件を容易に設定することができる。
【０２０１】
次に、使用ユーザが様々な検索条件を設定してサムネイル等を検索する為に使用ユーザが行う操作を説明する。
先ず、使用ユーザは、ポインタＰｔによりメニューバー９６の表示メニューから検索表示画面を選択する。
その後、表示装置９０は、図２２に示す検索表示画面を表示する。
【０２０２】
検索表示画面は、メニューバー９６、結果表示画面９７及び条件設定画面９８からなる。
条件設定画面９８は、検索条件としてエピソディック属性、会議属性及び人物属性を設定することができる。
【０２０３】
エピソディック属性とは、検索条件の内、エピソディック情報に属する情報により設定される条件を言う。
会議属性とは、検索条件の内、会議書誌情報に属する情報により設定される条件を言う。
人物属性とは、検索条件の内、個人情報に属する情報により設定される条件を言う。
【０２０４】
使用ユーザが、検索表示画面の表示を選択した場合、表示装置９０は、先ず、予め定められた検索条件として設定可能な選択肢を表示する。
その後、使用ユーザは、ポインタにより条件設定画面９８に表示されたラジオボタンＢＴＲを操作して、検索条件を設定する。
【０２０５】
検索条件に会議中の座席距離を設定した場合には、情報検索装置８０は、会議指標である会議座席距離を集計するように情報抽出装置５０へ表示集計コマンドを送信する。
その後、情報抽出装置５０から集計終了通知を受領する。
【０２０６】
次に、情報検索装置８０は、設定された座席距離の検索条件に基づいて、使用ユーザのユーザ情報ＩＵの会議情報ＩＭから、会議同席者のエピソディック情報であるサムネイル及び個人情報である氏名を検索する。
【０２０７】
その後、情報検索装置８０は、表示装置９０へ検索結果を送信し、表示装置９０は、検索結果を受信する。
表示装置９０は、受信したサムネイル及び氏名を、結果表示画面９７へ一覧表示する。
この構成によれば、例えば、座席距離の検索条件を３ｍ未満とすることで、システムユーザは、会議において隣席した者の個人情報を検索することができる。
【０２０８】
検索条件に会議中の座席距離を設定しなかった場合には、情報検索装置８０は、情報抽出装置５０へ表示集計コマンドを送信せず、設定された検索条件に従って検索をする。
その後、情報検索装置８０は、表示装置９０へ検索結果を送信し、表示装置９０は、受信した検索結果であるサムネイル及び氏名を、結果表示画面９７へ一覧表示する。
【０２０９】
特に、検索条件に会議中の対話を「最多」に設定した場合には、使用ユーザが過去に対面した処理済会議の出席者から、最も会議における対話回数が最も多かった出席者を検索する。
その後、情報検索装置８０は、表示装置９０へ検索結果を送信し、表示装置９０は、結果表示画面９７へ受信した検索結果であるサムネイル及び氏名を表示する。
尚、対話回数が「最多」である出席者の情報は、情報検索装置８０が、検索結果を対話回数の昇順でソートした場合の先頭レコードと同じ対話回数を有するレコード群を取得することで得られる。
【０２１０】
この構成によれば、例えば、システムユーザは、会議の出席者の内でシステムユーザとの対話回数が最も多かった人物について、個人情報を検索することができる。特に、対話回数が多かったと言う事は記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【０２１１】
また、この構成によれば、表示装置９０は、対話をした出席者とそうでない出席者とを区別して表示することができる。
【０２１２】
同様に、検索条件に会議中の発言を「最多」に設定した場合には場合には、使用ユーザが過去に対面した処理済会議の出席者から、最も会議における発言回数が最も多かった出席者を検索する。
その後、情報検索装置８０は、表示装置９０へ検索結果を送信し、表示装置９０は、結果表示画面９７へ受信した検索結果であるサムネイル及び氏名を表示する。
【０２１３】
この構成によれば、例えば、システムユーザは、会議の出席者の内でシステムユーザとの発言回数が最も多かった人物について、個人情報を検索することができる。特に、発言回数が多かったと言う事は、対話回数が多かった事に次いで記憶に残り易い為、システムユーザが出席者の個人情報を検索し易くなる。
【０２１４】
さらに、使用ユーザは、ポインタにより代表ショット表示ボタンＢＴＰを操作し、代表ショットを表示及び出音する人物を選択する。
これによる情報検索装置８０、表示装置９０及びスピーカ１００の動作及び機能は、上記出席者表示画面におけるものと同一の動作及び機能である。
【０２１５】
最後に、忘却度に基づいてサムネイル等を分類表示する為に、使用ユーザが行う操作を説明する。
先ず、使用ユーザは、ポインタＰｔによりメニューバー９６の表示メニューから被忘却者表示画面を選択する。
その後、表示装置は、被忘却者表示画面を表示する。
【０２１６】
被忘却者表示画面の画面構成は、図２３に示すように、図１７の名簿表示画面の構成とほぼ同一である。
ただし、エピソディック情報表示画面９２には、名簿表示画面の有する五十音ボタンＢＴＧと異なり、忘却度ボタンＢＴＢを有する。
【０２１７】
エピソディック情報表示画面９２は、忘却度が０％以上１０％以下、１０％より大きく２０％以下、２０％より大きく３０％以下と、１０％の忘却度区間に区切って処理済会議出席者のサムネイルを表示する。
尚、忘却度ボタンＢＴＢは、上記区間に対応している。
【０２１８】
ここで、情報検索装置８０、表示装置９０及びスピーカ１００の動作及び機能については、名簿順表示画面と同様である。
よって、この構成によれば、システムユーザは、忘却したエピソディック情報を検索する検索条件を容易に設定することができる。
【０２１９】
尚、上記集計処理、更新処理及び検索処理は、情報抽出装置５０、忘却度判断装置６０及び情報検索装置８０が検索クエリ又は更新クエリ等を作成し、更新クエリ等を実行させることで実現できる。
【０２２０】
上記実施形態では、取得装置１０を構成するビデオカメラが複数台設置された場合について説明したが、これに限定されるわけではなく、ビデオカメラを一台とする構成を採用することも可能である。
【０２２１】
上記実施形態では、取得装置１０を構成するビデオカメラにＣＣＤカメラを用いた場合について説明したが、これに限定されるわけではなく、例えば、ＣＭＯＳイメージセンサを用いたカメラ等を採用することも可能である。
【０２２２】
上記実施形態では、取得装置１０を構成するマイクロフォンに音圧マイクを用いた場合について説明したが、これに限定されるわけではなく、例えば、ムービング・コイル型、リボン型、コンデンサ型又はカーボンマイク型のマイクロフォン等を採用することも可能である。
【０２２３】
上記実施形態では、取得装置１０がＲＦＩＤリーダで構成され、会議参加者の位置情報及び個人情報を取得する実施例について説明した。
しかし、これに限定されるわけではなく、例えば、無線ＬＡＮ又は超音波センサー等であって、個人情報及び会議参加者の位置情報を取得することができるものを採用することも可能である。
【０２２４】
上記実施形態では、取得装置１０が一台のスライド制御装置を有する場合について説明したが、これに限定されるわけではなく、スライド制御装置を複数台とする構成や、まったく配置せず室内の明暗を照度計により記録する構成を採用することも可能である。
【０２２５】
上記実施形態では、記録解析装置２０が発言セグメントを解析し、その解析結果を会議データベース４０へ蓄積する場合について説明した。
しかし、これに限定されるわけではなく、手作業によって発言セグメントを抽出し、会議データベース４０へ蓄積する構成を採用することも可能である。
【０２２６】
上記実施形態では、記録解析装置２０が、会議参加者の位置情報を解析し、会議データベース４０へ蓄積する場合について説明した。
しかし、これに限定されるわけではなく、手作業によって会議参加者の位置情報を会議データベース４０へ蓄積する構成を採用することも可能である。
【０２２７】
上記実施形態では、記録解析装置２０が、スライド切替信号を解析しスライドを表示していた時間情報等を会議データベース４０へ蓄積する場合について説明した。
しかし、これに限定されるわけではなく、手作業によってスライドを表示していた時間情報等を会議データベース４０へ蓄積する構成を採用することも可能である。
【０２２８】
上記実施形態では、取得装置１０が一台のスライド制御装置を有し、スライドがプロジェクタによってスクリーンに表示される場合について説明した。
しかし、これに限定されるわけではなく、液晶ディスプレイ、プラズマディスプレイ又はＣＲＴディスプレイと言った装置によりスライドが表示及び制御される構成を採用することも可能である。
【０２２９】
上記実施形態では、情報抽出装置５０は、情報データベース７０へ、代表ショット情報のみを蓄積する場合に場合について説明した。
しかし、これに限定されるわけではなく、情報抽出装置５０は、情報データベース７０へ代表ショット画像又は代表ショット音声そのものを蓄積する構成を採用することも可能である。
この構成によれば、情報検索装置８０の検索処理速度が向上する。
【０２３０】
上記実施形態では、情報抽出装置５０は、情報データベース７０へ、処理済会議に関する会議書誌情報を蓄積する場合に場合について説明した。
しかし、これに限定されるわけではなく、情報抽出装置５０は、情報データベース７０へ処理済会議に関する会議ＩＤのみを蓄積する構成を採用することも可能である。
この構成によれば、会議データベース４０に蓄積された処理済会議に関する会議書誌情報との整合性を維持することができる。
【０２３１】
上記実施形態では、情報抽出装置５０は、情報データベース７０へ、処理済会議に出席した出席者の個人情報を蓄積する場合に場合について説明した。
しかし、これに限定されるわけではなく、情報抽出装置５０は、情報データベース７０へ出席者の人物ＩＤのみを蓄積する構成を採用することも可能である。
この構成によれば、個人データベース３０に蓄積された個人情報との整合性を維持することができる。
【０２３２】
上記実施形態では、時系列表示画面において、表示装置９０は、システムユーザと出席者が最後に同席した処理済会議の開催日に基づいて、サムネイル等を表示する場合について説明した。
しかし、これに限定されるわけではなく、表示装置９０は、システムユーザと出席者が最初に同席した処理済会議の開催日に基づいて、サムネイル等を表示する構成を採用することも可能である。
また、出席者の出席した処理済会議の開催日に基づいて、同一の出席者のサムネイル等を複数回表示する構成を採用する事も可能である。
【０２３３】
上記実施形態では、検索画面において、表示装置９０は、会議中の対話回数、発言回数及び座席距離等を検索条件として表示し、情報検索装置８０は、表示された検索条件から設定された条件に基づいて検索する場合について説明した。
しかし、これに限定されるわけではなく、表示装置９０は、会議指標である会議座席距離、会議平均距離、会議総対話時間、会議平均対話時間、会議総発言時間又は会議平均発言時間、若しくは、全体指標である平均座席距離、平均距離、総対話回数、平均対話回数、総対話時間、平均総対話時間、平均対話時間、総発言回数、平均発言回数、総発言時間、平均総発言時間、平均発言時間及び忘却度、若しくは、会議書誌情報である会議の開催された地区及び会議室を検索条件として表示し、情報検索装置８０は、表示された検索条件から設定された条件に基づいて検索する構成を採用することも可能である。
【図面の簡単な説明】
【０２３４】
【図１】本発明の一実施形態に係る情報検索システムの構成図である。
【図２】取得装置の構成の一例を示す図である。
【図３】記録解析装置と発言イベント表との関係図である。
【図４】記録解析装置と会議カメラ表との関係図である。
【図５】個人情報と位置情報と会議データベースの関係図である。
【図６】記録解析装置とスライド表示イベント表との関係図である。
【図７】記録解析装置と領域環境表との関係図である。
【図８】記録解析装置とカメラ環境表との関係図である。
【図９】記録解析装置と人物環境表との関係図である。
【図１０】記録解析装置と会議書誌表との関係図である。
【図１１】会議データベースの構成を説明する為の図である。
【図１２】情報抽出装置の動作を示すフローチャートである。
【図１３】ユーザ情報更新処理を示すフローチャートである。
【図１４】代表ショット取得処理を示すフローチャートである。
【図１５】対話回数を取得する方法を説明する為の図である。
【図１６】情報データベースの観念的な構成図である。
【図１７】名簿表示画面を説明する為の画面構成図である。
【図１８】名簿表示画面におけるエピソディック情報表示画面の画面構成図である。
【図１９】出席者表示画面を説明する為の画面構成図である。
【図２０】出席者表示画面おけるエピソディック情報表示画面の画面構成図である
【図２１】時系列表示画面を説明する為画面構成図である。
【図２２】検索表示画面を説明する為の画面構成図である。
【図２３】忘却者表示画面を説明する為画面構成図である。
【符号の説明】
【０２３５】
１０…取得装置
２０…記録解析装置
３０…個人データベース
４０…会議データベース
５０…情報抽出装置（情報抽出手段）
６０…忘却度判断装置（忘却度判断手段）
７０…情報データベース（情報蓄積手段）
８０…情報検索装置（情報検索手段）
９０…表示装置
９１…表示画面
９２…エピソディック情報表示画面
９３…個人情報表示画面
９４…会議書誌情報表示画面
９５…スライド表示画面
９６…メニューバー
９７…結果表示画面
９８…条件設定画面
１００…出音装置
ＡＭ…会議室
ＢＴＢ…忘却度ボタン
ＢＴＧ…五十音ボタン
ＢＴＭ…表示月選択ボタン
ＢＴＮ…名簿順表示切替ボタン
ＢＴＰ…代表ショット表示ボタン
ＢＴＲ…ラジオボタン
ＢＴＹ…表示年選択ボタン
Ｃ…ビデオカメラ
ＣＨ…人物カラム
ＣＭ…会議カラム
ＦＡ…収音ファイル
ＦＭ…撮像ファイル
ＦＳ…スライドファイル
ＧＢ…書誌表グループ
ＧＤ…データファイルグループ
ＧＮ…環境表グループ
ＧＶ…イベント表グループ
ＧＶＭ…移動イベント表
ＧＶＳ…発言イベント表
ＧＶＬ…スライド表示イベント表
ＨＯ…オペレータ
ＨＰ…出席者
ＨＳ…システムユーザ
ＩＤＣ…カメラＩＤ
ＩＤＨ…人物ＩＤ
ＩＤＭ…マイクロフォンＩＤ
ＩＥ…エピソディック情報
ＩＭ…会議情報
ＩＵ…ユーザ情報
ＩＸＡ…全体指標
ＩＸＭ…会議指標
Ｍ…マイクロフォン
ＭＳＮ…サムネイル
Ｏ…原点
Ｐ…プロジェクタ
Ｐｔ…ポインタ
Ｒ…ＲＦＩＤリーダ
Ｓ…スライド制御装置
ＳＣ…スクリーン
ＳＧＳ…発言セグメント
ＳＰＳ…セグメント間隔
ＴＢＣ…会議カメラ表
ＴＢＬ…会議スライド表
ＴＢＭ…会議書誌表
ＴＩＤ…個人情報表
ＴＮＡ…領域環境表
ＴＮＣ…カメラ環境表
ＴＮＨ…人物環境表
ＴＲ…ＲＦＩＤタグ
ＴＳＥ…発言セグメント終了時刻
ＴＳＳ…発言セグメント開始時刻
ＴＶＭ…移動イベント表
ＴＶＳ…発言イベント表
ＶＭＦ…原点から最も遠い頂点
ＶＭＮ…原点から最も近い頂点
【図１】
2007094544.tif 000003
【図２】
2007094544.tif 000004
【図３】
2007094544.tif 000005
【図４】
2007094544.tif 000006
【図５】
2007094544.tif 000007
【図６】
2007094544.tif 000008
【図７】
2007094544.tif 000009
【図８】
2007094544.tif 000010
【図９】
2007094544.tif 000011
【図１０】
2007094544.tif 000012
【図１１】
2007094544.tif 000013
【図１２】
2007094544.tif 000014
【図１３】
2007094544.tif 000015
【図１４】
2007094544.tif 000016
【図１５】
2007094544.tif 000017
【図１６】
2007094544.tif 000018
【図１７】
2007094544.tif 000019
【図１８】
2007094544.tif 000020
【図１９】
2007094544.tif 000021
【図２０】
2007094544.tif 000022
【図２１】
2007094544.tif 000023
【図２２】
2007094544.tif 000024
【図２３】
2007094544.tif 000025