(57)【要約】【課題】会議中に入力された文章情報が誰の入力によるものかを容易に識別することが可能な会議システムおよびそれに関連する技術を提供する。【解決手段】会議システムにおいて、会議中に複数のユーザからのつぶやき情報の入力が受け付けられるとともに、複数のユーザを被写体とする撮影画像ＧＣａ，ＧＣｂが撮影される。また、入力された各つぶやき情報（ＴＷ１，ＴＷ２等）は、撮影画像ＧＣａ，ＧＣｂにおいて、当該各つぶやき情報の入力者である各対応ユーザ（ＵＢ，ＵＥ等）の被写体部分にそれぞれ関連付けて表示される。【選択図】図１０
2012244323.tif 000002
【特許請求の範囲】
【請求項１】
会議システムであって、
会議中に複数のユーザのそれぞれからの文章情報の入力を受け付ける入力手段と、
前記複数のユーザを被写体とする少なくとも１つの撮影画像を撮影する撮影手段と、
前記入力手段により入力された各文章情報を、前記少なくとも１つの撮影画像において、当該各文章情報の入力者である各対応ユーザの被写体部分にそれぞれ関連付けて表示する表示手段と、
を備えることを特徴とする会議システム。
【請求項２】
請求項１に記載の会議システムにおいて、
前記表示手段は、前記各文章情報を前記少なくとも１つの撮影画像に関連付けて表示する第１の表示領域と会議資料を表示する第２の表示領域とを別個に有することを特徴とする会議システム。
【請求項３】
請求項１に記載の会議システムにおいて、
前記表示手段は、会議資料の複数のページのうち、表示中のページに関連付けられた各文章情報を選択的に表示することを特徴とする会議システム。
【請求項４】
請求項１に記載の会議システムにおいて、
前記各文章情報を会議資料における各対応ページに関連付けて記憶する記憶手段、
をさらに備えることを特徴とする会議システム。
【請求項５】
請求項４に記載の会議システムにおいて、
前記入力手段は、前記会議資料における表示対象ページを変更する変更指示をも各ユーザから受け付け、
前記表示手段は、前記変更指示に応答して、会議資料の複数のページのうち、変更後の前記表示対象ページに関連付けられた各文章情報を選択的に表示することを特徴とする会議システム。
【請求項６】
請求項１ないし請求項５のいずれかに記載の会議システムにおいて、
前記表示手段は、前記複数のユーザのそれぞれに対して設けられた複数の表示部であって前記複数のユーザからの文章情報を表示することが可能な複数の表示部を有することを特徴とする会議システム。
【請求項７】
請求項６に記載の会議システムにおいて、
前記入力手段は、前記各文章情報の配信先の人物として、前記複数のユーザのうち少なくとも１人を指定する指定入力を受け付け、
前記表示手段は、前記複数の表示部のうち、前記各文章情報の配信先として指定された人物に対応する表示部に前記各文章情報をそれぞれ表示することを特徴とする会議システム。
【請求項８】
請求項１ないし請求項７のいずれかに記載の会議システムにおいて、
前記入力手段は、前記複数のユーザのそれぞれからの文章情報の入力を受け付ける複数の入力部を有することを特徴とする会議システム。
【請求項９】
請求項１ないし請求項８のいずれかに記載の会議システムにおいて、
前記入力手段は、前記複数のユーザのうちの特定のユーザからの特定の文章情報の入力を受け付け、
前記撮影手段は、前記特定のユーザを被写体として含む特定の撮影画像を撮影する撮像装置を有し、
前記表示手段は、前記特定の撮影画像内において、前記特定ユーザの被写体の表示位置の近傍に前記特定の文章情報を表示することにより、前記特定ユーザの被写体部分に関連付けて前記特定の文章情報を表示することを特徴とする会議システム。
【請求項１０】
請求項１ないし請求項８のいずれかに記載の会議システムにおいて、
前記複数のユーザのそれぞれの位置を測定する測位手段、
をさらに備え、
前記入力手段は、前記複数のユーザのうちの特定のユーザからの特定の文章情報の入力を受け付け、
前記撮影手段は、前記特定のユーザを被写体として含む特定の撮影画像を撮影する撮像装置を有し、
前記ユーザ位置決定手段は、前記特定ユーザの位置と前記撮像装置の位置と前記撮像装置の向きと前記撮像装置の画角とに基づいて、前記特定の撮影画像内における前記特定ユーザの位置を求め、
前記表示手段は、前記特定の撮影画像内において、前記特定ユーザの被写体の表示位置の近傍に前記特定の文章情報を表示することにより、前記特定ユーザの被写体部分に関連付けて前記特定の文章情報を表示することを特徴とする会議システム。
【請求項１１】
会議管理装置であって、
会議中に複数のユーザからそれぞれ入力された各文章情報を取得する第１の取得手段と、
前記複数のユーザを被写体とする少なくとも１つの撮影画像を取得する第２の取得手段と、
前各文章情報を、前記少なくとも１つの撮影画像において、当該各文章情報の入力者である各対応ユーザの被写体部分にそれぞれ関連付けて表示するための表示用データを生成する表示制御手段と、
を備えることを特徴とする会議管理装置。
【請求項１２】
コンピュータに、
会議中に複数のユーザからそれぞれ入力された各文章情報を取得するステップと、
前記複数のユーザを被写体とする少なくとも１つの撮影画像を取得するステップと、
前各文章情報を、前記少なくとも１つの撮影画像において、当該各文章情報の入力者である各対応ユーザの被写体部分にそれぞれ関連付けて表示するための表示用データを生成するステップと、
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、会議システムおよびそれに関連する技術に関する。
【背景技術】
【０００２】
会議システムに関して、たとえば、特許文献１に記載の技術が存在する。
【０００３】
特許文献１に記載の技術においては、２つの遠隔会議用端末装置のそれぞれに「自分の会話エリア」と「相手の会話エリア」とが設けられた画面が表示される。そして、自分の端末装置の「自分の会話エリア」に文字を入力すると、その入力内容が相手方の端末装置における「相手の会話エリア」に表示される。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平５−１９９３１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に記載の技術においては、単に「会話エリア」が２つ列挙されて表示されているのみであり、誰の入力内容か（自他いずれの入力エリアか）を識別することは必ずしも容易ではない。特に、特許文献１に記載の技術は、２人の人物の相互間で情報を交換するものであるため、より多数の参加者が存在する会議ではそのままでは利用することが困難である。
【０００６】
そこで、この発明の課題は、会議中に入力された文章情報が誰の入力によるものかを容易に識別することが可能な会議システムおよびそれに関連する技術を提供することにある。
【課題を解決するための手段】
【０００７】
上記課題を解決すべく、請求項１の発明は、会議システムであって、会議中に複数のユーザのそれぞれからの文章情報の入力を受け付ける入力手段と、前記複数のユーザを被写体とする少なくとも１つの撮影画像を撮影する撮影手段と、前記入力手段により入力された各文章情報を、前記少なくとも１つの撮影画像において、当該各文章情報の入力者である各対応ユーザの被写体部分にそれぞれ関連付けて表示する表示手段と、を備えることを特徴とする。
【０００８】
請求項２の発明は、請求項１の発明に係る会議システムにおいて、前記表示手段は、前記各文章情報を前記少なくとも１つの撮影画像に関連付けて表示する第１の表示領域と会議資料を表示する第２の表示領域とを別個に有することを特徴とする。
【０００９】
請求項３の発明は、請求項１の発明に係る会議システムにおいて、前記表示手段は、会議資料の複数のページのうち、表示中のページに関連付けられた各文章情報を選択的に表示することを特徴とする。
【００１０】
請求項４の発明は、請求項１の発明に係る会議システムにおいて、前記各文章情報を会議資料における各対応ページに関連付けて記憶する記憶手段、をさらに備えることを特徴とする。
【００１１】
請求項５の発明は、請求項４の発明に係る会議システムにおいて、前記入力手段は、前記会議資料における表示対象ページを変更する変更指示をも各ユーザから受け付け、前記表示手段は、前記変更指示に応答して、会議資料の複数のページのうち、変更後の前記表示対象ページに関連付けられた各文章情報を選択的に表示することを特徴とする。
【００１２】
請求項６の発明は、請求項１ないし請求項５のいずれかの発明に係る会議システムにおいて、前記表示手段は、前記複数のユーザのそれぞれに対して設けられた複数の表示部であって前記複数のユーザからの文章情報を表示することが可能な複数の表示部を有することを特徴とする。
【００１３】
請求項７の発明は、請求項６の発明に係る会議システムにおいて、前記入力手段は、前記各文章情報の配信先の人物として、前記複数のユーザのうち少なくとも１人を指定する指定入力を受け付け、前記表示手段は、前記複数の表示部のうち、前記各文章情報の配信先として指定された人物に対応する表示部に前記各文章情報をそれぞれ表示することを特徴とする。
【００１４】
請求項８の発明は、請求項１ないし請求項７のいずれかの発明に係る会議システムにおいて、前記入力手段は、前記複数のユーザのそれぞれからの文章情報の入力を受け付ける複数の入力部を有することを特徴とする。
【００１５】
請求項９の発明は、請求項１ないし請求項８のいずれかの発明に係る会議システムにおいて、前記入力手段は、前記複数のユーザのうちの特定のユーザからの特定の文章情報の入力を受け付け、前記撮影手段は、前記特定のユーザを被写体として含む特定の撮影画像を撮影する撮像装置を有し、前記表示手段は、前記特定の撮影画像内において、前記特定ユーザの被写体の表示位置の近傍に前記特定の文章情報を表示することにより、前記特定ユーザの被写体部分に関連付けて前記特定の文章情報を表示することを特徴とする。
【００１６】
請求項１０の発明は、請求項１ないし請求項８のいずれかの発明に係る会議システムにおいて、前記複数のユーザのそれぞれの位置を測定する測位手段、をさらに備え、前記入力手段は、前記複数のユーザのうちの特定のユーザからの特定の文章情報の入力を受け付け、前記撮影手段は、前記特定のユーザを被写体として含む特定の撮影画像を撮影する撮像装置を有し、前記ユーザ位置決定手段は、前記特定ユーザの位置と前記撮像装置の位置と前記撮像装置の向きと前記撮像装置の画角とに基づいて、前記特定の撮影画像内における前記特定ユーザの位置を求め、前記表示手段は、前記特定の撮影画像内において、前記特定ユーザの被写体の表示位置の近傍に前記特定の文章情報を表示することにより、前記特定ユーザの被写体部分に関連付けて前記特定の文章情報を表示することを特徴とする。
【００１７】
請求項１１の発明は、会議管理装置であって、会議中に複数のユーザからそれぞれ入力された各文章情報を取得する第１の取得手段と、前記複数のユーザを被写体とする少なくとも１つの撮影画像を取得する第２の取得手段と、前各文章情報を、前記少なくとも１つの撮影画像において、当該各文章情報の入力者である各対応ユーザの被写体部分にそれぞれ関連付けて表示するための表示用データを生成する表示制御手段と、を備えることを特徴とする。
【００１８】
請求項１２の発明は、コンピュータに、会議中に複数のユーザからそれぞれ入力された各文章情報を取得するステップと、前記複数のユーザを被写体とする少なくとも１つの撮影画像を取得するステップと、前各文章情報を、前記少なくとも１つの撮影画像において、当該各文章情報の入力者である各対応ユーザの被写体部分にそれぞれ関連付けて表示するための表示用データを生成するステップと、を実行させるためのプログラムであることを特徴とする。
【発明の効果】
【００１９】
請求項１ないし請求項１２に記載の発明によれば、入力された各文章情報が当該各文章情報の入力者の被写体部分にそれぞれ関連付けて表示されるので、当該各文章情報が誰によって入力されたものであるかが判り易い。
【００２０】
特に、請求項２に記載の発明によれば、文章情報が会議資料上に重畳表示される場合に比べて、会議資料の見易さを維持しつつ、文章情報を表示することが可能である。
【００２１】
また特に、請求項３に記載の発明によれば、会議資料の複数のページのうち表示中のページに関連する文章情報が選択的に表示されるので、その他のページに対する文章情報までもが表示される場合に比べて、各文章情報を見易く表示することが可能である。
【００２２】
また特に、請求項５に記載の発明によれば、会議資料の複数のページのうち変更後のページに関連する文章情報が選択的に表示されるので、その他のページに対する文章情報までもが表示される場合に比べて、各文章情報を見易く表示することが可能である。
【００２３】
また特に、請求項７に記載の発明によれば、文書情報の表示先が適切に絞り込まれ得る。
【図面の簡単な説明】
【００２４】
【図１】会議システムの概要を示すシステム構成図である。
【図２】会議システムを示す概念図である。
【図３】ＭＦＰ（会議管理装置）の概略構成を示すブロック図である。
【図４】各コンピュータの概略構成を示す機能ブロック図である。
【図５】つぶやき情報リストを示す図である。
【図６】会議管理装置の動作を示すフローチャートである。
【図７】コンピュータの動作を示すフローチャートである。
【図８】会議の開始直前でのコンピュータの表示画面を示す図である。
【図９】つぶやき情報が撮影画像に重畳されて示される様子を示す図である。
【図１０】複数のつぶやき情報が撮影画像に重畳されて示される様子を示す図である。
【図１１】配信先の指定画面を示す図である。
【図１２】カメラおよび参加者の付近を示す上面図である。
【図１３】撮影画像内における各ユーザの被写体像の位置を示す図である。
【図１４】別のコンピュータの表示画面を示す図である。
【図１５】つぶやき情報の他の表示例を示す図である。
【図１６】他のつぶやき情報リストを示す図である。
【発明を実施するための形態】
【００２５】
以下、本発明の実施形態を図面に基づいて説明する。
【００２６】
＜１．システム構成＞
図１は、会議システム１００の概要を示すシステム構成図である。また、図２は、会議システム１００を示す概念図である。この会議システム１００においては、会議の参加者による「つぶやき情報」（文章情報）が入力されると、当該つぶやき情報に基づいて、会議のつぶやき情報リストＴＬ（図５等参照）が作成される。そして、当該つぶやき情報リストＴＬに基づいて、当該つぶやき情報が当該システムのユーザに向けて配信される。つぶやき情報リストＴＬの作成動作およびつぶやき情報の配信動作等については後に詳述する。
【００２７】
この会議システム１００は、２つの会議管理装置１０（１０ａ，１０ｂ）を備えている。ここでは、後述するように、各会議管理装置１０ａ，１０ｂは、それぞれ、マルチ・ファンクション・ペリフェラル（Multi Function Peripheral）（以後、ＭＦＰとも略称する）として構成される。
【００２８】
一のＭＦＰ１０ａと他のＭＦＰ１０ｂとは、互いに離れた場所（遠隔地）に配置（遠隔配置）されている。例えば、一方のＭＦＰ１０ａは、大阪の会議室ＭＲａに配置され、他方のＭＦＰ１０ｂは、東京の会議室ＭＲｂに配置される。このシステム１００は、遠隔地に配置された複数のＭＦＰ１０等の相互間において画像を送受信し、ＭＦＰ１０に接続されたコンピュータ７０等で当該画像を表示することによって、各種のプレゼンテーションを行う遠隔会議システム（遠隔プレゼンテーションシステムとも称される）である。各ＭＦＰ１０は、それぞれ、通信装置であるとも表現される。また、主に、ＭＦＰ１０ａは、ＭＦＰ１０ｂに対してデータを送信する送信装置として機能し、ＭＦＰ１０ｂは、ＭＦＰ１０ａからのデータを受信する受信装置として機能する。なお、状況によっては、逆に、ＭＦＰ１０ｂが、ＭＦＰ１０ａに対してデータを送信する送信装置として機能し、ＭＦＰ１０ａが、ＭＦＰ１０ｂからのデータを受信する受信装置として機能することもある。
【００２９】
また、２つの会議管理装置１０ａ，１０ｂのうちの一方（ここでは１０ａ）が主管理装置として機能し、他方（ここでは１０ｂ）が副管理装置として機能する。主管理装置１０ａは、種々の情報を統合的に管理する主装置である。副管理装置１０ｂは、主管理装置１０ａで管理される情報を複写して保存しておくなど、種々の情報を補助的に管理する。この実施形態においては、会議管理装置１０ａによって、主な管理動作が実行される場合を例示する。なお、会議管理装置１０ａで実行される各種動作の一部が他方の会議管理装置１０ｂにて適宜に実行されるようにしてもよい。
【００３０】
この会議システム１００は、複数のカメラ３０（３０ａ，３０ｂ）と複数のコンピュータ７０（７０ａ〜７０ｅ，７０ｚ）とをさらに備えている。会議管理装置１０と複数のカメラ３０と複数のコンピュータ７０とは、互いにネットワークＮＷを介して接続されており、ネットワーク通信を行うことが可能である。ここにおいて、ネットワークＮＷは、ＬＡＮ、ＷＡＮ、インターネットなどによって構成される。各装置のネットワークＮＷへの接続形態は、有線接続であってもよく或いは無線接続であってもよい。
【００３１】
各カメラ（撮像装置）３０は、会議における画像（詳細には、本システム１００のユーザ（特に会議参加者）を被写体とする撮影画像）を撮影する。ここでは２台のカメラ３０（３０ａ，３０ｂ）が設けられている。一方のカメラ３０ａは、会議室ＭＲａに配置され、会議室ＭＲａの様子を撮影する。他方のカメラ３０ｂは、他の会議室ＭＲｂに配置され、当該会議室ＭＲｂの様子を撮影する。図２に示すように、カメラ３０ａは、会議室ＭＲａ内の会議参加者（ユーザＵＡ，ＵＢ，ＵＣ）を被写体とする撮影画像ＧＣａを撮影し、カメラ３０ｂは、会議室ＭＲｂ内の会議参加者（ユーザＵＤ，ＵＥ）を被写体とする撮影画像ＧＣｂを撮影する。
【００３２】
また、各カメラ３０は、それぞれの撮影画像を会議管理装置１０（ここでは１０ａ）に送信する。会議管理装置１０ａは、カメラ３０により撮像された撮影画像を動画像として撮影画像格納部５ｂ（図３）に保存する。また、会議管理装置１０ａは、後述するように、当該動画像から抽出した撮影画像（キャプチャした静止画像）をも保存する。
【００３３】
なお、ここでは、カメラ３０は、ネットワークＮＷを介して会議管理装置１０に接続されている場合が示されているが、これに限定されない。たとえば、カメラ３０は、会議管理装置１０に直接的に接続されるようにしてもよい。より詳細には、カメラ３０は、会議管理装置１０の映像信号入力部（詳細には外部入力端子）等を介して、撮影画像（映像信号等）を会議管理装置１０に入力するようにしてもよい。
【００３４】
複数のコンピュータ７０は、たとえば、携帯可能なパーソナルコンピュータとして構成される。各コンピュータ７０（７０ｚ，７０ａ〜７０ｅ）は、複数のユーザ（ＰＺ，ＵＡ〜ＵＥ）のそれぞれに対して設けられる。複数のコンピュータ７０は、それぞれ、表示部（液晶表示部等）７７（図４）を有している。各コンピュータ７０は、会議管理装置１０から送信されてきた各種情報等を、その表示部７７に表示する。
【００３５】
各ユーザは、コンピュータ７０の表示部７７に表示された画像（表示画像）によって、会議に関する各種の情報（資料データおよび後述する「つぶやき情報」等）を視認することができる。
【００３６】
また、この会議システムにおいては、マイク６２（図２）等による音声信号が各会議管理装置１０ａ，１０ｂを介して、各コンピュータ７０に転送される。これによって、会議の発表者（および各参加者）等の音声が各コンピュータの音声出力部（スピーカあるいはヘッドフォン等）から音声出力される。
【００３７】
また、複数のコンピュータ７０は、それぞれ、入力部（キーボードおよびマウス等）を有している。各コンピュータ７０は、その入力部を用いて、当該各コンピュータ７０の使用ユーザ（対応ユーザ）からの文章情報（テキスト情報ないし文字情報とも称する）等の入力を受け付ける。入力された文章情報等は、各コンピュータ７０から会議管理装置１０（１０ａ，１０ｂ）を介して、他のコンピュータ７０等へ転送されて表示される。
【００３８】
この実施形態では、文章情報として「つぶやき情報」が入力される場合を例示する。なお、これに限定されず、その他の種類の文章情報が入力されてもよい。
【００３９】
会議管理装置１０は、この実施形態ではＭＦＰ（マルチ・ファンクション・ペリフェラル（Multi Function Peripheral）として構成されている。
【００４０】
図３は、ＭＦＰ１０の概略構成を示すブロック図である。
【００４１】
図３の機能ブロック図に示すように、ＭＦＰ１０は、画像読取部２、印刷出力部３、通信部４、格納部５、入出力部６およびコントローラ９等を備えており、これらの各部を複合的に動作させることによって、各種の機能を実現する。
【００４２】
画像読取部２は、ＭＦＰ１０の所定の位置に載置された原稿を光学的に読み取って、当該原稿の画像データ（原稿画像とも称する）を生成する処理部である。
【００４３】
印刷出力部３は、印刷対象に関するデータに基づいて紙などの各種の媒体に画像を印刷出力する出力部である。
【００４４】
通信部４は、公衆回線等を介したファクシミリ通信を行うことが可能な処理部である。さらに、通信部４は、通信ネットワークＮＷを介したネットワーク通信が可能である。このネットワーク通信では、ＴＣＰ／ＩＰ（Transmission Control Protocol / Internet Protocol）およびＦＴＰ（File Transfer Protocol）等の各種のプロトコルが利用される。当該ネットワーク通信を利用することによって、ＭＦＰ１０は、所望の相手先との間で各種のデータを授受することが可能である。
【００４５】
格納部５は、ハードディスクドライブ（ＨＤＤ）等の格納装置で構成される。この格納部５には、画像読取部２等で生成された原稿画像（画像データ）が格納される。また、格納部５は、会議情報格納部５ａ、撮影画像格納部５ｂ、端末情報格納部５ｃ、および、つぶやき情報リスト格納部５ｄ等を有している。会議情報格納部５ａは、会議資料（プレゼンテーションデータ等）ＭＤを格納し、撮影画像格納部５ｂは、各カメラ３０で撮影された撮影画像ＧＣを格納する。また、端末情報格納部５ｃは、各コンピュータ（端末装置）７０に関する各種情報（各コンピュータ７０での表示対象ページ、各コンピュータ７０のＧＰＳ位置情報、および各コンピュータ７０によるつぶやき情報の指定配信先に関する情報等）を格納する。さらに、つぶやき情報リスト格納部５ｄは、つぶやき情報リストＴＬを格納する。
【００４６】
入出力部６は、ＭＦＰ１０に対する入力を受け付ける操作入力部６ａと、各種情報の表示出力を行う表示部６ｂとを備えている。
【００４７】
コントローラ９は、ＭＦＰ１０に内蔵され、ＭＦＰ１０を統括的に制御する制御装置である。コントローラ９は、ＣＰＵおよび各種の半導体メモリ（ＲＡＭおよびＲＯＭ等）等を備えるコンピュータシステムとして構成される。コントローラ９は、ＣＰＵにおいて、ＲＯＭ（例えば、ＥＥＰＲＯＭ等）内に格納されている所定のソフトウエアプログラム（以下、単にプログラムとも称する）を実行することによって、各種の処理部を実現する。なお、当該プログラムは、ネットワークを介して提供されてもよく、あるいは、コンピュータ読み取り可能な記録媒体（例えば、ＵＳＢメモリ（ポータブルメモリ）等）を介して提供されてもよい。なお、記録媒体に格納されたプログラムは、ＭＦＰ１０に設けられた読取部（不図示）により、ＭＦＰ１０内に読み込まれ得る。
【００４８】
具体的には、図３に示すように、コントローラ９は、入力制御部２１、ユーザ位置決定部２３、リスト作成部２５、画像合成部２７、および表示制御部２９等を備える。
【００４９】
入力制御部２１は、各コンピュータ７０からの操作入力に基づく指示情報、各コンピュータ７０からのＧＰＳ位置情報（後述）、各カメラ３０からの映像信号（撮影画像）、マイク６２からの音声信号等に関する入力を受け付ける制御部である。入力制御部２１によって各種情報の取得処理が実行される。
【００５０】
ユーザ位置決定部２３は、撮影画像ＧＣ内における各ユーザＵｉの表示位置ＰＮｉを求める処理部である。この表示位置ＰＮｉは、複数のコンピュータ７０のうち各ユーザに対応するコンピュータ７０のＧＰＳ位置情報（後述）等に基づいて求められる。換言すれば、複数の操作入力部７６のうち各ユーザに対応する操作入力部（対応操作入力部）のＧＰＳ位置情報等に基づいて求められる。
【００５１】
リスト作成部２５は、つぶやき情報リストＴＬ（つぶやき情報を管理するデータファイル）を作成する処理部である。
【００５２】
画像合成部２７は、各コンピュータ７０での表示用データを生成する処理部である。画像合成部２７は、つぶやき情報と撮影画像とに関する合成画像等を当該表示用データとして生成する。
【００５３】
表示制御部２９は、会議管理装置１０での表示動作を制御する処理である。また、表示制御部２９は、画像合成部２７等と協働して各コンピュータ７０での表示動作を制御する処理部でもある。表示制御部２９は、画像合成部２７で生成された合成画像を通信部４等を用いて各コンピュータ７０に送信することにより、各コンピュータ７０での表示動作を制御する。
【００５４】
図４は、各コンピュータ７０の概略構成を示す機能ブロック図である。図４に示すように、各コンピュータ７０は、それぞれ、入出力部７５とコントローラ７９とを備えている。
【００５５】
入出力部７５は、各コンピュータ７０に対する入力を受け付ける操作入力部（端末側操作入力部）７６と、各種情報の表示出力を行う表示部（端末側表示部）７７と有している。例えば、キーボードが操作入力部７６として設けられ、ディスプレイが表示部７７として設けられる。あるいは、操作入力部７６および表示部７７の双方として機能する操作パネル（不図示）が入出力部７５として設けられるようにしてもよい。このような操作パネルは、例えば、液晶表示パネルに圧電センサ等が埋め込まれて構成される。
【００５６】
コントローラ７９は、通信制御部７１と入出力制御部７３とを含む各種の処理部を実現する。
【００５７】
通信制御部７１は、ネットワーク通信動作を制御する制御部である。
【００５８】
入出力制御部７３は、入出力部７５の動作を制御する制御部である。具体的には、入出力制御部７３は、ユーザからの操作入力部７６を用いた操作入力の受付動作、および表示部７７における表示動作等を制御する。
【００５９】
各コンピュータ７０の操作入力部７６は、会議中等において、当該各コンピュータ７０のユーザ（つぶやき情報入力者）からの入力をそれぞれ受け付ける。
【００６０】
また、各コンピュータ７０の表示部７７は、会議中等において、複数のユーザ（自ユーザおよび他ユーザの双方を含む）によって入力された「つぶやき情報」を表示することが可能である。特に、当該つぶやき情報は、カメラ３０によって撮影された撮影画像ＧＣ内において、各つぶやき情報の入力者の被写体部分（被写体像部分）にそれぞれ関連付けて表示される。
【００６１】
また、各コンピュータ７０は、ＧＰＳユニット７８をも有している。このＧＰＳユニット７８は、各コンピュータ７０の位置をＧＰＳ（Global Positioning System；全地球測位システム）による測位によって求めることが可能である。なお、各コンピュータ７０の位置は、コンピュータ７０の各操作入力部７６の位置であるとも表現される。
【００６２】
＜２．動作＞
つぎに、システム１００によるつぶやき情報リストＴＬ（図５）の作成動作等について図６および図７等を参照しながら詳細に説明する。図６は、会議管理装置１０の動作を示すフローチャートであり、図７は、コンピュータ７０の動作を示すフローチャートである。
【００６３】
会議の開始前においては、つぶやき情報リストＴＬ（図５）の各データ（詳細には、項目名称欄以外の各項目欄）はそれぞれ空白である。なお、その後、時間経過に伴って各ユーザによる「つぶやき情報」が入力されていくと、当該入力に応じて各レコード（１行のデータ）ＲＤが、順次に追加されていく。
【００６４】
また、会議の開始直前においては、各コンピュータの画面には、画面ＧＡ（詳細にはその初期画面ＧＡ０）（図８参照）が表示される。
【００６５】
図８に示すように、画面ＧＡは、撮影画像ＧＣ（ＧＣａ，ＧＣｂ）および各つぶやき情報ＴＷを表示する画像表示領域ＲＧ１と、会議資料ＭＤを表示する資料表示領域ＲＧ２と、自らのつぶやき情報（テキスト情報）ＴＷを入力する入力領域ＲＧ３とを備えている。
【００６６】
画像表示領域ＲＧ１は画面ＧＡ内の左側に設けられ、資料表示領域ＲＧ２と入力領域ＲＧ３とは画面ＧＡ内の右側に設けられる。また、画面ＧＡ内の右側において、資料表示領域ＲＧ２と入力領域ＲＧ３とは上下に配置される。資料表示領域ＲＧ２が上側に配置され、入力領域ＲＧ３は下側に配置される。
【００６７】
これらの領域ＲＧ１，ＲＧ２，ＲＧ３は、互いに異なる領域（別個の領域）として設けられる。ここにおいて、会議資料ＭＤとつぶやき情報ＴＷとが互いに異なる領域ＲＧ１，ＲＧ２に表示されるので、つぶやき情報ＴＷが会議資料ＭＤ上に重畳表示される場合に比べて、会議資料ＭＤの見易さを維持しつつ、つぶやき情報ＴＷを表示することが可能である。
【００６８】
画像表示領域ＲＧ１には、撮影画像ＧＣ（ここでは２つの撮影画像ＧＣａ，ＧＣｂ）が表示される。具体的には、会議室ＭＲａにおける参加者ＵＡ，ＵＢ，ＵＣ等に関する撮影画像ＧＣａが画像表示領域ＲＧ１内の比較的上側に表示され、会議室ＭＲｂにおける参加者ＵＤ，ＵＥ等に関する撮影画像ＧＣｂが画像表示領域ＲＧ１内の比較的下側に表示される。
【００６９】
また、画面右上側に配置された資料表示領域ＲＧ２内においては、会議の資料ＭＤの各ページが選択的に表示される。たとえば、図８においては、会議資料ＭＤの第１ページＰＥ１が資料表示領域ＲＧ２に表示されている。
【００７０】
資料ＭＤの下側には、資料表示領域ＲＧ２における表示対象ページに関するページ切換指示を付与する切換ボタンＢＰ，ＢＮが設けられている。詳細には、資料表示領域ＲＧ２における表示中ページの前のページへの表示切換指示を付与する「前ページ」ボタンＢＰと，当該表示中ページの次のページへの表示切換指示を付与する「次ページ」ボタンＢＮとが設けられている。これらの切換ボタンＢＰ，ＢＮの押下に応答して、資料表示領域ＲＧ２における表示対象ページが切り換えられる。たとえば、会議の進行に合わせて各ユーザにより次ページボタンＢＮが押下されると、当該押下に応答して、表示対象ページが次のページに変更される。なお、会議の進行とは無関係のタイミングによる適宜のページへの切換指示にも応答して、表示対象ページは変更され得る。
【００７１】
さらに、画面右下側に配置された入力領域ＲＧ３内においては、入力者（当該コンピュータ７０のユーザ）によって文字（文章情報）が入力される。また、入力領域ＲＧ３には表示先指定ボタンＢＤが設けられている。
【００７２】
この表示先指定ボタンＢＤがユーザによって押下されると、コンピュータ７０は、図１１のような指定画面ＧＢをポップアップ表示する。
【００７３】
この指定画面ＧＢには、ユーザごとにチェックボックスＢＸ０，ＢＸ１１〜ＢＸ１５が設けられている。各チェックボックスＢＸ０，ＢＸ１１〜ＢＸ１５は、それぞれ、ユーザＰＺ，ＵＡ〜ＵＥが配信先であるか否かを指定する入力欄である。チェック印の有無に応じて、各ユーザが配信先であるかが指定される。
【００７４】
たとえば、全てのチェックボックスＢＸ０，ＢＸ１１〜ＢＸ１５のうち、ユーザＵＢ，ＵＥに対応するチェックボックスＢＸ１２，ＢＸ１５のみにチェック印が付されると、ユーザＵＢ，ＵＥが配信先として指定され、その他のユーザＵＡ，ＵＣ，ＵＤ，ＰＺは、配信先から除外される。
【００７５】
また、ここでは、複数のユーザが発表者（プレゼンター）ＰＺと参加者ＵＡ，ＵＢ，ＵＣ，ＵＤ，ＵＥとに分類されている。
【００７６】
チェックボックスＢＸ１１〜ＢＸ１５にチェック印が付され且つチェックボックスＢＸ０のチェック印が外されると、全参加者である５名ユーザＵＡ〜ＵＥが配信先として指定され、発表者ＰＺは配信先から除外される。逆に、チェックボックスＢＸ０にチェック印が付され且つチェックボックスＢＸ１１〜ＢＸ１５からチェック印が外されると、発表者ＰＺが配信先として指定され、その他の参加者ＵＡ〜ＵＥは配信先から除外される。
【００７７】
このような指定動作は、個別に各チェックボックスにチェック印をマウス操作等で付与するようにしてもよいが、ボタンＢＴ１１〜ＢＴ１３を用いることによって、さらに容易に実現することができる。たとえば、参加者全選択ボタンＢＴ１２の押下に応答して、全参加者ＵＡ〜ＵＥのチェックボックスＢＸ１１〜ＢＸ１５にチェック印が付与される。また、全員選択ボタンＢＴ１１の押下に応答して、全てのユーザ（発表者および参加者の双方を含む）ＰＺ，ＵＡ〜ＵＥのチェックボックスＢＸ０，ＢＸ１１〜ＢＸ１５にチェック印が付与される。さらに、選択全解除ボタンＢＴ１３の押下に応答して、全ユーザＰＺ，ＵＡ〜ＵＥのチェックボックスＢＸ０，ＢＸ１１〜ＢＸ１５のチェック印が解除される。
【００７８】
ユーザによる上述のような指定操作が行われた後、ＯＫボタンＢＴ１６の押下に応答して当該指定内容が確定される。なお、キャンセルボタンＢＴ１５が押下されると、当該指定内容が破棄される。
【００７９】
このように指定画面ＧＢを用いることにより、複数のユーザの中から１人または複数の人物をつぶやき情報ＴＷの配信先の人物として指定する指定入力が行われる。このような指定入力による指定内容は、会議管理装置１０ａに転送され、会議管理装置１０ａにおいて管理される。なお、このような配信先に関する指定操作等は、会議の開始前および開始後（会議中）において、適宜に実行される。
【００８０】
また、会議の開始前においては、各会議管理装置１０ａ，１０ｂおよび各コンピュータ７０においてそれぞれ初期設定動作が実行される。
【００８１】
具体的には、上述のように、配信先に関する各コンピュータ７０からの指定内容が会議管理装置１０ａに向けて送信される。また、各コンピュータ７０のＧＰＳ位置情報も会議管理装置１０ａに向けて送信される。会議管理装置１０ａは、受信した情報（指定内容および位置情報等）を格納部５の端末情報格納部５ｃ内に格納する。さらに、会議管理装置１０ａにおいては、「第１ページ」を会議資料の最初の表示対象ページとして設定する処理等も実行される。なお、以下では、まず、各コンピュータ７０ａ〜７０ｅにおいて、参加者ＵＡ〜ＵＥが配信先として指定され、発表者ＰＺは配信先から除外されている場合を想定する。
【００８２】
その後、会議が開始されると、会議の進行中には、各会議管理装置１０ａ，１０ｂおよび各コンピュータ７０においてそれぞれ次のような動作が実行される。
【００８３】
各コンピュータ７０においては、図７に示すような動作が実行される。
【００８４】
会議の進行中において、各コンピュータ７０のユーザは、各コンピュータ７０の入力部（キーボード等）を用いて、当該各コンピュータの画面ＧＡの入力領域ＲＧ３（図８参照）に任意の文字列（つぶやき情報）を入力することができる。所望の文字列が入力された後に送信ボタンＢＳが押下されることにより、つぶやき情報の入力内容が確定され当該つぶやき情報が入力された旨がコンピュータ７０により判定される。
【００８５】
ステップＳ３１においては、各コンピュータ７０に関する情報の変更が検出される。具体的には、「つぶやき情報」が入力されると、当該つぶやき情報が入力された旨（換言すればコンピュータ７０に関する入力情報が変更された旨）が判定される。また、表示対象ページ（閲覧対象ページ）の切換指示が付与されたときにも、コンピュータ７０に関する入力情報が変更された旨が判定される。さらには、各コンピュータ７０に内蔵されたＧＰＳユニット７８の位置情報が許容範囲を超えて変化した場合には、コンピュータ７０の位置情報が変更された旨が判定される。
【００８６】
ステップＳ３１において各コンピュータ７０に関する情報の変更が検出されない場合には、ステップＳ３３に進む。一方、ステップＳ３１において各コンピュータ７０に関する情報の変更が検出されると、ステップＳ３２に進む。
【００８７】
ステップＳ３２では、ステップＳ３１で検出された変更情報（変更データ）が会議管理装置１０ａに向けて送信される。たとえば、ユーザＵＢにより「つぶやき情報」ＴＷ１（「グラフの結果がおかしいと思うが、どう思いますか？」）が入力されると、当該つぶやき情報ＴＷ１が、変更データとして会議管理装置１０ａに向けて送信される。
【００８８】
ここで、図７の説明を一旦中断し、図６の説明に移行する。
【００８９】
図６は、会議管理装置１０（ここでは会議管理装置１０ａ）の動作を示す図である。会議管理装置１０ａは、まず、ステップＳ１１において、各コンピュータ７０からの更新データが受信されたか否かを判定する。更新データが受信されていないと判定されると、ステップＳ１５に進む。ステップＳ１５では、終了判定が行われる。会議終了等に応じて会議終了指示が説明者等によって付与されると、処理が終了する。一方、処理が未だ継続される場合には再びステップＳ１１に戻る。このようなループ処理においては、各コンピュータ７０からのデータ受信の待機状態が継続する。一方、更新データが受信されると、ステップＳ１１からステップＳ１２に進む。
【００９０】
ステップＳ１２においては、会議管理装置１０ａは、つぶやき情報リストＴＬを更新する。
【００９１】
たとえば、会議資料ＭＤの第１ページの閲覧中に、ユーザＵＢによって、当該閲覧中の対象ページ（第１ページ）に関するつぶやき情報ＴＷ１（「グラフの結果がおかしいと思うが、どう思いますか？」の文字情報）が入力されると、当該つぶやき情報が会議管理装置１０ａに送信される（ステップＳ３１，Ｓ３２）。そして、このステップＳ１２において、つぶやき情報リストＴＬにおいて、図５の最上段のデータ（レコードＲＤ１）が追加される。具体的には、つぶやき情報の「内容」欄には、つぶやき情報ＴＷ１（「グラフの結果がおかしいと思うが、どう思いますか？」）が記録される。また、つぶやき情報の「対象ページ」欄には、「第１ページ」が記録される。つぶやき情報の「対象ページ」は、つぶやき情報の対象ページのページ番号である。このように、つぶやき情報は会議資料ＭＤにおける対応ページに関連付けて記憶される。また、「閲覧ページ」は、閲覧中ページのページ番号であり、「閲覧ページ」欄にも、「第１ページ」が記録される。また、「参加者」欄には、会議の参加者（詳細には、つぶやき情報の入力者）が「ユーザＵＢ」であることを示す識別情報が記録される。また、「表示対象者」欄には、当該つぶやき情報の配信先の人物（表示対象者）に関する指定内容「全参加者」（ユーザＵＡ〜ＵＥ）が記録される。また、「位置情報」には、ユーザＵＢのコンピュータ７０ｂのＧＰＳユニット７８によって取得された位置情報（ＧＰＳ測位情報（緯度経度情報））ＰＧ２が記録される。
【００９２】
また、会議管理装置１０は、カメラ３０により撮影された動画像から、つぶやき情報の入力時点（つぶやき情報の受信時点）における静止画像（キャプチャ画像）を抽出し、抽出した静止画像を当該つぶやき情報に関連付けて格納する。ここでは、当該静止画像（撮影画像）を用いて合成画像（次述）が生成される。
【００９３】
つぎに、ステップＳ１３においては、会議管理装置１０ａは、つぶやき情報を撮影画像に合成した合成画像を作成する。具体的には、会議管理装置１０ａは、つぶやき情報（文字）を含む吹き出し画像と当該つぶやき情報の入力者に関する撮影画像とが合成された合成画像（ここでは静止画像）を作成する。より詳細には、会議管理装置１０ａは、たとえば、撮影画像ＧＣａ内におけるユーザＵＢの被写体部分の位置ＰＮｂを特定する。そして、つぶやき情報ＴＷ１を示す文字列（「グラフの結果がおかしいと思うが、どう思いますか？」）を含む吹き出し画像を、撮影画像ＧＣａ内の位置ＰＮｂに関連付けて（当該位置ＰＮｂの近傍に）表示する合成画像（図９参照）が生成される。
【００９４】
ここにおいて、各ユーザＵｉの撮影画像ＧＣａ内における位置ＰＮｉ（Ｐｘ，Ｐｙ）（図１３参照）は、各ユーザＵｉに対応する各コンピュータ７０の位置情報等に基づいて決定される。より詳細には、各コンピュータ７０の位置情報（ＧＰＳ測位情報）と各カメラ３０（３０ａ，３０ｂ）の位置情報（ＧＰＳ測位情報）と各カメラ３０の向き情報（電子コンパスによる向き情報）と各カメラ３０の画角情報（画角α）とに基づいて、各カメラ３０による撮影画像内における各ユーザＵｉの位置ＰＮｉ（Ｐｘ，Ｐｙ）が求められる。なお、カメラ３０に関する各種情報は、各カメラ３０から会議管理装置１０ａへと送信され、会議管理装置１０ａにおいて管理されているものとする。
【００９５】
例えば、まず、ユーザＵＢの平面位置（緯度経度情報等）Ｐｂは、当該ユーザＵＢに対応するコンピュータ７０ｂのＧＰＳユニット７８による測位情報（ＧＰＳ位置情報）に基づいて特定される。また、各カメラ３０（３０ａ，３０ｂ）のＧＰＳユニット（不図示）による測位情報（ＧＰＳ位置情報）に基づいて、各カメラ３０の平面位置（緯度経度情報等）も特定される。これにより、各コンピュータ７０と各カメラ３０との位置関係（平面的な位置関係）が把握される（図１２参照）。
【００９６】
また、各カメラ３０の向き情報と各カメラ３０の画角情報とにも基づいて、各カメラ３０による撮影範囲が特定される（図１２の破線）。各カメラ３０の向き情報は、各カメラ３０に内蔵された電子コンパス等により測定された向き情報（「南向き」等）であり、当該向き情報に基づいて、カメラの光軸ＡＸの向きが把握される。また、各カメラ３０の画角情報（画角α（ないし焦点距離情報））にも基づくことによって、各カメラ３０（例えば３０ａ）の撮影範囲が、図１２の破線で示される範囲であることが把握される。これらの情報に基づいて、たとえば、カメラ３０ａの撮影範囲内に、３台のコンピュータ７０ａ，７０ｂ，７０ｃが存在することが特定される。
【００９７】
さらに、各カメラ３０による撮影画像内での各コンピュータ７０の水平位置に基づいて、各コンピュータ７０の「撮影画像内での位置」が特定される。たとえば、カメラ３０ａとコンピュータ７０ｂとの幾何学的位置関係等に基づいて、コンピュータ７０ｂの「撮影画像ＧＣａ内での水平方向位置（横方向位置）」が特定される。より詳細には、まず、図１２に示すように直線Ｌｂとカメラの光軸ＡＸとの間の角度θｂが求められると、撮影画像ＧＣａ内での水平方向位置Ｘｂ（図１３）が特定される。なお、直線Ｌｂは、カメラ３０ａの平面位置Ｐｚとコンピュータ７０ｂの平面位置Ｐｂとを結ぶ直線である。この位置Ｘｂは、コンピュータ７０ｂの撮影画像Ｇｃ内での位置（詳細にはそのＰｘ座標）である。水平方向位置Ｘｂは、より詳細には、カメラ３０ａの焦点距離およびその撮像素子の大きさ等にも基づいて特定されればよい。
【００９８】
そして、当該水平方向位置Ｘｂの最も近傍に存在する人物が（コンピュータ７０ｂに対応する）人物ＵＢである、と判定される。そして、この人物ＵＢの位置が、撮影画像ＧＣａ内におけるユーザＵＢの被写体部分の位置ＰＮｂであるとして特定される。なお、撮影画像内における各人物（被写体人物）の位置は、種々の識別技術（例えば顔認識技術等）を用いて特定されればよい。
【００９９】
同様に、直線Ｌａとカメラの光軸ＡＸとの間の角度θａに基づいて、撮影画像内における（コンピュータ７０ａの）水平方向位置Ｘａが特定される。なお、直線Ｌａは、カメラ３０ａの平面位置Ｐｚとコンピュータ７０ａの平面位置Ｐａとを結ぶ直線である。そして、当該水平方向位置Ｘａの最も近傍に存在する人物が（コンピュータ７０ａに対応する）人物ＵＡである、と判定され、この人物ＵＡの位置が、撮影画像ＧＣａ内におけるユーザＵＡの被写体部分の位置ＰＮａ（図１３）であるとして特定される。
【０１００】
また、同様に、直線Ｌｃとカメラの光軸ＡＸとの間の角度θｃに基づいて、撮影画像内における（コンピュータ７０ｃの）水平方向位置Ｘｃが特定される。なお、直線Ｌｃは、カメラ３０ａの平面位置Ｐｚとコンピュータ７０ｃの平面位置Ｐｃとを結ぶ直線である。そして、当該水平方向位置Ｘｃの最も近傍に存在する人物が（コンピュータ７０ｃに対応する）人物ＵＣである、と判定され、この人物ＵＣの位置が、撮影画像ＧＣａ内におけるユーザＵＣの被写体部分の位置ＰＮｃ（図１３）であるとして特定される。
【０１０１】
なお、同様にして、カメラ３０ｂによる撮影画像ＧＣｂ内における各人物ＵＤ，ＵＥの位置ＰＮｄ，ＰＮｅも特定される。
【０１０２】
以上のようにして、各カメラ３０（３０ａ，３０ｂ）による撮影画像ＧＣ（ＧＣａ，ＧＣｂ）内における各ユーザの位置ＰＮｉが求められる。
【０１０３】
このように、各ユーザの位置ＰＮｉは、複数のコンピュータ７０のうち各ユーザに対応するコンピュータの位置情報等に基づいて求められる。
【０１０４】
そして、会議管理装置１０ａは、各ユーザのつぶやき情報を示す文字列（つぶやき情報の内容）を、撮影画像ＧＣ内における各ユーザの被写体部分の位置ＰＮｉに関連付けた合成画像（たとえば静止画像）を生成する。具体的には、当該つぶやき情報の内容を含む吹き出し画像が、当該位置ＰＮｉから引き出された状態で、撮影画像ＧＣａに合成される。なお、当該吹き出し画像は、被写体部分に重畳しないように合成されることが好ましい。
【０１０５】
たとえば、ユーザＵＢによる「つぶやき情報」の内容（「グラフの結果がおかしいと思うが、どう思いますか？」）を含む吹き出し画像ＢＧ（詳細にはＢＧ１）が撮影画像ＧＣａに合成されて、合成画像が生成される（図９参照）。この吹き出し画像ＢＧ１の引き出し線は、位置ＰＮｂから引き出されており、位置ＰＮｂと吹き出し画像ＢＧ１とが関連性を有していること（ひいてはユーザＵＢとつぶやき情報ＴＷ１とが関連性を有していること）が示されている。
【０１０６】
このような合成画像が生成されると、当該合成処理後の画像が配信先（配信対象ユーザに対応するコンピュータ７０）に送信される（ステップＳ１４）。このときの配信対象ユーザは、「つぶやき情報」の配信先（表示先）として当該つぶやき情報の発信者によって予め指定されたユーザであることを条件として決定される。たとえば、「つぶやき情報」の配信先が「全参加者」である場合には、配信対象ユーザは、全ユーザＰＺ、ＵＡ〜ＵＥのうち、説明者ＰＺ以外の参加者ユーザＵＡ〜ＵＥに絞り込まれる。また、配信対象ユーザは、「つぶやき情報」の対象ページを閲覧中のユーザであることをも条件として決定される。たとえば、「つぶやき情報」の配信先が「全参加者」であっても、対象ページ（第１ページ）を閲覧中のユーザがユーザＵＢ，ＵＤ，ＵＥのみである場合には、配信対象ユーザは、「つぶやき情報」の対象ページである第１ページを閲覧中のユーザＵＢ，ＵＤ、ＵＥのみにさらに絞り込まれる。
【０１０７】
次のステップＳ１５では、終了判定が行われる。会議終了等に応じて会議終了指示が付与されると、処理が終了する。一方、処理が未だ継続される場合には再びステップＳ１１に戻る。
【０１０８】
再び図７を参照する。図７のステップＳ３３においては、会議管理装置１０ａからのデータの受信の有無が判定される。データ受信がなされていないと判定される場合には、ステップＳ３５に進む。一方、データ受信がなされたことが判定されると、ステップＳ３４に進む。
【０１０９】
ステップＳ３４では、配信対象ユーザに対応するコンピュータ７０の表示部７７の更新動作が実行される。
【０１１０】
たとえば、ユーザＵＢによる上述のような「つぶやき情報」が配信されてきた場合には、配信先のコンピュータ７０（例えば、７０ａ〜７０ｅ）の表示部には、たとえば図９のような画面が表示される。
【０１１１】
図９に示されるように、当該コンピュータ７０の表示部は、撮影画像ＧＣａ内のユーザＵＢに対応する位置に関連付けて「つぶやき情報」を表示する。詳細には、撮影画像ＧＣａ内におけるユーザＵＢの被写体の表示位置ＰＮｂに関連付けて、つぶやき情報ＴＷ１（「グラフの結果がおかしいと思うが、どう思いますか？」の文字情報）が表示される。詳細には、撮影画像ＧＣａ内において、当該つぶやき情報ＴＷ１に係る文字を含む吹き出し画像ＢＧ１が、当該つぶやき情報ＴＷ１の入力ユーザＵＢの被写体の表示位置ＰＮｂの近傍に表示される。
【０１１２】
その後、ステップＳ３５では、終了判定が行われる。会議終了等に応じて会議終了指示が付与されると、処理が終了する。一方、処理が未だ継続される場合には再びステップＳ３１に戻る。
【０１１３】
このような動作が順次に実行されることによって、各つぶやき情報がそれぞれの指定配信先に配信され、当該指定配信先で表示される。
【０１１４】
たとえば、ユーザＵＥによって「私もグラフの結果がおかしいと思う。」との内容のつぶやき情報ＴＷ２がコンピュータ７０ｅに入力されると、当該つぶやき情報ＴＷ２が会議管理装置１０ａに転送される（ステップＳ３１，Ｓ３２）。そして、当該つぶやき情報ＴＷ２は、会議管理装置１０ａ内のつぶやき情報リストＴＬにレコードＲＤ２として格納される（ステップＳ１２）。会議管理装置１０ａは、つぶやき情報リストＴＬ等に基づいて合成画像データを生成し（ステップＳ１３）、当該合成画像データを指定配信先（コンピュータ７０）に配信する（ステップＳ１４）。指定配信先のコンピュータ７０は、当該合成画像データに基づいて、その表示部での表示内容を図１０に示すような内容に更新する（ステップＳ３３，Ｓ３４）。具体的には、ユーザＵＥにより入力されたつぶやき情報ＴＷ２が、指定配信先の各コンピュータ７０（例えば７０ａ〜７０ｅ）の表示部において、当該つぶやき情報ＴＷ２の入力者ＵＥの被写体部分（撮影画像ＧＣｂ内のユーザＵＥの被写体部分）にそれぞれ関連付けて表示される。詳細には、撮影画像ＧＣｂ内において、当該つぶやき情報ＴＷ２に係る文字を含む吹き出し画像ＢＧ２が、当該つぶやき情報ＴＷ２の入力ユーザＵＥの被写体の表示位置ＰＮｅの近傍に表示される。
【０１１５】
なお、指定配信先以外のコンピュータ７０においては、つぶやき情報は表示されない。たとえば、全ての参加者ＵＡ〜ＵＥのコンピュータ７０ａ〜７０ｅに図１０のような画面が表示されている時点においても、図１４に示すように、説明者ＰＺのコンピュータ７０ｚ（非配信先）には、説明者ＰＺ以外のユーザ（参加者のみ）を配信先として指定する「つぶやき情報」は、表示されない。
【０１１６】
このように、複数のコンピュータ７０（複数の表示部７７）のうち、各つぶやき情報の配信先として指定された人物に対応するコンピュータ（詳細にはその表示部７７）にのみ、各つぶやき情報が表示される。これによれば、つぶやき情報の表示先が適切に絞り込まれる。たとえば、受信側のユーザにとっては、不要なつぶやき情報でその表示画面が占拠されることが抑制される。また、送信側のユーザにとっては、つぶやき情報の配信先を自らの意図にしたがって適切に絞り込むことが可能である。
【０１１７】
また、上記においては、つぶやき情報の配信先が「参加者」である場合について主に例示されている。一方、つぶやき情報の配信先が「説明者」のみである場合には、次のような処理が実行される。
【０１１８】
たとえば、ユーザＵＡによって「項目１の説明をもう一度して欲しい。」との内容のつぶやき情報ＴＷ２１がコンピュータ７０ａに入力されると、当該つぶやき情報ＴＷ２１が会議管理装置１０ａに転送され（ステップＳ３１，Ｓ３２）、会議管理装置１０ａ内のつぶやき情報リストＴＬ（図５）にレコードＲＤ２１として格納される（ステップＳ１２）。会議管理装置１０ａは、つぶやき情報リストＴＬ等に基づいて合成画像データを生成し（ステップＳ１３）、当該合成画像データを指定配信先（コンピュータ７０ｚのみ）に配信する（ステップＳ１４）。指定配信先のコンピュータ７０ｚは、当該合成画像データに基づいて、その表示部での表示内容を更新する（ステップＳ３３，Ｓ３４）。具体的には、ユーザＵＡにより入力されたつぶやき情報ＴＷ２１が、指定配信先のコンピュータ７０（７０ｚ）の表示部７７において、当該つぶやき情報の入力者ＵＡの被写体部分に関連付けて表示される（図１５参照）。詳細には、撮影画像ＧＣａ内において、当該つぶやき情報ＴＷ２１に係る文字を含む吹き出し画像ＢＧ２１が、当該つぶやき情報ＴＷ２１の入力ユーザＵＡの被写体の表示位置ＰＮａの近傍に表示される。なお、この時点では、図１５に示す複数のつぶやき情報のうち、ユーザＵＡのつぶやき情報のみが表示されている。
【０１１９】
同様に、ユーザＵＢによって「グラフの説明をして欲しい。」との内容のつぶやき情報ＴＷ２２がコンピュータ７０ｂに入力され、ユーザＵＤによって「項目２の説明がよくわかりません。」との内容のつぶやき情報ＴＷ２３がコンピュータ７０ｄに入力されると、当該各つぶやき情報ＴＷ２２，ＴＷ２３が会議管理装置１０ａに転送される（ステップＳ３１，Ｓ３２）。各つぶやき情報ＴＷ２２，ＴＷ２３は、会議管理装置１０ａ内のつぶやき情報リストＴＬ（図５）にレコードＲＤ２２，ＲＤ２３としてそれぞれ格納される（ステップＳ１２）。会議管理装置１０ａは、つぶやき情報リストＴＬ等に基づいて合成画像データを生成し（ステップＳ１３）、当該合成画像データを指定配信先（コンピュータ７０ｚのみ）に配信する（ステップＳ１４）。指定配信先のコンピュータ７０ｚは、当該合成画像データに基づいて、その表示部での表示内容を更新する（ステップＳ３３，Ｓ３４）。具体的には、各ユーザＵＢ，ＵＤにより入力された各つぶやき情報ＴＷ２２，ＴＷ２３が、指定配信先のコンピュータ７０（７０ｚ）の表示部７７において、当該各つぶやき情報の入力者ＵＢ，ＵＤの被写体部分にそれぞれ関連付けて表示される。詳細には、レコードＲＤ２２のつぶやき情報ＴＷ２２に係る文字を含む吹き出し画像ＢＧ２２がユーザＵＢに関連付けて表示され、レコードＲＤ２３のつぶやき情報ＴＷ２３に係る文字を含む吹き出し画像ＢＧ２３がユーザＵＤに関連付けて表示される。これにより、図１５に示すように、各ユーザＵＡ，ＵＢ，ＵＤによる各つぶやき情報が各つぶやき情報の入力者に関連付けて表示される。
【０１２０】
また、表示対象ページがユーザ操作によって変更される場合にも、各コンピュータ７０における表示内容が更新される。具体的には、会議資料ＭＤにおける表示対象ページを変更する変更指示（ページ切換指示）が各ユーザのコンピュータ７０の操作入力部７６を用いて入力されると、当該ページ切換指示が会議管理装置１０ａに転送される（ステップＳ３１，３２）。当該ページ切換指示の受信に応答して（切換ボタンＢＰ，ＢＮの押下に応答して）、会議管理装置１０ａは、当該コンピュータ７０での表示用データを再生成し（ステップＳ１２，Ｓ１３）、再生成された当該表示用データを当該コンピュータ７０に送信する（ステップＳ１４）。コンピュータ７０は、受信した当該表示用データを用いて、その表示部７７での表示内容を更新する（ステップＳ３３，Ｓ３４）。これにより、表示領域ＲＧ２において会議資料ＭＤの表示対象ページが更新されるとともに、表示領域ＲＧ１での表示内容も更新される。更新後の表示領域ＲＧ１においては、更新後の表示対象ページに関連付けられた各つぶやき情報が表示される。詳細には、当該各ぶつやき情報は、対応する撮影画像ＧＣ（ＧＣａ，ＧＣｂ）に重畳されて表示される。なお、会議の進行とは無関係なページ（過去に表示済みのページ）が表示対象ページとして指定される場合には、表示対象ページに関する最後のつぶやき情報が入力された時点での合成画像（当該時点で抽出された撮影画像（静止画像）に対して、表示対象ページに関する各つぶやき情報が重畳された合成画像）が表示されればよい。
【０１２１】
たとえば、第２ページＰＥ２の閲覧中に第１ページＰＥ１へのページ切換指示がコンピュータ７０ｂから会議管理装置１０ａへと送信される（ステップＳ３２）と、会議管理装置１０ａは、第１ページＰＥ１に関する表示用データを再生成し、当該表示用データをコンピュータ７０ｂに送信する（ステップＳ１３，Ｓ１４）。コンピュータ７０ｂは、ステップＳ３４の処理、すなわち表示更新動作を実行する。これにより、コンピュータ７０ｂは、第２ページＰＥ２に関する会議資料ならびに第２ページＰＥ２に関する撮影画像（例えば静止画像）およびつぶやき情報が表示された状態から、第１ページＰＥ１に関する会議資料ならびに第１ページＰＥ１に関する撮影画像（例えば静止画像）およびつぶやき情報ＴＷ１，ＴＷ２が表示された状態へと遷移する。
【０１２２】
このように、各コンピュータ７０の表示部７７においては、会議資料ＭＤの複数のページのうち表示中のページ（変更後のページ）に関連付けられた各文章情報（つぶやき情報）が選択的に表示される。また、会議資料ＭＤの複数のページのうち非表示中のページに関連付けられた各文章情報は表示されない。これによれば、会議資料ＭＤの複数のページのうち表示中のページに関連する文章情報が選択的に表示されるので、その他のページ（非表示中のページ（更新後の表示対象ページ以外のページ等））に対する文章情報までもが常に表示される場合に比べて、各文章情報を見易く表示することが可能である。
【０１２３】
また、各コンピュータ７０に内蔵されたＧＰＳユニット７８の位置情報が許容範囲を超えて変化した場合にも、各コンピュータ７０における表示内容が更新される。具体的には、或るユーザがコンピュータ７０とともに所定時点での存在位置から一定距離（例えば１メートル）以上移動した場合には、当該ユーザの位置情報が更新され、更新後の位置情報が会議管理装置１０ａに転送される（ステップＳ３１，３２）。当該更新後の位置情報の受信に応答して、会議管理装置１０ａは、各コンピュータ７０での表示用データをそれぞれ再生成し（ステップＳ１２，Ｓ１３）、再生成された当該表示用データをそれぞれ各コンピュータ７０に送信する（ステップＳ１４）。各コンピュータ７０は、受信した当該表示用データを用いて、その表示部７７での表示内容を更新する（ステップＳ３３，Ｓ３４）。これによれば、会議中において各コンピュータ７０の位置が同一（換言すれば、各ユーザの位置が同一）である場合のみならず、複数のコンピュータ７０の一部もしくは全部が移動する場合にも、表示領域ＲＧ１における「つぶやき情報の表示位置」を簡易に（自動的に）調整すること等が可能である。
【０１２４】
以上のような態様によれば、各コンピュータ７０の操作入力部７６により入力された各つぶやき情報（文章情報）が当該各つぶやき情報の入力者の被写体部分にそれぞれ関連付けて表示される（図１０および図１５等参照）ので、当該各つぶやき情報が誰によって入力されたものであるかが判り易い。特に、複数のつぶやき情報が、互いに異なる入力者によって入力される場合にも、当該複数のつぶやき情報のそれぞれが誰によって入力されたものであるかが判り易い。また特に、入力者を被写体とする撮影画像を用いて当該入力者が示されているので、高い臨場感を有するユーザインターフェイスが提供される。さらに、撮影画像内において、各つぶやき情報がその入力ユーザの被写体の表示位置の近傍に表示されるので、当該各つぶやき情報が誰によって入力されたものであるかが非常に判り易い。
【０１２５】
＜３．変形例等＞
以上、この発明の実施の形態について説明したが、この発明は上記説明した内容のものに限定されるものではない。
【０１２６】
たとえば、上記実施形態においては、つぶやき情報を含む合成画像が静止画像として生成される場合が例示されているが、これに限定されず、つぶやき情報を含む合成画像が動画像として生成されるようにしてもよい。
【０１２７】
また、上記実施形態では、各ユーザによる個別のページ切換指示に応答して、各ユーザの表示領域ＲＧ１の表示内容等が更新される場合を例示しているが、これに限定されない。たとえば、説明者によるページ切換指示等に応答して、各ユーザの表示領域ＲＧ１の表示内容等が一斉に更新されるようにしてもよい。
【０１２８】
また、つぶやき情報の配信先は、「（全）参加者」単位あるいは「（全）説明者」単位で指定される場合に限定されず、つぶやき情報の配信先は、個々のユーザ単位で指定されるようにしてもよい。たとえば、図１６に示すように、ユーザＵＢは、ユーザＵＥのみを配信先として指定するようにしてもよい。同様に、ユーザＵＥは、ユーザＵＢのみを配信先として指定するようにしてもよい。なお、図１６のように配信先が指定された場合には、図１０と同様に、レコードＲＤ１，ＲＤ２の内容を反映した表示画面がユーザＵＢ，ＵＥの各コンピュータ７０ｂ，７０ｅに表示される。一方、他のユーザＵＡ，ＵＣ，ＵＤ，ＰＺの各コンピュータ７０ａ，７０ｃ，７０ｄ，７０ｚの表示画面には、レコードＲＤ１，ＲＤ２の内容は反映されない。
【０１２９】
また、上記実施形態においては、２つの拠点の相互間における遠隔会議に上記思想が適用される場合を例示したが、これに限定されない。例えば、一カ所で行われる会議に上記の思想を適用するようにしてもよい。
【０１３０】
また、上記実施形態においては、５人の人物（参加者）に対して、拠点ごとに１台ずつの合計２つのカメラ３０が設けられる場合が例示されているが、これに限定されない。たとえば、５人の人物に対して単一のカメラ３０のみが設けられ、当該単一のカメラ３０で全ユーザ（特に全参加者）を被写体とする撮影画像が取得されるようにしてもよい。あるいは、５人の人物にそれぞれ１台ずつ合計５台のカメラが設けられ、各ユーザを被写体とする各撮影画像が各カメラ３０で個別に撮影（取得）されるようにしてもよい。このような場合においても、それぞれの撮影画像に含まれる各人物の位置が当該撮影画像内において特定され、つぶやき情報の入力者を被写体として含む撮影画像内において、当該入力者の被写体部分に対応する位置につぶやき情報が関連付けられて表示されることが好ましい。
【０１３１】
また、上記実施形態においては、各カメラ３０の平面位置、各カメラ３０の向き、各カメラ３０の画角に関する情報は、各カメラ３０から会議管理装置１０ａへと送信され、会議管理装置１０ａにおいて管理される場合が例示されているが、これに限定されない。たとえば、各カメラ３０の平面位置、各カメラ３０の向き、各カメラ３０の画角に関する情報は、操作者により（手動で）会議管理装置１０ａに入力されるようにしてもよい。
【０１３２】
また、上記実施形態においては、各人物の撮影画像内における位置情報が各コンピュータ７０のＧＰＳ位置情報を用いて決定される場合が例示されているが、これに限定されない。たとえば、各人物の撮影画像内における位置情報が、操作ユーザ（各コンピュータ７０のユーザ、あるいは本システムのオペレータ等）による指定入力に基づいて決定されるようにしてもよい。詳細には、操作ユーザが会議開始準備において各人物の撮影画像ＧＣａ内における位置をマウス等でそれぞれ指定（入力）しておき、会議管理装置１０内に格納するようにすればよい。また、その後は、各会議管理装置１０が自動的に当該人物の位置を追尾するようにしてもよい。詳細には、撮影画像内における各人物を画像処理技術を用いて識別し、撮影画像内において移動する人物を捕捉し追尾すればよい。
【符号の説明】
【０１３３】
１０，１０ａ，１０ｂ  ＭＦＰ（会議管理装置）
３０，３０ａ，３０ｂ  カメラ
７０ａ〜７０ｅ，７０ｚ  コンピュータ
１００  会議システム
ＡＸ  光軸
ＢＤ  表示先指定ボタン
ＢＧ  吹き出し画像
ＢＰ，ＢＮ  切換ボタン
ＢＸ０，ＢＸ１１〜ＢＸ１５  チェックボックス
ＧＣ  撮影画像
ＭＤ  会議資料
ＭＲａ，ＭＲｂ  会議室
ＴＬ  つぶやき情報リスト
ＴＷ  つぶやき情報
ＵＡ〜ＵＥ，ＰＺ  ユーザ
α  画角
【図１】
2012244323.tif 000003
【図２】
2012244323.tif 000004
【図３】
2012244323.tif 000005
【図４】
2012244323.tif 000006
【図５】
2012244323.tif 000007
【図６】
2012244323.tif 000008
【図７】
2012244323.tif 000009
【図８】
2012244323.tif 000010
【図９】
2012244323.tif 000011
【図１０】
2012244323.tif 000012
【図１１】
2012244323.tif 000013
【図１２】
2012244323.tif 000014
【図１３】
2012244323.tif 000015
【図１４】
2012244323.tif 000016
【図１５】
2012244323.tif 000017
【図１６】
2012244323.tif 000018