(57)【要約】【課題】複数の会議参加者の各自が、同時に行われる複数の会議のうち必要な会議に１台の会議装置で参加することを可能とし、各会議の相手側の画面に違和感のない参加者の画像を表示させる。【解決手段】撮影手段により撮影される複数の参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合に、会議毎に分かれて位置する当該複数の参加者を画面に向かって見たときの当該参加者の会議間における位置関係を決定し、決定された位置関係とは逆となる表示上の位置関係で送信撮影画像を複数の会議夫々に対応する画像に分割し、分割された各画像を、対応する会議に用いられる他の会議装置に夫々送信し、複数の会議夫々に対応する受信撮影画像を夫々一または複数の他の会議装置から受信し、決定された位置関係とは逆となる表示上の位置関係で複数の会議夫々に対応させて受信撮影画像を位置させた画像を表示手段が画面に表示する。【選択図】図３
2010028299.tif 000002
【特許請求の範囲】
【請求項１】
会議の参加者が撮影された撮影画像を通信手段を介して他の会議装置との間で送受し、送信される撮影画像である送信撮影画像を撮影する撮影手段と、受信された撮影画像である受信撮影画像を画面に表示する表示手段と、を備える会議装置における会議撮影画像処理方法であって、
前記撮影手段により撮影される複数の前記参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合に、会議毎に分かれて位置する当該複数の参加者を前記画面に向かって見たときの当該参加者の会議間における位置関係を決定する位置関係決定工程と、
前記決定された位置関係とは逆となる表示上の位置関係で前記送信撮影画像を前記複数の会議夫々に対応する画像に分割し、分割された各画像を、対応する会議に用いられる前記他の会議装置に夫々送信し、
前記複数の会議夫々に対応する前記受信撮影画像を夫々一または複数の前記他の会議装置から受信し、前記決定された位置関係とは逆となる表示上の位置関係で前記複数の会議夫々に対応させて前記受信撮影画像を位置させた画像を前記表示手段が前記画面に表示する分割送信・受信表示工程と、
を備えることを特徴とする会議撮影画像処理方法。
【請求項２】
請求項１に記載の会議撮影画像処理方法において、
前記画面上に表示された自己が参加する会議の前記受信撮影画像を前記複数の参加者が夫々見たときの視線が会議間で交差する位置と、前記撮影手段の位置と、が合うよう、前記撮影手段を位置させたことを特徴とする会議撮影画像処理方法。
【請求項３】
請求項１または請求項２に記載の会議撮影画像処理方法において、
前記位置関係決定工程は、前記送信撮影画像上における前記複数の参加者夫々の画像の位置と参加する会議とを特定し、当該位置及び会議に基づいて、前記位置関係を決定することを特徴とする会議撮影画像処理方法。
【請求項４】
請求項１乃至３の何れか１項に記載の会議撮影画像処理方法において、
前記位置関係決定工程において決定された位置関係となるように前記参加者が位置するよう指示する指示情報を当該参加者に対して提示する指示情報提示工程を更に備えることを特徴とする会議撮影画像処理方法。
【請求項５】
請求項１乃至４の何れか１項に記載の会議撮影画像処理方法において、
前記位置関係決定工程において、前記複数の会議夫々における参加人数を特定し、
前記分割送信・受信表示工程において、前記特定された参加人数が他の会議と比較して多い会議に対応する前記受信撮影画像を、当該他の会議に対応する前記受信撮影画像よりも大きく表示することを特徴とする会議撮影画像処理方法。
【請求項６】
請求項１乃至５の何れか１項に記載の会議撮影画像処理方法において、
前記他の会議装置を用いて前記複数の会議のうち少なくとも一つに参加する人数を夫々示す人数情報を通信手段を介して受信する人数情報受信手段と、
前記受信された人数情報に基づいて、前記複数の会議夫々における参加人数を前記他の会議装置を用いる前記参加者の範囲内で特定し、
前記分割送信・受信表示工程において、前記特定された参加人数が他の会議と比較して多い会議に対応する前記受信撮影画像を、当該他の会議に対応する前記受信撮影画像よりも大きく表示することを特徴とする会議撮影画像処理方法。
【請求項７】
請求項３に記載の会議撮影画像処理方法において、
前記分割送信・受信表示工程において、前記複数の参加者の画像が前記分割された複数の画像のうち当該参加者が参加する会議に対応する画像上に夫々含まれるよう前記送信撮影画像を分割することを特徴とする会議撮影画像処理方法。
【請求項８】
請求項３または請求項７に記載の会議撮影画像処理方法において、
前記位置関係決定工程において、画像の位置が特定された前記参加者が参加する会議を示す情報として入力手段を用いて入力された参加会議情報に基づいて、前記複数の参加者の夫々が参加する会議を特定することとを特徴とする会議撮影画像処理方法。
【請求項９】
請求項１乃至８の何れか１項に記載の会議撮影画像処理方法において、
前記撮影手段により撮影される前記参加者全員が一の会議のみに参加するか否かを判定する判定工程と、
前記送信撮影画像を、前記一の会議に用いられる前記他の会議装置に送信し、
前記一の会議に対応する前記受信撮影画像を一または複数の前記他の会議装置から受信し、当該受信撮影画像を前記表示手段が前記画面に表示する非分割送信・受信表示工程と、を更に備え、
前記参加者全員が前記一の会議のみに参加する場合には、前記非分割送信・受信表示工程を行い、
前記複数の参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合には、前記位置関係決定工程と前記分割送信・受信表示工程とを行うことを特徴とする会議撮影画像処理方法。
【請求項１０】
会議の参加者が撮影された撮影画像を通信手段を介して他の会議装置との間で送受する会議装置であって、
送信される前記撮影画像である送信撮影画像を撮影する撮影手段と、
受信された前記撮影画像である受信撮影画像を画面に表示する表示手段と、
前記撮影手段により撮影される複数の前記参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合に、会議毎に分かれて位置する当該複数の参加者を前記画面に向かって見たときの当該参加者の会議間における位置関係を決定する位置関係決定手段と、
前記決定された位置関係とは逆となる表示上の位置関係で前記送信撮影画像を前記複数の会議夫々に対応する画像に分割する分割手段と、
前記分割された各画像を、対応する会議に用いられる前記他の会議装置に夫々送信する送信手段と、
前記複数の会議夫々に対応する前記受信撮影画像を夫々一または複数の前記他の会議装置から受信する受信手段と、
前記決定された位置関係とは逆となる表示上の位置関係で前記複数の会議夫々に対応させて前記受信撮影画像を位置させた画像を前記表示手段に表示させる表示制御手段と、
を備えることを特徴とする会議装置。
【請求項１１】
会議の参加者が撮影された撮影画像を通信手段を介して他の会議装置との間で送受し、送信される撮影画像である送信撮影画像を撮影する撮影手段と、受信された撮影画像である受信撮影画像を画面に表示する表示手段と、を備える会議装置に含まれるコンピュータを、
前記撮影手段により撮影される複数の前記参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合に、会議毎に分かれて位置する当該複数の参加者を前記画面に向かって見たときの当該参加者の会議間における位置関係を決定する位置関係決定手段、
前記決定された位置関係とは逆となる表示上の位置関係で前記送信撮影画像を前記複数の会議夫々に対応する画像に分割する分割手段、
前記分割された各画像を、対応する会議に用いられる前記他の会議装置に夫々送信する送信手段、
前記複数の会議夫々に対応する前記受信撮影画像を夫々一または複数の前記他の会議装置から受信する受信手段、及び、
前記決定された位置関係とは逆となる表示上の位置関係で前記複数の会議夫々に対応させて前記受信撮影画像を位置させた画像を前記表示手段に表示させる表示制御手段、
として機能させることを特徴とする会議処理用プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、会議装置により会議の参加者を撮影し、撮影画像を通信手段を介して他の会議装置との間で送受信して、他の会議装置からの撮影画像を画面に表示する会議装置等の技術分野に関する。
【背景技術】
【０００２】
従来より、遠隔地にいる会議参加者をそれぞれの拠点にあるカメラで撮影し、参加者達の映像を相手方の拠点にあるディスプレイ上に表示させて、互いの顔映像等を見ながら会議をするテレビ会議システムが知られている。
【０００３】
このようなテレビ会議システムにおいては、各参加者が自分専用の会議装置を使用して会議を行うシステムと、１つの拠点や会議室など（以下、「拠点等」と称する）に１台ずつ会議装置を設置し、その拠点等にいる１人または複数の参加者全員が１台の会議装置を使用するシステムとが存在する。
【０００４】
前者のシステムでは、各参加者は自分の会議装置を使用することができるので、複数の会議が同時に行われているときであっても、各自がその中で必要な会議に参加することができる。また、特許文献１に記載されているように、前者のシステムを、１人が同時に複数の会議に参加することができるように構築することも可能である。
【特許文献１】特開平７−１０５１０６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、後者のシステムのように複数の参加者が１台の会議装置を使用する場合においては、複数の会議が同時に行われても、そこいる参加者全員が何れか１つの会議のみに参加することしかできなかった。これを解決するには、会議装置を複数台用意すれば良いが、会議装置を増やす分のコストが必要となる。
【０００６】
仮に、特許文献１に記載の発明を利用したならば、１台の会議装置で複数の参加者それぞれが同時に行われる複数の会議のうち必要な方の会議に参加することができるように見える。
【０００７】
しかしながら、１つの拠点等にいる参加者全員を１台のカメラで撮影することとなるので、他の拠点等にいる会議の相手側は、自分が参加する会議の相手と、同時に行われる別の会議の参加者との両方が映った画像を見ることとなり、しかも、誰が自分の相手であるかを判断することもできない。
【０００８】
また、１つの拠点等にいる参加者全員が会議の相手の画像を見ることができるよう、通常はプロジェクターなどの表示画面が大きい表示装置を用いて相手の画像を表示させる。また、１台のカメラで参加者全員を撮影することができるよう、参加者は横に並んで座ることが一般的である。従って、画面に映っている会議の相手を見る場合、参加者が座る位置や相手の画像の表示位置などによって、その視線がカメラからずれることがある。そうすると、他拠点等の画面に表示される参加者は正面を向いていないものとなるので、他拠点等にいる参加者は違和感をおぼえ、会議の臨場感を損なうという問題が生じる。
【０００９】
そこで、本発明は、以上の点に鑑みてなされたものであり、１台の会議装置で、複数の会議参加者の各自が、同時に行われる複数の会議のうち必要な会議に夫々参加することを可能とし、この場合において、各会議の相手側の画面に違和感のない参加者の画像を表示させることを可能とする会議撮影画像処理方法及び会議装置等を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記課題を解決するために、請求項１に記載の発明は、会議の参加者が撮影された撮影画像を通信手段を介して他の会議装置との間で送受し、送信される撮影画像である送信撮影画像を撮影する撮影手段と、受信された撮影画像である受信撮影画像を画面に表示する表示手段と、を備える会議装置における会議撮影画像処理方法であって、前記撮影手段により撮影される複数の前記参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合に、会議毎に分かれて位置する当該複数の参加者を前記画面に向かって見たときの当該参加者の会議間における位置関係を決定する位置関係決定工程と、前記決定された位置関係とは逆となる表示上の位置関係で前記送信撮影画像を前記複数の会議夫々に対応する画像に分割し、分割された各画像を、対応する会議に用いられる前記他の会議装置に夫々送信し、前記複数の会議夫々に対応する前記受信撮影画像を夫々一または複数の前記他の会議装置から受信し、前記決定された位置関係とは逆となる表示上の位置関係で前記複数の会議夫々に対応させて前記受信撮影画像を位置させた画像を前記表示手段が前記画面に表示する分割送信・受信表示工程と、を備えることを特徴とする。
【００１１】
この発明によれば、参加者の会議間における位置関係が決定され、撮影手段により撮影された送信撮影画像が、この位置関係とは逆の位置関係で各会議夫々に対応して分割され、分割された各画像が、対応する他の会議装置に夫々送信され、各他の会議装置の画面に表示される。また、各会議に用いられる他の会議装置夫々で撮影された受信撮影画像が各他の会議装置から受信され、これらの受信撮影画像が画面に表示される。これによって、１台の会議装置で、複数の参加者の各自が、同時に行われる複数の会議のうち必要な会議に夫々参加することができる。
【００１２】
このとき、各受信撮影画像の画面表示上の位置関係は、決定された位置関係とは逆となる。よって、各参加者が、画面に表示された会議の相手方の画像を見るときの視線は会議間で交差する。ここで、複数の参加者全員が撮影手段の撮影範囲に入るように参加者の座る位置などを決める場合、一般的には、参加者達の中心位置の前方あるいはその付近に撮影手段が位置するようにするものであることから、撮影手段またはその付近を各参加者の視線が通ることとなる。
【００１３】
従って、撮影手段により参加者を撮影すると、各参加者の顔がほぼ正面を向いた画像を撮ることができるので、この画像を画面で見た会議の相手方は違和感を感じることなく会議を行うことができる。
【００１４】
請求項２に記載の発明は、請求項１に記載の会議撮影画像処理方法において、前記画面上に表示された自己が参加する会議の前記受信撮影画像を前記複数の参加者が夫々見たときの視線が会議間で交差する位置と、前記撮影手段の位置と、が合うよう、前記撮影手段を位置させたことを特徴とする。
【００１５】
この発明によれば、各参加者の顔がほぼ真正面を向いた画像を撮ることができる。
【００１６】
請求項３に記載の発明は、請求項１または請求項２に記載の会議撮影画像処理方法において、前記位置関係決定工程は、前記送信撮影画像上における前記複数の参加者夫々の画像の位置と参加する会議とを特定し、当該位置及び会議に基づいて、前記位置関係を決定することを特徴とする。
【００１７】
この発明によれば、各参加者が会議毎にまとまって位置さえすれば、自分の位置をある程度自由にしたとしても、会議装置は、会議毎における参加者の位置関係を特定することができる。
【００１８】
請求項４に記載の発明は、請求項１乃至３の何れか１項に記載の会議撮影画像処理方法において、前記位置関係決定工程において決定された位置関係となるように前記参加者が位置するよう指示する指示情報を当該参加者に対して提示する指示情報提示工程を更に備えることを特徴とする。
【００１９】
この発明によれば、決定された位置関係となるように各参加者が位置するよう指示するメッセージなどが参加者に対して提示されるので、会議装置は、会議毎における参加者の位置関係を任意にまたは画一的に決定することができる。
【００２０】
請求項５に記載の発明は、請求項１乃至４の何れか１項に記載の会議撮影画像処理方法において、前記位置関係決定工程において、前記複数の会議夫々における参加人数を特定し、前記分割送信・受信表示工程において、前記特定された参加人数が他の会議と比較して多い会議に対応する前記受信撮影画像を、当該他の会議に対応する前記受信撮影画像よりも大きく表示することを特徴とする。
【００２１】
複数の会議の参加者全員が撮影手段の撮影範囲に入った場合、自拠点での参加人数が多ければ多い会議ほどその参加者が撮影範囲に占める割合は高くなる。そうすると、例えば、参加人数の多い方の会議の参加者が相対的に左側に位置し、参加人数の少ない方の会議の参加者が相対的に右側に位置した場合には、前者の方の一部の参加者が中央を越えて右側に位置することとなる。このときに、複数の会議の受信撮像画像の大きさを全て同一にして画面に表示すると、各参加者が画面を見る視線が全体的に撮影手段の右側にずれてしまう。
【００２２】
一方、この発明によれば、例えば、自拠点側の参加人数が他の会議と比較して多い会議に対応する受信撮影画像を、当該他の会議に対応する受信撮影画像よりも大きく表示すれば、会議毎の参加人数が互いに異なる場合であっても各参加者の視線が撮影手段からずれることを抑制して、各参加者の顔が向く方向を正面に近づけた画像を撮ることができる。
【００２３】
請求項６に記載の発明は、請求項１乃至５の何れか１項に記載の会議撮影画像処理方法において、前記他の会議装置を用いて前記複数の会議のうち少なくとも一つに参加する人数を夫々示す人数情報を通信手段を介して受信する人数情報受信手段と、前記受信された人数情報に基づいて、前記複数の会議夫々における参加人数を前記他の会議装置を用いる前記参加者の範囲内で特定し、前記分割送信・受信表示工程において、前記特定された参加人数が他の会議と比較して多い会議に対応する前記受信撮影画像を、当該他の会議に対応する前記受信撮影画像よりも大きく表示することを特徴とする。
【００２４】
他の会議装置を用いる参加者全員がカメラ等の撮影範囲に入るためには、その人数が多ければ多いほどカメラ等から参加者までの距離を長くとる必要がある。従って、参加者の人数が多いほどその参加者全員が映った受信撮像画像における１人１人の参加者の画像の大きさは相対的に小さくなる。このときに、複数の会議の受信撮像画像の大きさを全て同一にして画面に表示すると、画面に表示された各参加者の画像は会議毎にまちまちになってしまうことがある。
【００２５】
一方、この発明によれば、相手方の参加人数が他の会議と比較して多い会議に対応する受信撮影画像を当該他の会議に対応する受信撮影画像よりも大きく表示するので、画面に表示された各参加者の画像の大きさが会議間で近づくこととなり、これによって、会議の臨場感を高めることが期待できる。
【００２６】
請求項７に記載の発明は、請求項３に記載の会議撮影画像処理方法において、前記分割送信・受信表示工程において、前記複数の参加者の画像が前記分割された複数の画像のうち当該参加者が参加する会議に対応する画像上に夫々含まれるよう前記送信撮影画像を分割することを特徴とする。
【００２７】
この発明によれば、会議の相手方は、その会議に参加するユーザ全員が確実に映っている撮影画像を見ることができる。
【００２８】
請求項８に記載の発明は、請求項３または請求項７に記載の会議撮影画像処理方法において、前記位置関係決定工程において、画像の位置が特定された前記参加者が参加する会議を示す情報として入力手段を用いて入力された参加会議情報に基づいて、前記複数の参加者の夫々が参加する会議を特定することとを特徴とする。
【００２９】
請求項９に記載の発明は、請求項１乃至８の何れか１項に記載の会議撮影画像処理方法において、前記撮影手段により撮影される前記参加者全員が一の会議のみに参加するか否かを判定する判定工程と、前記送信撮影画像を、前記一の会議に用いられる前記他の会議装置に送信し、前記一の会議に対応する前記受信撮影画像を一または複数の前記他の会議装置から受信し、当該受信撮影画像を前記表示手段が前記画面に表示する非分割送信・受信表示工程と、を更に備え、前記参加者全員が前記一の会議のみに参加する場合には、前記非分割送信・受信表示工程を行い、前記複数の参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合には、前記位置関係決定工程と前記分割送信・受信表示工程とを行うことを特徴とする。
【００３０】
この発明によれば、１台の会議装置で、複数の会議参加者の各自が同時に行われる複数の会議のうち必要な会議に参加することも、複数の会議参加者全員が１つの会議に参加することもできる。
【００３１】
請求項１０に記載の発明は、会議の参加者が撮影された撮影画像を通信手段を介して他の会議装置との間で送受する会議装置であって、送信される前記撮影画像である送信撮影画像を撮影する撮影手段と、受信された前記撮影画像である受信撮影画像を画面に表示する表示手段と、前記撮影手段により撮影される複数の前記参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合に、会議毎に分かれて位置する当該複数の参加者を前記画面に向かって見たときの当該参加者の会議間における位置関係を決定する位置関係決定手段と、前記決定された位置関係とは逆となる表示上の位置関係で前記送信撮影画像を前記複数の会議夫々に対応する画像に分割する分割手段と、前記分割された各画像を、対応する会議に用いられる前記他の会議装置に夫々送信する送信手段と、前記複数の会議夫々に対応する前記受信撮影画像を夫々一または複数の前記他の会議装置から受信する受信手段と、前記決定された位置関係とは逆となる表示上の位置関係で前記複数の会議夫々に対応させて前記受信撮影画像を位置させた画像を前記表示手段に表示させる表示制御手段と、を備えることを特徴とする。
【００３２】
請求項１１に記載の発明は、会議の参加者が撮影された撮影画像を通信手段を介して他の会議装置との間で送受し、送信される撮影画像である送信撮影画像を撮影する撮影手段と、受信された撮影画像である受信撮影画像を画面に表示する表示手段と、を備える会議装置に含まれるコンピュータを前記撮影手段により撮影される複数の前記参加者の中から同時に行われる複数の会議夫々に少なくとも一人ずつが参加する場合に、会議毎に分かれて位置する当該複数の参加者を前記画面に向かって見たときの当該参加者の会議間における位置関係を決定する位置関係決定手段、前記決定された位置関係とは逆となる表示上の位置関係で前記送信撮影画像を前記複数の会議夫々に対応する画像に分割する分割手段、前記分割された各画像を、対応する会議に用いられる前記他の会議装置に夫々送信する送信手段、前記複数の会議夫々に対応する前記受信撮影画像を夫々一または複数の前記他の会議装置から受信する受信手段、及び前記決定された位置関係とは逆となる表示上の位置関係で前記複数の会議夫々に対応させて前記受信撮影画像を位置させた画像を前記表示手段に表示させる表示制御手段、として機能させることを特徴とする。
【発明の効果】
【００３３】
本発明によれば、１台の会議装置で、複数の会議参加者の各自が、同時に行われる複数の会議のうち必要な会議に夫々参加することが可能であり、また、各会議に夫々対応して他の会議端末装置から受信された各受信撮影画像の画面表示上の位置関係は、会議毎における参加者の位置関係とは逆の関係となるので、各会議の相手側の画面に違和感のない参加者の画像を表示させることができる。
【発明を実施するための最良の形態】
【００３４】
以下、本発明の最良の実施形態を図面に基づいて説明する。なお、以下に説明する実施の形態は、会議端末装置に本発明を適用した場合の実施形態である。
【００３５】
［１．会議システムの構成等］
始めに、本実施形態に係る会議システムＳの概要構成等について、図１を用いて説明する。
【００３６】
図１は、本実施形態に係る会議システムの概要構成の一例を示すブロック図である。
【００３７】
図１に示すように、会議システムＳは、１つの会議の設定と同時に２つの会議の設定との切り替えが可能な本発明に係る会議装置の一例としての会議装置１と、他の会議装置の一例としての複数の会議端末装置２（２Ａ、２Ｂ）と、を含んで構成されている。なお、会議端末装置２のうち特定の会議端末装置２を示す場合には、会議端末装置２Ａまたは会議端末装置２Ｂというものとする。
【００３８】
会議装置１及び各会議端末装置２とは、通信手段の一例としてのネットワークＮＷを介して、例えば、通信プロトコルにＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）等を用いて相互にデータの送受信が可能である。なお、ネットワークＮＷは、例えば、インターネットで合っても良いし、専用のネットワークであっても良い。
【００３９】
会議装置１と各会議端末装置２とは、互いに離れた場所に設置されている。例えば、会議装置１は拠点Ｂ１に設置され、会議端末装置２Ａは拠点Ｂ２に設置され、会議端末装置２Ｂは拠点Ｂ３に設置されている。拠点Ｂ１には、会議に参加するユーザとして、例えば、ユーザＰ１１とユーザＰ１２とが存在する。また拠点Ｂ２には、例えば、ユーザＰ２１が存在する。また拠点Ｂ３には、例えば、ユーザＰ３１が存在する。なお、会議装置１と各会議端末装置２とは、同一の建物内に設置されても良い。
【００４０】
また、本システムは、サーバ装置のないＰ２Ｐ（peer to peer）型の構成を採っているが、サーバ装置が介在するクライアント−サーバ型の構成を採ってもい良い。
【００４１】
このような構成の会議システムＳにおいて、会議装置１及び各会議端末装置２は、カメラによって参加者を撮影するとともに、参加者の音声をマイクロフォンから入力させて、参加者の撮像画像（撮影画像の一例）と音声情報とをリアルタイムに、会議の相手側の会議装置１または会議端末装置２に送信する。また、会議装置１及び各会議端末装置２は、会議の相手側の会議装置１または会議端末装置２から送信されたテレビ会議の相手側の撮像画像と音声情報とを受信し、この画像を画面に表示するとともに、この音声情報に対応する音声をスピーカにより出力する。
【００４２】
更に、会議装置１は、１台のカメラと１台の表示装置とで、拠点Ｂ１にいる複数のユーザが同時に２つのテレビ会議に参加できるように構成された装置である。具体的に、会議装置１は、複数の参加者が撮影された撮像画像を、一方の会議の参加者の画像と他方の会議の参加者の画像とに分割して、それぞれ会議の相手側の会議端末装置２に送信する。また、会議装置１は、会議端末装置２からの撮像画像を受信すると、対応する会議毎に表示エリアを分けて当該画像を表示する。この場合において会議装置１は、２つの会議の表示エリアの画面上の位置を、拠点Ｂ１にいる会議参加者が画面を見た場合にカメラで撮影したときの当該参加者の顔の向きなどが不自然とならないように設定する。なお、これらの詳細については後述する。
【００４３】
会議端末装置２は、設置された拠点にいる１人または複数のユーザが同時に１つのテレビ会議に参加することができる装置であり、その構成は公知であるため、詳細な説明は省略する。なお、会議端末装置２を拠点毎に１台ずつ設置する代わりに、ユーザ毎に１台ずつ割り当てても良い。また、会議端末装置２の構成を、会議装置１の後述する構成と同一としても差し支えない。
【００４４】
［２．会議装置の構成等］
次に、会議装置１の構成等について、図２を用いて説明する。
【００４５】
図２は、本実施形態に係る会議装置１の概要構成の一例を示すブロック図である。
【００４６】
図２に示すように、会議端末装置２は、ＣＰＵ、ＲＯＭ、ＲＡＭ等を備える制御部１１と、各種データ及びプログラムを記憶する記憶部１２（例えば、ハードディスクドライブ等）と、ネットワークＮＷに接続して、サーバ装置１等との通信状態を制御する通信部１３と、制御部１１と入力装置及び出力装置（プロジェクター１５、カメラ１６、マイクロフォン１７−１及び１７−２、スピーカ１８−１及び１８−２、操作部１９−１及び１９−２）との間におけるデータの入出力制御を行う入出力部１４と、会議の相手側の撮像画像を動画として表示する表示手段の一例としてのプロジェクター１５と、会議の参加者等を動画撮影する撮影手段の一例としてのカメラ１６と、会議の参加者等の発話音声を入力し、音声信号として入出力部１４に出力する指向性の設定が可能な音声入力手段の一例としてのマイクロフォン１７−１及び１７−２と、会議の相手側の参加者の発話音声などの音声を出力するスピーカ１８−１及び１８−２と、会議の参加者等からの操作指示を受け付け、その指示内容を指示信号として入出力部１４に出力する入力手段の一例としての操作部１９−１及び１９−２（例えば、キーボード、マウス、リモートポインティングデバイス等）と、を含んで構成されており、制御部１１と各部とはシステムバス２１を介して接続されている。
【００４７】
入出力部１４に接続される入力装置及び出力装置は、共用部、会議１用及び会議２用に分類される。
【００４８】
プロジェクター１５及びカメラ１６は、共用部に分類され、同時に２つのテレビ会議が行われる際において両方の会議に用いられる。また、マイクロフォン１７−１、スピーカ１８−１及び操作部１９−１は、会議１用に分類され、同時に２つのテレビ会議が行われる際において一方の会議に用いられる。また、マイクロフォン１７−２、スピーカ１８−２及び操作部１９−２は、会議２用に分類され、同時に２つのテレビ会議が行われる際において他方の会議に用いられる。
【００４９】
そして１つのテレビ会議のみが行われる場合には、会議１用及び会議２用の両方の入力装置及び出力装置または何れか一方の入力装置及び出力装置が、その会議に用いられる。
【００５０】
こうした入力装置及び出力装置の会議への割り当ては、制御部１１により設定される。
【００５１】
制御部１１は、本実施形態において、位置関係決定手段、分割手段、送信手段、受信手段及び表示制御手段等の一例を構成する。そして、制御部１１は、ＣＰＵが、ＲＯＭや記憶部１２に記憶された各種プログラムを読み出し実行することにより会議装置１の各部を統括制御するとともに、位置関係決定手段、分割手段、送信手段、受信手段及び表示制御手段等として機能する。
【００５２】
なお、各種プログラム等は、例えば、ネットワークＮＷを介してサーバ装置等から取得されるようにしても良いし、ＣＤ−ＲＯＭ等の記録媒体に記録されてドライブ装置等から読み込まれるようにしても良い。
【００５３】
［３．入力装置及び出力装置の配置、撮像画像の表示位置］
次に、プロジェクター１５等の入力装置及び出力装置の配置と、拠点Ｂ２またはＢ３の参加者の撮像画像の表示位置等について、図３乃至図８を用いて説明する。
【００５４】
図３は、本実施形態に係る会議装置１の入力装置及び出力装置等の位置関係を示す図である。また、図４は、本実施形態に係る撮像画像の画面表示例を示す図であり、（ａ）は、会議装置１の画面であり、（ｂ）は、会議端末装置２Ａの画面であり、（ｃ）は、会議端末装置２Ｂの画面である。また、図５は、比較例に係る会議装置１の入力装置及び出力装置等の位置関係を示す図である。また、図６は、比較例に係る撮像画像の画面表示例を示す図であり、（ａ）は、会議装置１の画面であり、（ｂ）は、会議端末装置２Ａの画面であり、（ｃ）は、会議端末装置２Ｂの画面である。
【００５５】
なお、以下の説明においては、拠点Ｂ１にいるユーザＰ１１は会議１に参加するものとし、ユーザＰ１２は会議２に参加するものとする。また、拠点Ｂ２にいるユーザＰ２１は会議１に参加するものとし、拠点Ｂ３にいるユーザＰ３１は会議２に参加するものとする。
【００５６】
各入力装置及び出力装置は、例えば、図３に示すように配置される。同図において、符号１００は、プロジェクター１５により画像が投影されるスクリーンである。ユーザＰ１１及びＰ１２は、それぞれスクリーン１００の表示面に対向するような位置に座る。また、ユーザＰ１１は、スクリーン１００に向かって左側に位置し、ユーザＰ１２は、スクリーン１００に向かって右側に位置している。つまり、会議１の参加者は図３の紙面左方に位置し、会議２の参加者は図３の紙面右方に位置している。図３に示す例では、拠点Ｂ１における各会議の参加者が１名ずつとなっているが、複数の参加者が存在する場合には、それぞれまとまって座るようにする。
【００５７】
カメラ１６は、例えば、プロジェクター１６の上に配置される。そして、カメラ１６を乗せたプロジェクター１５は、ユーザＰ１１とユーザＰ１２とがカメラ１６の撮影範囲内に同時に入るよう、図３の紙面上下方向において、スクリーン１００とユーザＰ１１及びＰ１２との間に、且つ、同図の紙面左右方向において、ユーザＰ１１とユーザＰ１２との間に設置される。
【００５８】
また、会議１用の装置（マイクロフォン１７−１、スピーカ１８−１及び操作部１９−１）は、紙面左方に配置され、会議２用の装置（マイクロフォン１７−２、スピーカ１８−２及び操作部１９−２）は、紙面右方に配置される。マイクロフォン１７−１及びマイクロフォン１７−２は、それぞれその指向性が設定される。具体的に、マイクロフォン１７−１は、ユーザＰ１１の発話音声を集音する一方、ユーザＰ１２の発話音声を集音しないように、その指向性が設定される。また、マイクロフォン１７−２は、ユーザＰ１２の発話音声を集音する一方、ユーザＰ１１の発話音声を集音しないように、その指向性が設定される。
【００５９】
本実施形態においては、２つの会議の相手側の撮像画像を、拠点Ｂ１の参加者の位置関係とは正反対の位置関係で、スクリーン１００上に表示させる。つまり、図３においては、会議１の相手側の撮像画像を紙面右側に表示し、会議２の相手側の撮像画像を紙面左側に表示させる。例えば、スクリーン１００の表示面を表示エリア１０２と表示エリア１０１とに中央で左右に分割したとすると、図４（ａ）に示すように、左側の表示エリア１０２には、拠点Ｂ３にいるユーザＰ３１の撮像画像が表示され、右側の表示エリア１０１には、拠点Ｂ２にいるユーザＰ２１の撮像画像が表示される。
【００６０】
このように撮像画像を表示すると、拠点Ｂ１にいるユーザＰ１１は当然に表示エリア１０１を見る一方、ユーザＰ１２は当然に表示エリア１０２を見ることとなるので、図３に示すように、ユーザＰ１１の視線とユーザＰ１２の視線とは途中で交差する。
【００６１】
そうすると、ユーザＰ１１の視線及びユーザＰ１２の視線は必然的にカメラ１６付近を通ることとなる。従って、この状態のユーザＰ１１とユーザＰ１２とをカメラ１６が撮影すると、ユーザＰ１１及びユーザＰ１２がほぼ正面を向いた画像を撮ることができる。よって、この撮像画像を、ユーザＰ１１が映っている部分とユーザＰ１２が映っている部分とに分割し、ユーザＰ１１の撮像画像を会議端末装置２Ａに送信し、ユーザＰ１２の撮像画像を会議端末装置２Ｂに送信して、それぞれの画面上に表示させる。すると、図４（ｂ）及び（ｃ）に示すように、ユーザＰ１１及びユーザＰ１２がほぼ正面を向いた画像が表示される。同図において、符号２００は、会議端末装置２Ａの画面であり、符号３００は、会議端末装置２Ｂの画面である。
【００６２】
そうすると、画面２００上におけるユーザＰ１１の視線と拠点Ｂ２にいるユーザＰ２１の視線とが合うとともに、画面３００上におけるユーザＰ１２の視線と拠点Ｂ３にいるユーザＰ３１の視線とが合うこととなる。従って、ユーザＰ２１及びユーザＰ３１は、会議の相手側が如何にも自分と向き合っているように感じることができる。
【００６３】
こうした本実施形態の効果をより明確にするために、比較例について説明する。比較例では、２つの会議の相手側の撮像画像を、拠点Ｂ１の参加者の位置関係と同じ位置関係で、スクリーン１００上に表示させる。つまり、図５において、会議１の相手側の撮像画像を紙面左側に表示し、会議２の相手側の撮像画像を紙面右側に表示させる。従って、図６（ａ）に示すように、左側の表示エリア１０１には、拠点Ｂ２にいるユーザＰ２１の撮像画像が表示され、右側の表示エリア１０２には、拠点Ｂ３にいるユーザＰ３１の撮像画像が表示される。
【００６４】
そうすると、図５に示すように、ユーザＰ１１の視線とユーザＰ１２の視線とは交差せず、その視線はカメラ１６付近から離れたところを通る。そして、図６（ｂ）及び（ｃ）に示すように、ユーザＰ１１の視線及びユーザＰ１２の視線がそれぞれからのカメラ１６の方向となす角度の分、ユーザＰ１１及びユーザＰ１２が左または右を向いた画像が表示され、ユーザＰ２１やユーザＰ３１の視線と合わない。従って、ユーザＰ２１及びユーザＰ３１は、会議の相手方の注意が自分に向いていないと感じ、それによって話しかけにくさを感じるのである。
【００６５】
本実施形態の説明に戻って、画面２００及び３００上に表示されているユーザの視線と拠点Ｂ２及びＢ３にいるユーザの視線とをより精度良く合わせるため、カメラ１６（を乗せたプロジェクター１５）の真上付近に、ユーザＰ１１の視線とユーザＰ１２の視線とが交差するよう、カメラ１６を配置することが望ましい。より厳密にいうと、カメラ１６の推奨位置は、そのカメラレンズの真上付近にユーザＰ１１の視線とユーザＰ１２の視線とが交差する位置である。
【００６６】
また、自拠点で撮影された画像を２つに分割する際において、画像上のどの位置で分割するかに関しては、様々な方法が考えられる。例えば、最も単純な方法としては、中央で左右に２分割する方法である。この場合においては、各会議の参加者は、自分が参加する会議の撮像画像に自分が映るように、座る位置を調整する必要がある。また、参加者が操作部１９−１または１９−２を操作することによって、参加者自らが分割位置を決定しても良い。
【００６７】
また、撮像画像上における各参加者の表示位置によって決定しても良い。具体的には、制御部１１が、撮影画像を解析して参加者の画像部分を特定し、この撮影画像をスクリーン１００に表示させる。次いで、制御部１１は、スクリーン１００に表示されている各参加者がどの会議に参加するかを参加者に選択させる。そして、制御部１１は、撮像画像上において、会議１への参加者と会議２への参加者との中間を分割位置とすれば良い。なお、後述するする会議装置１の処理においては、この方法を用いている。
【００６８】
また、制御部１１は、このようにして、会議１の参加者と会議２の参加者の会議間における位置関係を特定し、この位置関係とは正反対の位置関係で、会議端末装置２から受信した撮像画像が表示エリア１０１及び１０２に分けてスクリーン１００に表示されるよう画像合成を行うのである。
【００６９】
［４．会議装置の動作］
次に、会議装置の動作について説明するが、１つの会議が既に行われているときに、その会議に参加していなかったユーザ（新たな参加者）が新たに加わることによって新たな会議を開催する場合と、既に行われている会議の参加者の中の一部が新しい会議を開催する場合とがあるため、以下分節して説明する。
【００７０】
［４．１  新たな参加者が新たな会議を開催する場合］
先ず、新たな参加者が新たな会議を開催する場合について、図７及び図８を用いて説明する。
【００７１】
図７は、本実施形態に係る会議装置１の制御部１１において、新たな参加者が新たな会議を開催する場合の処理例を示すフローチャートである。また、図８は、会議の選択メニューの画面表示例を示す図である。
【００７２】
拠点Ｂ１にいるユーザＰ１１は、会議装置１を用いて、拠点Ｂ２にいるユーザＰ２１と会議を行っている。従って、会議装置１の制御部１１は、会議端末装置２Ａから送信された撮像画像及び音声情報を受信し、受信した撮像画像をプロジェクター１５によりスクリーン１００に表示させるとともに、受信した音声情報に対応する音声をスピーカ１８−１やスピーカ１８−２により出力させる。また、制御部１１は、カメラ１６によりユーザＰ１１を撮影させ、マイクロフォン１７−１やマイクロフォン１７−２でユーザＰ１１の発話音声を入力させ、これらによる撮像画像と音声情報とを会議端末装置２Ａに送信する。
【００７３】
ここで、ユーザＰ１２が、新しい参加者としてユーザＰ１１の右側に新たに加わると、図７に示すように、制御部１１は、新しい参加者を検出する（ステップＳ１）。この新しい参加者を検出する方法としては、様々な方法がある。例えば、ユーザＰ１２が操作部１９−２を操作することによって自分が加わったことを制御部１１に認識させても良いし、制御部１１が、例えば、フレーム間差分法などの画像認識処理を行うことによってカメラ１６からの撮像画像（以下、「自拠点画像」と称する）における参加者を特定し、自拠点画面上に新たに現れた参加者を新たな参加者として検出しても良い。
【００７４】
次いで、制御部１１は、図８に示すように、会議の選択メニュー１０５を表示させる（ステップＳ２）。選択メニュー１０５には、新しい参加者が検出された旨のメッセージが表示されるとともに、選択可能なメニュー項目として、新たな参加者が会議１に加わる項目と、新しく会議２を開催する項目とが表示される。なお、図８中の符号１０３は、拠点Ｂ２における撮像画像であり、符号１０４は、画面上のアイテムを選択するためのポインタである。
【００７５】
ここで、ユーザＰ１２が操作部１９−２を操作することによって何れかの項目を選択すると、制御部１１は、新しい参加者が新しい会議２の開催を選択したか否かを判定する（ステップＳ３）。
【００７６】
このとき、制御部１１は、新しい参加者が会議１に加わることを選択した場合には（ステップＳ３：ＮＯ）、本処理を終了させて、上述した会議１のみに関する処理を継続させる。この場合においては、拠点Ｂ２における画面２００には、ユーザＰ１１とユーザＰ１２とが表示されることとなる。
【００７７】
一方、制御部１１は、新しい参加者が新しい会議２の開催を選択した場合には（ステップＳ３：ＹＥＳ）、新しい参加者の位置を画像認識によって特定し、自拠点画像の分割位置を決定する（ステップＳ４）。
【００７８】
次いで、制御部１１は、会議端末装置２Ｂとのコネクションを、新しく開催される会議２の撮像画像及び音声情報の送受信用として設定する（ステップＳ５）。
【００７９】
次いで、制御部１１は、マイクロフォン１７−１及び１７−２とスピーカ１８−１及び１８−２とを、会議１用と会議２用とにそれぞれ割り当てる（ステップＳ６）。具体的には、マイクロフォン１７−１及び１７−２、スピーカ１８−１及び１８−２が、それぞれ右側に位置しているかまたは左側に位置しているかを示す設定情報が予め記憶部１２に記憶されている。そして、制御部１１は、この設定情報を参照しながら、会議１の参加者と会議２の参加者との自拠点画像上における表示位置関係に応じて割り当てを行う。なお、この場合において、制御部１１は、マイクロフォン１７−１とスピーカ１８−１とを会議１用に設定し、マイクロフォン１７−２とスピーカ１８−２とを会議２用に設定するものとする。
【００８０】
次いで、制御部１１は、会議１の参加者のスクリーン１００に表示される相手方の撮像画像への視線と、会議１の参加者のスクリーン１００に表示される相手方の撮像画像への視線とが交差するように、会議１用の表示エリア１０１と会議２用の表示エリア１０２の位置を設定する（ステップＳ７）。具体的に、制御部１１は、自拠点画像から、会議１の参加者であるユーザＰ１１がスクリーン１００に向かって左側（自拠点画像上では右側）に位置し、会議２の参加者であるユーザＰ１２がスクリーン１００に向かって右側（自拠点画像では左側）に位置していると判定するので、その位置関係とは正反対の位置関係で、表示エリア１０１及び１０２の位置を決定する。すなわち、制御部１１は、図３に示すように、スクリーン１００に向かって右側に表示エリア１０１の位置を設定し、スクリーン１００に向かって左側に表示エリア１０２の位置を設定する。
【００８１】
次いで、制御部１１は、会議２を開始させる（ステップＳ８）。
【００８２】
次いで、制御部１１は、自拠点画像を、設定された分割位置で左右に分割する（ステップＳ９）。
【００８３】
次いで、制御部１１は、分割した自拠点画像を、それぞれが対応する会議の相手側の会議端末装置２に送信する（ステップＳ１０）。ここでは、右側の自拠点画像、すなわち、ユーザＰ１１が映っている自拠点画像は会議端末装置２Ａに送信され、左側の自拠点画像、すなわち、ユーザＰ１２が映っている自拠点画像は会議端末装置２Ｂに送信される。なお、対応する会議毎に、相手側の会議端末装置２が複数存在する場合には、自拠点画像はそれぞれに送信される。
【００８４】
次いで、制御部１１は、マイクロフォン１７−１及び１７−２からの入力音声を、それぞれ割り当てられた会議の相手側の会議端末装置２に音声情報として送信する（ステップＳ１１）。ここでは、マイクロフォン１７−１からの入力音声は会議端末装置２Ａに送信され、マイクロフォン１７−２からの入力音声は会議端末装置２Ｂに送信される。なお、自拠点画像と入力音声とを多重化して送信しても良い。
【００８５】
次いで、制御部１１は、各会議端末装置２から受信した撮像画像を、それぞれ画面上の対応する表示エリアに表示させる（ステップＳ１２）。ここでは、会議端末装置２Ａからの撮像画像は表示エリア１０１中に表示され、会議端末装置２Ｂからの撮像画像は表示エリア１０２中に表示される。なお、対応する会議毎に、相手側の会議端末装置２が複数存在する場合には、それぞれから撮像画像が受信される。
【００８６】
次いで、制御部１１は、各会議端末装置２から受信した音声情報に対応する音声を、それぞれ対応する会議に割り当てられたスピーカにより出力させる（ステップＳ１３）。これは、会議端末装置２Ａからの音声はスピーカ１８−１により出力され、会議端末装置２Ｂからの音声はスピーカ１８−２により出力される。
【００８７】
次いで、制御部１１は、会議１または会議２の終了を検出したか否かを判定する（ステップＳ１４）。具体的に、制御部１１は、拠点Ｂ１にいる参加者が操作部１９−１または１９−２を操作することによって、会議１または会議２の終了を指示した場合や、会議端末装置２Ａまたは会議端末装置２Ｂから会議終了のリクエストを受信した場合などに、会議１または会議２の何れかを終了させると判断する。
【００８８】
ここで、制御部１１は、会議１の終了及び会議２の終了の何れも検出しなかった場合には（ステップＳ１４：ＮＯ）、ステップＳ９に移行する。つまり、制御部１１は、２つの会議が同時に行われている間は、ステップＳ９乃至Ｓ１３の処理を繰り返すのである。
【００８９】
そして、制御部１１は、会議１または会議２の終了を検出した場合には（ステップＳ１４：ＹＥＳ）、マイクロフォン１７−１及び１７−２とスピーカ１８−１及び１８−２との割り当てを、この後も継続する方の会議に統合させる（ステップＳ１５）。具体的に、制御部１１は、会議１の終了を検出した場合には、会議２への割り当てを行う一方、会議２の終了を検出した場合には、会議１への割り当てを行う。
【００９０】
次いで、制御部１１は、終了した方の会議用に設定されていたコネクションを解放する（ステップＳ１６）。
【００９１】
次いで、制御部１１は、表示エリア１０１と表示エリア１０２とを統合させる（ステップＳ１７）。つまり、制御部１１は、継続する方の会議における相手方の撮像画像のみを表示させるように表示エリアを統合するのである。
【００９２】
次いで、制御部１１は、本処理を終了させ、継続する方の会議についての処理を続行する。
【００９３】
［４．２  既に行われている会議の参加者の一部が新しい会議を開催する場合］
次に、既に行われている会議の参加者の一部が新しい会議を開催する場合について、図９及び図１０を用いて説明する。
【００９４】
図９は、本実施形態に係る会議装置１の制御部１１において、既に行われている会議の参加者の一部が新しい会議を開催する場合の処理例を示すフローチャートであり、同図において、図７と同様の要素については同様の符号を付してある。また、図１０は、新しい会議に参加するユーザを選択するための画面表示例を示す図である。
【００９５】
拠点Ｂ１にいるユーザＰ１１とユーザＰ１２とは、会議装置１を用いて、拠点Ｂ２にいるユーザＰ２１と会議を行っている。
【００９６】
ここで、図９に示すように、制御部１１は、新しい会議２の開始を検出する（ステップＳ２１）。例えば、制御部１１は、会議端末装置２から会議２開始のリクエストを受信した場合や、ユーザＰ１２が、操作部１９−２を操作することによって会議２の開始を指示した場合などには、新しい会議２を開始させると判断する。
【００９７】
次いで、制御部１１は、新しい会議２に参加するユーザを決定する（ステップＳ２２）。具体的に、制御部１１は、画像認識処理によって自拠点画像上の参加者を特定し、図１０に示すように、自拠点画像を表示させて（符号１０６）、スクリーン１００に表示されている会議１の参加者の中から会議２に参加するユーザを１人または複数人、参加者に選択させる。なおここでは、ユーザＰ１２が会議２に参加するユーザとして選択される（図１０において、ユーザＰ１２が破線で囲まれる）。
【００９８】
次いで、制御部１１は、画像認識の結果とユーザによる選択結果とに基づいて、自拠点画像の分割位置を決定する（ステップＳ２３）。
【００９９】
その後、制御図９は、図７と同様にして、ステップＳ５乃至ステップＳ１７を実行する。
【０１００】
なお、上記説明においては、会議１の途中から会議２を開始させる場合について説明したが、会議１と会議２とを同時に開始させることも可能である。例えば、制御部１１は、会議端末装置２からのリクエストまたはユーザ操作により、会議１と会議２との同時開始を検出する。そして、制御部１１は、図１０に示すような画面を表示させ、会議１または会議２に参加するユーザを選択させ、選択されなかった方の参加者を他方の会議に参加する参加者と認定すれば良い。
【０１０１】
［５．応用例］
次に、本実施形態に係る応用例について、図１１乃至図１５を用いて説明する。
【０１０２】
図１１は、自拠点にいる会議１の参加者が自拠点にいる会議２の参加者よりも多い場合における表示エリア１０１及び１０２のサイズを示す図である。また、図１２は、図１１が示す場合における会議装置１の画面表示例を示す図である。また、図１３は、比較例における表示エリア１０１及び１０２のサイズを示す図である。また、図１４は、他拠点にいる会議１の参加者が他拠点にいる会議２の参加者よりも多い場合における表示エリア１０１及び１０２のサイズを示す図である。また、図１５は、図１４が示す場合における会議装置１の画面表示例を示す図である。
【０１０３】
上記説明においては、表示エリア１０１及び表示エリア１０２のサイズ、すなわち、会議１の相手方の撮像画像の表示倍率（表示サイズ）と会議２の相手方の撮像画像の表示倍率とを同率（同サイズ）としていたが、本応用例では、参加者の人数によって表示倍率を変更する。
【０１０４】
先ず、第１の例では、自拠点にいる各会議の参加人数を比較して、人数の多い方の会議の相手方の撮像画像の表示倍率を、他方の会議の相手方の撮像画像の表示倍率よりも大きくする。例えば、図１１に示す例では、拠点Ｂ１の会議１の参加者はユーザＰ１１とユーザＰ１３とユーザＰ１４との３人であり、拠点Ｂ１の会議２の参加者はユーザＰ１２の１人であるので、図１２に示すように、会議１の相手方の撮像画像の表示倍率を会議２の相手方の撮像画像の例えば３倍にして表示させる。
【０１０５】
もし、会議１の相手方の撮像画像と会議２の相手方の撮像画像との表示倍率を同率とすると、図１３に示すように、会議１の参加者の視線と会議２の参加者の視線はカメラ１６から離れたところを通り、その分だけ参加者の顔が右または左を向いた画像が相手側の画面に表示されてしまう。
【０１０６】
この現象は次に述べる理由による。自拠点において会議の参加者が複数存在する場合には、例えば、横並びになって各参加者が座ることとなる。会議が同時に行われる場合に、自拠点にいる参加者のうち一方の会議の参加者の人数が他方の会議の人数よりも多いと、前者の占める範囲が後者の占める範囲よりも多くなる。カメラ１６の撮影範囲内に参加者全員が入ると、前者の一部はカメラ１６の撮影範囲の中央を越えて後者側に進入する形となる。そして一般的に、各参加者は相手方の撮像画像の中央付近を見ることが多いと考えられるから、全体的に参加者の視線がカメラ１６からずれるのである（図１３の例では右側にずれる）。
【０１０７】
一方、第１の例では、自拠点における参加人数が多い方の会議の相手方の撮像画像を大きくし、参加人数が少ない方の会議の相手方の撮像画像を小さくすることで、参加者の視線が全体的にカメラ１６に寄っていくこととなるので、各参加者の顔がほぼ正面を向いた画像を撮ることができる。
【０１０８】
第１の例の場合、制御部１１は、前記図８のステップＳ４または図９のステップＳ２２の処理において、各会議の参加者の人数を算出し、ステップＳ７の処理において、算出された人数に基づいて相手方の撮像画像の表示倍率（表示エリア１０１及び１０２の表示サイズ）を変更すれば良い。
【０１０９】
なお、会議１と会議２における相手方の撮像画像の倍率の比を、自拠点側の参加人数の比と一致させることが望ましいが、必ずしもそうする必要はない。自拠点における参加人数が多い方の会議の相手方の撮像画像を、参加人数が少ない方の会議の相手方の撮像画像よりも大きく表示させるだけでも効果はある。
【０１１０】
次に、第２の例では、他拠点にいる各会議の相手方の参加人数を比較して、人数の多い方の会議の相手方の撮像画像の表示倍率を、他方の会議の相手方の撮像画像の表示倍率よりも大きくする。例えば、図１４に示す例では、拠点Ｂ２の会議１の参加者はユーザＰ２１とユーザＰ２２との２人であり、会議２の参加者はユーザＰ３１の１人であるので、図１５に示すように、会議１の相手方の撮像画像の表示倍率を会議２の相手方の撮像画像の例えば２倍にして表示させる。そうすると、スクリーン１００に表示されたユーザＰ２１、Ｐ２２及びＰ３１の画像の大きさがほぼ均一になる。
【０１１１】
この現象は次に述べる理由による。１人の参加者あるいは複数の参加者全員がカメラの撮影範囲内に入るためには、カメラから参加者までの距離を調整する必要がある。つまり、参加者が多ければ多いほど、各参加者がカメラから離れる必要がある。そうすると、人数が多い方の参加者が映った撮像画像における各参加者の画像の大きさは、人数が少ない方の参加者が映った撮像画像における各参加者の画像の大きさよりも小さくなる。そこで、会議１と会議２におけるの相手方の撮像画像の比を相手方の参加人数の比と一致させることで、各参加者の画像の大きさが互いに近づくこととなる。従って、それぞれの自拠点側の参加者から見た相手方の大きさが全体的に均一となるので、会議の臨場感を高めることが期待できる。
【０１１２】
なお、会議１と会議２における相手方の撮像画像の倍率の比を、他拠点にいる参加者の人数の比と一致させることが望ましいが、必ずしもそうする必要はない。他拠点における参加人数が多い方の会議の相手方の撮像画像を、参加人数が少ない方の会議の相手方の撮像画像よりも大きく表示させるだけでも効果はある。
【０１１３】
第２の例の場合、制御部１１は、例えば、前記図８または図９のステップＳ７において、会議の相手方の各会議端末装置２に各会議の参加人数を送信するようリクエストを送信し、これに応じて各会議端末装置２から送信されてきた各会議の参加人数を集計すれば良い。また、会議システムＳがクライアント−サーバシステムであって、サーバ装置が、各会議毎の参加人数を管理している場合には、制御部１１は、当該サーバ装置からこの情報を取得すれば良い。
【０１１４】
また、各会議のそれぞれの全体の参加人数、すなわち、自拠点の参加人数と他拠点の参加人数との合計値を比較して、人数の多い方の会議の相手方の撮像画像の表示倍率を、他方の会議の相手方の撮像画像の表示倍率よりも大きくしても良い。例えば、会議１の参加者は、拠点Ｂ１にいるユーザＰ１１とユーザＰ１３と拠点Ｂ２にいるユーザＰ２１との３人であり、会議２の参加者は、拠点Ｂ１にいるユーザＰ１２と拠点Ｂ３にいるユーザＰ３１との２人である場合には、会議１の相手方の撮像画像の表示倍率を会議２の相手方の撮像画像の例えば１．５倍にして表示させる。
【０１１５】
この場合、制御部１１は、例えば、第１の例及び第２の例で説明した処理によって、自拠点の参加人数と他拠点の参加人数とを特定し、これらを合算することにより会議毎における全体の参加人数を算出することができる。
【０１１６】
以上説明したように、本実施形態によれば、制御部１１が、会議１と会議２とが同時に開催される場合に、拠点Ｂ１にいる会議１の参加者と拠点Ｂ１にいる会議２の参加者の座る位置をスクリーン１００に向かって見たときの会議１と会議２との間での位置関係を決定する。そして、制御部１１が、この位置関係とは逆の位置関係で、自拠点画像を左右２つに分割し、分割された各自拠点画像の会議１に対応する方を会議１の相手側の会議端末装置２に送信し、会議２に対応する方を会議２の相手側の会議端末装置２に送信する。する。また、制御部１１が、会議１の相手側の会議端末装置２と会議２の相手側の会議端末装置２とからそれぞれ送信されてきた撮像画像を受信し、決定した位置関係とは逆の位置関係でこれらの撮像画像を位置させた画像をプロジェクター１５により表示させる。
【０１１７】
従って、１台の会議装置１を使用するだけで、拠点Ｂ１にいる複数の参加者の各自が、同時に行われる２つの会議のうち必要な会議に参加することができる。また、参加者の視線がカメラ１６またはその付近を通るので、カメラ１６により参加者を撮影すると、各参加者の顔がほぼ正面を向いた画像を撮ることができ、これによって、この画像を画面で見た会議の相手方は違和感を感じることなく会議を行うことができる。
【０１１８】
また、会議１の参加者の視線と会議２の参加者の視線とが交差する位置の真下あたりにカメラ１６を設置することにより、各参加者の顔がほぼ真正面を向いた画像を撮ることができる。
【０１１９】
また、制御部１１が、画像認識によって、自拠点画像に映っている各参加者の画像を特定し、操作部１９−２等を用いて参加者がどの会議に参加するかを選択させるので、各参加者が会議毎にまとまって座ってさえすれば、自分の座る位置をある程度自由にしたとしても、会議毎における参加者の位置関係を特定することができる。
【０１２０】
また、制御部１１が、会議１及び会議２の参加者の位置を、それぞれ向かって左側、右側と決定し、この位置関係で各参加者が座るよう、プロジェクター１５による画面表示やスピーカ１８−１及び１８−２による音声出力によって参加者に対して指示した場合には、会議毎における参加者の位置関係を会議装置１側で予め設定しておくことができる。
【０１２１】
また、制御部１１が、会議１と会議２とにおける相手方の撮像画像の表示倍率の比を、自拠点側における会議１と会議２とにおける参加人数の比と一致させた場合には、会議毎の参加人数が互いに異なる場合であっても各参加者の視線がカメラ１６からずれることを抑制して、各参加者の顔が向く方向を正面に近づけた画像を撮ることができる。
【０１２２】
また、制御部１１が、会議１と会議２とにおける相手方の撮像画像の表示倍率の比を、他拠点側における会議１と会議２とにおける参加人数の比と一致させた場合には、スクリーン１００に表示された相手方の各参加者の画像の大きさが均一になるので、会議の臨場感を高めることが期待できる。
【０１２３】
また、制御部１１が、画像認識によって、自拠点画像上における会議１の参加者の画像と会議２の参加者の画像とを特定し、自拠点画像を会議１の参加者が映っている画像と会議２の参加者が映っている画像とに分割して、それぞれ対応する会議端末装置２に送信するので、会議の相手方は、その会議に参加するユーザ全員が確実に映っている撮像画像を見ることができる。
【０１２４】
なお、上記実施形態においては、同時に２つの会議を開催する場合に本発明を適用していたが、同時に３個以上の会議を開催する場合に適用しても良い。例えば、同時に３個の会議を開催する場合には、会議１は左側、会議２は中央、会議３は右側、と会議間における参加者の位置関係を決定すれば良い。
【０１２５】
また、上記実施形態においては、カメラ１６の撮像画像を左右に分割して会議端末装置２に送信するようにしていたが、参加者の位置関係にさえ対応していれば、左右方向とは異なる方向に分割しても良い。
【図面の簡単な説明】
【０１２６】
【図１】一実施形態に係る会議システムの概要構成の一例を示すブロック図である。
【図２】一実施形態に係る会議装置１の概要構成の一例を示すブロック図である。
【図３】一実施形態に係る会議装置１の入力装置及び出力装置等の位置関係を示す図である。
【図４】一実施形態に係る撮像画像の画面表示例を示す図であり、（ａ）は、会議装置１の画面であり、（ｂ）は、会議端末装置２Ａの画面であり、（ｃ）は、会議端末装置２Ｂの画面である。
【図５】比較例に係る会議装置１の入力装置及び出力装置等の位置関係を示す図である。
【図６】比較例に係る撮像画像の画面表示例を示す図であり、（ａ）は、会議装置１の画面であり、（ｂ）は、会議端末装置２Ａの画面であり、（ｃ）は、会議端末装置２Ｂの画面である。
【図７】一実施形態に係る会議装置１の制御部１１において、新たな参加者が新たな会議を開催する場合の処理例を示すフローチャートである。
【図８】会議の選択メニューの画面表示例を示す図である。
【図９】一実施形態に係る会議装置１の制御部１１において、既に行われている会議の参加者の一部が新しい会議を開催する場合の処理例を示すフローチャートである。
【図１０】新しい会議に参加するユーザを選択するための画面表示例を示す図である。
【図１１】自拠点にいる会議１の参加者が自拠点にいる会議２の参加者よりも多い場合における表示エリア１０１及び１０２のサイズを示す図である。
【図１２】自拠点にいる会議１の参加者が自拠点にいる会議２の参加者よりも多い場合における会議装置１の画面表示例を示す図である。
【図１３】比較例における表示エリア１０１及び１０２のサイズを示す図である。
【図１４】他拠点にいる会議１の参加者が他拠点にいる会議２の参加者よりも多い場合における表示エリア１０１及び１０２のサイズを示す図である。
【図１５】他拠点にいる会議１の参加者が他拠点にいる会議２の参加者よりも多い場合における会議装置１の画面表示例を示す図である。
【符号の説明】
【０１２７】
１  会議装置
２、２Ａ、２Ｂ  会議端末装置
１１  制御部
１２  記憶部
１３  通信部
１４  入出力部
１５  プロジェクター
１６  カメラ
１７−１、１７−２  マイクロフォン
１８−１、１８−２  スピーカ
１９−１、１９−２  操作部
２０  システムバス
ＮＷ  ネットワーク
Ｓ  会議システム
【図１】
2010028299.tif 000003
【図２】
2010028299.tif 000004
【図３】
2010028299.tif 000005
【図４】
2010028299.tif 000006
【図５】
2010028299.tif 000007
【図６】
2010028299.tif 000008
【図７】
2010028299.tif 000009
【図８】
2010028299.tif 000010
【図９】
2010028299.tif 000011
【図１０】
2010028299.tif 000012
【図１１】
2010028299.tif 000013
【図１２】
2010028299.tif 000014
【図１３】
2010028299.tif 000015
【図１４】
2010028299.tif 000016
【図１５】
2010028299.tif 000017