(57)【要約】【課題】会議拠点のユーザが遠隔地のユーザを確実に目視可能な会議システムおよび会議用端末を提供する。【解決手段】テレビ会議システム１では、遠隔地に設置された遠隔側端末３と、会議拠点に設置された会議用端末５との双方向通信によってテレビ会議が実行される。遠隔側端末３では、遠隔地のユーザを前側、右側、左側から撮影した映像データが、ネットワーク２を介して会議用端末５に送信される。会議用端末５では、遠隔地のユーザを前側、右側、左側から撮影した映像データが、それぞれ正面ディスプレイ６１、右面ディスプレイ６２、左面ディスプレイに三面表示される。【選択図】図１
2012142720.tif 000002
【特許請求の範囲】
【請求項１】
遠隔地のユーザが使用する遠隔側端末と、会議の開催場所に設置される会議用端末とがネットワークを介して接続され、前記遠隔側端末と前記会議用端末との双方向通信によって遠隔会議を実行する会議システムであって、
前記遠隔側端末は、
前記ユーザの正面顔を含む領域を撮影する第一カメラと、
前記ユーザの横顔を含む領域を撮影する第二カメラと、
前記第一カメラで撮影された正面画像と、前記第二カメラで撮影された側面画像とを、前記ネットワークを介して前記会議用端末に送信する画像送信手段とを備え、
前記会議用端末は、
前記会議用端末における第一の側面方向に画像を表示する第一ディスプレイと、
前記会議用端末における前記第一の側面方向と交差する第二の側面方向に画像を表示する第二ディスプレイと、
前記ネットワークを介して前記正面画像および前記側面画像を受信する画像受信手段と、
前記画像受信手段によって受信された前記正面画像を前記第一ディスプレイに表示し、且つ、前記画像受信手段によって受信された前記側面画像を前記第二ディスプレイに表示する表示制御手段と
を備えたことを特徴とする会議システム。
【請求項２】
前記第二カメラは、前記ユーザの右横顔を含む領域を撮影する右側カメラと、前記ユーザの左横顔を含む領域を撮影する左側カメラとを含み、
前記画像送信手段は、前記側面画像として、前記右側カメラで撮影された右側面画像と、前記左側カメラで撮影された左側面画像とを送信し、
前記第二ディスプレイは、前記第一ディスプレイの右側に向けて画像を表示する右面ディスプレイと、前記第一ディスプレイの左側に向けて画像を表示する左面ディスプレイとを含み、
前記表示制御手段は、前記画像受信手段によって受信された前記右側面画像を前記右面ディスプレイに表示し、且つ、前記画像受信手段によって受信された前記左側面画像を前記左面ディスプレイに表示することを特徴とする請求項１に記載の会議システム。
【請求項３】
前記会議用端末は、
前記画像受信手段によって受信された前記側面画像を鏡像表示する反転画像を作成する反転画像作成手段を備え、
前記第二ディスプレイは、前記第一ディスプレイの右側に向けて画像を表示する右面ディスプレイと、前記第一ディスプレイの左側に向けて画像を表示する左面ディスプレイとを含み、
前記表示制御手段は、前記画像受信手段によって受信された前記側面画像を、前記右面ディスプレイおよび前記左面ディスプレイの一方に表示し、前記反転画像作成手段によって作成された前記反転画像を、前記右面ディスプレイおよび前記左面ディスプレイの他方に表示することを特徴とする請求項１に記載の会議システム。
【請求項４】
前記遠隔側端末は、
前記会議用端末に対する操作指示を受け付ける操作受付手段と、
前記操作受付手段によって受け付けられた前記操作指示を、前記ネットワークを介して前記会議用端末に送信する操作指示送信手段とを備え、
前記会議用端末は、
前記第一ディスプレイおよび前記第二ディスプレイの向きを変更する駆動手段と、
前記ネットワークを介して前記操作指示を受信する操作指示受信手段と、
前記操作指示受信手段によって受信された前記操作指示に応じて、前記駆動手段に前記第一ディスプレイおよび前記第二ディスプレイの向きを変更させる駆動制御手段と
を備えたことを特徴とする請求項１から３のいずれかに記載の会議システム。
【請求項５】
前記会議用端末は、
前記第一ディスプレイの向きと同じ方向を撮影する会議撮影カメラと、
前記会議撮影カメラで撮影された会議画像を、前記ネットワークを介して前記遠隔側端末に送信する会議画像送信手段とを備え、
前記遠隔側端末は、
画像を表示する遠隔側ディスプレイと、
前記ネットワークを介して前記会議画像を受信する会議画像受信手段と、
前記会議画像受信手段によって受信された前記会議画像を前記遠隔側ディスプレイに表示する遠隔側表示制御手段と
を備えたことを特徴とする請求項１から４のいずれかに記載の会議システム。
【請求項６】
前記会議用端末は、
前記第一ディスプレイの左右両側から集音する一対のマイクと、
前記マイクで集音された音声を、前記ネットワークを介して前記遠隔側端末に送信する音声送信手段とを備え、
前記遠隔側端末は、
前記ネットワークを介して前記音声を受信する音声受信手段と、
前記音声受信手段によって受信された前記音声を出力するスピーカと
を備えたことを特徴とする請求項１から５のいずれかに記載の会議システム。
【請求項７】
ネットワークを介して遠隔地のユーザが使用する遠隔側端末に接続され、会議の開催場所に設置される会議用端末であって、
前記会議用端末における第一の側面方向に画像を表示する第一ディスプレイと、
前記会議用端末における前記第一の側面方向と交差する第二の側面方向に画像を表示する第二ディスプレイと、
前記ネットワークを介して、前記ユーザの正面顔を含む領域を撮影した正面画像と、前記ユーザの横顔を含む領域を撮影した側面画像とを受信する画像受信手段と、
前記画像受信手段によって受信された前記正面画像を前記第一ディスプレイに表示し、且つ、前記画像受信手段によって受信された前記側面画像を前記第二ディスプレイに表示する表示制御手段と
を備えたことを特徴とする会議用端末。
【請求項８】
前記第二ディスプレイは、前記第一ディスプレイの右側に向けて画像を表示する右面ディスプレイと、前記第一ディスプレイの左側に向けて画像を表示する左面ディスプレイとを含み、
前記表示制御手段は、前記画像受信手段によって受信された前記側面画像のうち、前記ユーザの右横顔を含む領域を撮影した右側面画像を前記右面ディスプレイに表示し、且つ、前記ユーザの左横顔を含む領域を撮影した左側面画像を前記左面ディスプレイに表示することを特徴とする請求項７に記載の会議用端末。
【請求項９】
前記画像受信手段によって受信された前記側面画像を鏡像表示する反転画像を作成する反転画像作成手段を備え、
前記第二ディスプレイは、前記第一ディスプレイの右側に向けて画像を表示する右面ディスプレイと、前記第一ディスプレイの左側に向けて画像を表示する左面ディスプレイとを含み、
前記表示制御手段は、前記画像受信手段によって受信された前記側面画像を、前記右面ディスプレイおよび前記左面ディスプレイの一方に表示し、前記反転画像作成手段によって作成された前記反転画像を、前記右面ディスプレイおよび前記左面ディスプレイの他方に表示することを特徴とする請求項７に記載の会議用端末。
【請求項１０】
前記第一ディスプレイおよび前記第二ディスプレイの向きを変更する駆動手段と、
前記ネットワークを介して、前記会議用端末に対する操作指示を受信する操作指示受信手段と、
前記操作指示受信手段によって受信された前記操作指示に応じて、前記駆動手段に前記第一ディスプレイおよび前記第二ディスプレイの向きを変更させる駆動制御手段と
を備えたことを特徴とする請求項７から９のいずれかに記載の会議用端末。
【請求項１１】
前記駆動手段は、前記第一ディスプレイおよび前記第二ディスプレイに囲まれた領域に設けられたことを特徴とする請求項１０に記載の会議用端末。
【請求項１２】
前記第一ディスプレイおよび前記第二ディスプレイが一体に設けられた略箱状のディスプレイ支持部を備え、
前記駆動手段は、前記ディスプレイ支持部の内部に設けられ、且つ、前記ディスプレイ支持部の重心を支持することを特徴とする請求項１１に記載の会議用端末。
【請求項１３】
前記第一ディスプレイの向きと同じ方向を撮影する会議撮影カメラと、
前記会議撮影カメラで撮影された会議画像を、前記ネットワークを介して前記遠隔側端末に送信する会議画像送信手段と
を備えたことを特徴とする請求項７から１２のいずれかに記載の会議用端末。
【請求項１４】
前記第一ディスプレイの左右両側から集音する一対のマイクと、
前記マイクで集音された音声を、前記ネットワークを介して前記遠隔側端末に送信する音声送信手段と
を備えたことを特徴とする請求項７から１３のいずれかに記載の会議用端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数拠点に設けられた端末間で遠隔会議を実行する会議システム、および遠隔会議に使用される会議用端末に関する。
【背景技術】
【０００２】
従来、複数拠点に設けられた端末間でテレビ会議を実行するテレビ会議システムが知られている。このようなテレビ会議システムに使用される端末として、通話相手が注視している方向と、通話相手の表示方向とを一致させることで、会議の臨場感を高めることができるテレビ会議装置が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−６５４９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載のテレビ会議装置では、遠隔地のユーザを表示するディスプレイの方向が、そのユーザの操作に応じて変化する。しかしながら、テレビ会議装置が設置されている会議の開催場所（以下、「会議拠点」という。）では、ディスプレイの周囲を取り囲むようにユーザが着座することがある。この場合、ディスプレイと正対しているユーザは、ディスプレイの表示内容を確実に目視できるため、遠隔地のユーザの表情などを把握できる。一方、ディスプレイと正対していないユーザは、ディスプレイの表示内容を目視困難であるか、その位置関係によっては表示内容を全く目視できないことがある。そうすると、遠隔地のユーザの表情などを把握できないため、テレビ会議の臨場感を失うおそれがあった。
【０００５】
本発明は、上述した課題を解決するためになされたものであり、会議拠点のユーザが遠隔地のユーザを確実に目視可能な会議システムおよび会議用端末を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の第１態様に係る会議システムは、遠隔地のユーザが使用する遠隔側端末と、会議の開催場所に設置される会議用端末とがネットワークを介して接続され、前記遠隔側端末と前記会議用端末との双方向通信によって遠隔会議を実行する会議システムであって、前記遠隔側端末は、前記ユーザの正面顔を含む領域を撮影する第一カメラと、前記ユーザの横顔を含む領域を撮影する第二カメラと、前記第一カメラで撮影された正面画像と、前記第二カメラで撮影された側面画像とを、前記ネットワークを介して前記会議用端末に送信する画像送信手段とを備え、前記会議用端末は、前記会議用端末における第一の側面方向に画像を表示する第一ディスプレイと、前記会議用端末における前記第一の側面方向と交差する第二の側面方向に画像を表示する第二ディスプレイと、前記ネットワークを介して前記正面画像および前記側面画像を受信する画像受信手段と、前記画像受信手段によって受信された前記正面画像を前記第一ディスプレイに表示し、且つ、前記画像受信手段によって受信された前記側面画像を前記第二ディスプレイに表示する表示制御手段とを備えている。
【０００７】
上記会議システムによれば、遠隔側端末と会議用端末との双方向通信によって遠隔会議が実行される。遠隔側端末では、ユーザの正面画像および側面画像が、ネットワークを介して会議用端末に送信される。会議用端末では、正面画像が第一ディスプレイに表示され、側面画像が第二ディスプレイに表示される。これにより、会議拠点では、第一ディスプレイと正対していないユーザも、第二ディスプレイに表示される側面画像を目視して、遠隔地のユーザの表情などを把握することができるので、遠隔会議の臨場感を向上させることができる。
【０００８】
上記会議システムにおいて、前記第二カメラは、前記ユーザの右横顔を含む領域を撮影する右側カメラと、前記ユーザの左横顔を含む領域を撮影する左側カメラとを含み、前記画像送信手段は、前記側面画像として、前記右側カメラで撮影された右側面画像と、前記左側カメラで撮影された左側面画像とを送信し、前記第二ディスプレイは、前記第一ディスプレイの右側に向けて画像を表示する右面ディスプレイと、前記第一ディスプレイの左側に向けて画像を表示する左面ディスプレイとを含み、前記表示制御手段は、前記画像受信手段によって受信された前記右側面画像を前記右面ディスプレイに表示し、且つ、前記画像受信手段によって受信された前記左側面画像を前記左面ディスプレイに表示してもよい。
【０００９】
この場合、遠隔側端末では、ユーザの右側面画像および左側面画像が、ネットワークを介して会議用端末に送信される。会議用端末では、右側面画像が右面ディスプレイに表示され、左側面画像が左面ディスプレイに表示される。つまり、会議用端末では、遠隔地のユーザを三方から撮影した画像が、その撮影方向に対応して三面表示される。このような三面表示によって、会議用端末を遠隔地のユーザとして擬人化することができる。その結果、遠隔地のユーザが会議拠点にあたかも存在しているかのような印象を与えて、遠隔会議での存在感を高めることができる。
【００１０】
上記会議システムにおいて、前記会議用端末は、前記画像受信手段によって受信された前記側面画像を鏡像表示する反転画像を作成する反転画像作成手段を備え、前記第二ディスプレイは、前記第一ディスプレイの右側に向けて画像を表示する右面ディスプレイと、前記第一ディスプレイの左側に向けて画像を表示する左面ディスプレイとを含み、前記表示制御手段は、前記画像受信手段によって受信された前記側面画像を、前記右面ディスプレイおよび前記左面ディスプレイの一方に表示し、前記反転画像作成手段によって作成された前記反転画像を、前記右面ディスプレイおよび前記左面ディスプレイの他方に表示してもよい。
【００１１】
この場合、会議用端末では、右面ディスプレイおよび左面ディスプレイの一方に側面画像が表示され、他方に側面画像を反転した画像が表示される。これにより、遠隔地のユーザの正面および両側面の片方を撮影するカメラを設けるだけで、会議用端末で遠隔地のユーザを三面表示することができる。さらに、このような三面表示によって、遠隔側端末を遠隔地のユーザとして擬人化することができる。その結果、遠隔地のユーザが会議拠点にあたかも存在しているかのような印象を与えて、遠隔会議での存在感を高めることができる。
【００１２】
上記会議システムにおいて、前記遠隔側端末は、前記会議用端末に対する操作指示を受け付ける操作受付手段と、前記操作受付手段によって受け付けられた前記操作指示を、前記ネットワークを介して前記会議用端末に送信する操作指示送信手段とを備え、前記会議用端末は、前記第一ディスプレイおよび前記第二ディスプレイの向きを変更する駆動手段と、前記ネットワークを介して前記操作指示を受信する操作指示受信手段と、前記操作指示受信手段によって受信された前記操作指示に応じて、前記駆動手段に前記第一ディスプレイおよび前記第二ディスプレイの向きを変更させる駆動制御手段とを備えてもよい。
【００１３】
この場合、遠隔側端末では、会議用端末に対する操作指示を受け付けた場合、操作指示に応じた操作信号が会議用端末に送信される。会議用端末では、遠隔側端末から受信した操作信号に応じて、第一ディスプレイおよび第二ディスプレイの向きが変更される。したがって、遠隔地のユーザは、第一ディスプレイおよび第二ディスプレイの向き（つまり、正面画像および側面画像の表示方向）を遠隔操作で変更できるため、従来よりも低コストで臨場感の高い遠隔会議を実現できる。
【００１４】
上記会議システムにおいて、前記会議用端末は、前記第一ディスプレイの向きと同じ方向を撮影する会議撮影カメラと、前記会議撮影カメラで撮影された会議画像を、前記ネットワークを介して前記遠隔側端末に送信する会議画像送信手段とを備え、前記遠隔側端末は、画像を表示する遠隔側ディスプレイと、前記ネットワークを介して前記会議画像を受信する会議画像受信手段と、前記会議画像受信手段によって受信された前記会議画像を前記遠隔側ディスプレイに表示する遠隔側表示制御手段とを備えてもよい。
【００１５】
この場合、遠隔地のユーザは、第一ディスプレイの向きを変更することで、会議撮影カメラの撮影方向を遠隔操作することができる。そのため、遠隔地のユーザは、会議拠点の様子を正確に把握でき、実際に会議拠点に存在しているような臨場感が得られる。また、遠隔地のユーザが注視している方向と、会議拠点でそのユーザの正面顔が表示される方向とは略一致する。そのため、会議拠点のユーザは、遠隔地のユーザの正面顔が表示されている方向を、遠隔地のユーザが注視している方向として把握できる。ひいては、ユーザ間の意思疎通が円滑となり、遠隔会議の臨場感を高めることができる。
【００１６】
上記会議システムにおいて、前記会議用端末は、前記第一ディスプレイの左右両側から集音する一対のマイクと、前記マイクで集音された音声を、前記ネットワークを介して前記遠隔側端末に送信する音声送信手段とを備え、前記遠隔側端末は、前記ネットワークを介して前記音声を受信する音声受信手段と、前記音声受信手段によって受信された前記音声を出力するスピーカとを備えてもよい。
【００１７】
この場合、第一ディスプレイに表示される正面画像の左右両側から、会議拠点の音声が集音される。そのため、遠隔側端末のスピーカから出力される音声の品質が、会議用端末を人間として見立てた場合に耳に入る音声の品質と近似する。したがって、遠隔拠点のユーザは会議拠点にあたかも存在しているかのようなリアルな音声を聞くことができ、遠隔会議の臨場感を高めることができる。
【００１８】
本発明の第２態様に係る会議用端末は、ネットワークを介して遠隔地のユーザが使用する遠隔側端末に接続され、会議の開催場所に設置される会議用端末であって、前記会議用端末における第一の側面方向に画像を表示する第一ディスプレイと、前記会議用端末における前記第一の側面方向と交差する第二の側面方向に画像を表示する第二ディスプレイと、前記ネットワークを介して、前記ユーザの正面顔を含む領域を撮影した正面画像と、前記ユーザの横顔を含む領域を撮影した側面画像とを受信する画像受信手段と、前記画像受信手段によって受信された前記正面画像を前記第一ディスプレイに表示し、且つ、前記画像受信手段によって受信された前記側面画像を前記第二ディスプレイに表示する表示制御手段とを備えている。
【００１９】
上記会議用端末によれば、遠隔側端末と会議用端末との双方向通信によって遠隔会議が実行される。遠隔側端末では、ユーザの正面画像および側面画像が、ネットワークを介して会議用端末に送信される。会議用端末では、正面画像が第一ディスプレイに表示され、側面画像が第二ディスプレイに表示される。これにより、会議拠点では、第一ディスプレイと正対していないユーザも、第二ディスプレイに表示される側面画像を目視して、遠隔地のユーザの表情などを把握することができるので、遠隔会議の臨場感を向上させることができる。
【００２０】
上記会議用端末において、前記第二ディスプレイは、前記第一ディスプレイの右側に向けて画像を表示する右面ディスプレイと、前記第一ディスプレイの左側に向けて画像を表示する左面ディスプレイとを含み、前記表示制御手段は、前記画像受信手段によって受信された前記側面画像のうち、前記ユーザの右横顔を含む領域を撮影した右側面画像を前記右面ディスプレイに表示し、且つ、前記ユーザの左横顔を含む領域を撮影した左側面画像を前記左面ディスプレイに表示してもよい。
【００２１】
この場合、遠隔側端末では、ユーザの右側面画像および左側面画像が、ネットワークを介して会議用端末に送信される。会議用端末では、右側面画像が右面ディスプレイに表示され、左側面画像が左面ディスプレイに表示される。つまり、会議用端末では、遠隔地のユーザを三方から撮影した画像が、その撮影方向に対応して三面表示される。このような三面表示によって、会議用端末を遠隔地のユーザとして擬人化することができる。その結果、遠隔地のユーザが会議拠点にあたかも存在しているかのような印象を与えて、遠隔会議での存在感を高めることができる。
【００２２】
上記会議用端末において、前記画像受信手段によって受信された前記側面画像を鏡像表示する反転画像を作成する反転画像作成手段を備え、前記第二ディスプレイは、前記第一ディスプレイの右側に向けて画像を表示する右面ディスプレイと、前記第一ディスプレイの左側に向けて画像を表示する左面ディスプレイとを含み、前記表示制御手段は、前記画像受信手段によって受信された前記側面画像を、前記右面ディスプレイおよび前記左面ディスプレイの一方に表示し、前記反転画像作成手段によって作成された前記反転画像を、前記右面ディスプレイおよび前記左面ディスプレイの他方に表示してもよい。
【００２３】
この場合、会議用端末では、右面ディスプレイおよび左面ディスプレイの一方に側面画像が表示され、他方に側面画像を反転した画像が表示される。これにより、遠隔地のユーザの正面および両側面の片方を撮影するカメラを設けるだけで、会議用端末で遠隔地のユーザを三面表示することができる。さらに、このような三面表示によって、遠隔側端末を遠隔地のユーザとして擬人化することができる。その結果、遠隔地のユーザが会議拠点にあたかも存在しているかのような印象を与えて、遠隔会議での存在感を高めることができる。
【００２４】
上記会議用端末において、前記第一ディスプレイおよび前記第二ディスプレイの向きを変更する駆動手段と、前記ネットワークを介して、前記会議用端末に対する操作指示を受信する操作指示受信手段と、前記操作指示受信手段によって受信された前記操作指示に応じて、前記駆動手段に前記第一ディスプレイおよび前記第二ディスプレイの向きを変更させる駆動制御手段とを備えてもよい。
【００２５】
この場合、遠隔側端末では、会議用端末に対する操作指示を受け付けた場合、操作指示に応じた操作信号が会議用端末に送信される。会議用端末では、遠隔側端末から受信した操作信号に応じて、第一ディスプレイおよび第二ディスプレイの向きが変更される。したがって、遠隔地のユーザは、第一ディスプレイおよび第二ディスプレイの向き（つまり、正面画像および側面画像の表示方向）を遠隔操作で変更できるため、従来よりも低コストで臨場感の高い遠隔会議を実現できる。
【００２６】
上記会議用端末において、前記駆動手段は、前記第一ディスプレイおよび前記第二ディスプレイに囲まれた領域に設けられてもよい。この場合、第一ディスプレイと第二ディスプレイとで囲まれたデッドスペースを有効活用することができ、会議用端末の大型化を抑制することができる。
【００２７】
上記会議用端末において、前記第一ディスプレイおよび前記第二ディスプレイが一体に設けられた略箱状のディスプレイ支持部を備え、前記駆動手段は、前記ディスプレイ支持部の内部に設けられ、且つ、前記ディスプレイ支持部の重心を支持してもよい。この場合、駆動手段がディスプレイ支持部の重心を支持することで、ディスプレイ支持部の動作を制御しやすくなり、会議用端末の製造やメンテナンスを容易にすることができる。
【００２８】
上記会議用端末において、前記第一ディスプレイの向きと同じ方向を撮影する会議撮影カメラと、前記会議撮影カメラで撮影された会議画像を、前記ネットワークを介して前記遠隔側端末に送信する会議画像送信手段とを備えてもよい。この場合、遠隔地のユーザは、第一ディスプレイの向きを変更することで、会議撮影カメラの撮影方向を遠隔操作することができる。そのため、遠隔地のユーザは、会議拠点の様子を正確に把握でき、実際に会議拠点に存在しているような臨場感が得られる。また、遠隔地のユーザが注視している方向と、会議拠点でそのユーザの正面顔が表示される方向とは略一致する。そのため、会議拠点のユーザは、遠隔地のユーザの正面顔が表示されている方向を、遠隔地のユーザが注視している方向として把握できる。ひいては、ユーザ間の意思疎通が円滑となり、遠隔会議の臨場感を高めることができる。
【００２９】
上記会議用端末において、前記第一ディスプレイの左右両側から集音する一対のマイクと、前記マイクで集音された音声を、前記ネットワークを介して前記遠隔側端末に送信する音声送信手段とを備えてもよい。この場合、第一ディスプレイに表示される正面画像の左右両側から、会議拠点の音声が集音される。そのため、遠隔側端末のスピーカから出力される音声の品質が、会議用端末を人間として見立てた場合に耳に入る音声の品質と近似する。したがって、遠隔拠点のユーザは会議拠点にあたかも存在しているかのようなリアルな音声を聞くことができ、遠隔会議の臨場感を高めることができる。
【図面の簡単な説明】
【００３０】
【図１】テレビ会議システム１の全体構成を示す図である。
【図２】遠隔側端末３の電気的構成を示すブロック図である。
【図３】会議用端末５の斜め上方からの斜視図である。
【図４】会議用端末５の正面図である。
【図５】図４のＡ−Ａ線矢視方向断面図である。
【図６】図４のＢ−Ｂ線矢視方向断面図である。
【図７】会議用端末５の電気的構成を示すブロック図である。
【図８】遠隔側端末３の遠隔会議処理を示すフローチャートである。
【図９】遠隔側端末３の映像送信割込み処理を示すフローチャートである。
【図１０】遠隔側端末３の音声送信割込み処理を示すフローチャートである。
【図１１】遠隔側端末３の映像受信割込み処理を示すフローチャートである。
【図１２】遠隔側端末３の音声受信割込み処理を示すフローチャートである。
【図１３】会議用端末５の遠隔会議処理を示すフローチャートである。
【図１４】会議用端末５の映像送信割込み処理を示すフローチャートである。
【図１５】会議用端末５の音声送信割込み処理を示すフローチャートである。
【図１６】会議用端末５の映像受信割込み処理を示すフローチャートである。
【図１７】会議用端末５の音声受信割込み処理を示すフローチャートである。
【図１８】変形例における、会議用端末５の映像受信割込み処理を示すフローチャートである。
【発明を実施するための形態】
【００３１】
以下、本発明の実施形態について、図面を参照して説明する。参照する図面は、本発明が採用し得る技術的特徴を説明するために用いられるものである。図面に記載されている装置の構成、各種処理のフローチャート等は、それのみに限定する趣旨ではなく、単なる説明例である。
【００３２】
図１〜図１７を参照して、本実施形態に係るテレビ会議システム１および会議用端末５について説明する。本実施形態では、会議用端末５の筐体上部７１（図３参照）の向きを、遠隔側端末３を用いた遠隔操作で調整する場合を例示する。
【００３３】
図１を参照して、テレビ会議システム１の全体構成について説明する。テレビ会議システム１では、ユーザが存在する複数の拠点にそれぞれ設けられた端末装置が、ネットワーク２を介して接続されている。会議が開催されている拠点（以下、会議拠点という。）に設置されている遠隔側端末３と、会議拠点とは異なる拠点（以下、遠隔拠点という。）に設置されている会議用端末５との間で、テレビ会議が実行される場合を例示する。以下では、会議拠点に存在するユーザを、会議側ユーザという。遠隔拠点に存在するユーザを、遠隔側ユーザという。
【００３４】
テレビ会議システム１では、遠隔側端末３と会議用端末５との間でテレビ会議が開始されると、遠隔側端末３および会議用端末５でそれぞれ取得された映像データおよび音声データは、ネットワーク２を介して互いに送受信される。遠隔側端末３では、会議用端末５で取得された映像データおよび音声データ（つまり、会議側ユーザの映像データおよび音声データ）が出力される。会議用端末５では、遠隔側端末３で取得された映像データおよび音声データ（つまり、遠隔側ユーザの映像データおよび音声データ）が出力される。このように、遠隔側端末３および会議用端末５では、それぞれ相手方の拠点に存在するユーザの映像データおよび音声データがリアルタイムに出力されてテレビ会議が進行する。本実施形態では、遠隔側ユーザは、遠隔側端末３を使用して会議用端末５を遠隔操作できるが、詳細は後述する。
【００３５】
図２を参照して、遠隔側端末３の電気的構成について説明する。遠隔側端末３は、汎用のノート型ＰＣであり、ＣＰＵ３０、ＲＯＭ３１、ＲＡＭ３２、ＨＤＤ３３、ビデオコントローラ３４、オーディオコントローラ３５、通信装置３６、Ｉ／Ｏインタフェイス４０、キーボード４１、マウス４２、ディスプレイ４３、マイク４４、スピーカ４５を備える。さらに、遠隔側端末３は、複数のカメラ（前側カメラ４６、右側カメラ４７、左側カメラ４８）を備える。
【００３６】
ＲＯＭ３１、ＲＡＭ３２、およびＩ／Ｏインタフェイス４０は、ＣＰＵ３０に接続されている。ビデオコントローラ３４、オーディオコントローラ３５、キーボード４１、マウス４２、および複数のカメラは、Ｉ／Ｏインタフェイス４０にそれぞれ接続されている。ディスプレイ４３は、ビデオコントローラ３４に接続されている。マイク４４およびスピーカ４５は、オーディオコントローラ３５に接続されている。
【００３７】
通信装置３６は、ネットワーク２を介してデータ送受信を行うコントローラである。本実施形態では、通信装置３６が、テレビ会議の実行時に、会議用端末５との間で音声データおよび映像データの送受信を行う。後述する遠隔操作コマンドも、通信装置３６によって会議用端末５へ送信される。なお、ＲＡＭ３２は、遠隔側端末３で取得される映像データ・音声データのフレームバッファとして機能する。
【００３８】
前側カメラ４６は、遠隔側ユーザの前側に配置されて、遠隔側ユーザの正面顔を含む範囲を撮影するカメラである。右側カメラ４７は、遠隔側ユーザの右側に配置されて、遠隔側ユーザの右横顔を含む範囲を撮影するカメラである。左側カメラ４８は、遠隔側ユーザの左側に配置されて、遠隔側ユーザの左横顔を含む範囲を撮影するカメラである。本実施形態の前側カメラ４６、右側カメラ４７、および左側カメラ４８は、撮影した映像データをネットワーク２へリアルタイムに出力可能な小型・軽量の汎用カメラ（いわゆる、ＷＥＢカメラ）である。
【００３９】
ＨＤＤ３３は、大容量のハードディスクドライブであり、テレビ会議を実行するための各種データ（例えば、遠隔側端末３で取得された映像データ・音声データ、会議用端末５から受信した映像データ・音声データ）や割込みプログラムなどが記憶されている。後述の遠隔会議処理（図８参照）を実行するための会議処理プログラムも、ＨＤＤ３３に記憶されている。
【００４０】
図３〜図６を参照して、会議用端末５の物理的構造について説明する。以下の説明では、図３の右下方向、左上方向、左下方向、右上方向を、会議用端末５（詳細には、後述する筐体下部７３）の前側、後側、左側、右側とする。会議用端末５は、テレビ会議を実行するのに必要なデバイスが設けられた筐体７０を有する。筐体７０は、筐体上部７１、連結部７２、筐体下部７３からなる。
【００４１】
筐体上部７１は、平面視で正方形状をなし、且つ上下方向を長手方向とする箱状体（つまり、縦長直方体状）である。筐体上部７１の前面、右面、および左面には、ディスプレイが嵌め込まれるフレーム体である前面枠７４、右面枠７５、および左面枠７６がそれぞれ設けられている。前面枠７４には、縦長長方形状の正面ディスプレイ６１が固定されている。右面枠７５には、正面ディスプレイ６１と略同形の右面ディスプレイ６２が固定されている。左面枠７６には、正面ディスプレイ６１と略同形の左面ディスプレイ６３が固定されている。つまり、筐体上部７１は、その前面および左右両面の三面にディスプレイを備えている。なお、前面枠７４には、正面ディスプレイ６１と重畳して、タッチパネル５７が固定されている。したがって、正面ディスプレイ６１に表示されるメニューやアイコンなどを指で触れることで、会議用端末５の操作を行うことができる。
【００４２】
筐体上部７１の後面、上面、下面には、縦長板状の後面パネル７７、上面パネル７８、下面パネル７９が設けられている。これらのパネルは、先述の各種ディスプレイが固定された枠体とともに、筐体上部７１の内部空間を形成する。ただし、下面パネル７９の平面視中央のやや後ろ側から前方に向けて、半円状の開口部７９Ａが形成されている。そのため、筐体上部７１の内部空間は、開口部７９Ａを介して下方に連通している。
【００４３】
前面枠７４の上枠部分における略中央位置には、カメラ６７が設けられている。カメラ６７を正面ディスプレイ６１と同一面に設けたことで、正面ディスプレイ６１が画像表示する方向と同一方向（つまり、筐体上部７１の前方）が、カメラ６７によって撮影される。右面枠７５の上枠部分における略中央位置には、右側マイク６４が設けられている。左面枠７６の上枠部分における略中央位置には、左側マイク６５が設けられている。右側マイク６４および左側マイク６５は、筐体上部７１の両側面に設けられた一対のバイノーラルマイクである。これにより、会議用端末５の周辺で発生した音声は、筐体上部７１の両側面からバイノーラル方式で集音される。
【００４４】
筐体下部７３は、平面視で筐体上部７１よりも大きな正方形状をなし、且つ上下方向を短手方向とする箱状体である。筐体下部７３の内部には、筐体下部７３の前面側から音声を出力可能なスピーカ６６が設けられている。筐体下部７３の上面における中央位置には、平面視で正方形状の凹部７３Ａが形成されている。
【００４５】
連結部７２は、平面視で正方形状をなし、且つ上下方向を長手方向とする棒状体である。連結部７２の下端部には、平面視で連結部７２よりも大きい正方形状の板部である鍔部７２Ａが設けられている。鍔部７２Ａは、平面視で同形をなす凹部７３Ａに嵌め込まれた状態で固定されている。一方、連結部７２の上側部分は、開口部７９Ａを介して筐体上部７１の内部空間に進入している。
【００４６】
筐体上部７１の内部には、駆動機構１００および一対の連結金具６８が設けられている。駆動機構１００は、筐体上部７１と連結部７２とを連結して、筐体上部７１の傾きを水平方向および垂直方向に変化させるための機構である。一対の連結金具６８は、正面ディスプレイ６１およびタッチパネル５７の背面側に設けられ、且つ前面枠７４の上枠部分から下枠部分に亘って左右に並んで延びる板状金具である。各連結金具６８の上端部および下端部は、それぞれ前面枠７４の上枠部分および下枠部分に固定されている。
【００４７】
駆動機構１００は、筐体上部７１の水平方向の傾きを調整するパンモータ８０と、筐体上部７１の垂直方向の傾きを調整するチルトモータ９０と、筐体上部７１に連結される一対の腕部９２を備える。パンモータ８０は、連結部７２の上端部に固定されており、上方に延出する垂直な軸８１を有する。チルトモータ９０は、パンモータ８０の上側に固定されており、左右両側に延出する水平な軸９１を有する。水平な軸９１は、一対の腕部９２の後端側にそれぞれ接続されている。一対の腕部９２は、軸９１と直交する方向に延びる板状金具であり、各々の先端部はそれぞれ対応する連結金具６８に固定されている。なお、駆動機構１００は、筐体上部７１に複数のディスプレイ等の各種部材が取り付けられた状態で、筐体上部７１の重心位置を支持するように連結金具６８に固定されている。
【００４８】
上記の構造により、パンモータ８０が軸８１を回動させるのに伴って、チルトモータ９０も垂直軸周りに回動する。チルトモータ９０から延びる一対の腕部９２に連結された筐体上部７１も、垂直軸周りに回動する。つまり、パンモータ８０の駆動によって、筐体上部７１が垂直方向に傾斜する。また、チルトモータ９０が軸９１を回動させるのに伴って、一対の腕部９２も水平軸周りに回動する。チルトモータ９０から延びる一対の腕部９２に連結された筐体上部７１も、水平軸周りに回動する。つまり、チルトモータ９０の駆動によって、筐体上部７１が水平方向に傾斜する。
【００４９】
図７を参照して、会議用端末５の電気的構成について説明する。会議用端末５は、ＣＰＵ５０、ＲＯＭ５１、ＲＡＭ５２、ＨＤＤ５３、ビデオコントローラ５４、オーディオコントローラ５５、通信装置５６、Ｉ／Ｏインタフェイス６０を備える。さらに、会議用端末５は、先述のタッチパネル５７、正面ディスプレイ６１、右面ディスプレイ６２、左面ディスプレイ６３、右側マイク６４、左側マイク６５、スピーカ６６、カメラ６７、パンモータ８０、チルトモータ９０を備えている。
【００５０】
ＲＯＭ５１、ＲＡＭ５２、およびＩ／Ｏインタフェイス６０は、ＣＰＵ５０に接続されている。ビデオコントローラ５４、オーディオコントローラ５５、カメラ６７、タッチパネル５７、パンモータ８０、およびチルトモータ９０は、Ｉ／Ｏインタフェイス６０にそれぞれ接続されている。正面ディスプレイ６１、右面ディスプレイ６２、左面ディスプレイ６３（以下、各ディスプレイ６１〜６３と総称する。）は、ビデオコントローラ５４に接続されている。右側マイク６４、左側マイク６５、スピーカ６６は、オーディオコントローラ５５に接続されている。
【００５１】
通信装置５６は、ネットワーク２を介してデータ送受信を行うコントローラである。本実施形態では、通信装置５６が、テレビ会議の実行時に、遠隔側端末３との間で音声データおよび映像データの送受信を行う。後述する遠隔操作コマンドも、通信装置５６によって遠隔側端末３から受信される。なお、ＲＡＭ５２は、会議用端末５で取得される映像データ・音声データのフレームバッファとして機能する。
【００５２】
ＨＤＤ５３は、大容量のハードディスクドライブであり、テレビ会議を実行するための各種データ（例えば、会議用端末５で取得された映像データ・音声データ、遠隔側端末３から受信した映像データ・音声データ）や割込みプログラムなどが記憶されている。後述の遠隔会議処理（図１３参照）を実行するための会議処理プログラムも、ＨＤＤ５３に記憶されている。
【００５３】
図８〜図１７を参照して、テレビ会議システム１で実行されるテレビ会議に関する処理について説明する。テレビ会議の実行時には、遠隔側端末３および会議用端末５において、以下に説明する処理がそれぞれ実行される。
【００５４】
図８〜図１２を参照して、遠隔側端末３の遠隔会議処理について説明する。本処理は、遠隔側端末３でテレビ会議の開始を指示する入力操作が受け付けられると、ＨＤＤ３３に記憶されている会議処理プログラムに基づいて、ＣＰＵ３０によって実行される。
【００５５】
図８に示すように、遠隔側端末３の遠隔会議処理では、まず会議参加要求が会議サーバ（図示外）に送信される（Ｓ１）。会議参加要求は、テレビ会議システム１で実行されるテレビ会議への参加を要求するコマンドである。会議サーバは、ネットワーク２を介して会議参加要求を受信した場合、会議参加要求に含まれる認証情報に基づいてユーザ認証を行う。ユーザ認証が成功した場合、参加許可を要求元の端末装置に返信する。ユーザ認証が失敗した場合、参加拒否を要求元の端末装置に返信する。
【００５６】
ステップＳ１の実行後、参加許可を取得したか否かが判断される（Ｓ３）。会議サーバから参加拒否を受信した場合、参加許可を取得していないと判断される（Ｓ３：ＮＯ）。この場合、テレビ会議が開始されることなく、遠隔会議処理（図８）が終了される。会議サーバから参加許可を受信した場合、参加許可を取得したと判断される（Ｓ３：ＹＥＳ）。この場合、ＨＤＤ３３から割込みプログラムが起動される（Ｓ５）。
【００５７】
ステップＳ５で起動された割込みプログラムに基づいて、テレビ会議中の各種データ処理（具体的には、映像データおよび音声データの送受信）が行われる。詳細には、ＣＰＵ３０は割込みプログラムに基づいて、映像送信割込み処理（図９）と、音声送信割込み処理（図１０）と、映像受信割込み処理（図１１）と、音声受信割込み処理（図１２）とを実行するが、詳細は後述する。
【００５８】
ステップＳ５の実行後、キー入力ありか否かが判断される（Ｓ７）。例えば、キーボード４１またはマウス４２の入力操作を受け付けた場合は、キー入力ありと判断される（Ｓ７：ＹＥＳ）。この場合、ステップＳ７で検出されたキー入力が、会議用端末５の遠隔操作であるか否かが判断される（Ｓ９）。ステップＳ９では、ステップＳ７で検出されたキー入力があらかじめ定められている操作内容と一致する場合、会議用端末５の遠隔操作であると判断される（Ｓ９：ＹＥＳ）。
【００５９】
この場合、ステップＳ７で検出されたキー入力に対応して、会議用端末５に所定の動作内容を実行させる遠隔操作コマンドが生成される（Ｓ１１）。例えば、会議用端末５が備えるカメラ６７の撮影方向を下方に傾けたい場合に、遠隔側ユーザはキーボード４１の「↑」キーを押すことで、「上向き」を指示するチルト調整コマンドが生成される。カメラ６７の撮影方向を右方向に傾けたい場合に、遠隔側ユーザはキーボード４１の「→」キーを押すことで、「右向き」を指示するパン調整コマンドが生成される。カメラ６７のズーム倍率を大きくしたい場合に、遠隔側ユーザはキーボード４１の「＋」キーを押すことで、「拡大」を指示するズーム調整コマンドが生成される。
【００６０】
ステップＳ１１で生成された遠隔操作コマンド（パン調整コマンド、チルト調整コマンド、ズーム調整コマンドのいずれか）は、パケット化されて会議用端末５へ送信される（Ｓ１３）。以下では、ステップＳ１３で送信されたパケットを、遠隔操作パケットという。ステップＳ１３の実行後、テレビ会議が終了したか否かが判断される（Ｓ１５）。例えば、遠隔側端末３でテレビ会議の終了を指示する入力操作が受け付けられたり、会議サーバからテレビ会議の終了を指示するコマンドを受信したりした場合、テレビ会議が終了したと判断される（Ｓ１５：ＹＥＳ）。この場合、ステップＳ５で起動された割込みプログラムが終了され（Ｓ１７）、遠隔会議処理（図８）が終了される。つまり、会議用端末５に対する音声データおよび映像データの送受信が中断されて、テレビ会議が終了する。
【００６１】
一方、キー入力がない場合（Ｓ７：ＮＯ）、会議用端末５の遠隔操作でない場合（Ｓ９：ＮＯ）、およびテレビ会議が終了していない場合（Ｓ１５：ＮＯ）、処理はステップＳ７に戻る。このように、本実施形態では、割込みプログラムの起動から終了までの間（つまり、テレビ会議の実行中）、ステップＳ７〜Ｓ１５が所定間隔（例えば、数ミリ秒周期）で繰り返し実行される。よって、例えばキーボード４１の「↑」キーが押し続けられている間は、「上向き」を指示するチルト調整コマンドの遠隔操作パケットが連続して出力される。
【００６２】
図９に示すように、遠隔側端末３の映像送信割込み処理では、前側カメラ４６から１フレームの映像データが取り込まれる（Ｓ２１）。右側カメラ４７から１フレームの映像データが取り込まれる（Ｓ２３）。左側カメラ４８から１フレームの映像データが取り込まれる（Ｓ２５）。ステップＳ２１〜Ｓ２５で取りこまれた各映像データに、撮影元カメラを示す識別タグが付与される（Ｓ２７）。識別タグが付与された映像データは、公知のデータ圧縮が実行されたのち、データ転送用にパケット化される（Ｓ２９）。パケット化された映像データ（つまり、映像パケット）は、会議用端末５へ送信される（Ｓ３１）。ステップＳ３１の実行後、処理はステップＳ２１に戻る。
【００６３】
これにより、ステップＳ５で起動された割込みプログラムが終了されるまで、各カメラから１フレームの映像データが取り込まれるごとに、映像パケットが会議用端末５へ送信される。具体的には、テレビ会議の実行中は、遠隔拠点を映し出した映像データを含む映像パケットが会議用端末５へ送信される。この映像データには、前側カメラ４６で撮影された遠隔側ユーザの正面顔画像と、右側カメラ４７で撮影された遠隔側ユーザの右顔画像と、左側カメラ４８で撮影された遠隔側ユーザの左顔画像とが含まれる。
【００６４】
図１０に示すように、遠隔側端末３の音声送信割込み処理では、マイク４４から１サンプリング時間（例えば、０．１秒）の音声データが取り込まれる（Ｓ４１）。取り込まれた音声データは、公知のデータ圧縮が実行されたのち、データ転送用にパケット化される（Ｓ４３）。パケット化された音声データ（つまり、音声パケット）は、会議用端末５へ送信される（Ｓ４５）。ステップＳ４５の実行後、処理はステップＳ４１に戻る。
【００６５】
これにより、ステップＳ５で起動された割込みプログラムが終了されるまで、マイク４４から１サンプリング時間の音声データが取り込まれるごとに、音声パケットが会議用端末５へ送信される。具体的には、テレビ会議の実行中は、遠隔拠点で集音された音声データを含む音声パケットが会議用端末５へ送信される。この音声データには、マイク４４で集音された遠隔側ユーザの声等が含まれる。
【００６６】
図１１に示すように、遠隔側端末３の映像受信割込み処理では、会議用端末５から映像パケットが受信される（Ｓ６１）。受信されたパケットから圧縮済みの映像データが取り出され、この映像データについて公知の伸張処理が実行される（Ｓ６３）。伸張された映像データが、ビデオコントローラ３４に転送される（Ｓ６５）。ステップＳ６５の実行後、処理はステップＳ６１に戻る。
【００６７】
これにより、ステップＳ５で起動された割込みプログラムが終了されるまで、会議用端末５から映像パケットが受信されるごとに、ビデオコントローラ３４に映像データが転送される。ビデオコントローラ３４は、転送された映像データをディスプレイ４３に表示する。この映像データは、後述するようにカメラ６７が会議拠点を映し出したものである。よって、遠隔側ユーザは、ディスプレイ４３に映し出される映像によって、会議側ユーザの顔等を見ることができる。
【００６８】
図１２に示すように、遠隔側端末３の音声受信割込み処理では、会議用端末５から音声パケットが受信される（Ｓ８１）。受信されたパケットから圧縮済みの音声データが取り出され、この音声データについて公知の伸張処理が実行される（Ｓ８３）。伸張された音声データに付与されている識別タグが特定されたのち（Ｓ８５）、この音声データがオーディオコントローラ３５に転送される（Ｓ８７）。ただし、オーディオコントローラ３５は、音声データに付与されている識別タグに基づいて、音声データの出力デバイスを調整する。例えば、識別タグ「左側マイク」が付与されている音声データは、スピーカ４５の左側出力部から出力させる。識別タグ「右側マイク」が付与されている音声データは、スピーカ４５の右側出力部から出力させる。ステップＳ８７の実行後、処理はステップＳ８１に戻る。
【００６９】
これにより、ステップＳ５で起動された割込みプログラムが終了されるまで、会議用端末５から音声パケットが受信されるごとに、オーディオコントローラ３５に音声データが転送される。オーディオコントローラ３５は、転送された音声データをスピーカ４５から出力する。この音声データは、後述するように右側マイク６４および左側マイク６５が会議拠点で集音したものである。よって、遠隔側ユーザは、スピーカ４５から出力される音声によって、会議側ユーザの声等を聞くことができる。さらに、本実施形態では、右側マイク６４および左側マイク６５はバイノーラル方式で会議拠点を集音する。したがって、遠隔側ユーザは、バイノーラル対応のヘッドフォンを利用することで、会議側ユーザの声等をより高い臨場感で聞くことができる。
【００７０】
図１３〜図１７を参照して、会議用端末５の遠隔会議処理について説明する。本処理は、会議用端末５でテレビ会議の開始を指示する入力操作が受け付けられると、ＨＤＤ５３に記憶されている会議処理プログラムに基づいて、ＣＰＵ５０によって実行される。
【００７１】
図１３に示すように、会議用端末５の遠隔会議処理では、まずパンモータ８０およびチルトモータ９０の原点検出処理が実行される（Ｓ１０１）。パンモータ８０の原点検出処理は、筐体上部７１が水平方向の傾きが初期状態となるまで回動される。具体的には、各ディスプレイ６１〜６３がそれぞれ会議用端末５（詳細には、筐体下部７３）の前側、右側、左側を向くまで、筐体上部７１が垂直軸周りに回動される。これにより、カメラ６７の撮影方向は、会議用端末５（詳細には、筐体下部７３）の前方と一致する。
【００７２】
一方、チルトモータ９０の原点検出処理は、筐体上部７１が垂直方向の傾きが初期状態となるまで回動される。具体的には、各ディスプレイ６１〜６３が垂直となるまで（言い換えると、カメラ６７の撮影方向が水平となるまで）、筐体上部７１が水平軸周りに回転される。ステップＳ１０１で初期状態に設定された筐体上部７１は、会議用端末５（詳細には、筐体下部７３）と前後方向、左右方向、上下方向がいずれも一致している。これにより、テレビ会議の開始時に会議用端末５の向きを初期化する手間を省略できる。
【００７３】
ステップＳ１０１の実行後、ＨＤＤ５３から割込みプログラムが起動される（Ｓ１０３）。ステップＳ１０３で起動された割込みプログラムに基づいて、テレビ会議中の各種データ処理（具体的には、映像データおよび音声データの送受信）が行われる。詳細には、ＣＰＵ５０は割込みプログラムに基づいて、映像送信割込み処理（図１４）と、音声送信割込み処理（図１５）と、映像受信割込み処理（図１６）と、音声受信割込み処理（図１７）とを実行するが、詳細は後述する。
【００７４】
ステップＳ１０３の実行後、遠隔操作パケットを受信したか否かが判断される（Ｓ１０５）。遠隔操作パケットが受信されている場合（Ｓ１０５：ＹＥＳ）、遠隔操作パケットに含まれる遠隔操作コマンドがチルト調整コマンドであるか否かが判断される（Ｓ１０７）。遠隔操作コマンドがチルト調整コマンドである場合（Ｓ１０７：ＹＥＳ）、このチルト調整コマンドに基づいて生成されたチルト制御信号が、チルトモータ９０へ出力される（Ｓ１０９）。チルト制御信号は、チルト調整コマンドが指示する回転角度に応じて、チルトモータ９０を回転駆動する信号である。
【００７５】
チルトモータ９０は、チルト制御信号に応じて筐体上部７１を水平軸周りに回転させることで、筐体上部７１を下向きまたは上向きに調整する。例えば、先述の「下向き」を指示するチルト調整コマンドが会議用端末５に送信された場合、チルトモータ９０が筐体上部７１を右側面視で時計回り（図５では右回り）に回転させる。その結果、カメラ６７の撮影方向もより下向きに傾斜するため、遠隔側端末３のディスプレイ４３に映し出される撮影範囲も下側に移動する。したがって、会議側ユーザが筐体上部７１の垂直方向の傾きを調整しなくても、遠隔側ユーザがカメラ６７のチルト調整を遠隔操作で行うことができる。
【００７６】
遠隔操作コマンドがチルト調整コマンドでない場合（Ｓ１０７：ＮＯ）、遠隔操作コマンドがパン調整コマンドであるか否かが判断される（Ｓ１１１）。遠隔操作コマンドがパン調整コマンドである場合（Ｓ１１１：ＹＥＳ）、このパン調整コマンドに基づいて生成されたパン制御信号が、パンモータ８０へ出力される（Ｓ１１３）。パン制御信号は、パン調整コマンドが指示する回転角度に応じて、パンモータ８０を回転駆動する信号である。
【００７７】
パンモータ８０は、パン制御信号に応じて筐体上部７１を垂直軸周りに回転させることで、筐体上部７１を右向きまたは左向きに調整する。例えば、先述の「右向き」を指示するパン調整コマンドが会議用端末５に送信された場合、パンモータ８０が筐体上部７１を平面視で時計回り（図６では右回り）に回転させる。その結果、カメラ６７の撮影方向もより右向きに傾斜するため、遠隔側端末３のディスプレイ４３に映し出される撮影範囲も右側に移動する。したがって、会議側ユーザが筐体上部７１の水平方向の傾きを調整しなくても、遠隔側ユーザがカメラ６７のパン調整を遠隔操作で行うことができる。
【００７８】
遠隔操作コマンドがパン調整コマンドでない場合（Ｓ１１１：ＮＯ）、遠隔操作コマンドがズーム調整コマンドであるか否かが判断される（Ｓ１１５）。遠隔操作コマンドがズーム調整コマンドである場合（Ｓ１１５：ＹＥＳ）、このズーム調整コマンドに基づいて生成されたズーム制御信号が、カメラ６７へ出力される（Ｓ１１７）。ズーム制御信号は、ズーム調整コマンドが指示するズーム倍率の拡大率または縮小率に応じて、カメラ６７のズーム倍率を調整するモータ（図示外）を駆動する信号である。
【００７９】
カメラ６７は、会議用端末５から受信したズーム制御信号に応じてズーム倍率を変更する。例えば、先述の「拡大」を指示するズーム調整コマンドが会議用端末５に送信された場合、カメラ６７がズーム倍率を大きくするため、遠隔側端末３のディスプレイ４３に映し出される撮影範囲も狭くなる。これにより、ディスプレイ４３に表示されている映像の拡大・縮小が行われる。したがって、会議側ユーザがカメラ６７のズーム倍率を調整しなくても、遠隔側ユーザがカメラ６７のズーム調整を遠隔操作で行うことができる。
【００８０】
遠隔操作パケットが受信されていない場合（Ｓ１０５：ＮＯ）、または遠隔操作コマンドがズーム調整コマンドでない場合（Ｓ１１５：ＮＯ）、先述のステップＳ１７と同様に、テレビ会議が終了したか否かが判断される（Ｓ１１９）。テレビ会議が終了した場合（Ｓ１１９：ＹＥＳ）。この場合、ステップＳ１０３で起動された割込みプログラムが終了され（Ｓ１２２）、遠隔会議処理（図１３）が終了される。つまり、遠隔側端末３に対する音声データおよび映像データの送受信が中断されて、テレビ会議が終了する。
【００８１】
一方、ステップＳ１０９、Ｓ１１３、Ｓ１１７のいずれかの実行後、またはテレビ会議が終了していない場合（Ｓ１１９：ＮＯ）、処理はステップＳ１０５に戻る。このように、本実施形態では、遠隔会議処理（図１３）の実行中は、ステップＳ１０５〜Ｓ１１９が所定間隔（例えば、数ミリ秒周期）で繰り返し実行される。よって、テレビ会議の実行中は、遠隔側端末３から受信した遠隔操作コマンドに基づいて、会議用端末５の遠隔操作が実行される。
【００８２】
図１４に示すように、会議用端末５の映像送信割込み処理では、カメラ６７から１フレームの映像データが取り込まれる（Ｓ１３１）。取り込まれた映像データは、公知のデータ圧縮が実行されたのち、データ転送用にパケット化される（Ｓ１３３）。パケット化された映像データ（つまり、映像パケット）は、遠隔側端末３へ送信される（Ｓ１３５）。ステップＳ１３５の実行後、処理はステップＳ１３１に戻る。
【００８３】
これにより、ステップＳ１０３で起動された割込みプログラムが終了されるまで、カメラ６７から１フレームの映像データが取り込まれるごとに、映像パケットが遠隔側端末３へ送信される。具体的には、テレビ会議の実行中は、会議拠点の様子を映し出した映像データを含む映像パケットが遠隔側端末３へ送信される。この映像データには、カメラ６７で撮影された会議側ユーザの顔等が含まれる。
【００８４】
図１５に示すように、会議用端末５の音声送信割込み処理では、右側マイク６４から１サンプリング時間（例えば、０．１秒）の音声データが取り込まれる（Ｓ１５１）。左側マイク６５から１サンプリング時間（例えば、０．１秒）の音声データが取り込まれる（Ｓ１５３）。ステップＳ１５１、Ｓ１５３で取りこまれた各音声データに、集音元カメラを示す識別タグが付与される（Ｓ１５５）。識別タグが付与された音声データは、公知のデータ圧縮が実行されたのち、データ転送用にパケット化される（Ｓ１５７）。パケット化された音声データ（つまり、音声パケット）は、遠隔側端末３へ送信される（Ｓ１５９）。ステップＳ１５９の実行後、処理はステップＳ１５１に戻る。
【００８５】
これにより、ステップＳ１０３で起動された割込みプログラムが終了されるまで、各マイクから１サンプリング時間の音声データが取り込まれるごとに、音声パケットが遠隔側端末３へ送信される。具体的には、テレビ会議の実行中は、会議拠点で集音された音声データを含む音声パケットが遠隔側端末３へ送信される。この音声データには、右側マイク６４で集音された会議側ユーザの声等と、左側マイク６５で集音された会議側ユーザの声等とが含まれる。
【００８６】
図１６に示すように、会議用端末５の映像受信割込み処理では、遠隔側端末３から映像パケットが受信される（Ｓ１７１）。受信されたパケットから圧縮済みの映像データが取り出され、この映像データについて公知の伸張処理が実行される（Ｓ１７３）。伸張された映像データに付与されている識別タグが特定されたのち（Ｓ１７５）、この映像データがビデオコントローラ５４に転送される（Ｓ１７７）。
【００８７】
ただし、ビデオコントローラ５４は、映像データに付与されている識別タグに基づいて、映像データの出力デバイスを調整する。例えば、識別タグ「前側カメラ」が付与されている映像データは、正面ディスプレイ６１に表示させる。識別タグ「右側カメラ」が付与されている映像データは、右面ディスプレイ６２に表示させる。識別タグ「左側カメラ」が付与されている映像データは、左面ディスプレイ６３に表示させる。ステップＳ１７７の実行後、処理はステップＳ１７１に戻る。
【００８８】
これにより、ステップＳ１０３で起動された割込みプログラムが終了されるまで、遠隔側端末３から映像パケットが受信されるごとに、ビデオコントローラ５４に映像データが転送される。ビデオコントローラ５４は、転送された映像データを識別タグに応じて、３つのディスプレイに選択的に表示する。よって、会議側ユーザは、各ディスプレイに映し出される映像によって、遠隔側ユーザの顔等を見ることができる。
【００８９】
詳細には、正面ディスプレイ６１に表示される映像データは、前側カメラ４６で撮影されたものである。右面ディスプレイ６２に表示される映像データは、右側カメラ４７で撮影されたものである。左面ディスプレイ６３に表示される映像データは、左側カメラ４８で撮影されたものである。よって、会議側ユーザは、各ディスプレイ６１〜６３に映し出される画像によって、それぞれ遠隔側ユーザの正面顔、右横顔、左横顔を認識することができる。
【００９０】
図１７に示すように、会議用端末５の音声受信割込み処理では、遠隔側端末３から音声パケットが受信される（Ｓ１９１）。受信されたパケットから圧縮済みの音声データが取り出され、この音声データについて公知の伸張処理が実行される（Ｓ１９３）。伸張された音声データが、オーディオコントローラ５５に転送される（Ｓ１９５）。ステップＳ１９５の実行後、処理はステップＳ１９１に戻る。
【００９１】
これにより、ステップＳ１０３で起動された割込みプログラムが終了されるまで、遠隔側端末３から音声パケットが受信されるごとに、オーディオコントローラ５５に音声データが転送される。オーディオコントローラ５５は、転送された音声データをスピーカ６６に出力する。この音声データは、マイク４４が遠隔拠点で集音したものである。よって、会議側ユーザは、スピーカ６６から出力される音声によって、遠隔側ユーザの声等を聞くことができる。
【００９２】
以上説明したように、本実施形態によれば、遠隔側端末３と会議用端末５との双方向通信によってテレビ会議が実行される。遠隔側端末３では、前側カメラ４６、右側カメラ４７、左側カメラ４８によってそれぞれ撮影された映像データが、ネットワーク２を介して会議用端末５に送信される。会議用端末５では、前側カメラ４６、右側カメラ４７、左側カメラ４８の映像データが、それぞれ各ディスプレイ６１〜６３に表示される。これにより、会議拠点では、正面ディスプレイ６１と正対していないユーザも、右面ディスプレイ６２または左面ディスプレイ６３に表示される映像データを目視して、遠隔拠点のユーザの表情などを把握することができるので、テレビ会議の臨場感を向上させることができる。
【００９３】
また、正面ディスプレイ６１に遠隔側ユーザの正面顔が表示され、右面ディスプレイ６２および左面ディスプレイ６３にそれぞれ遠隔側ユーザの右横顔および左横顔が表示される。つまり、会議用端末５では、遠隔側ユーザを三方から撮影した映像データが、その撮影方向に対応して三面表示される。このような三面表示によって筐体上部７１を遠隔側ユーザの頭部に見せかけることで、会議用端末５を擬人化することができる。その結果、遠隔側ユーザが会議拠点にあたかも存在しているかのような印象を与えて、テレビ会議での存在感を高めることができる。
【００９４】
また、遠隔側端末３では、会議用端末５に対する操作指示を受け付けた場合、操作指示に応じた操作信号が会議用端末５に送信される。会議用端末５では、遠隔側端末３から受信した操作信号に応じて、筐体上部７１の垂直方向および水平方向の傾きが変更される。これに伴って、筐体上部７１に設けられている各ディスプレイ６１〜６３の向きも変更される。したがって、遠隔側ユーザは、各ディスプレイ６１〜６３の向き（つまり、映像データの表示方向）を遠隔操作で変更できるため、従来よりも低コストで臨場感の高い遠隔会議を実現できる。
【００９５】
また、筐体上部７１の正面には、遠隔側ユーザの正面顔が表示される正面ディスプレイ６１とともに、筐体上部７１の前方を撮影するカメラ６７が設けられている。そのため、遠隔側ユーザは、正面ディスプレイ６１の向きを変更することで、カメラ６７の撮影方向を遠隔操作することができる。ひいては、遠隔側ユーザは会議拠点の様子を正確に把握でき、実際に会議拠点に存在しているような臨場感が得られる。
【００９６】
また、カメラ６７の撮影方向は、遠隔側ユーザの正面顔が表示される方向（つまり、筐体上部７１の前方）と略一致する。言い換えると、カメラ６７がパン調整およびチルト調整された場合でも、遠隔側ユーザが注視している方向と、遠隔側ユーザの正面顔が表示される方向とが略一致する。そのため、会議側ユーザは、遠隔側ユーザの正面顔が表示されている方向（つまり、正面ディスプレイ６１の向き）に基づいて、遠隔側ユーザが注視している方向を把握できる。例えば、会議側ユーザは、遠隔側ユーザの正面顔を目視している場合には、遠隔側ユーザによって注視されていないことを認識できる。また、遠隔側ユーザの右横顔または左横顔を目視している場合には、遠隔側ユーザによって注視されていないことを認識できる。ひいては、ユーザ間の意思疎通が円滑となり、テレビ会議の臨場感を高めることができる。
【００９７】
また、筐体上部７１の両側面には、右側マイク６４および左側マイク６５が設けられている。つまり、筐体上部７１を遠隔側ユーザの頭部として見た場合に、右側マイク６４および左側マイク６５はそれぞれ右耳および左耳に対応する位置に設けられている。そのため、遠隔側端末３のスピーカ４５から出力される音声の品質が、会議用端末５を人間として見立てた場合に耳に入る音声の品質と近似する。よって、右側マイク６４および左側マイク６５によって、遠隔側ユーザは会議拠点にあたかも存在しているかのようなリアルな音声を聞くことができ、テレビ会議の臨場感を高めることができる。
【００９８】
さらに、会議用端末５では、駆動機構１００が筐体上部７１の内部に設けられている。つまり、駆動機構１００は、各ディスプレイ６１〜６３に囲まれたデッドスペースに設けられている。このようにデッドスペースを有効活用することで、会議用端末５の大型化を抑制することができる。さらに、駆動機構１００は、筐体上部７１の内部でその重心を支持している。これにより、筐体上部７１の水平方向および垂直方向の傾き制御を正確に行うことができ、会議用端末５の製造やメンテナンスを容易にすることができる。
【００９９】
上記実施形態において、前側カメラ４６が、本発明の「第一カメラ」に相当する。右側カメラ４７および左側カメラ４８が、本発明の「第二カメラ」に相当する。映像送信割込み処理（図９）を実行するＣＰＵ３０が、本発明の「画像送信手段」に相当する。正面ディスプレイ６１が、本発明の「第一ディスプレイ」に相当する。右面ディスプレイ６２および左面ディスプレイ６３が、本発明の「第二ディスプレイ」に相当する。映像受信割込み処理（図１６）を実行するＣＰＵ５０が、本発明の「画像受信手段」および「表示制御手段」に相当する。
【０１００】
ステップＳ７、Ｓ９を実行するＣＰＵ３０が、本発明の「操作受付手段」に相当する。ステップＳ１１、Ｓ１３を実行するＣＰＵ３０が、本発明の「操作指示送信手段」に相当する。駆動機構１００が、本発明の「駆動手段」に相当する。ステップＳ１０５を実行するＣＰＵ５０が、本発明の「操作指示受信手段」に相当する。ステップＳ１０７〜Ｓ１１７を実行するＣＰＵ５０が、本発明の「駆動制御手段」に相当する。カメラ６７が、本発明の「会議撮影カメラ」に相当する。映像送信割込み処理（図１４）を実行するＣＰＵ５０が、本発明の「会議画像送信手段」に相当する。ディスプレイ４３が、本発明の「遠隔側ディスプレイ」に相当する。映像受信割込み処理（図１１）を実行するＣＰＵ３０が、本発明の「会議画像受信手段」および「遠隔側表示制御手段」に相当する。右側マイク６４および左側マイク６５が、本発明の「一対のマイク」に相当する。音声送信割込み処理（図１５）を実行するＣＰＵ５０が、本発明の「音声送信手段」に相当する。音声受信割込み処理（図１２）を実行するＣＰＵ３０が、本発明の「音声受信手段」に相当する。筐体上部７１が、本発明の「ディスプレイ支持部」に相当する。後述の変形例において、映像受信割込み処理（図１８）を実行するＣＰＵ５０が、本発明の「反転画像作成手段」に相当する。
【０１０１】
なお、本発明は上記実施形態に限定されるものではなく、発明の要旨を変更しない範囲での変更が可能である。例えば、以下に示す変形例（図１８および図１９参照）によれば、テレビ会議システム１において、遠隔側端末３に右側カメラ４７および左側カメラ４８のうちの一方のみを設けた場合でも、遠隔側端末３で遠隔側ユーザを三面表示することが可能である。
【０１０２】
より具体的に、遠隔側端末３に左側カメラ４８が設けられていない場合を想定する。この場合、遠隔側端末３の映像送信割込み処理（図９）では、ステップＳ２５が実行されない。そのため、ステップＳ３３で送信される映像パケットには、前側カメラ４６で撮影された映像データと、右側カメラ４７で撮影された映像データとが含まれる。
【０１０３】
一方、会議用端末５では、図１６に示す映像受信割込み処理に代えて、図１８に示す映像受信割込み処理が実行される。この場合、まずステップＳ１７１〜Ｓ１７５と同様に、映像パケットが受信され、映像データが伸張され、映像データの識別タグが特定される（Ｓ２０１〜Ｓ２０５）。次に、特定した識別タグに基づいて、映像データのなかに横顔画像データがあるか否かが判断される（Ｓ２０７）。横顔画像データは、遠隔側ユーザの右顔画像または左顔画像を含む映像データ（つまり、右側カメラ４７または左側カメラ４８で撮影された映像データ）である。
【０１０４】
横顔画像データがある場合、（Ｓ２０７：ＹＥＳ）、横顔画像データに基づいて反転映像データが生成される（Ｓ２０９）。反転映像データは、横顔画像データを鏡像表示するようにＸ座標を左右反転させた映像データである。具体的には、画像解像度がＳＶＧＡモード（８００×６００ピクセル）の場合、以下の数式によって各画素のＸ座標を変換すればよい。
Ｘ´＝８００−Ｘ
また、画像解像度がＨＤモード（１２８０×７２０ピクセル）の場合、以下の数式によって各画素のＸ座標を変換すればよい。
Ｘ´＝１２８０−Ｘ
なお、反転映像データには、反転映像データであることを示す識別タグが付与される。
【０１０５】
その後、映像データがビデオコントローラ５４に転送される（Ｓ２１１）。ただし、ビデオコントローラ５４は、映像データに付与されている識別タグに基づいて、映像データの出力デバイスを調整する。このとき、識別タグ「反転映像データ」が付与されている映像データは、生成元の横顔画像データが表示されるディスプレイとは反対側のディスプレイに表示される。ステップＳ２１１の実行後、処理はステップＳ２０１に戻る。
【０１０６】
上記の例では、識別タグ「右側カメラ」が付与されている映像データが存在するため、横顔画像データがあると判断される（Ｓ２０７：ＹＥＳ）。この場合、右側カメラ４７の映像データに基づいて、遠隔側ユーザの右顔画像を左右反転した画像を含む反転映像データが生成される（Ｓ２０９）。ステップＳ２１１では、識別タグ「前側カメラ」が付与されている映像データは、正面ディスプレイ６１に表示される。識別タグ「右側カメラ」が付与されている映像データは、右面ディスプレイ６２に表示される。識別タグ「反転映像データ」が付与されている映像データは、左面ディスプレイ６３に表示される。
【０１０７】
このように、本変形例によれば、会議用端末５では、右面ディスプレイ６２および左面ディスプレイ６３の一方に遠隔側ユーザの横顔が表示され、他方にその横顔の反転画像が表示される。これにより、遠隔側ユーザの正面および両側面の片方を撮影するカメラを設けるだけで、会議用端末５で遠隔側ユーザを三面表示することができる。さらに、このような三面表示によって、遠隔側端末３を遠隔側ユーザとして擬人化することができる。その結果、遠隔側ユーザが会議拠点にあたかも存在しているかのような印象を与えて、テレビ会議での存在感を高めることができる。
【符号の説明】
【０１０８】
１    テレビ会議システム
２    ネットワーク
３    遠隔側端末
５    会議用端末
３０    ＣＰＵ
４３    ディスプレイ
４４    マイク
４５    スピーカ
４６    前側カメラ
４７    右側カメラ
４８    左側カメラ
５０    ＣＰＵ
６１    正面ディスプレイ
６２    右面ディスプレイ
６３    左面ディスプレイ
６４    右側マイク
６５    左側マイク
６６    スピーカ
６７    カメラ
８０    パンモータ
９０    チルトモータ
１００    駆動機構
【図１】
2012142720.tif 000003
【図２】
2012142720.tif 000004
【図３】
2012142720.tif 000005
【図４】
2012142720.tif 000006
【図５】
2012142720.tif 000007
【図６】
2012142720.tif 000008
【図７】
2012142720.tif 000009
【図８】
2012142720.tif 000010
【図９】
2012142720.tif 000011
【図１０】
2012142720.tif 000012
【図１１】
2012142720.tif 000013
【図１２】
2012142720.tif 000014
【図１３】
2012142720.tif 000015
【図１４】
2012142720.tif 000016
【図１５】
2012142720.tif 000017
【図１６】
2012142720.tif 000018
【図１７】
2012142720.tif 000019
【図１８】
2012142720.tif 000020