(57)【要約】【課題】複数の拠点に設置された会議装置間でネットワークを介して接続可能な会議装置において、撮影画像と静止画像の両方を認識し易くすることを可能とする会議装置、会議処理方法、及び制御プログラムを提供することを目的とする。【解決手段】ＣＰＵ１１は撮影画像情報と音声情報を取得して（Ｓ１１０）、次に静止画像情報を取得する（Ｓ１２０）。続いてＣＰＵ１１は撮影画像情報と静止画像情報の相対位置情報決定処理を実行する（Ｓ１３０）。そしてステップＳ１３０が実行された後、ＣＰＵ１１は撮影画像情報と静止画像情報についての透過度情報取得処理を実行する（Ｓ１４０）。ステップＳ１４０の処理の後、撮影画像情報と静止画像情報の重層合成画像を作成する処理を実行し（Ｓ１５０）、作成された重層合成画像情報と、各拠点から取得された音声情報を、自拠点を含む各拠点の端末装置１０へ出力する処理を実行し（Ｓ１６０）、メイン処理を終了する。【選択図】図５
2010239198.tif 000002
【特許請求の範囲】
【請求項１】
複数の拠点に設置され、ネットワークを介して接続可能な会議装置において、
前記会議装置が設置された拠点の撮影画像情報を取得する撮影画像情報取得手段と、
記憶手段に記憶された静止画像の情報である静止画像情報を取得する静止画像情報取得手段と、
前記撮影画像情報と前記静止画像情報の透過する程度の情報である透過度を決定する透過度決定手段と、
前記撮影画像情報取得手段から前記撮影画像情報と、前記静止画像情報取得手段から前記静止画像情報を共に取得した場合、前記撮影画像情報と前記静止画像情報を重ねて表示される時の相対的な位置の情報である相対位置情報を所定条件に基づいて変化するよう決定する相対位置情報決定手段と、
前記相対位置情報決定手段により決定された前記相対位置情報に基づいて、前記透過度決定手段により決定された各々の透過度で作成される前記撮影画像情報と前記静止画像情報の重層画像を出力する出力制御手段と
を備えたことを特徴とする会議装置。
【請求項２】
前記相対位置情報決定手段は、前記撮影画像情報と前記静止画像情報のうちどちらか一つを、前記表示手段内の表示画面に対して左右方向、または上下方向に表示位置が所定周期で所定量変化する条件を前記所定条件として、前記相対位置情報を決定することを特徴とする請求項１に記載の会議装置。
【請求項３】
前記相対位置情報決定手段は、前記静止画像情報の表示位置を固定しつつ前記撮影画像情報の表示位置を前記表示手段内で周期的に表示位置が変化する条件を前記所定条件として、前記相対位置情報を決定することを特徴とする請求項１乃至２のいずれかに記載の会議装置。
【請求項４】
前記相対位置情報決定手段は、前記撮影画像情報取得手段から取得した前記撮影画像情報が、所定量以上変化したかどうかを判断する変化量判断手段をさらに備え、
前記変化量判断手段により前記撮影画像情報が所定量以上変化していないと判断された場合のみ、前記表示手段内で周期的に表示位置が変化する条件を前記所定条件として、前記相対位置情報を決定することを特徴とする請求項１乃至３にいずれかに記載の会議装置。
【請求項５】
前記透過度決定手段は、前記変化量判断手段により前記撮影画像情報が、所定量以上変化していないと判断された場合、前記撮影画像情報の透過度を前記静止画像情報の透過度より高くすることを特徴とする請求項４に記載の会議装置。
【請求項６】
複数の拠点に設置され、ネットワークを介して接続可能な会議装置において処理される会議処理方法について、
前記会議装置が設置された拠点の撮影画像情報を取得する撮影画像情報取得ステップと、
記憶手段に記憶された静止画像の情報である静止画像情報を取得する静止画像情報取得ステップと、
前記撮影画像情報と前記静止画像情報の透過する程度の情報である透過度を決定する透過度決定ステップと、
前記撮影画像情報取得ステップでの前記撮影画像情報と、前記静止画像情報取得ステップでの前記静止画像情報を共に取得した場合、前記撮影画像情報と前記静止画像情報を重ねて表示される時の相対的な位置の情報である相対位置情報を所定条件に基づいて変化するよう決定する相対位置情報決定ステップと、
前記相対位置情報決定ステップにより決定された前記相対位置情報に基づいて、前記透過度度決定ステップにより決定された各々の透過度で作成される前記撮影画像情報と前記静止画像情報の重層画像を出力する出力制御ステップと
を備えたことを特徴とする会議処理方法。
【請求項７】
コンピュータを、請求項１乃至６のいずれかに記載の会議装置における各手段、または会議処理方法における各種処理ステップを実行させるための制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、会議装置、会議処理方法、及び制御プログラムに関し、詳細には、複数の拠点に設置された会議装置間でネットワークを介して接続可能な会議装置、会議処理方法、制御プログラムに関する。
【背景技術】
【０００２】
従来、複数の拠点でネットワークを介して接続し、各拠点で取得された撮影画像と音声情報を双方向に送受信することにより、遠隔の地にある者同士の会議を実現するテレビ会議装置が知られている。
【０００３】
また、拠点間でテレビ会議が開催されている時に、各拠点で撮影された撮影画像と、会議に関する資料等の静止画像を半透明状に重ね合わせて表示しながら会議を行えるように制御するテレビ会議装置（特許文献１）も考案されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平６−１５３１９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１に記載のテレビ会議装置では、撮影画像と静止画像を半透明状に重ね合わせて表示画面に表示するので、撮影画像の動きが無い場合、ある所定時間以上表示画面を見ているユーザは撮影画像と静止画像が同化してしまい、各々の画像を認識し難くなるという課題がある。
【０００６】
本発明は、上記問題点を解決する為になされたものであり、撮影画像と静止画像の両方を認識し易くすることを可能とする会議装置、会議処理方法、及び制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、請求項１に係る発明の会議装置は、複数の拠点に設置され、ネットワークを介して接続可能な会議装置において、前記会議装置が設置された拠点の撮影画像情報を取得する撮影画像情報取得手段と、記憶手段に記憶された静止画像の情報である静止画像情報を取得する静止画像情報取得手段と、前記撮影画像情報と前記静止画像情報の透過する程度の情報である透過度を決定する透過度決定手段と、前記撮影画像情報取得手段から前記撮影画像情報と、前記静止画像情報取得手段から前記静止画像情報を共に取得した場合、前記撮影画像情報と前記静止画像情報を重ねて表示される時の相対的な位置の情報である相対位置情報を所定条件に基づいて変化するよう決定する相対位置情報決定手段と、前記相対位置情報決定手段により決定された前記相対位置情報に基づいて、前記透過度決定手段により決定された各々の透過度で作成される前記撮影画像情報と前記静止画像情報の重層画像を出力する出力制御手段とを備えている。
【０００８】
請求項２に係る発明の会議装置では、請求項１に記載の発明の構成に加え、前記相対位置情報決定手段は、前記撮影画像情報と前記静止画像情報のうちどちらか一つを、前記表示手段内の表示画面に対して左右方向、または上下方向に表示位置が所定周期で所定量変化する条件を前記所定条件として、前記相対位置情報を決定する。
【０００９】
請求項３に係る発明の会議装置では、請求項１乃至２のいずれかに記載の発明の構成に加え、前記相対位置情報決定手段は、前記静止画像情報の表示位置を固定しつつ前記撮影画像情報の表示位置を前記表示手段内で周期的に表示位置が変化する条件を前記所定条件として、前記相対位置情報を決定する。
【００１０】
請求項４に係る発明の会議装置では、請求項１乃至３のいずれかに記載の発明の構成に加え、前記相対位置情報決定手段は、前記撮影画像情報取得手段から取得した前記撮影画像情報が、所定量以上変化したかどうかを判断する変化量判断手段をさらに備え、前記変化量判断手段により前記撮影画像情報が所定量以上変化していないと判断された場合のみ、前記表示手段内で周期的に表示位置が変化する条件を前記所定条件として、前記相対位置情報を決定する。
【００１１】
請求項５に係る発明の会議装置では、請求項４に記載の発明の構成に加え、前記透過度決定手段は、前記変化量判断手段により前記撮影画像情報が、所定量以上変化していないと判断された場合、前記撮影画像情報の透過度を前記静止画像情報の透過度より高くする。
【００１２】
請求項６に係る発明の会議処理方法においては、前記会議装置が設置された拠点の撮影画像情報を取得する撮影画像情報取得ステップと、記憶手段に記憶された静止画像の情報である静止画像情報を取得する静止画像情報取得ステップと、前記撮影画像情報と前記静止画像情報の透過する程度の情報である透過度を決定する透過度決定ステップと、前記撮影画像情報取得ステップでの前記撮影画像情報と、前記静止画像情報取得ステップでの前記静止画像情報を共に取得した場合、前記撮影画像情報と前記静止画像情報を重ねて表示される時の相対的な位置の情報である相対位置情報を所定条件に基づいて変化するよう決定する相対位置情報決定ステップと、前記相対位置情報決定ステップにより決定された前記相対位置情報に基づいて、前記透過度度決定ステップにより決定された各々の透過度で作成される前記撮影画像情報と前記静止画像情報の重層画像を出力する出力制御ステップとを備えている。
【００１３】
請求項７に係る発明においては、コンピュータを、請求項１乃至６のいずれかに記載の会議装置における各手段、または会議処理方法における各種処理ステップを実行させる。
【発明の効果】
【００１４】
請求項１に係る発明の会議装置は、複数の拠点に設置され、ネットワークを介して接続可能な会議装置において、会議装置が設置された拠点の撮影画像情報と、記憶手段に記憶された静止画像の情報である静止画像情報を取得する。そして撮影画像情報と静止画像情報の透過する程度の情報である透過度を決定し、撮影画像情報と静止画像情報を共に取得した場合、撮影画像情報と静止画像情報を重ねて表示される時の相対的な位置の情報である相対位置情報を所定条件に基づいて変化するよう決定する。次に決定された相対位置情報に基づいて、各々の透過度で作成される前記撮影画像情報と前記静止画像情報の重層画像を出力することができる。よって、会議装置に備えられた表示手段に、各拠点の撮影画像情報と、会議で用いられる資料画像等の静止画像情報を重ねて表示させる場合、撮影画像情報と静止画像情報の相対的な表示位置が変化するので、会議に参加しているユーザは、撮影画像情報と静止画像情報が同化して見難くなることを防ぐことができ、表示画面の視認性を向上させた会議を行うことができる。
【００１５】
請求項２に係る発明の会議装置では、請求項１に記載の発明の効果に加え、撮影画像情報と静止画像情報のうちどちらか一つを、表示手段内の表示画面に対して左右方向、または上下方向に表示位置が所定周期で所定量変化するよう相対位置を決定することができる。よって、撮影画像情報と静止画像情報の相対的な表示位置が周期的に左右または上下方向に変化するので、会議に参加しているユーザは、撮影画像情報と静止画像情報が同化して見難くなることを防ぐことができ、表示画面の視認性をより向上させた会議を行うことができる。
【００１６】
請求項３に係る発明の会議装置では、請求項１乃至２のいずれかに記載の発明の効果に加え、静止画像情報の表示位置を固定しつつ撮影画像情報の表示位置を表示手段内で周期的に表示位置が変化するよう相対位置を決定することができる。よって、会議に参加しているユーザは、撮影画像情報の表示位置を周期的に変化させるので、撮影画像情報と静止画像情報が同化して見難くなることを防ぐことができ、かつ表示画面に表示されている資料画像等の静止画像情報の視認性をより向上させた会議を行うことができる。
【００１７】
請求項４に係る発明の会議装置では、請求項１乃至３のいずれかに記載の発明の効果に加え、撮影画像情報が所定量以上変化したかどうかを判断し、撮影画像情報が、所定量以上変化していないと判断された場合のみ、表示手段内で周期的に表示位置が変化するよう前記相対位置情報を決定する。よって、撮影画像情報が所定量以上変化していないような場合は、撮影画像情報内に含まれているユーザ画像等の動きが少ない状態なので、そのような同化し易い状態の時のみ、撮影画像情報と静止画像情報の相対的な表示位置を周期的に変化させることができる。したがって、会議に参加しているユーザは、表示画面の視認性をより向上させた会議を行うことができる。
【００１８】
請求項５に係る発明の会議装置では、請求項４に記載の発明の効果に加え、撮影画像情報が所定量以上変化していないと判断された場合、撮影画像情報の透過度を静止画像情報の透過度より高くすることができる。よって、撮影画像情報が所定量以上変化していないような場合は、撮影画像情報内に含まれているユーザ画像等の動きが少ない状態なので、そのような同化し易い状態の時では、撮影画像情報の透過度を高くして、静止画像情報の視認性をより向上させた会議を行うことができる。
【００１９】
請求項６に係る発明の会議装置は、複数の拠点に設置され、ネットワークを介して接続可能な会議装置において、会議装置が設置された拠点の撮影画像情報と、記憶手段に記憶された静止画像の情報である静止画像情報を取得する。そして撮影画像情報と静止画像情報の透過する程度の情報である透過度を決定し、撮影画像情報と静止画像情報を共に取得した場合、撮影画像情報と静止画像情報を重ねて表示される時の相対的な位置の情報である相対位置情報を所定条件に基づいて変化するよう決定する。次に決定された相対位置情報に基づいて、各々の透過度で作成される前記撮影画像情報と前記静止画像情報の重層画像を出力することができる。よって、会議装置に備えられた表示手段に、各拠点の撮影画像情報と、会議で用いられる資料画像等の静止画像情報を重ねて表示させる場合、撮影画像情報と静止画像情報の相対的な表示位置を変化させるので、会議に参加しているユーザは、撮影画像情報と静止画像情報が同化して見難くなることを防ぐことができ、表示画面の視認性を向上させた会議を行うことができる。
【００２０】
請求項７に係る発明においては、コンピュータを、請求項１乃至６のいずれかに記載の会議装置における各手段、または会議処理方法における各種処理ステップを実行させることができる。よって、会議装置に備えられた表示手段に、各拠点の撮影画像情報と、会議で用いられる資料画像等の静止画像情報を重ねて表示させる場合、撮影画像情報と静止画像情報の相対的な表示位置を変化させるので、会議に参加しているユーザは、撮影画像情報と静止画像情報が同化して見難くなることを防ぐことができ、表示画面の視認性を向上させた会議を行うことができる。
【図面の簡単な説明】
【００２１】
【図１】テレビ会議システム１００の概略構成を示すシステム構成図である。
【図２】会議装置１０の電気的構成を示すブロック図である。
【図３】透過度情報データベースの説明図である。
【図４】表示位置変更情報データベースの説明図である。
【図５】会議装置１０で行われるメイン処理のフローチャートである。
【図６】メイン処理のＳ１３０で行われる相対位置情報決定処理のフローチャートである。
【図７】表示装置１７１の表示状態図である。
【図８】変形実施形態におけるメイン処理２のフローチャートである。
【図９】メイン処理２のＳ２４０で行われる透過度決定処理のフローチャートである。
【図１０】変形実施形態における表示装置１７１の表示状態図である。
【発明を実施するための形態】
【００２２】
以下、本発明を具現化した実施の形態について、図面を参照して説明する。なお、参照する図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている装置の構成、各種処理のフローチャートなどは、特に特定的な記載がない限り、それのみに限定する趣旨ではなく、単なる説明例である。
【００２３】
最初に、図１を参照して、本実施形態に係るテレビ会議システム１００の全体構成について説明する。    
【００２４】
図１に示すように、テレビ会議システム１００は、各拠点（以後、１０Ａ、１０Ｂ、１０Ｃとする。）に設けられた端末装置１０を含み、これらはすべてネットワーク２００に接続されている。ネットワーク２００としては、例えば、ＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）やＩＳＤＮ（Ｉｎｔｅｇｒａｔｅｄ  Ｓｅｒｖｉｃｅｓ  Ｄｉｇｉｔａｌ  Ｎｅｔｗｏｒｋ）等のネットワークを採用することができる。図１では、拠点は３つしか図示されていないが、実際には複数が存在する。また各拠点は、例えばある企業の同一サイト内に複数存在してもよいし、異なる事業所内や、異なる地域や国に点在して存在していてもよい。
【００２５】
端末装置１０は、例えば、周知のパーソナルコンピュータであり、汎用型の装置である。端末装置１０は、ネットワーク２００を介して接続された複数の拠点間で行われるテレビ会議に関する各種の処理を行う。端末装置１０の構成、および端末装置１０で行われる各種処理の詳細については後述する。
【００２６】
テレビ会議への参加を希望するユーザは、端末装置１０のうちいずれかを操作し、ＩＤ情報等を入力して登録することによってテレビ会議にログインする。テレビ会議に参加した状態では、例えば端末装置１０に接続されたカメラ１９（図２参照）によって会議参加者が撮影される。撮影された画像（以下「撮影画像情報」という。）は、端末装置１０から他の端末装置１０に対して送信される。撮影画像情報を受信した他の端末装置１０では、受信した撮影画像情報を自拠点で撮影した撮影画像情報と共に表示装置１７１に表示させる。撮影画像情報が複数存在する場合、個別のウィンドウ内に其々表示させる。これによってテレビ会議に参加する会議参加者は、各拠点の会議参加者の撮影画像情報を共有して視認することが可能となる。
【００２７】
また、テレビ会議システム１００は、各拠点間で共有するための資料画像情報や端末装置１０の各種操作を行うためのデスクトップ画面等の静止画像情報を、各拠点の撮影画像情報と透過合成し、各拠点の表示装置１７１に出力することができる。透過合成とは、複数の映像のそれぞれを半透明にして重ねる映像処理の技術である。これにより、静止画像情報と撮影画像情報とを共に表示領域全体を用いて表示させることができる。静止画像情報および撮影画像情報のそれぞれを半透明にする度合いを示す値が、透過度である。例えば、静止画像情報の透過度が大きくなれば、撮影画像情報を視認し易くなり、また静止画像情報の透過度が小さくなれば、撮影画像情報よりも静止画像情報の方が視認し易くなる。
【００２８】
次に、図２を参照して、端末装置１０の電気的構成について説明する。端末装置１０としては、画像および音声データを圧縮符号化して送信するとともに、受信した圧縮符号化された画像および音声データを復号化して出力することが可能なコーデックを内蔵した、公知の端末装置を採用することができる。端末装置１０は、ＣＰＵ１１と、ＣＰＵ１１に各々接続されたＲＯＭ１２およびＲＡＭ１３を備えている。ＣＰＵ１１には、その他、入出力（Ｉ／Ｏ）インタフェイス１４が接続されている。Ｉ／Ｏインタフェイス１４には、記録装置（ハードディスク装置（ＨＤＤ）など、以下「ＨＤＤ」と称す）１５、マウスコントローラ１６、ビデオコントローラ１７、キーコントローラ１８、カメラ１９、マイク２１、スピーカ２２、ＣＤ−ＲＯＭドライブ２４、および通信装置３０が接続されている。
【００２９】
ＣＰＵ１１は、端末装置１０の全体の制御を司る。ＲＯＭ１２は、ＢＩＯＳを含む、端末装置１０を動作させるための各種のプログラムやそのための設定値を記憶している。ＣＰＵ１１は、ＲＯＭ１２や、後述するＨＤＤ１５に記憶されたプログラムに従って、端末装置１０の動作を制御する。ＲＡＭ１３は、各種データを一時的に記憶するための記憶装置である。マウスコントローラ１６、ビデオコントローラ１７、キーコントローラ１８には、それぞれマウス１６１、表示装置１７１、およびキーボード１８１が接続されている。
カメラ１９は、端末装置１０が設置されている拠点を撮影する撮影機器である。マイク２１は、端末装置１０が設置されている拠点の音声情報を取得する機器であり、スピーカ２２は、他端末装置から送信された他拠点の音声情報を出力する機器である。また、ＣＤ−ＲＯＭドライブ２４に挿入されるＣＤ−ＲＯＭ２４１には、端末装置１０のメインプログラムや、本発明の制御プログラム等が記憶されている。ＣＤ−ＲＯＭ２４１の導入時には、これら各種プログラムが、ＣＤ−ＲＯＭ２４１からＨＤＤ１５にセットアップされて、後述するプログラム記憶領域１５２に記憶される。通信装置３０は、ネットワーク２００に接続し、他の端末装置１０等の外部機器との間でデータの送受信を行うためのものである。
【００３０】
ここで、ＨＤＤ１５の詳細について説明する。図２に示すように、ＨＤＤ１５は、資料画像記憶エリア１５１、プログラム記憶エリア１５２、透過度情報記憶エリア１５３、表示位置変更情報記憶エリア１５４を含む複数の記憶エリアを備えている。詳細は図示しないが、資料情報記憶エリア１５１には、会議に使用される各種資料情報が記憶されている。本実施形態では、これらの資料画像情報は各拠点の端末装置１０に記憶されているが、資料画像情報を表示する時にネットワーク２００を介して外部機器から取得するようにしても良い。プログラム記憶エリア１５２には、各種処理を端末装置１０に実行させるための各種プログラムが記憶されている。なお、これらのプログラムは、例えばＣＤ−ＲＯＭ２４１に記憶されたものがＣＤ−ＲＯＭドライブ２４を介してインストールされ、プログラム記憶エリア１５２に記憶される。または、ネットワーク２００を介してダウンロードされたプログラムが、プログラム記憶エリア１５２に記憶されてもよい。
【００３１】
透過度情報記憶エリア１５３には、図３に示す透過度情報１５３１が記憶されており、撮影画像情報の透過度と、静止画像情報の透過度情報が予め設定された値で第一設定値と第二設定値の２つの条件で記憶されている。本実施形態では、透過合成方法として周知のアルファブレンディングを用いている。アルファブレンディングでは、透過度を決定する値であるα値によって２つの映像を合成する。アルファブレンディングによって割り出される各画素の画素値Ｖａｌｕｅは、背景となる撮影画像情報の画素値をＶａｌｕｅ０、前景となる静止画像情報の画素値をＶａｌｕｅ１として、以下の式で表される。
Ｖａｌｕｅ＝Ｖａｌｕｅ０×α＋Ｖａｌｕｅ１×（１−α）
α値は０〜１の間を取る係数であり、撮影画像の透過度Ａ＝１−α、静止画像の透過度Ｂ＝αとなる。例えば、α値が大きくなると、撮影画像情報の透過度Ａが小さくなり、逆に静止画像情報の透過度Ｂは大きくなる。撮影画像情報の透過度Ａが小さくなると、合成映像の画素値Ｖａｌｕｅに対して撮影画像情報の画素値Ｖａｌｕｅ０が占める割合が上がる。静止画像情報の透過度Ｂが大きくなると、合成映像の画素値Ｖａｌｕｅに対して静止画像情報の画素値Ｖａｌｕｅ１が占める割合が下がる。その結果、撮影画像情報が視認し易くなる。また、これらの値は適宜設定・変更が可能であるが、合成映像の視認度を考慮すると、いずれも０．３〜０．７の間の値に設定することが望ましい。
【００３２】
表示位置変更情報記憶エリア１５４には、図４に示すように、表示位置変更情報１５４１が記憶されている。表示位置変更情報１５４１は、本実施形態では撮影画像情報の中心座標欄と静止画像情報の中心座標欄がそれぞれ８ステップで記憶されている。撮影画像情報、静止画像情報の中心座標とは、表示装置１７１の表示画面の中心位置を中心座標（０，０）とする座標系で、表示装置１７１の表示画面に対して水平方向がＸ座標、垂直方向がＹ座標として、（Ｘ，Ｙ）で表すことにする。また、表示装置１７１の中心座標（０，０）から左側のＸ座標領域をマイナス（−Ｘ）、また、下側のＹ座標領域をマイナス（−Ｙ）と表記する。表示位置変更情報１５４１についての具体的な説明は後述する。
【００３３】
次に、図５〜図７を参照して端末装置１０のＣＰＵ１１により行われるメイン処理について説明をする。図５はメイン処理のフローチャートであり、端末装置１０の電源がＯＮされると開始され、電源がＯＮである間は定期的な周期で（例えば２０ミリ秒周期）継続して処理が繰り返し行われる。また、本実施形態での各拠点との間でネットワーク２００を介して接続が完了して、相互通信が可能な状態になっているものとする。
【００３４】
まず、ＣＰＵ１１は各拠点の端末装置１０から撮影画像情報と音声情報を取得する（Ｓ１１０）。ここでは、自拠点である１０Ａと、他拠点である１０Ｂ、１０Ｃの撮影画像情報と音声情報を取得して、ＲＡＭ１３に一時記憶する。次に静止画像情報を取得する（Ｓ１２０）。ここでの静止画像情報は、各拠点の端末装置１０を操作し、ＨＤＤ１５に記憶されている資料画像情報記憶エリア１５１から呼び出された資料画像情報、もしくは詳細は図示しないが端末装置１０から表示装置１７１へ出力するデスクトップ画面情報等を取得し、ＲＡＭ１３に一時記憶する。続いてＣＰＵ１１は撮影画像情報と静止画像情報の相対位置情報決定処理を実行する（Ｓ１３０）。
【００３５】
ここで、図６を参照して、撮影画像と静止画像の相対位置情報決定処理について説明する。まず、ＣＰＵ１１は、メイン処理のステップＳ１１０にて取得した静止画像情報の中心座標情報を取得する（Ｓ１３１）。具体的にはステップ１３１にてＣＰＵ１１は、表示位置変更情報１５４１（図４参照）に記憶されている、静止画像情報のステップ１の中心座標情報（０，０）を取得して、ステップ数情報と関連付けしてＲＡＭ１３に一時記憶する。よって、静止画像情報の中心位置は、表示装置１７１の中心位置と同じ座標情報となる。また、ステップＳ１１０にて取得した静止画像情報が複数の場合でも、表示装置１７１の表示画面内で各静止画像情報が重ならない配置で表示されるよう予め設定されているものとし、各静止画像情報の全体の中心を中心座標とすればよい。
【００３６】
続いて、メイン処理のステップＳ１１０にて取得した撮影画像情報の中心座標情報を取得する（Ｓ１３２）。ステップ１３２にてＣＰＵ１１は、表示位置変更情報１５４１（図４参照）に記憶されている、撮影画像情報のステップ１の中心座標情報（０，０）を取得し、ステップ数情報と関連付けしてＲＡＭ１３に一時記憶する。よって、撮影画像情報の中心位置は、表示装置１７１の中心位置と同じ座標情報となる。また、ステップＳ１１０にて取得した撮影画像情報が複数の場合でも、表示装置１７１の表示画面内で各撮影画像情報が重ならない配置で表示されるよう予め設定されているものとし、各撮影画像情報の全体の中心を中心座標とすればよい。
【００３７】
そして次に、ＣＰＵ１１は撮影画像情報が所定量以上変化したかどうかを判断する（Ｓ１３３）。具体的には、図５に示すメイン処理は定期的に繰り返し実行されているので、前回のステップＳ１１０にて取得した撮影画像情報と、今回のステップＳ１１０処理で取得した撮影画像情報を比較して画像情報の変化量を検出し、所定量以上変化しているかどうかを判断する。ここでいう変化量の検出方法は、例えば、撮影画像情報を構成する各画素の色情報（ＲＧＢ情報等）を比較することにより、色情報が変化した画素数に基づいて所定量以上かどうかを判断すれば良い。または、他の公知の画像解析方法を用いて、撮影画像情報の変化量を検出してもよい。例えば、モラベック・オペレータを用いて特徴点の動きを抽出することで変化量を検出してもよい。そして撮影画像情報が所定量以上変化したと判断した場合（Ｓ１３３：ＹＥＳ）、本処理は終了する。例えば、各拠点で会議に参加している参加者の顔や手等が、所定量以上の動きがあった場合、撮影画像情報が変化するので、所定量以上変化したと判断する。ここでいう所定量以上とは、ユーザが目で見て認識できる程度以上の変化量で設定されているものとする。また、本実施形態でのステップＳ１３３の処理では、前回のステップＳ１１０で取得した撮影画像情報と比較したが、これに限定されるものではなく、例えば、数回（５〜１０回）前のステップＳ１１０の処理が実行された時に取得した撮影画像情報と比較をして、所定量以上変化したかどうかを判断するようにしてもよい。
【００３８】
また、ステップＳ１３３でＣＰＵ１１は、撮影画像情報の変化量が所定量以上変化がないと判断した場合（Ｓ１３３：ＮＯ）、ＣＰＵ１１は撮影画像情報の表示位置情報を所定量変更する処理を実行して（Ｓ１３４）、本処理を終了する。具体的に説明すると、本実施形態では、ＣＰＵ１１はステップＳ１３２で取得した撮影画像情報の中心座標情報をＲＡＭ１３から呼出し、呼び出された中心座標情報に対応するステップの次ステップに記憶されている中心座標情報を取得して、ＲＡＭ１３に更新記憶する。図４を参照して説明すると、今回の処理ではステップＳ１３２で取得した中心座標情報が（０，０）なので、表示位置変更情報１５４１の対応するステップ１の次ステップであるステップ２の中心座標情報（−５，０）を取得し、ＲＡＭ１３に記憶する。ステップＳ１３４が実行される毎に、表示位置変更情報１５４１のステップが次々に、次ステップの中心座標情報に変更するので、撮影画像情報の中心座標が、ステップ１の（０，０）、から始まり、（−５，０）、（−１０，０）、（−５，０）、（０，０）、（５，０）（１０，０）、（５，０）の８ステップを１周期として、繰り返し表示位置の中心座標情報が周期的に変更される。なお、本実施形態では、表示装置１７１の表示画面のＸ座標範囲は、中心座標（０，０）を基準として−１００〜１００、Ｙ座標範囲も同様に−１００〜１００とする。また、本実施形態では、８ステップを１周期として、中心座標のＸ座標方向の移動量を−１０〜１０としているが、これに限定されるものではない。
【００３９】
図５のメイン処理に戻り、ステップＳ１３０が実行された後、ＣＰＵ１１は撮影画像情報と静止画像情報についての透過度情報取得処理を実行する（Ｓ１４０）。具体的には、透過度情報記憶エリア１５３に記憶されている透過度情報１５３１（図３参照）から、撮影画像情報と静止画像情報の透過度の初期設定値である第一設定値０．５が各々取得される。本実施形態では、透過度情報１５３１の第一設定値が、撮影画像情報と静止画像情報は共に０．５と設定されているので、上述したアルファブレンディング方法での画素値Ｖａｌｕｅが同じとなり、撮影画像情報と静止画像情報は同程度の視認性で表示装置１７１へ出力されることになる。なお、本実施形態では、初期値である第一設定値での透過度を０．５としているが、これに限定されるものではなく、適宜変更可能となっている。
【００４０】
再び図５のメイン処理に戻り、ステップＳ１４０の処理の後、撮影画像情報と静止画像情報の重層合成画像を作成する処理を実行する（Ｓ１５０）。具体的には、ステップＳ１１０にて取得した撮影画像情報と静止画像情報を、ステップ１３０で決定された各々の中心座標情報と、ステップＳ１４０で取得された各々の透過度情報に基づいて、重ねて表示装置１７１へ表示する重層合成画像情報を作成する。そして、ＣＰＵ１１は、ステップＳ１５０で作成された重層合成画像情報と、各拠点から取得された音声情報を、自拠点を含む各拠点の端末装置１０へ出力する処理を実行し（Ｓ１６０）、メイン処理を終了する。
【００４１】
ここで、図７を参照して、上述のメイン処理が実行された時の表示装置１７１の表示状態を説明する。図７は本実施形態での拠点１０Ａの表示装置１７１の表示状態であり、メイン処理のステップＳ１１０にて取得した各拠点の撮影画像情報と、ステップＳ１２０にて資料画像記憶エリア１５１から取得された静止画像情報７０が、ステップＳ１３０にて決定された相対位置情報と、ステップＳ１４０で取得された透過度情報に基づいて、透過合成された重層画像と、図示はしない音声情報が出力されている。また、各拠点の撮影画像情報として、拠点１０Ａは撮影画像情報１９Ａ、拠点１０Ｂは撮影画像情報１９Ｂ、拠点１０Ｃは撮影画像情報１９Ｃが、表示装置１７１の表示画面に分割されて出力されている。
【００４２】
図７の（ａ）は、撮影画像情報と静止画像情報の相対位置情報決定処理（Ｓ１３０）にて、撮影画像が所定量以上変化している場合（Ｓ１３３：ＹＥＳ）の状態であり、各拠点の撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）の全体の中心位置と、静止画像情報７０の中心位置は、表示装置１７１の表示画面の中心座標（０，０）と同じ位置で出力されている。撮影画像情報が所定量以上変化している場合とは、例えば各拠点のカメラ１９で撮影されている会議参加者の顔や手等が、所定量以上の動きがあった場合である。また、撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）と静止画像情報７０は、ステップＳ１４０で取得された透過度が共に０．５となっているので、同程度の透過状態で重層合成されて表示装置１７１へ出力されている。
【００４３】
また、各拠点の撮影画像情報が所定量以上変化していない場合（Ｓ１３３：ＮＯ）、ステップ１３４の処理により、撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）の中心座標情報が、表示位置変更情報１５４１（図４参照）に基づいて、静止画像情報７０との相対位置が所定周期で変化する。本実施形態では、図７の（ｂ）、（ｃ）に示すように、静止画像情報７０の表示位置は固定したまま、撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）の表示位置が、Ｘ座標方向に対して周期的に往復するように位置を変化させる。また、上述の実施形態では、３拠点の撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）を同時に表示位置の変更をするようにしたが、各拠点毎の撮影画像情報について、ステップＳ１３３（図６参照）での処理にて所定量以上変化しているかどうかを、それぞれ別個で判断し、所定量以上変化していないと判断された（Ｓ１３３：ＮＯ）撮影画像情報のみに対して、初期表示位置の中心座標を（０、０）として置換し、表示位置変更情報１５４１（図４参照）に基づいて中心座標情報が周期的に変化するようにしても良い。
【００４４】
したがって、上述のメイン処理を実行させることにより、会議装置１０に備えられた表示手段１７１に、各拠点の撮影画像情報と、会議で用いられる資料画像等の静止画像情報を重ねて表示させる場合、撮影画像情報と静止画像情報の相対的な表示位置を周期的に変化させるので、会議に参加しているユーザは、撮影画像情報と静止画像情報が同化して見難くなることを防ぐことができ、表示画面の視認性を向上させた会議を行うことができる。
【００４５】
次に、本発明の変形例である変形実施形態２について、図８〜図１０を参照して説明する。図８は変形実施形態２にてＣＰＵ１１が実行するメイン処理２のフローチャートである。本メイン処理２のステップＳ２１０〜Ｓ２３０で実行される処理は、図５のメイン処理でのステップＳ１１０〜Ｓ１３０と同じ処理が実行されるので、詳細な説明は省略する。そしてステップＳ２３０の処理の後、ＣＰＵ１１は透過度決定処理を実行する（Ｓ２４０）。
【００４６】
ここで、図９を参照して透過度決定処理について説明する。まずＣＰＵ１１は、静止画像情報の透過度設定値を取得する（Ｓ１４１）。具体的には、透過度情報記憶エリア１５３に記憶されている透過度情報１５３１（図３参照）から、初期設定値である第一設定値の０．５が取得される。次にＣＰＵ１１は撮影画像情報の透過度設定値を取得する（Ｓ１４２）。具体的には、透過度情報記憶エリア１５３に記憶されている透過度情報１５３１（図３参照）から、初期設定値である第一設定値の０．５が取得される。本実施形態では、透過度情報１５３１の第一設定値が、撮影画像情報と静止画像情報は共に０．５と設定されているので、上述したアルファブレンディングでの画素値Ｖａｌｕｅが同じとなり、撮影画像情報と静止画像情報は同程度の視認性で表示装置１７１へ出力されることになる。
【００４７】
そして、撮影画像情報が所定量以上変化したかどうかが判断される（Ｓ１４３）。ステップＳ１４３は、撮影画像と静止画像の相対位置情報決定処理（Ｓ２３０）の中の、ステップＳ１３３（図６参照）での判断と同様の処理なので、ステップＳ１３３の判断結果を用いても良い。ステップＳ１４３でＣＰＵ１１は、所定量以上変化量したと判断した場合（Ｓ１４３：ＹＥＳ）、本処理は終了する。また、所定量以上変化していないと判断した場合（Ｓ１４３：ＮＯ）、撮影画像情報と静止画像情報の透過度を変更する処理を実行する（Ｓ１４４）。具体的に図３を参照して説明すると、ステップＳ１４４にてＣＰＵ１１は、透過度情報１５３１（図３参照）に記憶されている第二設定値から、撮影画像情報の透過度０．７、静止画像情報の透過度０．３を取得する。上述のアルファブレンディングでは、前記第二設定値は、静止画像情報の方が撮影画像情報の透過度より低くなっているので、表示装置１７１に出力されると静止画像情報の方の視認性が高い状態で合成されて表示する。なお、本実施形態では、第二設定値での透過度を０．７と０．３としているが、これに限定されるものではなく、適宜変更可能となっている。
【００４８】
そして図８のメイン処理２に戻り、ステップＳ２４０の処理が実行された後、ＣＰＵ１１は、撮影画像情報と静止画像情報の重層合成画像を作成する処理を実行する（Ｓ２５０）。具体的には、ステップＳ２１０にて取得した撮影画像情報と静止画像情報を、ステップ２３０で決定された各々の中心座標情報と、ステップＳ２４０で取得された各々の透過度情報に基づいて、重ねて表示装置１７１へ表示する重層合成画像情報を作成する。そして、ＣＰＵ１１は、ステップＳ２５０で作成された重層合成画像情報と、各拠点から取得された音声情報を、自拠点を含む各拠点の端末装置１０へ出力する処理を実行し（Ｓ２６０）、メイン処理２を終了する。
【００４９】
ここで、図１０を参照して、上述のメイン処理２が実行された時の表示装置１７１の表示状態について説明する。図１０は本実施形態での拠点１０Ａの表示装置１７１の表示状態であり、メイン処理２のステップＳ２１０にて取得した各拠点の撮影画像情報と、ステップＳ２２０にて資料画像記憶エリア１５１から取得された静止画像情報７０が、ステップＳ２３０にて決定された相対位置情報と、ステップＳ２４０で決定された透過度情報に基づいて、透過合成された重層画像と、図示はしない音声情報が出力されている。また、各拠点の撮影画像情報は、拠点１０Ａの撮影画像情報１９Ａ、拠点１０Ｂの撮影画像情報１９Ｂ、拠点１０Ｃの撮影画像情報１９Ｃが、表示装置１７１の表示画面に分割されて出力されている。
【００５０】
図１０の（ａ）は、撮影画像情報と静止画像情報の相対位置情報決定処理（Ｓ２３０）にて、撮影画像が所定量以上変化していると判断した場合（Ｓ１３３：ＹＥＳ）の状態であり、各拠点の撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）の全体の中心位置と、静止画像情報７０の中心位置は、表示装置１７１の表示画面の中心座標（０，０）と同じ位置で出力されている。撮影画像情報が所定量以上変化している場合とは、例えば、各拠点のカメラ１９で撮影されている会議参加者の顔や手等が、所定量以上の動きがあった場合である。また、撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）と静止画像情報７０は、撮影画像が所定量以上変化している場合（Ｓ１３３：ＹＥＳ）の状態としているので、ステップＳ２４０で決定された透過度が、共に第一設定値の０．５となっており、同程度の透過状態で重層合成されて表示装置１７１へ出力されている。
【００５１】
また、各拠点の撮影画像情報が所定量以上変化していないと判断された場合（Ｓ１３３：ＮＯ）、ステップ１３４の処理により、撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）の中心座標情報が、表示位置変更情報１５４１（図４参照）に基づいて、静止画像情報７０との相対位置を所定周期で変化させ、またさらに、ステップＳ１４４の処理で撮影画像情報の透過度を０．７、静止画像情報７０の透過度を０．３に変更する。よって、本実施形態では、図７の（ｂ）、（ｃ）に示すように、静止画像情報７０の表示位置は固定したまま、撮影画像情報（１９Ａ、１９Ｂ、１９Ｃ）の表示位置が、Ｘ座標方向に対して周期的に往復するように位置を変化させ、またさらに撮影画像情報の透過度を０．７、静止画像情報の透過度を０．３に変更した重層画像を表示装置１７１へ出力している。
【００５２】
したがって、本実施形態２では、上述のメイン処理２を実行させることにより、会議装置１０に備えられた表示手段１７１に、各拠点の撮影画像情報と、会議で用いられる資料画像等の静止画像情報を重ねて表示させる場合、撮影画像情報と静止画像情報の相対的な表示位置を周期的に変化させながら、またさらに静止画像情報の透過度を撮影画像情報の透過度より低くして表示装置１７１へ表示することができる。よって会議に参加しているユーザは、撮影画像情報と静止画像情報が同化して見難くなることを防ぐことができ、表示画面の視認性、特に静止画像情報の視認性をより向上させた会議を行うことができる。
【００５３】
なお、前述の実施形態に示される構成や処理は例示であり、各種の処理が変形可能なことはいうまでもない。例えば、本実施形態での撮影画像と静止画像の相対位置情報決定処理（図６参照）にて、ステップＳ１３１、Ｓ１３２で取得される撮影画像、静止画像の中心座標情報は、初期値として表示装置１７１の中心座標（０，０）と同じに設定しているが、これに限定するものではなく、会議に参加しているユーザが端末装置１０を操作して、撮影画像情報、静止画像情報の表示位置を適宜変更しても良い。また、ステップＳ１３３では、撮影画像情報が所定量以上変化したかどうかを判断して、所定量以上変化したと判断された場合に次ステップのＳ１３４で撮影画像情報の中心座標情報を変更しているが、これに限定するものではなく、ステップＳ１３３の判断をせずステップＳ１３４を処理するようにしてもよい。この場合は、撮影画像情報の変化量に関係なく、常時撮影画像情報の表示位置が静止画像情報に対して相対的に変更されるようにできる。また、本実施形態では、ステップＳ１３０、Ｓ２３０にて撮影画像情報のみの表示位置を周期的に変更しているが、撮影画像情報と静止画像情報の表示位置を共に変更させて、相対的に表示位置が変わるようにしてもよい。
【００５４】
また、本実施形態のステップＳ１３４の処理では、図４に示す表示位置変更情報データベース（図４参照）に基づいて、撮影画像情報の表示位置がＸ座標方向に周期的に往復するよう変更されるが、これに限定されるものではなく、例えば、Ｙ座標方向に周期的に表示位置が変更するようにしてもよいし、または、表示装置１７１の中心座標（０，０）を中心とした円周状に変化するようにしてもよい。またさらに、表示位置変更情報データベース（図４参照）では、８ステップを１周期としているが、これに限定されるものではなく、適宜変更可能である。
【００５５】
また、本実施形態でのメイン処理のステップＳ１４０（図５参照）で処理される透過度を第一設定値の０．５（図３参照）とし、また、透過度設定処理（図９参照）のステップＳ１４４で処理される時の透過度は、第二設定値として撮影画像情報の透過度を０．７、静止画像情報の透過度を０．３としているが、これに限定するものではなく、適宜設定変更が可能である。
【００５６】
本実施形態では、端末装置１０が「会議装置」に相当し、端末装置１０のＣＰＵ１１，ＲＯＭ１２，ＲＡＭ１３において、図５のＳ１１０の処理を実行する部分が、「撮影画像情報取得手段」、「静止画像情報取得手段」に相当し、図６のＳ１３４の処理を実行する部分が、「相対位置情報決定手段」に相当する。また、図５のＳ１４０、図９のＳ１４１、Ｓ１４２、Ｓ１４４の処理を実行する部分が、「透過度決定手段」に相当し、図５のＳ１６０、図８のＳ２６０の処理を実行する部分が、「出力制御手段」に相当する。また、図６のＳ１３３、図９の１４３の処理を実行する部分が、「変化量判断手段」に相当する。
【００５７】
また、図５のＳ１１０の処理を実行する部分が、「撮影画像情報取得ステップ」、「静止画像情報取得ステップ」に相当し、図６のＳ１３４の処理を実行する部分が、「相対位置情報決定ステップ」に相当する。また、図５のＳ１４０、図９のＳ１４１、Ｓ１４２、Ｓ１４４の処理を実行する部分が、「透過度決定ステップ」に相当し、図５のＳ１６０、図８のＳ２６０の処理を実行する部分が、「出力制御ステップ」に相当する。
【符号の説明】
【００５８】
１０  端末装置
１１  ＣＰＵ
１５  ＨＤＤ
１６  マウスコントローラ
１７  ビデオコントローラ
１８  キーコントローラ
１９  カメラ
２１  マイク
２２  スピーカ
２４  ＣＤ−ＲＯＭドライブ
１５１  資料画像記憶エリア
１５２  プログラム記憶エリア
１５３  透過度情報記憶エリア
１５４  表示位置変更情報記憶エリア  
１７１  表示装置
１５３１  透過度情報データベース
１５４１  表示位置変更情報データベース
【図１】
2010239198.tif 000003
【図２】
2010239198.tif 000004
【図３】
2010239198.tif 000005
【図４】
2010239198.tif 000006
【図５】
2010239198.tif 000007
【図６】
2010239198.tif 000008
【図７】
2010239198.tif 000009
【図８】
2010239198.tif 000010
【図９】
2010239198.tif 000011
【図１０】
2010239198.tif 000012