(57)【要約】【課題】  ディスプレイ装置のように撮像領域が制限的な映像通信装置を通じて多数のユーザ間の映像通信が可能なシステムを提供する。【解決手段】  本発明による映像通信のための映像処理方法は、第１映像通信装置から第１映像を取得し、第２映像通信装置から第２映像を取得する段階と、第１映像及び第２映像を合成して前記第１映像通信装置から映像の送信が要請された映像受信装置に送信する第３映像を生成する段階と、前記第３映像をエンコーディングして前記映像受信装置に送信する段階と、を含む。【選択図】      図１
2013225850.tif 000002
【特許請求の範囲】
【請求項１】
映像受信装置と映像通信を行なう映像通信装置において、
被写体を撮影して第１映像を取得する映像取得部と、
連結されたスレーブ装置で撮影された第２映像を受信する通信部と、
送信する第３映像を生成する送信映像生成部と、
前記第１映像及び前記第２映像を合成して前記第３映像を生成するように前記送信映像生成部を制御し、前記第３映像をエンコーディングして前記通信部を通じて送信するように制御する制御部と、
を含むことを特徴とする映像通信装置。
【請求項２】
前記送信映像生成部は、前記第１映像及び前記第２映像が一つの画面の一領域に各々表示されるように前記第３映像を生成する、
ことを特徴とする請求項１に記載の映像通信装置。
【請求項３】
前記送信映像生成部は、所定のイベントに従って前記第１映像及び前記第２映像が選択的に表示されるように前記第３映像を生成する、
ことを特徴とする請求項１に記載の映像通信装置。
【請求項４】
映像を表示するディスプレイ部と、
前記ディスプレイ部を通じて出力される第４映像を生成する出力映像生成部と、
をさらに含むことを特徴とする請求項１乃至３の何れか一項に記載の映像通信装置。
【請求項５】
前記制御部は、映像通信装置と有線/無線で通信可能な外部の装置を検出し、検出された外部の装置が映像通信機能を備えた装置である場合、前記外部の装置から前記第２映像を受信する、
ことを特徴とする請求項１乃至４の何れか一項に記載の映像通信装置。
【請求項６】
第１音声を取得する音声取得部をさらに含み、
前記通信部は前記スレーブ装置から第２音声をさらに受信し、
前記制御部はユーザの選択に従って、前記第１音声と前記第２音声の中で何れか一つを選択的に送信する、
ことを特徴とする請求項１乃至５の何れか一項に記載の映像通信装置。
【請求項７】
映像通信のための映像処理方法において、
第１映像通信装置から第１映像を取得し、第２映像通信装置から第２映像を取得する段階と、
第１映像及び第２映像を合成して前記第１映像通信装置から映像の送信が要請された映像受信装置に送信する第３映像を生成する段階と、
前記第３映像をエンコーディングして前記映像受信装置に送信する段階と、
を含むことを特徴とする映像処理方法。
【請求項８】
前記第１映像通信装置で前記第２映像を受信する段階をさらに含み、
前記第３映像を生成する段階は、前記第１映像通信装置で行なわれる、
ことを特徴とする請求項７に記載の映像処理方法。
【請求項９】
映像通信サーバーで前記第１映像通信装置から前記第１映像及びシンク情報を受信し、前記第２映像通信装置から前記第２映像を受信する段階をさらに含み、
前記第３映像を生成する段階は、前記映像処理サーバーで前記シンク情報に基づいて前記第３映像を生成する、
ことを特徴とする請求項７又は８に記載の映像処理方法。
【請求項１０】
前記第３映像を生成する段階は、
前記第１映像及び前記第２映像が一つの画面の一領域に各々表示されるように前記第３映像を生成する、
ことを特徴とする請求項７乃至９の何れか一項に記載の映像処理方法。
【請求項１１】
前記第３映像を生成する段階は、
所定のイベントに従って前記第１映像及び前記第２映像が選択的に表示されるように前記第３映像を生成する、
ことを特徴とする請求項７乃至９の何れか一項に記載の映像処理方法。
【請求項１２】
前記第１映像通信装置は映像を表示するディスプレイ部を含み、
前記ディスプレイ部を通じて出力される第４映像を生成する段階をさらに含む、
ことを特徴とする請求項７乃至１１の何れか一項に記載の映像処理方法。
【請求項１３】
前記第１映像通信装置から第１音声を取得し、前記第２映像通信装置から前記第２音声を取得する段階と、
前記第１映像通信装置の選択に従って前記第１音声または前記第２音声の中で何れか一つを選択的に前記映像受信装置に送信する段階と、
を含むことを特徴とする請求項７乃至１２の何れか一項に記載の映像処理方法。
【請求項１４】
前記第１映像通信装置及び前記第２映像通信装置の接続ＩＤに従って前記第３映像の生成可否を決める段階をさらに含む、
ことを特徴とする請求項７乃至１３に記載の映像処理方法。
【請求項１５】
前記第３映像を映像通信サーバーに保存する段階をさらに含む、
ことを特徴とする請求項７乃至１４の何れか一項に記載の映像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像通信装置、映像通信サーバー及び映像通信のための映像処理方法に関する。
【背景技術】
【０００２】
一般的に、通信技術の発達によって映像データを音声データと共に送信する映像通信装置が登場し、このような映像通信機能はデジタル処理に基づくＤＴＶ（Ｄｉｇｉｔａｌ  Ｔｅｌｅｖｉｓｉｏｎ）システムに通信機能が加わってＤＴＶ上でも具現されることになった。即ち、ＤＴＶにカメラモジュールを付着してユーザを撮影し、撮影された映像データと音声データをインターネット網または移動通信網等を通して他の装置に送信することが可能になった。
【０００３】
既存の映像通信装置は一つのカメラモジュールを利用してユーザを撮影する方式で制限的な撮像可能領域内だけ通話が可能である。小型端末機とは異なるように、映像通信装置がＤＴＶのようなディスプレイ装置で具現される場合、映像通信装置自体を移動させることが容易ではないので、カメラモジュールが撮影する範囲が固定的でなければならなかった。また、多数のユーザを撮影した映像データを生成するためには全てのユーザがカメラの撮像可能領域内になければならないのに、撮像範囲を広げるとユーザの個人空間の露出の危険が大きい。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従って、本発明の目的は、多数の映像通信装置がそれぞれのユーザを撮影してマルチビューを生成することによって、ディスプレイ装置のように撮像領域が制限的な映像通信装置で多数のユーザ間の映像通信が可能なシステムを提供することを目的とする。
【課題を解決するための手段】
【０００５】
前記解決課題は、映像受信装置と映像通信を行なう映像通信装置において、被写体を撮影して第１映像を取得する映像取得部と、連結されたスレーブ装置で撮影された第２映像を受信する通信部と、送信する第３映像を生成する送信映像生成部と、前記第１映像及び前記第２映像を合成して前記第３映像を生成するように前記送信映像生成部を制御し、前記第３映像をエンコーディングして前記通信部を通じて送信するように制御する制御部と、を含むことを特徴とする映像通信装置によって達成されることができる。
【０００６】
ここで、前記送信映像生成部は前記第１映像及び前記第２映像が一つの画面の一領域に各々表示されるように前記第３映像を生成することができる。ここで、前記送信映像生成部は所定のイベントに従って前記第１映像及び前記第２映像が選択的に表示されるように前記第３映像を生成することができる。
【０００７】
ここで、映像を表示するディスプレイ部と、前記ディスプレイ部を通じて出力される第４映像を生成する出力映像生成部と、をさらに含むことができる。
【０００８】
ここで、前記制御部は映像通信装置と有線／無線で通信可能な外部の装置を検出し、検出された外部の装置が映像通信機能を備えた装置である場合、前記外部の装置から前記第２映像を受信することができる。
【０００９】
ここで、第１音声を取得する音声取得部をさらに含み、前記通信部は前記スレーブ装置から第２音声をさらに受信し、前記制御部はユーザの選択に従って、前記第１音声と前記第２音声の中で何れか一つを選択的に送信することができる。
【００１０】
また、前記解決課題は映像通信サーバーにおいて、第１映像通信装置から第１映像及びシンク情報を受信し、第２映像通信装置から第２映像を受信する通信部と、前記第１映像通信装置から映像の送信が要請された映像受信装置に送信する第３映像を生成する送信映像生成部と、前記シンク情報に基づいて前記第１映像及び前記第２映像を合成して前記第３映像を生成するように前記送信映像生成部を制御し、前記第３映像をエンコーディングして前記通信部を通じて前記映像受信装置に送信するように制御する制御部と、を含むことを特徴とする映像通信サーバーによって、達成されることもできる。
【００１１】
ここで、前記送信映像生成部は前記第１映像及び前記第２映像が一つの画面の一領域に各々表示されるように前記第３映像を生成することができる。ここで、前記送信映像生成部は所定のイベントに従って前記第１映像及び前記第２映像が選択的に表示されるように前記第３映像を生成することができる。
【００１２】
ここで、前記通信部は前記第１映像通信装置から第１音声を受信し、前記第２映像通信装置から第２音声を受信し、前記制御部は前記第１映像通信装置の選択に従って、前記第１音声または前記第２音声の中で何れか一つを選択的に前記映像受信装置に送信することができる。
【００１３】
ここで、前記制御部は前記第１映像通信装置及び前記第２映像通信装置の接続ＩＤに従って前記第３映像の生成可否を決めることができる。ここで、前記生成された第３映像を保存する保存部をさらに含むことができる。
【００１４】
また、前記目的は本発明に従って第１映像通信装置、第２映像通信装置及び映像通信サーバーを含む映像通信システムにおいて、前記映像通信サーバーは前記第１映像通信装置によって取得した第１映像と前記第２映像通信装置によって取得した第２映像を合成して生成された第３映像をエンコーディングし、前記第１映像通信装置から映像の送信が要請された映像受信装置に前記第３映像を一つの映像ストリームとして送信することを特徴とする映像通信システムによって達成されることもできる。
【００１５】
また、前記目的は映像通信のための映像処理方法において、第１映像通信装置から第１映像を取得し、第２映像通信装置から第２映像を取得する段階と、第１映像及び第２映像を合成して前記第１映像通信装置から映像の送信が要請された映像受信装置に送信する第３映像を生成する段階と、前記第３映像をエンコーディングして前記映像受信装置に送信する段階と、を含むことを特徴とする映像処理方法によって達成されることもできる。
【００１６】
ここで、前記第１映像通信装置で前記第２映像を受信する段階をさらに含み、前記第３映像を生成する段階は、前記第１映像通信装置で行なわれることができる。
【００１７】
ここで、映像通信サーバーで前記第１映像通信装置から前記第１映像及びシンク情報を受信し、前記第２映像通信装置から前記第２映像を受信する段階をさらに含み、前記第３映像を生成する段階は、前記映像処理サーバーで前記シンク情報に基づいて前記第３映像を生成することができる。
【００１８】
ここで、前記第３映像を生成する段階は、前記第１映像及び前記第２映像が一つの画面の一領域に各々表示されるように前記第３映像を生成することができる。ここで、前記第３映像を生成する段階は、所定のイベントに従って前記第１映像及び前記第２映像が選択的に表示されるように前記第３映像を生成することができる。
【００１９】
ここで、前記第１映像通信装置は映像を表示するディスプレイ部を含み、前記ディスプレイ部を通じて出力される第４映像を生成する段階をさらに含むことができる。ここで、前記第１映像通信装置から第１音声を取得し、前記第２映像通信装置から前記第２音声を取得する段階と、前記第１映像通信装置の選択に従って、前記第１音声または前記第２音声の中で何れか一つを選択的に前記映像受信装置に送信する段階と、を含むことができる。
【００２０】
ここで、前記第１映像通信装置及び前記第２映像通信装置の接続ＩＤに従って、前記第３映像の生成可否を決める段階をさらに含むことができる。ここで、前記第３映像を映像通信サーバーに保存する段階をさらに含むことができる。
【発明の効果】
【００２１】
以上、前述ように、本発明によれば、ディスプレイ装置のように撮像領域が制限的な映像通信装置を通じて多数のユーザ間の映像通信が可能なシステムを提供することができる。
【図面の簡単な説明】
【００２２】
【図１】本発明による映像通信システムを簡略に示す図である。
【図２】本発明の一実施形態による映像通信装置の制御ブロック図である。
【図３】本発明の他の実施形態による映像通信サーバーの制御ブロック図である。
【図４】本発明による映像通信のための映像処理方法の第１フローチャートである。
【図５】本発明による映像通信のための映像処理方法の第２フローチャートである。
【図６】本発明による映像通信のための映像処理方法の第３フローチャートである。
【発明を実施するための形態】
【００２３】
以下、添付図面を参考して、本発明の実施形態に対して本発明の属する技術分野で通常の知識を有する者が容易に実施することができるように詳細に説明する。本発明はいろいろ異なる形態で具現されることができるし、ここで説明する実施形態に限定されない。本発明を明確に説明するために説明と関係ない部分は省略し、明細書全体を通じて同一または類似の構成要素に対しては同じ参照符号を付けるようにする。
【００２４】
図１は、本発明による映像通信システムを簡略に示す。映像通信システムは、複数の映像通信装置１００、２００、４００と映像通信サーバー３００を含む。それぞれの映像通信装置１００、２００、４００は、ユーザを撮影して映像データを生成し、ユーザの音声を獲得して音声データを生成する。
【００２５】
本発明で、複数の映像通信装置の中で一部１００、２００で生成される映像は一つで映像ストリームで他の一つの映像通信装置４００に転送され、実施形態に従って、映像を生成して送信する側を映像通信装置１００とスレーブ装置２００と言い、受信する側を映像受信装置４００と言ったり、送信する側を第１映像通信装置１００と第２映像通信装置２００と記載し、受信する側を映像受信装置４００と記載するようにする。説明の便宜のため、二つの映像通信装置を通じて説明するが、多数の映像通信装置を通じて映像通信システムを具現することができる。
【００２６】
第１映像通信装置１００は、ＤＴＶ（Ｄｉｇｉｔａｌ  Ｔｅｌｅｖｉｓｉｏｎ）等のディスプレイ装置で具現され、第２映像通信装置２００は、移動通信が可能な携帯電話、ＰＤＡなどの端末機で具現されることが好ましいが、具体的な具現例にあって限定される必要はない。
【００２７】
図２は本発明の一実施形態による映像通信装置１００の制御ブロック図である。本実施形態において、映像通信装置１００は、映像取得部１１０、通信部１２０、送信映像生成部１３０及び制御部１４０を含み、ディスプレイ部１５０、出力映像生成部１６０及び音声取得部１７０をさらに含むことができる。映像通信装置１００はＤＴＶのように外部の映像供給源から受信した映像信号を処理して表示できるディスプレイ装置で具現されることが好ましい。
【００２８】
映像取得部１１０は、被写体を撮影して第１映像を取得する。映像取得部１１０は、公知のカメラモジュールで具現されることができ、映像通信装置１００の前面に設けられて、ユーザを撮影して映像データを生成することができる。映像通信装置１００がディスプレイ装置で具現される場合、移動または回転が容易ではないので、映像取得部１１０は、制限的な範囲だけを撮影することができる。
【００２９】
通信部１２０は、スレーブ装置２００で撮影された第２映像を受信する。通信部１２０は、外部装置とデータ通信を遂行できる公知の通信モジュールを含み、スレーブ装置２００から第２映像及び第２音声を受信する以外に、映像通信サーバー３００及び映像受信装置４００とも通信を行なうことができる。スレーブ装置２００は、カメラ
モジュールを備え、映像通信機能を備えた端末機の形態で具現されることが好ましい。
【００３０】
送信映像生成部１３０は、後述する制御部１４０の制御に従って、外部に送信する第３映像を生成する。第３映像は、第１映像と第２映像に基づいて生成されることで、その形態は多様である。例えば、ＰＩＰの形態、画面を左右または上下で分けて表示される形態等のように、画面の一領域に第１映像と第２映像が同時に表示される形態で生成されることができる。他の実施形態として、所定のイベントに従って第１映像及び第２映像が選択的に表示される形態で生成されることもできるのに、ここでイベントの例として、映像受信装置４００のユーザが第１映像と第２映像の中で何れか一つを表示するように所定のキーを入力する場合、映像受信装置４００は、このような情報を映像通信装置１００に直ちに送信し、映像通信装置１００は受信した情報に基づいてユーザによって選択された一つの映像だけを表示するように第３映像を生成することができる。
【００３１】
制御部１４０は、映像通信装置１００の映像通信機能に関する全般的な制御を担当するマイクロプロセッサーで具現されることができる。制御部１４０は、映像取得部１１０で取得した第１映像と通信部１２０を通じてスレーブ装置２００から受信した第２映像を合成して第３映像を生成するように送信映像生成部１３０を制御する。この時、第２映像は、スレーブ装置２００でエンコーディングされて映像ストリームで映像通信装置１００に転送されるのでデコーディング過程を経て１映像と合成されることができる。
【００３２】
制御部１４０は、送信映像生成部１３０によって第３映像が生成されれば、第３映像をエンコーディングして通信部１２０を通じて送信するように制御する。送信映像生成部１３０によって生成された第３映像は、実施形態に従って、通信部１２０を経て、映像受信装置４００に直接に転送されたり、サーバーを経て最終的に映像受信装置４００に転送されることができる。第３映像は、一つの映像ストリームで転送されるので、これを受信する映像受信装置４００は、第１映像と第２映像を合成するための別途のハードウェア/ソフトウェア的な構成がなくても受信した第３映像をデコーディングして表示することができて、これは第１映像と第２映像を各々受信する方法に比べてデータ送信量の側面でも有利である。
【００３３】
前述のように、映像通信装置１００は、ディスプレイ装置で具現されることが望ましくて、この場合映像を表示するディスプレイ部１５０をさらに含むことができる。また、ディスプレイ部１５０を通じて出力される第４映像を生成する出力映像生成部１６０をさらに含むこともできる。出力映像生成部１６０では、第４映像は第１映像または第２映像の中で何れか一つだけを含めるし、ＰＩＰ形態のように第１映像と第２映像を合成して生成された映像であることもできる。第４映像は、映像通信装置１００のユーザに提供されることで、映像受信装置４００に転送される第３映像と同一な必要はない。ディスプレイ部１５０は、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、ＰＤＰ（Ｐｌａｓｍａｌ  Ｄｉｓｐｌａｙ  Ｐａｎｅｌ）、ＯＬＥＤ（Ｏｒｇａｎｉｃ  ｌｉｇｈｔ−ｅｍｉｔｔｉｎｇ  ｄｉｏｄｅ）等で具現されて、第４映像を表示でき、その他に外部から受信した映像信号に基づいた映像または保存された映像データに基づいた映像を表示することができる。
【００３４】
制御部１４０は、映像通信装置１００と有線/無線で通信可能な外部の装置を検出し、外部の装置が映像通信機能を備えたかを確認して、映像通信のためのデータを共有する。即ち、映像通信装置１００が映像受信装置４００と映像通信を行なうことにあって、映像通信が可能な外部の装置をスレーブ装置２００で設定して第２映像を受信する。映像通信の途中にスレーブ装置２００との連結が終了されると、映像通信装置１００は、再び第１映像だけを映像受信装置４００に送信する。
【００３５】
本発明を通じて行なわれる映像通信機能は、音声データの送信も含む。映像通信装置１００は、第１音声を取得する音声取得部１７０をさらに含めるし、音声取得部１７０は、公知のマイクロホンで具現されてユーザの音声を取得することができる。スレーブ装置２００は、第２音声を取得することができるし、通信部１２０は、スレーブ装置２００から第２音声をさらに受信することができる。制御部１４０は、ユーザの選択に従って、第１音声と第２音声の中で何れか一つを選択的に映像通信サーバー３００または映像受信装置４００に送信することができる。この時転送される音声は、第３映像と共に転送されることが好ましい。
【００３６】
図３は、本発明の他の実施形態による映像通信サーバー３００の制御ブロック図である。図３に示すように、第１映像通信装置及び第２映像通信装置は、図２に示す映像通信装置及びスレーブ装置とその構成が大部分一致し、以下で説明する映像通信サーバー３００の細部構成は、図２を通じて説明した映像通信サーバー３００と類似なことが好ましい。映像通信サーバー３００は、第１映像通信装置１００の一部に含まれたり、別途に設けられて第１映像通信装置１００及び第２映像通信装置２００と有無線でデータを送受信することができる。
【００３７】
本実施形態において、映像通信サーバー３００は、通信部３１０、送信映像生成部３２０、制御部３３０を含み、保存部３４０をさらに含むことができる。映像通信サーバー３００は、ネットワークを通じて第１映像通信装置１００、第２映像通信装置２００及び映像受信装置４００とデータを送受信することができる。
【００３８】
通信部３１０は、第１映像通信装置１００から第１映像及びシンク情報を受信し、第２映像通信装置２００から第２映像を受信する。ここで、第１映像は、第１映像通信装置１００のユーザを撮影した映像であり、第２映像は、第２映像通信装置２００のユーザを撮影した映像であり、シンク情報は、第１映像と第２映像を同調するための情報を含む。
【００３９】
送信映像生成部３２０は、後述する制御部３３０の制御に従って、第１映像通信装置１００から映像の送信が要請された映像受信装置４００に送信する第３映像を生成する。生成される第３映像の形態は、図２の映像通信装置によって生成されることのように、第１映像及び第２映像が一つの画面の一領域に各々表示される形態であったり、所定のイベントに従って第１映像及び第２映像が選択的に表示される形態でありうる。
【００４０】
制御部３３０は、本実施形態による映像通信サーバー３００の映像通信機能に関する全般的な制御を担当する。制御部３３０は、第１映像通信装置１００から受信したシンク情報に基づいて、第１映像及び第２映像を合成して第３映像を生成するように送信映像生成部３２０を制御する。
【００４１】
送信映像生成部３２０によって第３映像が生成されたとき、制御部３３０は、第３映像をエンコーディングして、通信部３１０を通じて映像受信装置４００に送信するように制御する。第３映像は、一つの映像ストリームで転送されるので、これを受信する映像受信装置４００は、第１映像と第２映像を合成するための別途のハードウェア/ソフトウェア的な構成がなくても受信した第３映像をデコーディングして表示でき、これは第１映像と第２映像を各々受信する方法に比べてデータ送信量の側面でも有利である。
【００４２】
本実施形態の映像通信機能も、音声データの送信も含めるし、通信部３１０は、第１映像通信装置１００から第１音声を受信し、第２映像通信装置２００から第２音声を受信し、制御部３３０は、第１映像通信装置１００の選択に従って第１音声または第２音声の中で何れか一つを選択的に映像受信装置４００に送信することができる。この時転送される音声データは、第３映像と共に転送されることが好ましい。
【００４３】
映像通信サーバー３００の制御部３３０は、第１映像通信装置１００及び第２映像通信装置２００の接続ＩＤに従って第３映像の生成可否を決めることができる。即ち、第１映像通信装置１００と第２映像通信装置２００が同じＩＤまたは所定のファミリーＩＤで接続した場合、一つのグループで第３映像を生成して映像受信装置４００に送信することができる。
【００４４】
映像通信サーバー３００は、生成された第３映像を保存する保存部３４０をさらに含むことができる。映像の送信が要請された映像受信装置４００が映像通信サーバー３００に接続されていない場合、映像メッセージの形態で保存部３４０に保存されて、映像受信装置４００がこの後に映像通信サーバー３００に接続すれば保存部３４０に保存された第３映像を受信することができる。映像通信サーバー３００は、各装置のＩＤに基づいて、映像及び音声データの送信可否を決めることができるので、映像受信装置４００のユーザは、他の映像受信装置を利用しても、同じＩＤを通じて接続する場合、保存部３４０に保存された第３映像を確認することができる。
【００４５】
前述した本発明の第１実施形態及び第２実施形態によれば、第１映像処理装置１００のカメラと第２映像処理装置２００のカメラを利用して、多数の機器で撮影した映像をマルチビュー形態の一つの映像で生成して送信できる映像通信システムを具現することができる。
【００４６】
図４は、本発明による映像通信のための映像処理方法の第１フローチャートである。図４では、映像処理方法の基本的な流れが図示されている。
【００４７】
第１映像通信装置は、ユーザを撮影して第１映像を取得し、第２映像通信装置は、ユーザを撮影して第２映像を取得する（Ｓ１１０）。取得された第１映像及び第２映像は、第１映像通信装置または映像処理サーバーに転送され、第１映像及び第２映像を合成した第３映像を生成する（Ｓ１２０）。生成された第３映像は、一つの映像ストリームで映像受信装置に転送される（Ｓ１３０）。
【００４８】
図５は、本発明による映像通信のための映像処理方法の第２フローチャートである。図５では、本発明の第１実施形態に対して具体的に記述する。
【００４９】
本実施形態を具現するためには、映像を取得して送信する第１映像通信装置及び第２映像通信装置と、映像を受信する映像受信装置が要求され、映像通信サーバーが要求されることもできる。第１映像通信装置は、カメラ
モジュールを含むＤＴＶなどのディスプレイ装置で具現され、第２映像通信装置は、映像通信機能を備えた端末機で具現されることができる。
【００５０】
第１映像通信装置及び第２映像通信装置は、映像受信装置との映像通信のため映像通信サーバーに接続することができる（Ｓ２１０）。接続が完了されると、映像通信のために第１映像通信装置及び第２映像通信装置は、それぞれのユーザを撮影して第１映像及び第２映像を取得する（Ｓ２２０）。
【００５１】
第２映像通信装置で取得した第２映像は、第１映像通信装置に転送され（Ｓ２３０）、第１映像通信装置は、第１映像と第２映像を合成して映像受信装置に送信する第３映像を生成する（Ｓ２５０）。即ち、本実施形態において、第３映像を生成する段階は、第１映像通信装置で行なわれる。
【００５２】
第３映像は、第１映像と第２映像に基づいて生成されることでその形態はさまざまである。例えば、ＰＩＰの形態、画面を左右または上下で分けて表示される形態等のように、画面の一領域に第１映像と第２映像が同時に表示される形態で生成されることができる。他の実施形態で、所定のイベントに従って第１映像及び第２映像が選択的に表示される形態で生成されることもできるのに、ここでイベントの例として、映像受信装置のユーザが第１映像と第２映像の中で何れか一つを表示するように所定のキーを入力する場合、映像受信装置は、このような情報を映像通信装置に直ちに送信し、映像通信装置は受信した情報に基づいてユーザによって選択された一つの映像だけを表示するように第３映像を生成することができる。
【００５３】
この時、第１映像通信装置と第２映像通信装置が映像通信サーバーに接続した接続ＩＤに従って、第３映像の生成可否が決定されることができる（Ｓ２４０）。例えば、第１映像通信装置と第２映像通信装置が同じＩＤまたは所定のファミリーＩＤで接続した場合、一つのグループで第３映像を生成して映像受信装置に送信することができる。
【００５４】
前述のように、第１映像通信装置は、ディスプレイ装置で具現されることが好ましくて、この場合、第１映像通信装置で出力される第４映像を生成し、これをディスプレイ部に表示することができる。
【００５５】
第３映像が生成されれば、第１映像通信装置は、生成された第３映像をエンコーディングして映像通信サーバーに送信したり（Ｓ２６０）、映像受信装置に直接に送信することもできる。映像通信サーバーが第３映像を受信する場合、受信した第３映像を映像通信サーバー内に保存することができる（Ｓ２７０）。
【００５６】
映像通信サーバーで映像受信装置に第３映像を送信し（Ｓ２９０）、映像受信装置が映像通信サーバーに接続中である場合（Ｓ２８０）、映像受信装置は、第３映像を受信して、デコーディング過程を経て出力され（Ｓ２９５）、映像通信サーバーに接続されない場合、第３映像が映像通信サーバーに保存されて、映像受信装置がこの後に映像通信サーバーに接続すれば保存部に保存された第３映像を受信することができる。映像通信サーバーは、各装置のＩＤに基づいて、映像及び音声データの送信可否を決めることができるので、映像受信装置のユーザは、他の映像受信装置を利用しても、同じＩＤを通じて接続する場合、保存部に保存された第３映像を確認することができる。
【００５７】
本発明を通じて行なわれる映像通信機能は、音声データの送信も含む。第１映像通信装置及び第２映像通信装置は、第１音声及び第２音声を取得し、第１映像通信装置は、第２音声を第２映像通信装置から取得して、第１音声または第２音声の中で何れか一つを選択的に送信することができる。この時、音声データの送信は、第３映像データと共に転送されることが好ましい。
【００５８】
図６は、本発明による映像通信のための映像処理方法の第３フローチャートである。図６に示すように、本発明の第２実施形態に対して具体的に記述し、前述の内容と同じ内容に対しては説明を省略する。
【００５９】
映像通信サーバーに第１映像通信装置及び第２映像通信装置が接続されたとき（Ｓ３１０）、第１映像通信装置及び第２映像通信装置は、それぞれのユーザを撮影して第１映像及び第２映像を取得する（Ｓ３２０）。
【００６０】
映像通信サーバーは、第１映像通信装置から第１映像とシンク情報を受信し、第２映像通信装置から第２映像を受信する（Ｓ３３０）。映像通信サーバーは、受信したシンク情報に基づいて第１映像と第２映像を合成して、第３映像を生成する（Ｓ３５０）。即ち、本実施形態において映像受信装置に送信する第３映像の生成は、映像通信サーバーによって行なわれる。
【００６１】
映像通信サーバーは、生成された第３映像を保存し（Ｓ３６０）、映像受信装置に送信し（Ｓ３８０）、受信した映像受信装置は、第３映像をデコーディングして出力する（Ｓ３９０）。
【００６２】
本実施形態でも音声データの送信も含み、これは前述と同じである。
【００６３】
詳述した本発明によれば、第３映像は、一つの映像ストリームで転送されるので、これを受信する映像受信装置は、第１映像と第２映像を合成するための別途のハードウェア/ソフトウェア的な構成がなくても受信した第３映像をデコーディングして表示できて、これは第１映像と第２映像を各々受信する方法に比べて、データ送信量の側面でも有利である。
【００６４】
以上、多様な実施形態を通じて本発明に対して図示し説明したが、本発明はこれに限定されず、本発明の属する技術分野の通常の知識を有する人であれば本発明の原則や精神から外れることなく本発明の一実施形態を変形し得ることを理解することができる。発明の範囲は、特許請求の範囲とその均等物によって定まれる。
【符号の説明】
【００６５】
１００  映像通信装置または第１映像通信装置
１１０  映像取得部
１２０  通信部
１３０  送信映像生成部
１４０  制御部
１５０  ディスプレイ部
１６０  出力映像生成部
１７０  音声取得部
２００  スレーブ装置または第２映像通信装置
３００  映像通信サーバー
３１０  通信部
３２０  送信映像生成部
３３０  制御部
３４０  保存部
４００  映像受信装置
【図１】
2013225850.tif 000003
【図２】
2013225850.tif 000004
【図３】
2013225850.tif 000005
【図４】
2013225850.tif 000006
【図５】
2013225850.tif 000007
【図６】
2013225850.tif 000008