(57)【要約】【課題】  通話者の撮像および音声ばかりではなく、外部からの映像および音声に切換えて送信することができ、外部からの音声とともに通話者の音声も送信することができるテレビ通話装置を提供する。【解決手段】  テレビ通話装置１は、映像切換スイッチ１９でカメラ２から導出される内部映像信号、または外部映像入力端子１４，１５に入力される外部映像信号のいずれかに切換えて、説明資料などを画像や映像で有効に表示させることができる。音声切換スイッチ２０は、映像切換スイッチ１９に連動して、内部映像信号に切換えられるときはマイクロホン３からの内部音声信号に切換え、外部映像信号に切換えられるときは、外部音声信号および内部音声信号の両方をミキシングして、通話相手に送信する。通話者の内部音声信号も外部音声信号とミキシングして送信するので、外部映像信号に関する通話相手との会話を表示と同時に行うことができる。【選択図】      図２
2006093883.tif 000002
【特許請求の範囲】
【請求項１】
相手側の映像を相互に表示しながら通話を行うテレビ通話装置において、
通話者を撮像して内部映像信号を導出する映像撮像手段と、
通話者の音声を取得して内部音声信号を導出する音声取得手段と、
外部の機器からの映像信号を外部映像信号として入力する映像入力手段と、
外部の機器からの音声信号を外部音声信号として入力する音声入力手段と、
映像撮像手段から導出される内部映像信号、または映像入力手段に入力される外部映像信号のいずれかに切換えて、通話相手に送信する映像切換手段と、
映像切換手段に連動して、内部映像信号に切換えられるときは内部音声信号に切換え、外部映像信号に切換えられるときは、外部音声信号および内部音声信号の両方をミキシングして、通話相手に送信する音声切換手段とを含むことを特徴とするテレビ通話装置。
【請求項２】
前記音声切換手段は、前記映像切換手段に連動して、内部映像信号に切換えられるときは通話の相手側からの相手音声信号を、外部映像信号に切換えられるときは、該相手音声信号および外部音声信号をミキシングした音声信号を、切換えて音響出力を導出することを特徴とする請求項１記載のテレビ通話装置。
【請求項３】
前記映像切換手段に連動して、内部映像信号に切換えられるときは通話の相手側からの相手映像信号を表し、外部映像信号に切換えられるときは、該相手映像信号とともに、外部映像信号を表示する表示手段をさらに含むことを特徴とする請求項１または２記載のテレビ通話装置。
【請求項４】
前記通話者が前記ミキシングでの混合状態を調整操作可能な操作手段をさらに含むことを特徴とする請求項１〜３のいずれか１つに記載のテレビ通話装置。
【請求項５】
前記映像入力手段および前記音声入力手段は、
映像信号および音声信号を再生して導出する映像音声再生手段からの入力用と、
映像信号および音声信号を取得して導出する映像音声取得手段からの入力用とを、
含むことを特徴とする請求項１〜４のいずれか１つに記載のテレビ通話装置。
【請求項６】
前記内部音声信号とミキシングされる外部音声信号は、前記映像音声取得手段から入力される音声信号であることを特徴とする請求項５記載のテレビ通話装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、相手側の映像を相互に表示するための画像通信と、通話を行うための音声通信とを同時に行うテレビ通話装置に関する。
【背景技術】
【０００２】
従来から、相手側の映像を相互に表示しながら通話や会議を行うテレビ電話装置やテレビ会議用端末装置が利用されている。従来のテレビ電話装置は、本体附属カメラの映像とマイクロホンからの音声とを相手に送り、相手からの映像を表示し、相手からの音声を再生するものである（たとえば、特許文献１。）。特許文献１には、従来技術として、通話相手との会話は音声のみの電話機と同様に行い、自画像をテレビ電話装置に備えられるカメラで撮像して相手側に送信し、相手側から受信する画像をテレビ電話装置に備えられる表示画面に表示するものが紹介されている。画像の通信は音声用の電話回線を介して行うので、送受される画像は静止画となる。テレビ電話装置には、本体内蔵のカメラやマイクロホンではなく、外部入力で他のカメラやマイクロホンにも接続可能なものもある。特許文献１で開示されている発明に係るテレビ電話装置では、カメラとしてマイクロホンが一体化されているビデオカメラを用い、画面表示にテレビジョン受信機を用いることができるように、ビデオカメラからの映像信号および音声信号の入力部と、テレビジョン受信機への映像信号および音声信号の出力部とを備える構成を有している。
【０００３】
なお、マイクロホンがカメラに一体化され、映像の撮像と音声の取得が可能で取得された映像および音声の記録と再生を行うカメラ一体形ビデオカメラを用いて、映像および音声の記録再生を行う際に、外部からの映像信号や音声信号を付加したり、外部へ映像信号や音声信号を出力させる映像信号記録再生装置も開示されている（たとえば、特許文献２参照。）。したがって、特許文献１の発明に係るテレビ電話装置には、特許文献２で開示されている映像信号記録再生装置を接続することができる。
【０００４】
相互に通話する少なくとも一方に複数の参加者がある場合は、テレビ会議と呼ばれる。テレビ会議では、実際に対面して会議を進める状態に近付けるため、映像をリアルタイムで送受信することが要望され、Public Switched Telephone Network からＰＳＴＮと呼ばれる一般の公衆用電話回線網では伝送可能な情報量が不足し、より伝送可能な情報量が大きいＩＳＤＮ（Integrated Services Digital Network ）や専用の通信回線が用いられている。ただし、ＩＳＤＮでも、完全なリアルタイムの映像の送受信は困難であり、映像は静止画を間欠的に送受信する程度となる。このため、複数の参加者のいずれかが発言していても、撮像した映像を表示するだけでは不明であり、発言者を特定するような表示の付加が提案されている（たとえば、特許文献３参照。）。特許文献３では、ビデオカメラで会議参加者の映像を撮像しながら、会議参加者の近傍に分散して配置する複数のマイクロホンへの音声入力を検出し、特定のマイクロホンに所定値以上の音声入力があれば、そのマイクロホンの近傍の会議参加者の映像に、発言者表示情報を付加するようにしている。相手側に送信する音声信号では、複数のマイクロホンに入力された音声信号は混合され、まとめて再生されるので、発言者を特定するような情報は失われてしまうからである。
【０００５】
近年、インターネットなどのデジタル通信網を有効に利用するために、一般家庭などにも、ＡＤＳＬ（Asymmetric Digital Subscriber Line ）やＦＴＴＨ（Fiber To The
Home）などのＩＳＤＮよりも高速で、ブロードバンド化された通信線が接続されるようになってきている。またCAble TeleVisionからＣＡＴＶと呼ばれる有線テレビ（CAble
TeleVision）の配信線を、インターネットへの接続のためのブロードバンド通信線として利用することも行われている。これらのブロードバンド化された通信線を用いれば、テレビ電話やテレビ会議も、より有効に利用可能になると期待される。また、携帯電話機も高機能化され、動画データを含む高速のデータ通信が可能で、カメラと表示器とを備えているので、携帯電話機を用いるテレビ電話やテレビ化会議も可能になってきている。
【０００６】
【特許文献１】特開平２−１９４７８６号公報
【特許文献２】特開平１−１８８０７６号公報
【特許文献３】特開昭６１−１４６０８３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
テレビ電話やテレビ会議では、音声信号ばかりではなく映像信号も伝送する必要がある。ＰＳＴＮのアナログ回線は、音声信号を３ｋＨｚ程度までの周波数帯域に制限して伝送するように形成されている。データを送受信するためには、モデムが必要となる。ＰＳＴＮのアナログ回線を使用してデータを送受信するモデムでは、データ圧縮技術などを利用して、最大５６ｋｂｐｓ程度の伝送速度が得られている。しかしながら、テレビ電話やテレビ会議を円滑に行うために必要な映像信号の伝送には、伝送速度として不足している。ＩＳＤＮ回線が普及すると、ＩＳＤＮ回線では６４ｋｂｐｓの最大速度を両方向で得られる。また、２回線が同時に接続可能であるので、２回線同時に使用して１２８ｋｂｐｓの伝送速度が得られる。これらのテレビ電話やテレビ会議は、International
Telecommunication Union からＩＴＵと略称される国際電気通信連合で決められているＨ．３２０の手順を使用して行われる。
【０００８】
近年では、前述のようにＡＤＳＬや光ファイバのＦＴＴＨなどのブロードバンド化された通信線が利用可能となり、テレビ電話やテレビ会議にもより高速な通信回線の利用が可能になってきている。特に、ＡＤＳＬは、ＰＳＴＮの電話交換機と利用者の電話機とを繋ぐアナログ信号用の加入者線に、高周波でデジタル信号を重畳させる技術であるので、既存の加入者線を利用することができ、広く普及している。ただし、電話交換機から利用者の電話機への下りの通信速度は速くなるけれども、利用者の電話機から電話交換機への上りの通信速度は比較的遅い非対称性を有するので、双方向に多量の画像データを送受信することが臨まれるテレビ電話やテレビ会議には必ずしも適していない。光ファイバやＣＡＴＶの配信線は、数Ｍｂｐｓ以上の伝送速度で多量のデータを双方向に伝送可能であるので、テレビ電話やテレビ会議に適している。また、動画データの送受が可能な携帯電話機でも、テレビ電話やテレビ会議に利用することができる。これらのブロードバンド化された通信線を利用する場合は、料金も固定料金となることが多い。従来のＰＳＴＮやＩＳＤＮでは、従量課金であり、伝送すべき情報量が多いテレビ通話装置では、料金が高騰してしまうけれども、固定料金制であれば、料金面での制約も少なくなる。
【０００９】
テレビ電話やテレビ会議を円滑に行うための映像信号の伝送速度を満たす環境が整ってくると、テレビ電話やテレビ会議を行うためのテレビ電話装置には、テレビ電話やテレビ会議をより有効に行うための機能が要望される。たとえば送受信する映像信号には、付属しているカメラなどで撮像する相手側の画像ばかりではなく、外部装置などから入力される映像信号も送受信可能であることが要望される。
【００１０】
テレビ会議に用いる装置では、会議に必要な資料を送信する機能が備えられている。しかしながら、映像信号の入力先を付属のカメラから外部に切換えると、音声信号の入力先も付属のマイクロホンから外部装置に切換えられてしまう。外部装置として特許文献２に開示されているような映像信号記録再生装置を用いると、事前に用意して記録しておいた映像と音声とを同時に相手先に送信することができる。ただし、自己の音声を相手先に通信するためには、映像と音声との入力を付属のカメラおよびマイクロホン切換えなければならず、相手先に資料を表示しながら説明することができない。テレビ電話でも、通話者以外の映像を送信することが要望される。たとえば、離れた家族間で通話する場合、孫の運動会のビデオを見ながらテレビ電話をするような場合を想定すると、ビデオの映像とその撮像の際に収録した音声を送信するとともに、同時に会話も行うための音声も送信することが要望される。
【００１１】
テレビ通話やテレビ会議を利用する有効性は、相手の反応を見ながら、必要に応じてその場で説明を追加したり変更したりすることが可能な点にあり、この点が円滑に行えないと、テレビ通話やテレビ会議の有効性が損われてしまうことになる。
【００１２】
本発明の目的は、通話者の撮像および音声ばかりではなく、外部からの映像および音声に切換えて送信することができ、外部からの音声とともに通話者の音声も送信することができるテレビ通話装置を提供することである。
【課題を解決するための手段】
【００１３】
本発明は、相手側の映像を相互に表示しながら通話を行うテレビ通話装置において、
通話者を撮像して内部映像信号を導出する映像撮像手段と、
通話者の音声を取得して内部音声信号を導出する音声取得手段と、
外部の機器からの映像信号を外部映像信号として入力する映像入力手段と、
外部の機器からの音声信号を外部音声信号として入力する音声入力手段と、
映像撮像手段から導出される内部映像信号、または映像入力手段に入力される外部映像信号のいずれかに切換えて、通話相手に送信する映像切換手段と、
映像切換手段に連動して、内部映像信号に切換えられるときは内部音声信号に切換え、外部映像信号に切換えられるときは、外部音声信号および内部音声信号の両方をミキシングして、通話相手に送信する音声切換手段とを含むことを特徴とするテレビ通話装置である。
【００１４】
本発明に従えば、テレビ通話装置は、たとえばテレビ電話やテレビ会議で、相手側の映像を相互に表示しながら通話を行うために、映像撮像手段と、音声取得手段と、映像入力手段と、音声入力手段と、映像切換手段と、音声切換手段とを含む。映像撮像手段は、たとえばカメラなどによって実現され、通話者を撮像して内部映像信号を導出する。音声取得手段は、たとえばマイクロホンなどによって実現され、通話者の音声を取得して内部音声信号を導出する。映像入力手段および音声入力手段は、外部の機器からの映像信号および音声信号を、外部映像信号および外部音声信号としてそれぞれ入力する。映像切換手段は、映像撮像手段から導出される内部映像信号、または映像入力手段に入力される外部映像信号のいずれかに切換えて、通話相手に送信するので、映像撮像手段によって撮像される通話者の映像ばかりではなく、外部の機器からの外部映像信号も通話相手に送信することができ、説明資料などを画像や映像で有効に表示させることができる。音声切換手段は、映像切換手段に連動して、内部映像信号に切換えられるときは内部音声信号に切換え、外部映像信号に切換えられるときは、外部音声信号および内部音声信号の両方をミキシングして、通話相手に送信する。外部映像信号とともに入力される外部音声信号ばかりではなく、音声取得手段で取得される通話者の内部音声信号も外部音声信号とミキシングして送信するので、外部映像信号に関する通話相手との会話を外部映像信号の表示と同時に行うことができる。
【００１５】
また本発明で、前記音声切換手段は、前記映像切換手段に連動して、内部映像信号に切換えられるときは通話の相手側からの相手音声信号を、外部映像信号に切換えられるときは、該相手音声信号および外部音声信号をミキシングした音声信号を、切換えて音響出力を導出することを特徴とする。
【００１６】
また本発明に従えば、内部映像信号を相手側に送信するときには相手側からの相手音声信号の音響出力を導出するように切換えるので、従来からのテレビ通話と同様に、相互に相手側の映像を表示しながら相互に通話を行うことができる。外部映像信号を相手側に送信するときは、相手音声信号を外部音声信号にミキシングした音声信号の音響出力を導出するように切換えるので、相手側に送信している外部音声を自分でも聞きながら、相手側との通話を行うことができる。
【００１７】
また本発明では、前記映像切換手段に連動して、内部映像信号に切換えられるときは通話の相手側からの相手映像信号を表し、外部映像信号に切換えられるときは、該相手映像信号とともに、外部映像信号を表示する表示手段をさらに含むことを特徴とする。
【００１８】
本発明に従えば、内部映像信号を相手側に送信するときには相手側からの相手映像信号を表示するので、従来からのテレビ通話と同様に、相互に相手側の映像を表示しながら相互に通話を行うことができる。外部映像信号を相手側に送信するときは、相手映像信号とともに外部映像信号を表示するので、相手側に送信している外部映像を自分でも見ながら、相手側との通話を行うことができる。
【００１９】
また本発明では、前記通話者が前記ミキシングでの混合状態を調整操作可能な操作手段をさらに含むことを特徴とする。
【００２０】
本発明に従えば、音声信号のミキシングでの混合状態を通話者が操作手段で調整操作可能なので、相手側と通話しながら、相手側の反応を見て、適切な混合状態に調整することができる。
【００２１】
また本発明で、前記映像入力手段および前記音声入力手段は、
映像信号および音声信号を再生して導出する映像音声再生手段からの入力用と、
映像信号および音声信号を取得して導出する映像音声取得手段からの入力用とを、
含むことを特徴とする。
【００２２】
本発明に従えば、ビデオ記録再生装置などに記録されている映像信号および音声信号を再生して相手側に送信したり、通話者がビデオカメラなどの映像音声取得手段で映像信号および音声信号を取得しながら相手側に送信したりするように、切換えることができる。
【００２３】
また本発明で、前記内部音声信号とミキシングされる外部音声信号は、前記映像音声取得手段から入力される音声信号であることを特徴とする。
【００２４】
本発明に従えば、映像入力手段に映像音声取得手段としてたとえばビデオカメラを接続し、テレビ通話装置の周辺から離れている場所を撮像してその映像信号を相手側に送信している場合でも、テレビ通話装置の周辺で話す音声も同時に取得して相手側に送信することができる。
【発明の効果】
【００２５】
本発明によれば、通話者などを撮像する内部映像信号を相手側に送信することができるばかりではなく、外部の機器から入力される外部映像信号に切換えて通話相手に送信することもできる。外部映像信号に切換えて送信する際には、通話者の音声などの内部音声信号を、外部の機器から入力される外部音声信号にミキシングして相手側に送信することができる。資料などを送信して画像や映像で有効に表示させることができるとともに、その外部映像信号とともに入力される外部音声信号ばかりではなく、通話者の音声を取得することができる内部音声信号も同時に通話相手に送信することができるので、資料などを通話しながら判りやすく説明することができる。
【００２６】
また本発明によれば、従来からのテレビ通話と同様に、相互に相手側の映像を表示しながら相互に通話を行うことができ、外部映像信号を相手側に送信するときは、相手側に送信している外部音声を自分でも聞きながら、相手側との通話を行うことができる。
【００２７】
また本発明によれば、従来からのテレビ通話と同様に、相互に相手側の映像を表示しながら相互に通話を行うことができ、外部映像信号を相手側に送信するときは、相手側に送信している外部映像を自分でも見ながら、相手側との通話を行うことができる。
【００２８】
また本発明によれば、音声信号のミキシングでの混合状態を、通話者が相手側と通話しながら、適切に調整することができる。
【００２９】
また本発明よれば、事前に記録しておいた映像信号および音声信号を再生して相手側に送信したり、通話者が映像信号および音声信号を取得しながら相手側に送信したりするように、切換えることができる。
【００３０】
また本発明によれば、たとえばビデオカメラを接続し、テレビ通話装置の周辺から離れている場所を撮像して音声も取得しながら相手側に送信している場合でも、テレビ通話装置の周辺で話す音声も同時に取得して相手側に送信することができるので、会話を続けたり、解説や説明を追加することができる。
【発明を実施するための最良の形態】
【００３１】
図１は、本発明の実施の一形態としてのテレビ通話装置１の概略的なシステム構成を示す。テレビ通話装置１は、カメラ２と、マイクロホン３ａおよびリモコン受光部３ｂを備えたカメラ部３と、ディスプレイ４と、アダプタ本体５とを含む。ディスプレイ４は、液晶表示装置（ＬＣＤ）やプラズマ表示装置（ＰＤＰ）、または陰極線管（ＣＲＴ）表示装置など、テレビジョン放送の受信機の画像表示や、コンピュータやゲーム機用の画像表示を行うディスプレイ装置の製品を使用する。アダプタ本体５は、カメラ部３やディスプレイ装置などの製品と組合わせて、テレビ通話装置１を形成するために必要な信号処理や通信制御を行う機能を備えている。アダプタ本体５には、通話者が操作する入力部が設けられているけれども、赤外線や無線電波を使用するリモコン６を用いて、離れた位置からでも操作を可能にしておく。
【００３２】
テレビ通話としての音声や映像は、インターネットを介してパケット化したデータとして通信する。アダプタ本体５は、ＬＡＮ（Local Area Network）形成用の通信線を介してルータ７と接続される。ルータ７は、たとえばＡＤＳＬモデム８を介してＡＤＳＬ回線９に接続され、ＡＤＳＬ回線９からインターネットに繋がる。また、ＦＴＴＨ回線１１などの光ファイバの通信線に接続される場合は、ルータ７から加入者終端装置１０を介してＦＴＴＨ回線１１に接続され、さらにＦＴＴＨ回線１１からインターネットに繋がる。ただし、ＡＤＳＬは、インターネットでＷｅｂページを閲覧する場合のように、インターネットから端末への下り方向のデータ転送速度が上り方向へのデータ転送速度よりも大きくなるように設定されている。ＡＤＳＬでは、高周波の周波数帯域を下り側に広く取って非対称となっているので、テレビ通話では遅い方の上り方向のデータ転送速度で通話速度が規制され、下り方向の高速性を有効に利用することはできない。なお、ＡＤＳＬと同様に、ＰＳＴＮのアナログの加入者線に高周波信号を重畳してブロードバンド化を図るｘＤＳＬ技術には、上りのデータ転送速度を高めるものもあるので、そのような技術が普及すれば、テレビ通話には好適となる。テレビ通話では、映像を扱うためにデータ転送速度には双方向の高速性を要求するので、現状ではＦＴＴＨなどの光ファイバやＣＡＴＶなどの利用がＡＤＳＬ回線９よりも好ましい。
【００３３】
インターネットを介してテレビ通話を行う手順は、前述のようなＩＴＵのＨ．３２０に代えて、ＳＩＰ（Session Initiation Protocol）が使用されることが多くなってきている。ＳＩＰは転送機能や発信者番号通知機能など、同様のプロトコルに比べて公衆電話網に近い機能を備え、接続にかかる時間も短くなっている。ＳＩＰは構造が簡単であるけれども、パラメータが多くあり、パラメータを１にセットするのか０にセットするのかが明確でないなど、細部までの記載がない。パラメータが０または１のいずれでも可である部分では問題は生じないけれども、いずれかにセットする必要があるような部分では接続できなくなり、相互接続には多少難がある。しかし、インターネットの普及もあり、今後はこの方式に従う手順が広く利用され、細部まで統一されるものと期待されている。現在でも、インターネット電話と呼ばれ、ＶｏＩＰ（Voice over Internet Protocol）に従うＩＰ電話は、ＳＩＰを使用している。テレビ通話でも、接続手順としてＳＩＰを使用するようにすれば、ＩＰ電話とテレビ電話との相互通信も可能となる。
【００３４】
図２は、図１のテレビ通話装置１の概略的な電気的構成を示す。テレビ通話装置１は、送信部１ａおよび受信部１ｂを含む。送信部１ａには、内部映像入力端子１３、外部映像入力端子１４，１５、内部音声入力端子１６、外部音声入力端子１７，１８、映像切換スイッチ１９、音声切換スイッチ２０、ミキシング回路（以下、「ＭＩＸ」と略称する）２１、エコーキャンセラ２２、利得調整増幅器２３，２４、画像符号化回路２５、音声符号化回路２６およびＭＩＸ２７が含まれる。
【００３５】
送信部１ａ、カメラ２が撮像する内部映像信号およびマイクロホン３ａが取得する内部音声信号は、内部映像入力端子１３および内部音声入力端子１６にそれぞれ入力される。ビデオカメラなどのマイクロホンと一体化されている機器からの外部映像信号および外部音声信号は、外部映像入力端子１４および外部音声入力端子１７にそれぞれ入力可能である。ＶＴＲやＤＶＤなどの再生装置などから出力される外部映像信号および外部音声信号は、外部映像入力端子１５および外部音声入力端子１８にそれぞれ入力可能である。内部映像入力端子１３、外部映像入力端子１４，１５のいずれか１つが映像切換スイッチ１９で切換えて画像符号化回路２５に入力され、通話の相手側に送信されるような画像データを表すパケット信号として符号化される。内部音声入力端子１６、外部音声入力端子１７，１８のいずれか１つが音声切換スイッチ２０で切換えて音声符号化回路２６に入力され、通話の相手側に送信されるような音声データを表すパケット信号として符号化される。
【００３６】
ＭIＸ２１は、外部音声入力端子１７または外部音声入力端子１８が音声切換スイッチ２０で選択された場合、内部音声入力端子１３の音声信号を外部音声入力端子１７または外部音声入力端子１８から入力される外部音声信号と利得調整増幅器２３を介して混合し、通話の相手側に送信する音声とする。なお、利得調整増幅器２３は簡略化して記載しているけれども、音声切換スイッチ２０と連動して、音声切換スイッチ２０が外部音声入力端子１７または外部音声入力端子１８を入力するように切換えられているときのみ、ＭＩＸ２１で内部音声入力端子１６に入力されている内部音声信号を混合するように、音声切換スイッチ２０が内部音声入力端子１６に切換えられているときには、ほとんど利得がない状態となり、入力される音声信号はＭＩＸ２１には混合されないようにしている。
【００３７】
なお、利得調整増幅器２３は、音声切換スイッチ２０が外部音声入力端子１７または外部音声入力端子１８に切換えられているときに、利得の調整を可能としておく。
【００３８】
画像符号化回路２５および音声符号化回路２６からの出力はＭＩＸ２７で合成され、インターネットへ送信される。
【００３９】
受信部１ｂには、スピーカ３０、ＭＩＸ３１、分離回路３２、音声復号化回路３３、画像復号化回路３４およびＶＭＩＸ３５が含まれる。スピーカ３０は受信する音声信号を音響化して、音波３０ｓとして出力する。ＭＩＸ３１は、スピーカ３０で再生する通話相手側からの相手音声信号に、外部音声入力端子１７または外部音声入力端子１８に入力される外部音声信号を利得調整増幅器２４を介して混合し、同時に再生可能にする。なお、利得調整増幅器２４は簡略化して記載しているけれども、音声切換スイッチ２０と連動して、音声切換スイッチ２０が外部音声入力端子１７または外部音声入力端子１８を入力するように切換えられているときのみ、ＭＩＸ３１に外部音声入力端子１７または外部音声入力端子１８に入力されている外部音声信号を混合するように、音声切換スイッチ２０が内部音声入力端子１６切換えられているときには、ほとんど利得がない状態で、入力される音声信号はＭＩＸ３１には混合されないようにしている。
【００４０】
インターネットなどを介して受信されるテレビ通話用の信号は、分離回路３２で音声用のパケット信号と画像用のパケット信号とに分離される。分離回路３２での分離は、パケット信号の種別を示すデータなどに従って行われる。音声用のパケット信号は、音声復号化回路３３でアナログの音声信号に復号化され、ＭＩＸ３１に入力されて、スピーカ３０で音響化され、通話者の耳に達する。画像用のパケット信号は、ディスプレイ４で使用する信号の形態に応じて、画像復号化回路３４でアナログまたはデジタルの画像信号に復号化され、ＶＭＩＸ３５で送信部１ａからの映像信号と混合され、ディスプレイ４で画像として表示される。
【００４１】
ＶＭＩＸ３５は、受信部１ｂで受信する相手側からの受信映像と、送信部１ａで相手側に送信する送信映像とを、ピクチャ・イン・ピクチャ処理などの種々の形態で併せて表示する。ピクチャ・イン・ピクチャ処理では、たとえば大きな画面を受信映像または送信映像のいずれか一方の表示に使用し、その大きな画面中に小さな画面での表示領域を設けて、他方の送信映像または受信映像を表示する。小さな画面の表示領域は、大きな画面中を移動させることもできる。
【００４２】
なお、ＭＩＸ２１と音声符号化回路２６との間にはエコーキャンセラ２２が設けられている。エコーキャンセラ２２は、スピーカ３０から音響化して出力する相手音声信号の音波３０ｓがマイクロホン３ａや、外部音声入力端子１７に入力されるビデオカメラなどに付属しているマイクロホンなどに入力されると、音声信号として相手側に送信されて、相手側のスピーカで音響化され、再び相手側のマイクロホンに入力されて相手音声信号として受信されることを繰返してループが形成され、発振状態となるハウリングを防止するために設けられる。このループの形成を防ぐには、ループ形成に寄与する周波数成分を除くなどで、ハウリングが生じるのを防ぐことができるエコーキャンセラ２２を設けるようにすればよい。
【００４３】
映像切換スイッチ１９および利得調整増幅器２３，２４の利得は、アダプタ本体５の操作部、またはリモコン６に対する通話者などの操作で切換えまたは調整が可能である。音声切換スイッチ２０は、映像切換スイッチ１９の切換えに連動して、映像切換スイッチ１９が内部映像入力端子１３または外部映像入力端子１４，１５のいずれかに切換えられると、音声切換スイッチ２０も、内部音声入力端子１６または外部音声入力端子１７，１８のいずれかにそれぞれ切換えられる。
【００４４】
したがって、テレビ通話装置１は、たとえばテレビ電話やテレビ会議で、相手側の映像を相互にディスプレイ４に表示しながら通話を行うために、映像撮像手段であるカメラ２と、音声取得手段であるマイクロホン３ａと、映像入力手段である外部映像入力端子１４，１５と、音声入力手段である外部音声入力端子１７，１８と、映像切換手段である映像切換スイッチ１９と、音声切換手段である音声切換スイッチ２０とを含む。映像撮像手段は、たとえばＣＣＤ撮像素子などのカメラ２によって実現され、通話者を撮像して内部映像信号を導出する。音声取得手段は、コンデンサマイク等のマイクロホン３ａなどによって実現され、通話者の音声を取得して内部音声信号を導出する。映像入力手段および音声入力手段は、外部の機器である撮像装置や再生装置からの映像信号および音声信号を、外部映像信号および外部音声信号としてそれぞれ入力する。映像切換手段は、映像撮像手段から導出される内部映像信号、または映像入力手段に入力される外部映像信号のいずれかに切換えて、通話相手に送信するので、映像撮像手段によって撮像される通話者の映像ばかりではなく、外部の機器からの外部映像信号も通話相手に送信することができ、説明資料などを画像や映像で有効に表示させることができる。音声切換手段は、映像切換手段に連動して、内部映像信号に切換えられるときは内部音声信号に切換え、外部映像信号に切換えられるときは、外部音声信号および内部音声信号の両方をミキシングして、通話相手に送信する。外部映像信号とともに入力される外部音声信号ばかりではなく、音声取得手段で取得される通話者の内部音声信号も外部音声信号とミキシングして送信するので、外部映像信号に関する通話相手との会話を外部映像信号の表示と同時に行うことができる。
【００４５】
また映像切換スイッチ１９が内部映像信号を相手側に送信するように切換えられているときには、相手側からの相手音声信号の音響出力をスピーカ３０から導出するように音声切換スイッチ２０が音声信号を切換えるので、従来からのテレビ通話と同様に、相互に相手側の映像をディスプレイ４に表示しながら相互に通話を行うことができる。映像切換スイッチ１９が外部映像信号を相手側に送信するように切換えられているときは、音声切換スイッチ２０が相手音声信号を外部音声信号とＭＩＸ３１でミキシングした音声信号の音響出力をスピーカ３０から導出するように切換えるので、相手側に送信している外部音声を自分でも聞きながら、相手側との通話を行うことができる。
【００４６】
また映像切換スイッチ１９が外部映像信号を相手側に送信するように切換えられているときには、ＶＭＩＸ３５で相手側からの相手映像信号とともに、外部映像信号もディスプレイ４表示するので、相手側に送信している外部映像を自分でも見ながら、相手側との通話を行うことができる。
【００４７】
また、利得調整増幅器２３，２４によって、音声信号のミキシングでの混合状態を、通話者がアダプタ本体５の操作部やリモコン６などの操作手段で調整操作可能なので、相手側と通話しながら、相手側の反応を見て、適切な混合状態に調整することができる。
【００４８】
また、ビデオ記録再生装置などに記録されている映像信号および音声信号を再生して、外部映像入力端子１５および外部音声入力端子１８から入力して相手側に送信したり、通話者がビデオカメラなどの映像音声取得手段で映像信号および音声を取得しながら外部映像入力端子１４および外部音声入力端子１７から入力して相手側に送信したりするように、切換えることができる。さらに、外部映像入力端子１５および外部音声入力端子１８にビデオカメラなどの映像音声取得手段を接続すれば、外部音声信号にマイクロホン３ａで取得する内部音声信号をミキシングすることができる。外部映像入力端子１５および外部音声入力端子１８にたとえばビデオカメラを接続し、テレビ通話装置１の周辺から離れている場所を撮像してその映像信号を相手側に送信している場合でも、テレビ通話装置１の周辺で話す音声も同時にマイクロホン３ａで取得して相手側に送信することができる。
【００４９】
図３は、本発明の実施のさらに他の形態としてのテレビ通話装置５１の概略的な電気的構成を示す。図２のテレビ通話装置１と対応する部分には同一の参照符を付して、重複する説明を省略する。テレビ通話装置５１では、外部映像入力端子５２および外部音声入力端子５３はそれぞれ１系統だけ備え、映像切換スイッチ５４およびそれに連動する音声切換スイッチ５５は、内部映像信号と外部映像信号、内部音声信号と外部音声信号との２系統をそれぞれ切換える。すなわち、映像切換スイッチ５４は、カメラ２が接続される内部映像入力端子１３と外部映像入力端子５２との間を切換える。音声切換スイッチ５５は、マイクロホン３からの内部音声入力端子１６であるａ側と、外部音声入力端子５３であるｂ側とを、映像切換スイッチ５４に連動して切換える。
【００５０】
経路切換スイッチ５６は、外部音声信号がマイクロホンで音響信号を取得して音声信号に変換するような場合には、スピーカ３０で音響再生する相手音声信号が取得されて相手側に送信され、相手側のスピーカで再生されてマイクロホンに取得されるループが形成されるおそれがあるので、音声信号の経路にエコーキャンセラ２２が入るように、ｃ側に切換える。外部音声入力端子５３に入力される外部音声信号がＶＴＲやＤＶＤなどの再生出力の場合には、相手音声信号がスピーカ３０から音響化されても取得するマイクロホンを用いることはないので、音声信号の経路にエコーキャンセラ２２が入らないようにｄ側に切換える。そして音声信号は、ＭＩＸ５７により混合される。また、 利得調整増幅器５８は、ＶＴＲやＤＶＤなどの外部入力音声信号の増幅をするものである。このようにすれば、同一の外部音声入力端子５３に、ハウリング防止対策を施す必要があるマイクロホンなどを接続しても、エコーキャンセラ２２でハウリング防止を図ることができる。また、ハウリング防止対策を施す必要がない再生音などを送信する場合は、エコーキャンセラ２２を通さないようにして、音質への影響を避けることができる。
【００５１】
なお、各実施の形態のテレビ通話装置１，５１では、アダプタ本体５にビデオカメラやディスプレイ４を接続しているけれども、テレビ電話装置やテレビ会議装置として一体化するような構成とすることもできる。また、アダプタ装置５は、インターネットに接続する汎用のコンピュータ装置に、プログラムを読込ませて実現することもできる。さらに、携帯電話機の形態で一体化し、無線のデータ通信回線や携帯電話網を介してテレビ通話を行わせることもできる。
【００５２】
また、映像と音声とが混在している信号、たとえば外部の機器として携帯電話機を用い、パーソナルコンピュータと接続するためのＵＳＢ（Universal Serial Bus）などのインタフェースで映像信号と音声信号とを同時に入力し、内部で分離するようにすることもできる。さらに、接続している携帯電話機に他の携帯電話機から映像と音声とを携帯電話通信網を介して入力することもできる。さらに、携帯電話機と同様な構成の無線端末やＰＤＡを用い、Ｂｌｕｔｏｏｔｈなどの無線データ通信で映像と音声とを入力することもできる。また、パーソナルコンピュータなどでプレゼンテーション用のアプリケーションプログラムなどを動作させ、出力される画像データを外部映像信号として入力することもできる。さらに、パーソナルコンピュータやゲーム機器でインターネット利用の対戦型ゲームを行う際に、テレビ通話の外部映像や音声として送受信すれば、相手を見ながら対戦することができる。
【図面の簡単な説明】
【００５３】
【図１】本発明の実施の一形態であるテレビ通話装置１の概略的なシステム構成を示すブロック図である。
【図２】図１のテレビ通話装置１の概略的な電気的構成を示すブロック図である。
【図３】本発明の実施の他の形態であるテレビ通話装置５１の概略的な電気的構成を示すブロック図である。
【符号の説明】
【００５４】
１，５１  テレビ通話装置
１ａ，５１ａ  送信部
１ｂ，５１ｂ  受信部
２  カメラ
３  カメラ部
３ａ  マイクロホン
３ｂ リモコン受光部
４  ディスプレイ
５  アダプタ本体
６  リモコン
１３  内部映像入力端子
１４，１５，５２  外部映像入力端子
１７，１８，５３  外部音声入力端子
１９，５４  映像切換スイッチ
２０，５５  音声切換スイッチ
２１，２７，３１，５７  ＭＩＸ
２２  エコーキャンセラ
２３，２４，５８  利得調整増幅器
３０  スピーカ
３５  ＶＭＩＸ
５６  経路切換スイッチ
【図１】
2006093883.tif 000003
【図２】
2006093883.tif 000004
【図３】
2006093883.tif 000005