(57)【要約】【課題】パケット化された音声データ、映像データの双方向リアルタイム通信において、音声パケットのリアルタイム性を損なわず、かつ音声データと映像データの同期タイミングの乱れの抑制を図る。【解決手段】ＴＶアダプタ１０２はＩＰ電話１０３で受信した相手側の音声パケットの送信時刻情報と、映像パケットに付加された音声パケットの送信時刻情報を得て、これらの２つの送信時刻情報を比較し、それが等しい場合は映像再生し、映像パケットに付加された音声パケット送信時刻が遅い場合は映像を破棄し、映像パケットに付加された音声パケット送信時刻が早い場合は映像をバッファリングさせる判定を行う。【選択図】図１
2007067826.tif 000002
【特許請求の範囲】
【請求項１】
通信ネットワークを介して接続されたデータ通信端末装置間で音声データ及び映像デーを双方向に送受信する音声動画通信システムにおいて、
前記データ通信端末装置は、音声データの送信時刻情報を音声パケット及び映像パケットの２つのパケットに付加し順次送信するパケット送信部と
前記２つのパケットを受信する受信部と
前記２つのパケットに含まれる音声データの送信時刻情報それぞれを比較する比較部と、
前記比較部によって比較した結果、
前記送信時刻情報と実質的に同一の時刻情報の場合は、受信した音声データと映像データとの同期がとれていると判断して受信した映像を再生し、
映像パケットに付加された送信時刻情報が音声パケットに付加された前記送信時刻情報より遅れた時刻情報の場合は、受信した音声データと映像データとの同期がとれていないと判断して受信した映像データを破棄し、
映像パケットに付加された送信時刻情報が音声パケットに付加された前記送信時刻情報より早い時刻情報の場合は、受信した音声データと映像データとの同期がとれていないと判断して受信した映像データをバッファリングする
いずれかの処理を行う制御部とを備え、
これらの機能を備えたデータ通信端末装置の間で、通信ネットワークを介して音声データと映像データを対話的に送受信することを、特徴とする音声動画通信システム。
【請求項２】
パケット化された音声データ及び映像データを相手側装置と通信ネットワークを介して双方向に送受信するデータ通信端末装置であって、
音声データの送信時刻情報を音声パケット及び映像パケットの２つのパケットに付加し順次送信するパケット送信部と、前記２つのパケットを受信する受信部と、
前記２つのパケットに含まれる音声データの送信時刻情報を比較する比較部と、
前記比較部によって比較した結果、
前記送信時刻情報が実質的に同一の時刻情報の場合は、受信した音声データと映像データとの同期がとれていると判断して受信した映像を再生し、
映像パケットに付加された送信時刻情報が音声パケットに付加された前記送信時刻情報より遅れた時刻情報の場合は、受信した音声データと映像データとの同期がとれていないと判断して受信した映像データを破棄し、
映像パケットに付加された送信時刻情報が音声パケットに付加された前記送信時刻情報より早い時刻情報の場合は、受信した音声データと映像データとの同期がとれていないと判断して受信した映像データをバッファリングする
いずれかの処理を行う制御部とを備えたことを、特徴したデータ通信端末装置。
【請求項３】
通信ネットワークを介して接続されたデータ通信端末装置間で音声データ及び映像デーを双方向に送受信する音声動画通信システムにおいて、
前記データ通信端末装置は、少なくとも、音声データとこの音声データの送信時刻情報を含む音声パケットを順次送受信する電話装置と、映像データと前記音声データの送信時刻情報を含む映像パケットを順次送受信するＴＶアダプタを備え、
前記電話装置には、自分側電話装置から相手側電話装置に送信した音声パケットに含まれる音声データの送信時刻情報Ａと、相手側電話装置から受信した音声パケットに含まれる音声データの送信時刻情報Ｂ１とを自分側ＴＶアダプタに通知する音声通信制御部を備え、
前記ＴＶアダプタには、自分側電話装置から送信されてきた前記音声データの送信時刻情報のうち、送信時刻情報Ａを含む映像パケットを相手側ＴＶアダプタに送信する送信部と、
相手側ＴＶアダプタで前記と同様にして作られた音声データの送信時刻情報Ｂ２を含む映像パケットを受信する受信部と、
前記送信時刻情報Ｂ１と前記送信時刻情報Ｂ２とを比較する比較部と、
前記比較部によって比較した結果、
前記送信時刻情報Ｂ１が前記送信時刻情報Ｂ２と実質的に同一の時刻情報の場合は、受信した音声データと同期がとれていると判断して受信した映像を再生し、
前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より遅れた時刻情報の場合は、受信した音声データと同期がとれていないと判断して受信した映像データを破棄し、
前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より早い時刻情報の場合は、受信した音声データと同期がとれていないと判断して、映像データをバッファリングする
いずれかの処理を行う制御部とを備え、
これらの機能を備えたデータ通信端末装置の間で、通信ネットワークを介して音声データと映像データを対話的に送受信することを、特徴とする音声動画通信システム。
【請求項４】
パケット化された音声データ及び映像データを相手側装置と通信ネットワークを介して双方向に送受信するデータ通信端末装置であって、
少なくとも、音声データとこの音声データの送信時刻情報を含む音声パケットを順次送受信する電話装置と、映像データと前記音声データの送信時刻情報を含む映像パケットを順次送受信するＴＶアダプタを備え、
前記電話装置には、自分側電話装置から相手側電話装置に送信した音声パケットに含まれる音声データの送信時刻情報Ａと、相手側電話装置から受信した音声パケットに含まれる音声データの送信時刻情報Ｂ１とを自分側ＴＶアダプタに通知する音声通信制御部を備え、
前記ＴＶアダプタには、自分側電話装置から送信されてきた前記音声データの送信時刻情報のうち、送信時刻情報Ａを含む映像パケットを相手側ＴＶアダプタに送信する送信部と、
相手側ＴＶアダプタで前記と同様にして作られた音声データの送信時刻情報Ｂ２を含む映像パケットを受信する受信部と、
前記送信時刻情報Ｂ１と前記送信時刻情報Ｂ２とを比較する比較部と、
前記比較部によって比較した結果、
前記送信時刻情報Ｂ１が前記送信時刻情報Ｂ２と実質的に同一の時刻情報の場合は、受信した音声データと同期がとれていると判断して受信した映像を再生し、
前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より遅れた時刻情報の場合は、受信した音声データと同期がとれていないと判断して受信した映像データを破棄し、
前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より早い時刻情報の場合は、受信した音声データと同期がとれていないと判断して、映像データをバッファリングする
いずれかの処理を行う制御部とを備えたことを、特徴したデータ通信端末装置。
【請求項５】
所定の回数の音声パケット受信毎に、前記電話装置から前記ＴＶアダプタへ前記音声データの送信時刻情報を通知することを、更に、特徴とする請求項３記載の音声動画通信システム。
【請求項６】
所定の回数の音声パケット受信毎に、前記電話装置から前記ＴＶアダプタへ前記音声データの送信時刻情報を通知することを、更に、特徴とする請求項４記載のデータ通信端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はＬＡＮやインターネット、ＩＰ通信網等のネットワークを介して、音声データや映像データの送受信を行うためのデータ通信装置、このデータ通信装置を用いたデータ通信システムに関するものである。
【背景技術】
【０００２】
近年、ブロードバンドの普及に伴い、インターネット、ＩＰ通信網などのネットワークを介しパケット化した音声データや映像データを相手側の装置に送信するとともに、相手側の装置からパケット化した音声データや映像データを受信することにより、双方向にリアルタイム通信を行うデータ通信装置が実用化されている。
【０００３】
この種のデータ通信装置では、音声データや映像データがそれぞれ複数のパケットに分割され、ネットワークを介して順次送信されるが、帯域保証がなされていない経路で伝送される場合には、データの消失やデータ伝送時間のずれなどの発生により、音声データ、映像データがリアルタイムに送受信できず、また音声と映像の再生の同期タイミングが乱れることがある。
【０００４】
異なるパケットの送受信におけるリアルタイム性と同期タイミングのずれは本質的に相反するトレードオフの関係にあり、両者の完全な両立は不可能である。
【０００５】
特に音声データはパケットのサイズが小さいため、帯域保証がなされていない経路での伝送の影響が大きく、パケットの消失、遅延によってリアルタイム性が悪化し、音声のとぎれが発生することがある。
【０００６】
また、利用者は音声、映像の双方向のリアルタイム通信では映像の品質よりも音声の品質とリアルタイム性を利便性として重視している。
【０００７】
これらの問題を解決するために、受信端末がパケット損失又はパケットのゆらぎが一定値を超えたことを認識すると、送信端末にデータ量変更要求パケットを送出し、データ量の変更を行うことにより、リアルタイム通信時に受信端末が送信端末からの受信データを制御して、音切れや画像の乱れを発生させることなく、かつリアルタイム通信を可能とする技術が知られている（特許文献１参照）。
【特許文献１】特開２０００−３３２８２９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、上記従来の技術では以下のような問題が生じる。上記特許文献１に記載の技術では、受信端末側から送信端末に対して、送信データ量の変更を要求し、送信端末側は送信する音声パケットのパケットサイズの変更、符号化方式の変更、映像のフレームレート、画質パラメータのなどの変更により送信データ量を減らす制御を行う場合がある。
【０００９】
前記制御は、符号化方式の変更による音質の劣化、フレームレート、画質パラメータの変更による映像品質の低下などをもたらし、利用者に音声、映像のリアルタイム通信のパフォーマンスに不満足感を与えてしまい、十分な課題解決にはなっていなかった。
【００１０】
本発明は、このような従来の課題を解決するものであり、音声データと映像データの双方向のリアルタイム通信において、音声データのリアルタイム性を損なわず、かつ音声データと映像データの同期タイミングの乱れを抑制し、パケットのデータ量の減少に起因する音質、映像品質の劣化などによる通信パフォーマンスの不満足感を利用者に与えないことを目的とする。
【課題を解決するための手段】
【００１１】
本発明は、上記目的を達成するために、請求項１に示すとおり、パケット化された音声データ及び映像データを双方向に送受信するデータ通信システムであって、音声パケット送信時刻情報を音声パケット及び映像パケットに付加し順次送信するパケット送信部と受信した音声パケットと映像パケットの２つの音声パケット送信時刻情報を比較し、等しい場合は映像データを再生し、映像パケットの前記音声パケット送信時刻情報が遅い場合は映像データを破棄し、音声パケットの前記音声パケット送信時刻情報が遅い場合は映像パケットをバッファリングするパケット受信部を備えた装置を備えた構成とした。
【発明の効果】
【００１２】
このような本発明によれば、音声と映像の双方向リアルタイム通信を行うに際し、音声送信時刻情報が音声パケットと映像パケットの２つのパケットで独立に順次送信され、受信側では２つのパケットの音声送信時刻情報を比較し、等しい場合は映像データを再生し、映像パケットの前記音声パケット送信時刻情報が遅い場合は映像データを破棄し、音声パケットの前記音声パケット送信時刻情報が遅い場合は映像データの再生を遅らせることができるので、音声データのリアルタイム性を損なわず、また、音声データと映像データの同期タイミングの乱れを抑制し、かつ、パケットのデータ量の減少に起因する音質、映像品質の劣化などによる通信パフォーマンスの不満足感を利用者に与えないという効果を奏する。
【発明を実施するための最良の形態】
【００１３】
本発明においては、データ通信端末装置が、音声データの送信時刻情報を音声パケット及び映像パケットの２つのパケットに付加し順次送信するパケット送信部と前記２つのパケットを受信する受信部と前記２つのパケットに含まれる音声データの送信時刻情報それぞれを比較する比較部と、前記比較部によって比較した結果、前記送信時刻情報と実質的に同一の時刻情報の場合は、受信した音声データと映像データとの同期がとれていると判断して受信した映像を再生し、映像パケットに付加された送信時刻情報が音声パケットに付加された前記送信時刻情報より遅れた時刻情報の場合は、受信した音声データと映像データとの同期がとれていないと判断して受信した映像データを破棄し、映像パケットに付加された送信時刻情報が音声パケットに付加された前記送信時刻情報より早い時刻情報の場合は、受信した音声データと映像データとの同期がとれていないと判断して受信した映像データをバッファリングするいずれかの処理を行う制御部とを備えた構成を特徴とする音声動画通信システムを有する。
【００１４】
これにより、音声送信時刻情報が音声パケットと映像パケットの２つのパケットで独立に送信され、受信側では２つのパケットの送信時刻情報の比較することにより、映像パケットの到達時間が音声パケットの到達時間と同じか、あるいは早いか遅いか、簡易かつ高速に判定して、映像データを再生するよう作用させ、音声データのリアルタイム性を損なわず、音声データと映像データの同期タイミングの乱れを抑制でき、かつ、パケットのデータ量の減少による音質、映像品質の劣化などによる通信パフォーマンスの不満足感を利用者に与えなくなる。
【００１５】
また、データ通信端末装置は、音声データの送信時刻情報を音声パケット及び映像パケットの２つのパケットに付加し順次送信するパケット送信部と前記２つのパケットを受信する受信部と前記２つのパケットに含まれる音声データの送信時刻情報それぞれを比較する比較部と、前記比較部によって比較した結果、前記送信時刻情報と実質的に同一の時刻情報の場合は、受信した音声データと映像データとの同期がとれていると判断して受信した映像を再生し、映像パケットに付加された送信時刻情報が音声パケットに付加された前記送信時刻情報より遅れた時刻情報の場合は、受信した音声データと映像データとの同期がとれていないと判断して受信した映像データを破棄し、映像パケットに付加された送信時刻情報が音声パケットに付加された前記送信時刻情報より早い時刻情報の場合は、受信した音声データと映像データとの同期がとれていないと判断して受信した映像データをバッファリングするいずれかの処理を行う制御部とを、備えた構成としてもよい。
【００１６】
これによっても、音声送信時刻情報が音声パケットと映像パケットの２つのパケットで独立に送信され、受信側では２つのパケットの送信時刻情報の比較することにより、映像パケットの到達時間が音声パケットの到達時間と同じか、あるいは早いか遅いか、簡易かつ高速に判定して、映像データを再生するよう作用させ、音声データのリアルタイム性を損なわず、音声データと映像データの同期タイミングの乱れを抑制でき、かつ、パケットのデータ量の減少による音質、映像品質の劣化などによる通信パフォーマンスの不満足感を利用者に与えなくなる。
【００１７】
さらに、データ通信端末装置が、少なくとも、音声データとこの音声データの送信時刻情報を含む音声パケットを順次送受信する電話装置と、映像データと前記音声データの送信時刻情報を含む映像パケットを順次送受信するＴＶアダプタを備え、前記電話装置には、自分側電話装置から相手側電話装置に送信した音声パケットに含まれる音声データの送信時刻情報Ａと、相手側電話装置から受信した音声パケットに含まれる音声データの送信時刻情報Ｂ１とを自分側ＴＶアダプタに通知する音声通信制御部を備え、前記ＴＶアダプタには、自分側電話装置から送信されてきた前記音声データの送信時刻情報のうち、送信時刻情報Ａを含む映像パケットを相手側ＴＶアダプタに送信する送信部と、相手側ＴＶアダプタで前記と同様にして作られた音声データの送信時刻情報Ｂ２を含む映像パケットを受信する受信部と、前記送信時刻情報Ｂ１と前記送信時刻情報Ｂ２とを比較する比較部と、前記比較部によって比較した結果、前記送信時刻情報Ｂ１が前記送信時刻情報Ｂ２と実質的に同一の時刻情報の場合は、受信した音声データと同期がとれていると判断して受信した映像を再生し、前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より遅れた時刻情報の場合は、受信した音声データと同期がとれていないと判断して受信した映像データを破棄し、前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より早い時刻情報の場合は、受信した音声データと同期がとれていないと判断して、映像データをバッファリングする、いずれかの処理を行う制御部とを備え、これらの機能を備えたデータ通信端末装置の間で、通信ネットワークを介して音声データと映像データを対話的に送受信することを、特徴とする音声動画通信システムとしてもよい。
【００１８】
これにより、ローカルネットワーク上のＴＶアダプタで映像の撮影、再生処理を行い、電話装置で音声の入力、再生処理することにより、利用者は２つの端末を異なる設置場所で使用できる。
【００１９】
さらに、データ通信端末装置は、少なくとも、音声データとこの音声データの送信時刻情報を含む音声パケットを順次送受信する電話装置と、映像データと前記音声データの送信時刻情報を含む映像パケットを順次送受信するＴＶアダプタを備え、前記電話装置には、自分側電話装置から相手側電話装置に送信した音声パケットに含まれる音声データの送信時刻情報Ａと、相手側電話装置から受信した音声パケットに含まれる音声データの送信時刻情報Ｂ１とを自分側ＴＶアダプタに通知する音声通信制御部を備え、前記ＴＶアダプタには、自分側電話装置から送信されてきた前記音声データの送信時刻情報のうち、送信時刻情報Ａを含む映像パケットを相手側ＴＶアダプタに送信する送信部と、相手側ＴＶアダプタで前記と同様にして作られた音声データの送信時刻情報Ｂ２を含む映像パケットを受信する受信部と、前記送信時刻情報Ｂ１と前記送信時刻情報Ｂ２とを比較する比較部と、前記比較部によって比較した結果、前記送信時刻情報Ｂ１が前記送信時刻情報Ｂ２と実質的に同一の時刻情報の場合は、受信した音声データと同期がとれていると判断して受信した映像を再生し、前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より遅れた時刻情報の場合は、受信した音声データと同期がとれていないと判断して受信した映像データを破棄し、前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より早い時刻情報の場合は、受信した音声データと同期がとれていないと判断して、映像データをバッファリングする、いずれかの処理を行う制御部とを、備えた構成にしてもよい。
【００２０】
これにより、ローカルネットワーク上のＴＶアダプタで映像の撮影、再生処理を行い、電話装置で音声の入力、再生することにより、利用者は２つの端末を異なる設置場所で使用できる。
【００２１】
さらに、データ通信端末装置が、少なくとも、音声データとこの音声データの送信時刻情報を含む音声パケットを順次送受信する電話装置と、映像データと前記音声データの送信時刻情報を含む映像パケットを順次送受信するＴＶアダプタを備え、前記電話装置には、自分側電話装置から相手側電話装置に送信した音声パケットに含まれる音声データの送信時刻情報Ａと、相手側電話装置から受信した音声パケットに含まれる音声データの送信時刻情報Ｂ１とを自分側ＴＶアダプタに通知する音声通信制御部を備え、前記ＴＶアダプタには、自分側電話装置から送信されてきた前記音声データの送信時刻情報のうち、送信時刻情報Ａを含む映像パケットを相手側ＴＶアダプタに送信する送信部と、相手側ＴＶアダプタで前記と同様にして作られた音声データの送信時刻情報Ｂ２を含む映像パケットを受信する受信部と、前記送信時刻情報Ｂ１と前記送信時刻情報Ｂ２とを比較する比較部と、前記比較部によって比較した結果、前記送信時刻情報Ｂ１が前記送信時刻情報Ｂ２と実質的に同一の時刻情報の場合は、受信した音声データと同期がとれていると判断して受信した映像を再生し、前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より遅れた時刻情報の場合は、受信した音声データと同期がとれていないと判断して受信した映像データを破棄し、前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より早い時刻情報の場合は、受信した音声データと同期がとれていないと判断して、映像データをバッファリングする、いずれかの処理を行う制御部とを備え、所定の回数の音声パケット受信毎に、前記電話装置から前記ＴＶアダプタへ前記音声データの送信時刻情報を通知することを、特徴とする音声動画通信システムとしてもよい。
【００２２】
これにより、本機能の処理負荷が軽減され、処理速度の低いＣＰＵを使用できる。
【００２３】
さらに、データ通信端末装置は、少なくとも、音声データとこの音声データの送信時刻情報を含む音声パケットを順次送受信する電話装置と、映像データと前記音声データの送信時刻情報を含む映像パケットを順次送受信するＴＶアダプタを備え、前記電話装置には、自分側電話装置から相手側電話装置に送信した音声パケットに含まれる音声データの送信時刻情報Ａと、相手側電話装置から受信した音声パケットに含まれる音声データの送信時刻情報Ｂ１とを自分側ＴＶアダプタに通知する音声通信制御部を備え、前記ＴＶアダプタには、自分側電話装置から送信されてきた前記音声データの送信時刻情報のうち、送信時刻情報Ａを含む映像パケットを相手側ＴＶアダプタに送信する送信部と、相手側ＴＶアダプタで前記と同様にして作られた音声データの送信時刻情報Ｂ２を含む映像パケットを受信する受信部と、前記送信時刻情報Ｂ１と前記送信時刻情報Ｂ２とを比較する比較部と、前記比較部によって比較した結果、前記送信時刻情報Ｂ１が前記送信時刻情報Ｂ２と実質的に同一の時刻情報の場合は、受信した音声データと同期がとれていると判断して受信した映像を再生し、前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より遅れた時刻情報の場合は、受信した音声データと同期がとれていないと判断して受信した映像データを破棄し、前記送信時刻情報Ｂ２が前記送信時刻情報Ｂ１より早い時刻情報の場合は、受信した音声データと同期がとれていないと判断して、映像データをバッファリングする、いずれかの処理を行う制御部とを備え、所定の回数の音声パケット受信毎に、前記電話装置から前記ＴＶアダプタへ前記音声データの送信時刻情報を通知する構成としてもよい。
【００２４】
これによっても、本機能の処理負荷が軽減される、処理速度の低いＣＰＵを使用できる。
【実施例】
【００２５】
以下、本発明の実施例における音声動画通信システムについて図面を参照しながら説明する。
【００２６】
図１は、本発明の実施例の音声動画通信システム１００の構成図である。音声動画通信システム１００は、自分側音声動画通信装置１１２と相手側音声動画通信装置１１３がインターネット１０６によって接続され構成されている。
【００２７】
なお、本実施例では音声動画通信装置１１２，１１３は、ＩＰテレビ電話として実施されている。実施例のの構成に限らず３台以上の音声動画通信装置を接続してシステムを構成してもかまわない。
【００２８】
自分側音声動画通信装置１１２は、ルータ１０４の配下のＬＡＮ（または無線ＬＡＮ）などのローカルネットワークに自分側ＴＶアダプタ１０２と自分側ＩＰ電話１０３を接続し、自分側ＴＶアダプタ１０２は映像の送受信を行い、自分側ＩＰ電話１０３は音声の送受信を行う。ＴＶ１０１は、自分側ＴＶアダプタ１０２に接続され動画表示をするテレビである。ルータ１０４の上位にはモデム１０５があり、インターネット１０６を介して相手側の音声動画通信装置１１３へと接続される。
【００２９】
相手側音声動画通信装置１１３は、ルータ１０８の配下のＬＡＮ（または無線ＬＡＮ）などのローカルネットワークに相手側ＴＶアダプタ１１０と相手側ＩＰ電話１０９が接続し、相手側ＴＶアダプタ１１０は映像の送受信を行い、相手側ＩＰ電話１０９は音声の送受信を行う。ＴＶ１１１は、相手側ＴＶアダプタ１１０に接続され動画表示をするテレビである。ルータ１０８の上位にはモデム１０７があり、インターネット１０６を介して自分側の音声動画通信装置１１２へと接続される。
【００３０】
図２は、図１の音声動画通信システム１００で用いられる自分側ＴＶアダプタ１０２の構成を示すブロック図である。なお相手側ＴＶアダプタ１１０も同様の構成を備える。
【００３１】
図２において、自分側ＴＶアダプタ１０２は、ネットワークインターフェース２０１、カメラ２０２、映像通信制御部２０３、映像コーデック２０４、表示制御部２０５、表示出力部２０６、システム制御部２０７、リモコン制御部２０８により主に構成されている。
【００３２】
ネットワークインターフェース２０１は、ルータ１０４及び自分側ＩＰ電話１０３にＬＡＮ（または無線ＬＡＮ）などのローカルネットワークで接続するインターフェースである。映像データ送信の際は、カメラ２０２で撮影された映像データは、映像コーデック２０４で圧縮符号化される。
【００３３】
圧縮符号化された映像データは、映像通信制御部２０３で映像パケット化処理され、映像パケット４００（詳細は図４で後述）はネットワークインターフェース２０１からインターネット１０６を介して相手側音声動画通信装置１１３へ送信される。
【００３４】
また、映像データ受信の際は、映像パケット４００は、相手側音声動画通信装置１１３の相手側ＴＶアダプタ１１０からインターネット１０６を介してネットワークインターフェース２０１で受信される。
【００３５】
受信した映像パケット４００は、映像通信制御部２０３においてパケット解析・分解・バッファリング処理され、映像コーデック２０４で伸張復号化され、表示制御部２０５でフレーム表示するため合成処理され、表示出力部２０６を介してＴＶ１０１で相手側の映像が再生表示される。
【００３６】
また、リモコン制御部２０８は、リモコンを用いて自分側ＴＶアダプタ１０２を操作し、システム制御部２０７は自分側ＴＶアダプタ１０２全体の制御を行う。カメラ２０２で自分側の映像を表示出力部２０６から表示させることも可能である。
【００３７】
図３は、音声動画通信システム１００で用いられる自分側ＩＰ電話１０３の構成を示すブロック図である。なお相手側ＩＰ電話１０９も同様の構成を備える。
【００３８】
図３において、自分側ＩＰ電話１０３は、ネットワークインターフェース３０１、音声通信制御部３０２、音声制御部３０３、表示制御部３０４、ＬＣＤ３０５、システム制御部３０６、受話器３０７により主に構成されている。
【００３９】
ネットワークインターフェース３０１は、ルータ１０４及び自分側ＴＶアダプタ１０２にＬＡＮ（または無線ＬＡＮ）などのローカルネットワークで接続するインターフェースである。電話音声発信の際は受話器３０７から入力された音声データは音声制御部３０３で圧縮符号化される。
【００４０】
圧縮符号化された音声データは、音声通信制御部３０２で音声パケット化処理され、音声パケット１１００（詳細は図１１で後述）はネットワークインターフェース３０１からインターネット１０６を介して相手側音声動画通信装置１１３へ送出される。
【００４１】
また、電話音声受信の際、音声パケット１１００は相手側音声動画通信装置１１３の相手側ＩＰ電話１０９からインターネット１０６を介してネットワークインターフェース３０１で受信される。
【００４２】
受信した音声パケット１１００は、音声通信制御部３０２でパケット解析・分解・バッファリング処理され、音声制御部３０３で伸張復号化され、受話器３０７から音声が出力される。システム制御部３０６では自分側ＩＰ電話１０３全体の制御を行う。
【００４３】
表示制御部２０４は、ＩＰ電話の設定、状態などの表示処理を行い、ＬＣＤ３０５で表示を行う。
【００４４】
図１１は、自分側ＩＰ電話１０３と相手側ＩＰ電話１０９の間で送受信される音声パケット１１００の構成図である。
【００４５】
音声パケット１１００は、リアルタイム通信で用いられる、ＩＥＴＦのＲＦＣ１８８９標準準拠のＲＴＰ（リアルタイムプロトコル）パケット構成を備えている。具体的にはＲＴＰヘッダ１１０１、タイムスタンプ１１０２、ＳＳＲＣ識別子１１０３、ＣＳＲＣ識別子１１０４、ペイロードヘッダ（音声）１１０５、ペイロードデータ（音声）１１０６から構成される。
【００４６】
音声パケット１１００は、図３に示した自分側ＩＰ電話１０３の音声通信制御部３０２で送信時に生成され、受信時に解析・分解される。なお、ＩＰ電話１０９においても音声パケットは同様に処理される。
【００４７】
タイムスタンプ１１０２には、音声パケット１１００の送信時刻情報が搭載されている。なお、音声パケットの送信時刻情報であるタイムスタンプ１１０２は、自分側音声動画通信装置１１２から相手側音声動画通信装置１１３に送信されるものを音声タイムスタンプ１１０２Ａとし、相手側音声動画通信装置１１３から自分側音声動画通信装置１１２に送信されるものを音声タイムスタンプ１１０２Ｂと定め、以降の説明で用いる。
【００４８】
図４は、自分側ＴＶアダプタ１０２と相手側ＴＶアダプタ１１０の間で送受信される映像パケット４００の構成図である。
【００４９】
映像パケット４００は、リアルタイム通信で用いられる、ＲＴＰ（リアルタイムプロトコル）パケットをヘッダ拡張した構成を備えている。具体的にはＲＴＰヘッダ４０１、タイムスタンプ４０２、ＳＳＲＣ識別子４０３、ＣＳＲＣ識別子４０４、ペイロードヘッダ（映像）４０５、ペイロードデータ（映像）４０６に音声送信時刻情報用ヘッダ拡張４０７（詳細は図５で後述）が追加されて構成されている。
【００５０】
タイムスタンプ４０２には、映像パケット４００の送信時刻情報が搭載されている。音声送信時刻情報用ヘッダ拡張４０７はＲＴＰパケットの標準準拠ではない拡張情報であり、音声パケット１１００の送信時刻情報が搭載されている。
【００５１】
図５は、図４の音声送信時刻情報用ヘッダ拡張４０７の構成図である。
【００５２】
音声送信時刻情報用ヘッダ拡張４０７は、音声送信時刻情報用ヘッダ拡張の識別子であるデータタイプ及び音声送信時刻情報用ヘッダ拡張４０７のバイト数を示すデータ長５０１と音声パケット１１００の送信時刻情報である音声タイムスタンプ５０２から構成されている。
【００５３】
すなわち、前記送信時刻情報は図１１の音声パケット１１００のタイムスタンプ１１０２に搭載した送信時刻発信情報と等しい値が設定される。
【００５４】
映像パケット４００は、図２に示した自分側ＴＶアダプタ１０２及び相手側ＴＶアダプタ１０３の映像通信制御部２０３で送信時に生成され、受信時に解析・分解される。
【００５５】
なお、説明の便宜上、映像パケット４００の音声送信時刻情報用ヘッダ拡張４０７に含まれる音声パケット１１００の送信時刻情報である音声タイムスタンプ５０２は、自分側音声動画通信装置１１２から相手側音声動画通信装置１１３へ送信されるものを音声タイムスタンプ５０２Ａとし、相手側音声動画通信装置１１３から自分側音声動画通信装置１１２へ送信されるものを５０２Ｂと定め、以降の説明で用いる。
【００５６】
図６は、自分側ＩＰ電話１０３から自分側ＴＶアダプタ１０２へ通知される自分側タイムスタンプ用パケット６００の構成図である。
【００５７】
自分側タイムスタンプ用パケット６００は、自分側タイムスタンプ用パケット６００の識別子であるデータタイプ及びタイムスタンプ用パケットのバイト数を示すデータ長６０１、自分側ＩＰ電話１０３から相手側ＩＰ電話１０９へ送信した音声パケット１１００の送信時刻情報である音声パケット（送信）の音声タイムスタンプ６０２（設定値は前記図１１で説明した１１０２Ａに等しい）、自分側ＩＰ電話１０３が相手側ＩＰ電話１０９から受信した、相手側ＩＰ電話１０９が自分側のＩＰ電話１０３へ送信した音声パケット１１００の送信時刻情報である音声パケット（受信）の音声タイムスタンプ６０３（設定値は前記図１１で説明した１１０２Ｂに等しい）から構成されている。
【００５８】
自分側タイムスタンプ用パケット６００は、自分側ＩＰ電話１０３の音声通信制御部３０２で生成、送出され、自分側ＴＶアダプタ１０２の映像通信制御部２０３で受信され解析・分解されて後述する映像データの再生時に用いられる（詳細は図７にて後述）。
【００５９】
図１０は、相手側ＩＰ電話１０９から相手側ＴＶアダプタ１１０へ通知される相手側タイムスタンプ用パケット１０００の構成図である。
【００６０】
相手側タイムスタンプ用パケット１０００は、相手側タイムスタンプ用パケット１０００の識別子であるデータタイプ及びタイムスタンプ用パケットのバイト数を示すデータ長１００１、相手側ＩＰ電話１０９から自分側ＩＰ電話１０３へ送信した音声パケット１１００の送信時刻情報である音声パケット（送信）の音声タイムスタンプ１００２（設定値は前記図１１で説明した１１０２Ｂに等しい）、相手側ＩＰ電話１０９が自分側ＩＰ電話１０３へ送信した音声パケット１１００の送信時刻情報である音声パケット１００３（設定値は前記図１１で説明した１１０２Ａに等しい）から構成されている。
【００６１】
相手側タイムスタンプ用パケット１０００は、自分側タイムスタンプ用パケット６００と同様に、相手側ＩＰ電話１０９で生成、送出され、相手側ＴＶアダプタ１１０で受信され解析・分解されて後述する映像データの再生時に用いられる（詳細は図７にて後述）。
【００６２】
なお、図６と図１０のパケット構成はフォーマットが同一であり、図６のパケット６００は自分側音声動画通信装置１１２で用いられ、図１０のパケット１０００は相手側音声動画通信装置１１３で用いられているのが異なっている点である。
【００６３】
次に図１のシステム１００の構成において、自分側ＩＰ電話１０３及び１０９、自分側ＴＶアダプタ１０２及び１１０の間で、音声データのリアルタイム性を損なわず、また、音声データと映像データの同期タイミングの乱れを抑制し、かつ、パケットのデータ量の減少に起因する音質、映像品質の劣化などによる通信パフォーマンスの不満足感を利用者に与えない動作を図７に示すシーケンス図を参照して説明する。
【００６４】
図７は、音声動画通信システムの動作を説明するシーケンス図である。本シーケンスは、自分側データ通信装置１１２が備える映像通信制御部２０３及び音声通信制御部３０２と相手側データ通信装置１１３が備える図２、３と同様の映像制御通信部及び音声通信制御部との間で実施される。
【００６５】
自分側ＩＰ電話１０３は、ネットワーク接続が完了し、電源がオンされる（ステップＳ７０１）と、自分側ＴＶアダプタ１０２に向けてペアリング要求のメッセージを継続的に発信する。自分側ＴＶアダプタ１０２は、ネットワーク接続が完了し、電源がオンされると自分側ＩＰ電話１０３からのペアリング要求のメッセージに応答し、自分側ＩＰ電話１０３と自分側ＴＶアダプタ１０２とのペアリングが確立する（ステップＳ７０１）。
【００６６】
相手側ＩＰ電話１０９と相手側ＴＶアダプタ１１０でも同様の動作によりペアリングが確立する（ステップＳ７０２）。
【００６７】
自分側ＩＰ電話１０３から受話器をオフフックして相手側ＩＰ電話１０９にダイヤルすると、標準呼制御プロトコルＳＩＰ呼制御通信により、ＩＮＶＩＴＥメッセージを送出すると、相手側ＩＰ電話１０９が鳴動し、相手側ＩＰ電話１０９が２００ＯＫメッセージを自分側ＩＰ電話１０３へ応答することによって双方向に会話のできる音声通信が確立する（ステップＳ７０３）。
【００６８】
前記ＳＩＰ呼制御通信のＳＩＰメッセージに含まれるＳＤＰ（セッション記述プロトコル）の映像パケット送受信の設定により、自分側ＴＶアダプタ１０２と相手側ＴＶアダプタ１１０の間の映像通信も確立する（ステップＳ７０４）。
【００６９】
音声通信が確立すると、自分側ＩＰ電話１０３と相手側ＩＰ電話１０９との間で音声パケットの双方向通信が開始する。自分側ＩＰ電話１０３から相手側ＩＰ電話１０９へ音声タイムスタンプ１１０２Ａ（前記図１１の説明参照）を含む音声パケット１１００を送信する（ステップＳ７０５）。
【００７０】
同様に、相手側ＩＰ電話１０９から自分側ＩＰ電話１０３へ音声タイムスタンプ１１０２Ｂ（前記図１１の説明参照）を含む音声パケット１１００を送信する（ステップＳ７０６）。
【００７１】
次に、自分側ＩＰ電話１０３から自分側ＴＶアダプタ１０２に相手側ＩＰ電話１０９へ送信した音声タイムスタンプ６０２（設定値は１１０２Ａに等しい）と相手側ＩＰ電話１０９から受信した音声タイムスタンプ６０３（設定値は１１０２Ｂに等しい）を搭載した自分側タイムスタンプ用パケット６００を自分側ＴＶアダプタ１０２へ通知する（ステップＳ７０７）。
【００７２】
同様に、相手側ＩＰ電話１０９から相手側ＴＶアダプタ１１０へ、自分側ＩＰ電話１０３から送信した音声タイムスタンプ１００２（設定値は１１０２Ｂに等しい）と自分側ＩＰ電話１０３から受信した音声タイムスタンプ１００３（設定値は１１０２Ａに等しい）を含む相手側タイムスタンプ用パケット１０００を相手側ＴＶアダプタ１１０へ通知する（ステップＳ７０８）。
【００７３】
映像通信が確立すると、自分側ＴＶアダプタ１０２と相手側ＴＶアダプタ１１０との間で映像パケットの双方向通信が開始する。自分側ＴＶアダプタ１０２は、相手側ＴＶアダプタ１１０へ音声タイムスタンプ５０２Ａ（符号Ａについては前記図５の説明を参照）を含む映像パケット４００を送信する（ステップＳ７０９）。
【００７４】
同様に、相手側ＴＶアダプタ１１０は、自分側ＴＶアダプタ１０２へ音声タイムスタンプ５０２Ｂ（符号Ｂについては前記図５の説明を参照）を含む映像パケット４００を送信する（ステップＳ７１０）。
【００７５】
以上の動作によって自分側ＴＶアダプタ１０２は、音声送信時刻情報を映像パケット４００が含む音声タイムスタンプ５０２Ｂ及び自分側タイムスタンプ用パケット６００が含む音声タイムスタンプ６０３（設定値は１１０２Ｂに等しい）の２つの音声タイムスタンプを取得する。
【００７６】
前記２つの音声タイムスタンプにより、音声パケットと映像パケットの２つのパケットの到達時間の相対的な早さの判定の識別ができる。
【００７７】
自分側ＴＶアダプタ１０２では、前記２つの音声タイムスタンプの値を基準に、次の比較判定によりリップシンク再生（音声と声をだす唇の動きが同期した映像の再生）を行う。
（１）音声タイムスタンプ５０２Ｂが音声タイムスタンプ１１０２Ｂに等しいときは映像パケットと音声パケットの同期ずれがないと判断し、映像再生の処理を開始する。
（２）音声タイムスタンプ５０２Ｂが音声タイムスタンプ１１０２Ｂより大きいときは、映像パケットが音声パケットよりも遅れていると判断し、映像パケットは破棄して映像再生しない。
（３）音声タイムスタンプ５０２Ｂが音声タイムスタンプ１１０２Ｂより小さいときは、音声パケットが映像パケットよりも遅れていると判断し、映像パケットはバッファリングし、次の音声パケット到達時以降に、映像は音声とタイミングを同期させて再生する（ステップＳ７１１）。
【００７８】
なお、音声のリアルタイム性を損なうことなく、かつ音声データと映像データの再生タイミングの乱れの抑制が本発明の目的であるため、前記（１）、（２）、（３）の判断処理における音声タイムスタンプの比較は厳密である必要はなく、例えば、比較において“ほぼ等しい”場合は“等しい”とするように、判定比較は所定の範囲のずれの許容値をもって行ってもかまわない。
【００７９】
相手側ＴＶアダプタ１１０でも、音声タイムスタンプ１１０２Ａと音声タイムスタンプ５０２Ａを基準に、自分側ＴＶアダプタ１０２と同様のリップシンク再生を行う（ステップＳ７１２）。
【００８０】
次に、自分側ＩＰ電話１０３の動作について、図８に示すフローチャートを参照して説明する。図８は自分側ＩＰ電話１０３の動作を説明するフローチャートである。フローチャートは主に図３の音声通信制御部で実施される。なお、相手側ＩＰ電話１０９も同様のフローによって動作する。
【００８１】
自分側ＩＰ電話１０３のネットワーク接続が完了し、電源がオンされる（ステップＳ８０１）と自分側ＴＶアダプタ１０２に向けてペアリング要求のメッセージを継続的に発信する。
【００８２】
自分側ＴＶアダプタ１０２がペアリング要求に応答することで、自分側ＩＰ電話１０３と自分側ＴＶアダプタ１０２とがペアリングが確立する（ステップＳ８０２）。
【００８３】
自分側ＩＰ電話１０３から受話器３０７をオフフックして相手側ＩＰ電話１０９にダイヤルすると、ＳＩＰ呼制御メッセージの通信により、ＩＮＶＩＴＥメッセージを送出し、２００ＯＫメッセージの応答を受信することによって双方向に会話のできる音声通信が確立する（ステップＳ８０３）。
【００８４】
音声通信が確立すると、自分側ＩＰ電話１０３は相手側ＩＰ電話１０９との間で音声パケットの双方向通信を開始する（ステップＳ８０４）。
【００８５】
この際、自分側ＩＰ電話１０３は、音声タイムスタンプ１１０２Ａを含む音声パケットを相手側ＩＰ電話１０９に送信する（ステップＳ８０５）。
【００８６】
また、自分側ＩＰ電話１０３は、相手側ＩＰ電話１０９から音声タイムスタンプ１１０２Ｂを含む音声パケット受信する（ステップＳ８０６）。
【００８７】
次に、自分側ＩＰ電話１０３は、受信した音声を順次リアルタイムに再生する（ステップＳ８０７）。
【００８８】
次に、自分側ＩＰ電話１０３から自分側ＴＶアダプタ１０２へ相手側ＩＰ電話１０９から送信した音声タイムスタンプ６０２（設定値は１１０２Ａに等しい）と相手側ＩＰ電話１０９から受信した音声タイムスタンプ６０３（設定値は１１０２Ｂに等しい）を含む自分側タイムスタンプ用パケット６００を自分側ＴＶアダプタ１０２に通知する（ステップＳ８０８）。
【００８９】
順次、音声パケットの送受信を行い、通話が終了すると音声通信は終了する（ステップＳ８０９）。
【００９０】
以上のように、自分側ＩＰ電話１０３では、前記ステップＳ８０８以外は標準準拠の呼制御の動作を行うものであり、音声通信制御部３０２における処理負担の増加は発生せず、これによってリアルタイム性を損なうものではない。
【００９１】
次に、自分側ＴＶアダプタ１０２の動作について、図９に示すフローチャートを参照して説明する。図９は、自分側ＴＶアダプタ１０２の動作を説明するフローチャートである。フローチャートは、主に図２の映像通信制御部２０３で実施される。なお、相手側ＴＶアダプタ１１０も同様のフローによって動作する。
【００９２】
自分側ＴＶアダプタ１０２は、ネットワーク接続が完了し、電源がオンされる（ステップＳ９０１）と自分側ＩＰ電話１０３からのペアリング要求のメッセージに応答し、自分側ＩＰ電話１０３と自分側ＴＶアダプタ１０２とペアリングが確立する（ステップＳ９０２）。
【００９３】
図７で説明したように、自分側ＩＰ電話１０３が相手側ＩＰ電話１０９と呼制御により音声通信を確立すると、自分側ＴＶアダプタ１０２は相手側ＴＶアダプタ１１０との間で映像通信が確立し（ステップＳ９０３）、映像パケットの双方向通信を開始する（ステップＳ９０４）。
【００９４】
自分側ＴＶアダプタ１０２は、自分側ＩＰ電話１０３から相手側ＩＰ電話１０９に送信した音声タイムスタンプ６０２（設定値は１１０２Ａに等しい）と相手側ＩＰ電話１０９から受信した音声タイムスタンプ６０３（設定値は１１０２Ｂに等しい）を搭載した自分側タイムスタンプ用パケット６００を受信する（ステップＳ９０５）。
【００９５】
自分側ＴＶアダプタ１０２は、相手側ＴＶアダプタ１１０へ音声タイムスタンプ５０２Ａ（符号Ａについては前記図５の説明を参照）を含む映像パケット４００を送信する（Ｓ９０６）。
【００９６】
また、自分側ＴＶアダプタ１０２は、相手側ＴＶアダプタ１１０から音声タイムスタンプ５０２Ｂ（符号Ｂについては前記図５の説明を参照）を含む映像パケット４００を受信する（ステップＳ９０７）。
【００９７】
以上の動作によって、自分側ＴＶアダプタ１０２は、映像パケット４００が含む音声タイムスタンプ５０２Ｂ及び自分側タイムスタンプ用パケット６００が含む音声タイムスタンプ６０３（設定値は１１０２Ｂに等しい）の２つの音声タイムスタンプを得る。
【００９８】
前記２つの音声タイムスタンプにより、音声パケットと映像パケットの２つのパケットの到達時間の相対的な早さを判定できる。
【００９９】
自分側ＴＶアダプタ１０２は、音声タイムスタンプ５０２Ｂが音声タイムスタンプ１１０２Ｂに等しいか比較を行う（ステップＳ９０８）。
【０１００】
自分側ＴＶアダプタ１０２は、ステップＳ９０８の判定結果で音声タイムスタンプ５０２Ｂが音声タイムスタンプ１１０２Ｂに等しいときは、映像パケットと音声パケットの同期ずれがないと判断し、映像再生の処理を開始する（ステップＳ９０９）。
【０１０１】
ステップＳ９０８でそれが等しくない場合は、自分側ＴＶアダプタ１０２は音声タイムスタンプ５０２Ｂが音声タイムスタンプ１１０２Ｂより大きいか比較を行う（ステップＳ９１０）。
【０１０２】
自分側ＴＶアダプタ１０２は、音声タイムスタンプ５０２Ｂが音声タイムスタンプ１１０２Ｂより大きいときは、映像パケットが音声パケットよりも遅れていると判断し、映像パケットは破棄して映像再生しない（ステップＳ９１１）。
【０１０３】
自分側ＴＶアダプタ１０２は、ステップＳ９１０の判定結果で音声タイムスタンプ５０２Ｂが音声タイムスタンプ１１０２Ｂより小さいときは、音声パケットが映像パケットよりも遅れていると判断し、映像パケットはバッファリングし、次の音声パケット到達以降に音声に同期させ映像再生する（ステップＳ９１２）。
【０１０４】
順次、映像パケットの送受信を行い、映像通信は終了する（ステップＳ９１３）。
【０１０５】
なお、シーケンス図の説明でも説明したように、上記ステップＳ９０８，Ｓ９１０の比較は所定の許容幅をもって行ってもかまわない。
【０１０６】
以上の実施例で説明したように、帯域保証のないインターネットにおいてリアルタイムに双方向の通話を行うＩＰテレビ電話の実現において、音声を送受信するＩＰ電話は本実施例でのパケット処理の大きな負荷増大はなく、リアルタイム性を損なうことはない。
【０１０７】
さらに、映像を送受信するＴＶアダプタは、音声パケットと映像パケットの２つのパケットで独立に受信された、音声送信時刻情報の比較により、映像パケットの到達時間が音声パケットの到達時間と同じか、あるいは早いか遅いかを判定し、映像データを再生制御するので、簡易かつ高速に音声との同期ずれを抑制することが可能となる。
【０１０８】
また、送受信するパケットのデータ量を減少させることはないので、音質、映像品質の劣化などによる通信パフォーマンスの不満足感を利用者に与えることなく音声、映像が再生できる。
【０１０９】
本発明を実施例に基づいて詳細に説明したが、これらの実施例はあくまでも例示であって、本発明は実施例によって限定されるものではない。本実施例ではＩＰ電話とＴＶアダプタを分離したが、ＩＰ電話とＴＶアダプタを一体化しても同様の効果が得られる。
【０１１０】
さらに、本実施例では、パケットの受信毎に音声パケット発信時刻情報を基準にした映像再生の比較判定をしたが、ＩＰ電話及びＴＶアダプタの具備するメモリ、ＣＰＵ処理能力に応じ、パケットの受信毎でなく、所定の間隔で音声パケット発信時刻情報を基準にした映像再生の比較判定をしても同様の効果が得られる。
【０１１１】
さらに、本実施例ではＩＰ電話を電話機と一体化したが、ＩＰ電話をＩＰ電話アダプタと電話機に分離して構成しても同様の効果が得られる。
【０１１２】
さらに、本実施例では、ＴＶアダプタはＴＶと分離したが、ＴＶアダプタとＴＶを一体化しても同様の効果が得られる。
【０１１３】
また、本実施例ではインターネット１０６、モデム１０５及び１０７、ルータ１０４及び１０８を備えていたが、インターネット１０６、モデム１０５及び１０７、ルータ１０４及び１０８、のいずれかを必要に応じ省き、自分側ＩＰ電話１０３及び相手側ＩＰ電話１０９、自分側ＴＶアダプタ１０２及び相手側ＴＶアダプタ１１０、テレビＴＶ１０１及びＴＶ１１１を同一ＩＰアドレス空間のＬＡＮ等のネットワーク上に備えても同様の効果が得られる。
【産業上の利用可能性】
【０１１４】
本発明の音声動画通信装置は、ＬＡＮやインターネット、ＩＰ通信網等のネットワークを介して音声と映像の双方向リアルタイム通信を行うに際し、音声データのリアルタイム性を損なわず、音声データと映像データの同期タイミングの乱れを抑制することが可能となり、送受信するパケットのデータ量を減少させることはないので、音質、映像品質の劣化などによる通信パフォーマンスの不満足感を利用者に与えることなく音声、映像が再生できるので、音声動画の双方向リアルタイムデータ通信装置及びそれを用いたシステムとして利用することが可能である。
【図面の簡単な説明】
【０１１５】
【図１】本発明の実施例の音声動画通信システムの構成図
【図２】本実施例の音声動画通信システムで用いられる自分側ＴＶアダプタの構成を示すブロック図
【図３】本実施例の音声動画通信システムで用いられる自分側ＩＰ電話の構成を示すブロック図
【図４】本実施例の自分側ＴＶアダプタと相手側ＴＶアダプタの間で送受信される映像パケットの構成図
【図５】本実施例の音声送信時刻情報用ヘッダ拡張の構成図
【図６】本実施例の音声動画通信システムの自分側ＩＰ電話から自分側ＴＶアダプタに通知される自分側タイムスタンプ用パケットの構成図
【図７】本実施例の音声動画通信システムの動作を説明するシーケンス図
【図８】本実施例の自分側ＩＰ電話の動作を説明するフローチャート
【図９】本実施例の自分側ＴＶアダプタの動作を説明するフローチャート
【図１０】本実施例の相手側ＩＰ電話から相手側ＴＶアダプタに通知される相手側タイムスタンプ用パケットの構成図
【図１１】本実施例の自分側ＩＰ電話と相手側ＩＰ電話の間で送受信される音声パケットの構成図
【符号の説明】
【０１１６】
１００    音声動画通信システム
１０２    自分側ＴＶアダプタ
１０３    自分側ＩＰ電話
１０９    相手側ＩＰ電話
１１０    相手側ＴＶアダプタ
１１２    自分側音声動画通信装置
１１３    相手側音声動画通信装置
２０３    映像通信制御部
３０２    音声通信制御部
４００    映像パケット
４０７    音声送信時刻情報用ヘッダ拡張
６００    自分側タイムスタンプ用パケット
１０００    相手側タイムスタンプ用パケット
１１００    音声パケット
【図１】
2007067826.tif 000003
【図２】
2007067826.tif 000004
【図３】
2007067826.tif 000005
【図４】
2007067826.tif 000006
【図５】
2007067826.tif 000007
【図６】
2007067826.tif 000008
【図７】
2007067826.tif 000009
【図８】
2007067826.tif 000010
【図９】
2007067826.tif 000011
【図１０】
2007067826.tif 000012
【図１１】
2007067826.tif 000013