(57)【要約】送信音声データは音声符号化部２で符号化され、送信部３によって送信される。受信された符号化音声データは音声復号部５によって復号される。蓄積部７は、音声符号化部２で符号化される前の送信音声データと、受信部４で受信された符号化受信音声データを蓄積する。送受音声データを再生する場合、蓄積部７に蓄積された符号化受信音声データを音声復号部５で復号する。合成部８は、音声復号部５から出力された受信音声データと、蓄積部７に蓄積されている送信音声データとを合成し、再生データとして出力する。【特許請求の範囲】
【請求項１】
送信メディアデータを符号化して符号化送信メディアデータとする符号化部と、
受信した符号化受信メディアデータを復号する復号部と、
前記符号化受信メディアデータと前記送信メディアデータを蓄積する蓄積部と、
前記蓄積部で蓄積された符号化受信メディアデータを前記復号部で復号したデータと、前記蓄積部で蓄積された送信メディアデータを合成し、再生データとして出力する合成部とを備えた通信装置。
【請求項２】
蓄積部は、蓄積した符号化受信メディアデータまたは送信メディアデータのうち、いずれか一方または両方を出力することを特徴とする請求の範囲第１項記載の通信装置。
【請求項３】
送信メディアデータを符号化して符号化送信メディアデータとする符号化部と、
受信した符号化受信メディアデータを復号する復号部と、
前記符号化受信メディアデータを復号した受信メディアデータと、前記送信メディアデータとを合成し、当該合成したデータを符号化した符号化合成データを生成する編集部と、
前記編集部から出力された符号化合成データを蓄積する蓄積部とを備え、当該蓄積した符号化合成データを前記復号部で復号し再生データとして出力するようにした通信装置。
【請求項４】
送信メディアデータを符号化して符号化送信メディアデータとする符号化部と、
受信した符号化受信メディアデータを復号する復号部と、
前記符号化受信メディアデータと、前記符号化送信メディアデータとを復号した受信メディアデータと送信メディアデータとを合成し、当該合成したデータを符号化した符号化合成データを生成する編集部と、
前記編集部から出力された符号化合成データを蓄積する蓄積部とを備え、当該蓄積した符号化合成データを前記復号部で復号し再生データとして出力するようにした通信装置。
【請求項５】
送信メディアデータを符号化して符号化送信メディアデータとする符号化部と、
受信した符号化受信メディアデータを復号する復号部と、
前記符号化受信メディアデータと、前記符号化送信メディアデータを、これらメディアデータが有効データか否かによっていずれか一方を選択する選択部と、
前記選択部の出力データを蓄積する蓄積部とを備え、当該蓄積したデータを前記復号部で復号し再生データとして出力するようにした通信装置。
【請求項６】
選択部は、符号化受信メディアデータと符号化送信メディアデータの両方が有効データであった場合、いずれか一方のデータを出力するタイミングを遅らせることを特徴とする請求の範囲第５項記載の通信装置。
【請求項７】
選択部は、符号化受信メディアデータと符号化送信メディアデータとを切り替える場合、切り替える前のデータの状態が有効データではない時間が一定期間以上存在した場合に行うことを特徴とする請求の範囲第５項記載の通信装置。
【請求項８】
選択部は、切り替え判定を行うための一定期間以上の時間分、選択するデータに遅延をかけて出力し、選択するデータを切り替える際に、次に選択すべきデータが既に一定期間以上遅延している場合に、そのデータを即座に出力することを特徴とする請求の範囲第７項記載の通信装置。
【発明の詳細な説明】
【技術分野】  本発明は、例えば音声データ等の送受信メディアデータを蓄積する通信装置に関する。
【背景技術】  従来、無線電話機といった通信装置では、たとえば特開平１０−２７１０６１号公報等に示されるように、符号化前の送信データと復号後の受信データをミキシングすることによって、非符号化データの形式で送受の音声を合成音声として蓄積していた。
また、従来の通信装置として、符号化したデータを蓄積するようにしたものがあるが、これは受信した符号化データのみを蓄積するだけであった。
従来の通信装置は以上のように構成されているため、送受信の音声を符号化データとして蓄積し、これらの送受信音声を再生しようとした場合、例えば、送信データ用の符号化器と蓄積用の符号化器の二つが必要になる等、装置構成が大きくなるという問題点があった。
この発明は上記のような課題を解決するためになされたもので、送受信データを再生する場合でも、最小限の装置構成で実現することのできる通信装置を得ることを目的とする。
【発明の開示】
この発明に係る通信装置は、符号化前の送信メディアデータと、受信した符号化受信メディアデータとを蓄積部で蓄積し、この蓄積された符号化受信メディアデータを復号したデータと、蓄積部で蓄積された送信メディアデータを合成し、再生データとして出力するようにしたものである。
このことによって、送受信データを再生する場合でも、符号化部や復号部およびデータ蓄積部といった装置構成を最小限の薮で実現することができる効果がある。
【図面の簡単な説明】  第１図はこの発明の実施の形態１による通信装置を示す構成図である。
第２図はこの発明の実施の形態２における通信装置を示す構成図である。
第３図はこの発明の実施の形態３における通信装置を示す構成図である。
第４図はこの発明の実施の形態４における通信装置を示す構成図である。
第５図は、この発明の実施の形態４における通信装置の無音データの最初のタイミングで次のデータを出力するようにした場合の動作説明図である。
【発明を実施するための最良の形態】  以下、この発明をより詳細に説明するために、この発明を実施するための最良の形態について、添付の図面に従って説明する。
実施の形態１．
第１図は、この発明の実施の形態１による通信装置を示す構成図である。
通信装置１０１ａは網２００を介して通信装置１０１ｂと接続されている。通信装置１０１ａ，１０１ｂは、いわゆるテレビ電話といった画像と音声を送受信する端末である。また、図中、通信装置１０１ｂの構成は、通信装置１０１ａと同様であるため、通信装置１０１ａの内部構成のみを示している。尚、通信装置１０１ｂは、通信装置１０１ａの通信相手装置であるとする。
通信装置１０１ａは、ビデオ符号化部１、音声符号化部２、送信部３、受信部４、音声復号部５、ビデオ復号部６、蓄積部７、合成部８を備えている。
ビデオ符号化部１は、カメラ１１１などの映像入力装置からのビデオ信号の符号化を行う機能部である。音声符号化部２は、マイク１１２などの音声入力装置からの音声信号の符号化を行う機能部である。また、これらビデオ符号化部１および音声符号化部２により、符号化部が実現されている。送信部３は、ビデオ符号化部１および音声符号化部２からの符号化データを通信プロトコルに則り、網２００に出力するための機能部である。
受信部４は、網２００を介して通信装置１０１ａ宛のデータを受信する機能部であり、ビデオデータと音声データに分離する機能を有している。音声復号部５は、受信部４から出力された符号化受信音声データを復号し、スピーカ１１３などの音声出力装置に出力するための機能部である。ビデオ復号部６は、受信部４からの符号化ビデオデータを復号し、モニタ１１４などの映像出力装置に出力する機能部である。また、これら音声復号部５およびビデオ復号部６は、蓄積部７に蓄積された符号化受信音声データや符号化受信ビデオデータを復号するよう構成されている。そして、これら音声復号部５およびビデオ復号部６により、復号部が実現されている。
蓄積部７は、受信部４からの符号化受信データやマイク１１２からの符号化前の送信音声データを蓄積する機能部であり、必要に応じて蓄積データを出力するよう構成されている。合成部８は、音声復号部５からの復号音声データと蓄積部７からの送信音声データとを合成し、スピーカ１１３等の音声出力装置に出力する機能を有している。
尚、上記のビデオ符号化部１〜合成部８の各構成は、専用のハードウェアあるいはそれぞれの機能に対応したソフトウェアとこれを実行するＣＰＵやメモリ等のハードウェアによって実現されている。
次に、このように構成された通信装置の動作について説明する。
先ず、通信装置１０１ａ，１０１ｂの通信中の動作について説明する。
今、通信装置１０１ａと通信装置１０１ｂとは網２００を介して音声やビデオなどのメディアデータを用いた通信を行っているとする。
カメラ１１１からのビデオ信号は、ビデオ符号化部１で符号化され送信部３に送られる。マイク１１２からの音声信号は音声符号化部２で符号化され送信部３に送られると同時に蓄積部７に送られ、符号化されない音声信号のまま蓄積される。
送信部３では、ビデオと音声の符号化データを通信プロトコルに則り送信する。
一方、通信装置１０１ｂから網２００を介して送信されたビデオと音声の符号化データは、通信プロトコルに則り受信部４で受信され、ビデオデータと音声データに分けられ、それぞれビデオ復号部６および音声復号部５に渡される。このとき、符号化されたビデオ、音声データは同時に蓄積部７に渡され、蓄積部７で符号化データとして蓄積される。
ビデオ復号部６では受信部４からの符号化ビデオデータを復号し、ビデオ信号としてモニタ１１４に出力する。同様に、音声復号部５では受信部４からの符号化音声データを復号し、合成部８を通過して音声信号としてスピーカ１１３に出力される。
以上は、通信中の動作であるが、次に通信中に蓄積したデータを非通信中に再生する場合の動作について説明する。
蓄積部７において、受信部４からの出力を蓄積した符号化データは、その符号化音声データが音声復号部５へ、符号化ビデオデータがビデオ復号部６へ出力される。ビデオ復号部６では符号化ビデオデータを復号し、モニタ１１４にビデオ信号として出力し、モニタ１１４において受信したビデオが再生される。一方、音声復号部５でも符号化音声データを復号し、音声信号として合成部８に出力する。
蓄積部７では、通信中に受信データと共に送信データも蓄積していたので、その送信データである音声信号を同時に合成部に出力する。合成部８では、音声復号部５からの音声信号と蓄積部７からの音声信号のミキシングを行い、合成音声信号としてスピーカ１１３に出力し、スピーカ１１３において送受信音声が再生される。
以上のように、実施の形態１によれば、送信メディアデータを符号化して符号化送信メディアデータとする符号化部と、受信した符号化受信メディアデータを復号する復号部と、符号化受信メディアデータと送信メディアデータを蓄積する蓄積部と、蓄積部で蓄積された符号化受信メディアデータを復号部で復号したデータと、蓄積部で蓄積された送信メディアデータを合成し、再生データとして出力する合成部とを備えたので、最小限の装置構成で送受信データを再生することのできる通信装置を得ることができる。即ち、送受音声データを非符号化データとして蓄積する場合より、符号化の効果により蓄積データサイズを小さくすることができる。また、一つの復号部で送受信データの再生が可能であるため、別途に復号部を必要とせず、最小限の装置構成でこのような再生を実現することができる。
また、実施の形態１では、蓄積部は、蓄積した符号化受信メディアデータまたは送信メディアデータのうち、いずれか一方または両方を出力するようにしたので、再生時にどちらか片方のみを再生することが可能となる。即ち、従来のようにミキシングを行った後に蓄積する場合に比べて、所望のデータのみを再生することができるため、利便性を向上させることができる。これにより、利用者は、送信データのみ、または受信データのみ、あるいは送受信データを同時といったように、様々な再生方法を選択することができる。
実施の形態２．
実施の形態１は、送受別々の蓄積データを同時に再生するようにしたものであるが、実施の形態２では、一つの合成したデータを再生するようにした場合の実施形態である。
第２図は、実施の形態２の通信装置の構成図である。
通信装置１０２ａは網２００を介して通信装置１０２ｂと接続されており、これらの接続関係は、実施の形態１と同様である。また、実施の形態２においても、通信装置１０２ａと通信装置１０２ｂは同様の構成であるため、その内部構成は通信装置１０２ａのみ示している。
通信装置１０２ａは、ビデオ符号化部１、音声符号化部２、送信部３、受信部４、音声復号部５、ビデオ復号部６、蓄積部７、編集部９を備えている。ここで編集部９以外の構成は、実施の形態１と同様であるため、対応する部分に同一符号を付してその説明は省略する。
編集部９は、蓄積部７で蓄積された符号化受信音声データを復号した受信音声データと、送信音声データとを合成し、この合成したデータを符号化して、再度、蓄積部７に蓄積させるよう処理を行う機能を有している。
尚、上記のビデオ符号化部１〜編集部９の各構成は、専用のハードウェアあるいはそれぞれの機能に対応したソフトウェアとこれを実行するＣＰＵやメモリ等のハードウェアによって実現されている。
次に、実施の形態２の動作について説明する。
通信中の動作については、実施の形態１と同様であり、ビデオと音声のデータの送受信を行いながら、符号化前の送信音声データと復号前のビデオと音声の符号化データを蓄積部７で蓄積する。
通信終了後、蓄積部７は通信中に蓄積した符号化前の送信音声データと復号前の符号化受信音声データを編集部９に転送する。
編集部９では、復号前の符号化受信音声データの復号を行う。尚、この復号処理は音声復号部５を用いて行うよう構成してもよい。次に、編集部９は、復号された受信音声データと蓄積部７に蓄積されている符号化前の送信音声データを合成して、送受合成音声データを生成する。更に、編集部９は、生成した送受合成音声データを符号化し、符号化送受合成音声データを得る。尚、この符号化処理は音声符号化部２を用いて編集部９が指示するよう構成してもよい。
編集部９は、このようにして得た符号化送受合成音声データを蓄積部７に転送する。蓄積部７では、編集部９から送られてきた符号化送受合成音声データとビデオの受信符号化データを合わせて蓄積する。再生時は、蓄積部７から音声とビデオの符号化データをそれぞれ音声復号部５とビデオ復号部６に送出し、これら復号部によって受信ビデオの復号と送受信音声の復号が行われる。
また、蓄積部７では、編集部９から送られてきた符号化送受合成音声データとビデオの受信符号化データとを合わせて蓄積する際に、合成前の受信音声データおよび送信音声データを削除することで、所望の蓄積データのみを残すことができる。または、受信した符号化音声・ビデオデータを残したまま、受信ビデオデータをコピーし、それに編集部９から送られてきた符号化送受合成音声データを合わせて蓄積することで、受信のみの音声・ビデオデータと、合成音声・ビデオデータの２種類が生成でき、用途に応じて再生することも可能となる。
以上のように、実施の形態２によれば、送信メディアデータを符号化して符号化送信メディアデータとする符号化部と、受信した符号化受信メディアデータを復号する復号部と、符号化受信メディアデータを復号した受信メディアデータと、送信メディアデータとを合成し、合成したデータを符号化した符号化合成データを生成する編集部と、編集部から出力された符号化合成データを蓄積する蓄積部とを備え、蓄積した符号化合成データを復号し再生データとして出力するようにしたので、最小限の装置構成で送受信データを再生することができる。
また、実施の形態２では、通信後に仮に蓄積したデータを編集して、送受合成データを生成しているので、通信中には合成処理のための負荷がかかることがない。このため、符号化部や復号部は通信時に必要な数量でこのような送受信データの再生を実現することができる。
実施の形態３．
実施の形態３は、符号化部から出力された符号化送信音声データを蓄積するようにしたものである。
第３図は、実施の形態３の通信装置の構成図である。
通信装置１０３ａは網２００を介して通信装置１０３ｂと接続されており、これらの接続関係は、実施の形態１、２と同様である。また、実施の形態３においても、通信装置１０３ａと通信装置１０３ｂは同様の構成であるため、その内部構成は通信装置１０３ａのみ示している。
通信装置１０３ａは、ビデオ符号化部１、音声符号化部２、送信部３、受信部４、音声復号部５、ビデオ復号部６、蓄積部７、編集部１０を備えている。ここで、蓄積部７に入力されるのが、ビデオ符号化部１および音声符号化部２の出力データである点と、編集部１０以外の構成は実施の形態１と同様であるため、これら以外の構成に対する説明は省略する。
蓄積部７には、ビデオ符号化部１の出力データである符号化送信ビデオデータと、音声符号化部２の出力データである符号化送信音声データとが入力されるよう構成されており、蓄積部７は、これらの符号化データを蓄積する。また、編集部１０は、蓄積部７に蓄積されている符号化送信音声データと符号化受信音声データとを取り出し、これら音声データを復号した音声データをミキシングして合成音声データを生成し、この合成音声データを蓄積部７に出力する機能を有している。
尚、上記のビデオ符号化部１〜編集部１０の各構成は、専用のハードウェアあるいはそれぞれの機能に対応したソフトウェアとこれを実行するＣＰＵやメモリ等のハードウェアによって実現されている。
次に、実施の形態３の動作について説明する。
通信中の動作については、ビデオと音声のデータの送受信を行いながら、音声符号化部２の出力である符号化送信音声データと、受信部４の出力である復号前のビデオと音声の符号化データを蓄積部７で蓄積する。
通信終了後、蓄積部７は通信中に蓄積した符号化送信音声データと復号前の符号化受信音声データを編集部１０に転送する。
編集部１０では、これら符号化音声データの復号を行い、復号された受信音声データを得る。尚、この復号処理は音声復号部５を用いて行うよう構成してもよい。次に、編集部１０は、復号された受信音声データと送信音声データとを合成して、送受合成音声データを生成する。更に、編集部１０は、生成した送受合成音声データを符号化し、符号化送受合成音声データを得る。尚、この符号化処理は音声符号化部２を用いて行うよう構成してもよい。
編集部１０は、このようにして得た符号化送受合成音声データを蓄積部７に転送する。蓄積部７では、編集部１０から送られてきた符号化送受合成音声データを蓄積する。
また、蓄積部７に蓄積されている符号化送信ビデオデータと受信された符号化受信ビデオデータについても、編集部１０によって音声と同様の処理が行われ、例えば送信画像と受信画像とを同時に表示するような合成ビデオデータが生成される。そして、この合成ビデオデータを符号化した符号化送受合成ビデオデータが生成され、これが蓄積部７で蓄積される。但し、特に合成ビデオを必要としない場合は、この機能を省くことができる。
尚、編集部１０で行うこれら一連の処理はリアルタイムで行う必要がないため、例えば、符号化送信音声データの復号を行った後に符号化受信音声データの復号を行う、といったように復号処理を順番に行うことで、装置としての必要な機能数を最小限に抑えることができる。
また、本実施の形態では、音声とビデオデータのみを扱っているが、他の様々なメディアデータに関しても合成等の処理を行う必要があれば、編集部１０によって行うことができる。
尚、蓄積部７が蓄積する編集部１０からの符号化合成データが音声データのみであれば、符号化受信ビデオデータをコピーしそれと合わせて蓄積することも可能である。このようにして、送受信用の符号化データと同様のフォーマットの符号化合成データを蓄積部７で保存することとする。
また、蓄積データの再生時、蓄積部７では送信、受信、合成のいずれかの符号化データを音声復号部５およびビデオ復号部６に対して出力し、それぞれ音声信号、ビデオ信号が出力される。
以上のように実施の形態３によれば、送信メディアデータを符号化して符号化送信メディアデータとする符号化部と、受信した符号化受信メディアデータを復号する復号部と、符号化受信メディアデータと、符号化送信メディアデータとを復号した受信メディアデータと送信メディアデータとを合成し、合成したデータを符号化した符号化合成データを生成する編集部と、編集部から出力された符号化合成データを蓄積する蓄積部とを備え、蓄積した符号化合成データを復号し再生データとして出力するようにしたので、最小限の装置構成で送受信データを再生することができる。
また、実施の形態３では、符号化送信データ、符号化受信データを蓄積し、それらを通信後に編集を行い、送受合成データを生成しているので、通信中に合成処理のための負荷がかからず、送信、受信、合成の符号化データを生成することができる。
実施の形態４．
実施の形態４は、時分割に送信音声データと受信音声データとを蓄積するようにしたものである。
第４図は、実施の形態４の通信装置の構成図である。
通信装置１０４ａは網２００を介して通信装置１０４ｂと接続されており、これらの接続関係は、実施の形態１〜３と同様である。また、実施の形態４においても、通信装置１０４ａと通信装置１０４ｂは同様の構成であるため、その内部構成は通信装置１０４ａのみ示している。
通信装置１０４ａは、ビデオ符号化部１、音声符号化部２、送信部３、受信部４、音声復号部５、ビデオ復号部６、蓄積部７、選択部１１を備えている。ここで、選択部１１以外の構成は、実施の形態１と同様であるため、対応する部分に同一符号を付してその説明は省略する。選択部１１は、音声符号化部２からの出力である符号化送信音声データと、受信部４からの出力である符号化受信音声データとをその有音／無音状態に基づいて選択し、その選択データを蓄積部７に出力する機能部である。
尚、上記のビデオ符号化部１〜選択部１１の各構成は、専用のハードウェアあるいはそれぞれの機能に対応したソフトウェアとこれを実行するＣＰＵやメモリ等のハードウェアによって実現されている。
次に、実施の形態４の動作について説明する。
通信中では、選択部１１は音声符号化部２の出力（符号化送信音声データ）、および受信部４からの音声出力（符号化受信音声データ）を入力データとして、それらデータの有音／無音検出を行う。そして、受信音声データの無音部分を送信音声データの有音部分と入れ替えて、一つ分の音声データを生成し、これを蓄積部７に出力する。
一般に通話中でも音声の無音区間はかなりあるため、送信と受信の有音部分の符号化データを集めて切り貼りし、片方向分の音声符号化データよりデータ量を小さくすることは可能である。但し、通常蓄積するような一方向分のデータ量と同じにするために、選択部１１では、基本的に符号化受信データを選択し、符号化送信データが有音になった場合にのみ無音部分の符号化受信データに代えて符号化送信データを蓄積部７に転送する。
蓄積部７では、選択部１１で選択された符号化音声データと受信部４からの符号化ビデオデータとを蓄積する。尚、必要に応じて受信部４からの符号化音声データを直接蓄積する機能を設けても良い。他の動作は実施の形態３と同様であるためその説明は省略する。
蓄積したデータを再生するときは蓄積部７から符号化音声データを音声復号部５へ、符号化ビデオデータをビデオ復号部６へそれぞれ出力し、音声の送受データの再生と受信ビデオデータの再生を行う。
以上のように、実施の形態４では、送信メディアデータを符号化して符号化送信メディアデータとする符号化部と、受信した符号化受信メディアデータを復号する復号部と、符号化受信メディアデータと、符号化送信メディアデータを、これらメディアデータが有効データか否かによっていずれか一方を選択する選択部と、選択部の出力データを蓄積する蓄積部とを備え、蓄積したデータを復号部で復号し再生データとして出力するようにしたので、最小限の装置構成で送受信データを再生することができると共に、片方向分のデータ量で両方の音声データの有効な部分のみを蓄積できる効果がある。
また、選択部１１において、符号化送信音声データと符号化受信音声データが共に有音部分であった場合、どちらかを選択するだけでなく、選択されなかった方の符号化音声データを一時的に遅延させ、選択された方の符号化音声データが無音になった時に、その遅延させた符号化音声データを後続の蓄積部７に転送するようにしても良い。
このように構成すれば、本来のタイミングより遅延して蓄積部７へ送られた符号化音声データは、蓄積部７に送られたタイミングで蓄積される。そのため、再生時、実際よりわずかに遅延して音声が出力されることになるが、送受音声データの有音部分がかけることなく全て出力可能となる。
以上のように、実施の形態４では、符号化送信音声データと符号化受信音声データが同時に有音となった場合にどちらかを遅延させて蓄積するようにしているので、送受データの有音部分全てを蓄積することができる。
更に、選択部１１において、符号化送信音声データと符号化受信音声データを切り替える際に、被切替対象の符号化データに無音区間が一定期間以上存在したら切り替えるようにしてもよい。こうすることで、例えば音声データに含まれる会話の途中で切り替わることを防ぐことができる。
以上のように、実施の形態４では、送信音声符号化データと受信音声符号化データを切り替える際に、切り替える前の音声データに一定期間以上の無音区間が存在した時に切り替えるようにしたので、符号化音声データ中の会話が途中で途切れないようにすることができる。
ところで、切替の判定のために一定期間以上の無音が存在した後に切替を行うと、必ず切替ポイントで一定期間以上の無音が存在する。もし、送受データ共に有音の場合、どちらか一方の音声データは遅延させられており、更に切替判定のための一定期間以上の無音データ分だけ更に遅延することになる。つまり、送受音声間での相対遅延は無音データ分だけ更に大きくなる。
そこで、一定期間以上の無音データを検出したら、その無音データの最初のタイミングで切り替えられるようにすれば、切替後のデータの遅延が減少する。そのために、選択部１１では蓄積部７に出力するデータに一定期間以上の遅延をかけて出力する。そして一定期間以上の無音データを検出した時、つまり切替タイミングで、次に出力すべきデータが既に一定期間以上待たされている場合、そのデータを即座に出力すれば、切替検出のための無音データは蓄積部７に出力されずにすむ。
第５図は、無音データの最初のタイミングで次のデータを出力するようにした場合の動作説明図である。
選択部１１は、基本的に受信部４からの受信データを選択しており、この受信データを一定期間Ｔ１より大きい遅延時間Ｔ２だけ遅延させて蓄積部７に出力する。今、時刻ｔ１で音声符号化部２から送信データが有音となったとすると、時刻ｔ１では受信データが有音であるため、選択部１１は送信データを一時的に蓄積する。そして、受信データは遅延時間Ｔ２だけ遅延して出力されるため、その終端（時刻ｔ２）は、時刻ｔ３（＝ｔ２＋Ｔ２）に出力される。ここで、遅延した受信データ（選択部１１の出力データ）は時刻ｔ３以降は無音部分となるため、時刻ｔ３において即座に送信データを出力する。即ち、このような処理を行わない場合は、受信データと送信データとの間には一定期間Ｔ１の無音時間が存在することになるが、有音データの最初のタイミングで即座に送信データを出力することによって、切替後の送信データの遅延を減少させることができる。
以上のように、実施の形態４によれば、選択部は、切り替え判定を行うための一定期間以上の時間分、選択するデータに遅延をかけて出力し、選択するデータを切り替える際に、次に選択すべきデータが既に一定期間以上遅延している場合に、そのデータを即座に出力するようにしたので、切替ポイントにおける無音部分をなくすことができ、従って、送受音声の相対的な遅延を小さくすることができる。
尚、上記実施の形態４において、メディアデータが有効か否かの判定を音声データの有音か無音かで行うようにしたが、これに限定されるものではなく、メディアデータの種類等によって、任意に選択してもよい。
また、上記各実施の形態では、再生する送受信メディアデータとして、音声データやビデオデータであるとしたが、これらのデータに限定されるものではなく、種々のデータに適用可能である。
【産業上の利用可能性】  以上のように、この発明に係る通信装置は、例えばテレビ電話に適用され、通信後のビデオデータや音声データを再生するのに適している。
【図１】
2005122575.tif 000002
【図２】
2005122575.tif 000003
【図３】
2005122575.tif 000004
【図４】
2005122575.tif 000005
【図５】
2005122575.tif 000006
【国際調査報告】
2005122575.tif 000007
2005122575.tif 000008
2005122575.tif 000009
2005122575.tif 000010