(57)【要約】      （修正有）【課題】音声データとして送出されたＤＴＭＦ信号の消去処理に伴う遅延を短く抑え双方向メディア通信を実現する。【解決手段】データ分割部１０３から出力される分割音声データに対して、ＤＴＭＦ信号成分解析部１０４で得られる結果、あるいはデータ損失・誤り情報、過去にバッファに格納した際の重み付け処理の内容、の少なくとも１つに基づき、前記分割音声データ、またはバッファ部１０６に格納されている過去の分割音声データ、の少なくとも１つに対して、重み付け情報を付加し、バッファ部１０６に格納する。また、ＤＴＭＦ信号消去判定部１０７にて前記分割音声データを取出す際に、前記重み付け情報、あるいは過去に出力した際の判定結果、の少なくとも１つに基づいて消去するか否かを判定し、その判定で消去と判定された場合には分割音声データを無音データまたは雑音データに置換し、必要に応じてデータ多重化部１０９にて多重化し出力する。【選択図】図１
2006222893.tif 000002
【特許請求の範囲】
【請求項１】
入力される音声データを予め定められた区間長に分割して分割音声データを得るステップと、
前記分割音声データがＤＴＭＦ信号を有するか否かを解析するステップと、
前記解析の結果、および過去に重み付けした際の重み付け情報に基づいて、前記分割音声データに対する重み付け情報の付加、および既に蓄積されている過去の分割音声データに対応する重み付け情報への加算、の少なくとも一方を実行するステップと、
前記分割音声データと付加された前記重み付け情報とを蓄積するステップと、
前記重み付け情報に基づいて、前記蓄積されている分割音声データの特定区間を消去するか否かを判定するステップと、
前記判定の結果が消去を示す場合には、前記特定区間を無音データ、または雑音データのいずれかに置換して出力し、前記判定の結果が非消去を示す場合には、前記特定区間をそのまま出力するステップと、
を含むことを特徴とするＤＴＭＦ信号処理方法。
【請求項２】
入力される音声データを予め定められた区間長に分割して分割音声データを得るステップと、
前記分割音声データがＤＴＭＦ信号を有するか否かを解析するステップと、
前記解析の結果、および過去に重み付けした際の重み付け情報に基づいて、前記分割音声データに対する重み付け情報の付加、および既に蓄積されている過去の分割音声データに対応する重み付け情報への加算の少なくとも一方を実行するステップと、
前記重み付け情報を蓄積するステップと、
前記分割音声データの生成元となった音声符号化データを蓄積するステップと、
前記重み付け情報に基づいて、前記蓄積されている重み付け情報に該当する特定区間を消去するか否かを判定するステップと、
前記音声符号化データの区間に対応して存在する前記判定結果のうち、少なくとも１つの判定の結果が消去を示す場合には、前記音声符号化データを無音相当の符号化データ、または雑音相当の符号化データに置換して出力し、前記音声符号化データの区間内に対応して存在する前記判定結果が全て非消去を示す場合には、前記音声符号化データをそのまま出力するステップと、
を含むことを特徴とするＤＴＭＦ信号処理方法。
【請求項３】
前記重み付け情報を付加するステップにおいて、前記解析結果がＤＴＭＦ信号成分を有することを示す場合に、該分割音声データに付加する重み付け情報の値として、前記過去に蓄積された分割音声データの重み付け情報に加算する予定の重み付け値に比べて重要度の高い値を付加する、ことを特徴とする請求項１又は２記載のＤＴＭＦ信号処理方法。
【請求項４】
前記重み付け情報を付加するステップにおいて、前記解析結果がＤＴＭＦ信号成分を有することを示す場合に、ハングオーバ値として予め定められた値を設定し、ハングオーバ値が無効になるまでの間、バッファ部に入力する分割音声データの重み付け情報に予め定められた重み付け値を付加する、ことを特徴とする請求項１乃至３のいずれか１項に記載のＤＴＭＦ信号処理方法。
【請求項５】
前記重み付け情報を付加するステップにおいて、外部からデータ損失・誤り情報のみが入力された場合には、分割する予定だった回数分だけ無音データ、または雑音データのいずれかを分割音声データの代替とした上で、直前の分割音声データをバッファに格納した際に実施した重み付け処理と同一の処理を実施する、ことを特徴とする請求項１乃至４のいずれか１項記載のＤＴＭＦ信号処理方法。
【請求項６】
前記重み付け情報を付加するステップにおいて、音声データと共にデータ損失・誤り情報が外部から入力された場合、前記データ損失・誤り情報に応じて、
前記解析の結果に係わらず、前回バッファに格納した分割済音声データ付属の重み付け情報と同じ値を付加する処理、前記解析におけるＤＴＭＦ信号を有するか否かの判定条件を緩めた上で得られる判定結果に基づいて重み付け処理を実施する処理、のうち、いずれか一方を実施する、ことを特徴とする請求項１乃至５記載のいずれか１項に記載のＤＴＭＦ信号処理方法。
【請求項７】
前記消去するか否かを判定するステップにおいて、
バッファに格納されている、最も過去に格納され今回、次処理に出力予定の分割音声データ付属の重み付け情報を起点とした一定の区間範囲の中において、
（Ａ）分割音声データ毎の重み付け値について予め定められた重み付け値に達している箇所が規定数に達した場合、
（Ｂ）各分割音声データの重み付け値の総和が規定数に達した場合、
の少なくとも一方の場合に消去すると判定する、ことを特徴とする請求項１乃至６のいずれか１項に記載のＤＴＭＦ信号処理方法。
【請求項８】
前記消去するか否かを判定するステップにおいて、前回バッファより取り出した分割音声データに対して消去と判定され、今回取り出した分割音声データの重み付け情報の値が有意な値を保持している場合に消去すると判定する、ことを特徴とする請求項７記載のＤＴＭＦ信号処理方法。
【請求項９】
前記特定区間を消去するか否かの判定結果、および前記解析の結果、のうち、少なくとも一方の情報を元にＤＴＭＦ信号区間を検出し、検出結果を外部に通知する、ことを特徴とする請求項１乃至８のいずれか１項に記載のＤＴＭＦ信号処理方法。
【請求項１０】
（Ａ）前記分割音声データに対して消去処理を実施する場合は無音データ、または雑音データのいずれかに置換する処理、（Ｂ）前記音声符号化データに対して消去処理を実施する場合は、出力先の音声符号化方式が有する、無音データに相当する符号化データ、または雑音データに相当する符号化データのいずれかで置換する処理、のうち少なくとも一方によってＤＴＭＦ信号を処理する、ことを特徴とする請求項１乃至９のいずれか１項に記載のＤＴＭＦ信号処理方法。
【請求項１１】
入力される音声データを所定の区間単位に分割し、分割音声データを出力するデータ分割部と、
前記分割音声データに対して、ＤＴＭＦ信号を有するか否かを解析し、解析結果を出力するＤＴＭＦ信号成分解析部と、
前記解析結果、および過去に重み付けした際の処理内容、の少なくとも一方の情報に応じて前記分割音声データに対する重み付け情報の付加、および既にバッファ部に格納した過去の分割音声データに対する重み付け情報の加算の少なくとも一方を実行する重み付け処理部と、
前記分割音声データと付加された重み付け情報とを格納するバッファ部と、
前記バッファ部に格納された重み付け情報を基に前記蓄積されている分割音声データの特定区間を消去すべきか否か判定し、分割音声データとともにその判定結果を出力するＤＴＭＦ信号消去判定部と、
前記判定結果に応じて、分割音声データを無音データ、または雑音データのいずれかに置換するＤＴＭＦ信号消去処理部と、
を備えることを特徴とするＤＴＭＦ信号処理装置。
【請求項１２】
入力される音声データを所定の区間単位に分割し、分割音声データを出力するデータ分割部と、
前記分割音声データに対して、ＤＴＭＦ信号を有するか否かを解析し、解析結果を出力するＤＴＭＦ信号成分解析部と、
前記解析結果、過去に重み付けした際の処理内容、の少なくとも一方の情報に応じて前記分割音声データに対する重み付け情報の付加、および既にバッファに格納した過去の分割音声データに対する重み付け情報の加算の少なくとも一方を実行する重み付け処理部と、
前記重み付け情報を格納するバッファ部と、
前記分割音声データの生成元となった音声符号化データを蓄積する符号化データバッファ部と、
前記バッファ部に格納された重み付け情報を基に前記符号化データバッファ部に蓄積された音声符号化データを消去すべきか否か判定し、その判定結果を出力するＤＴＭＦ信号消去判定部と、
前記音声符号化データの区間に対応して存在する前記判定の結果のうち、少なくとも１つの判定の結果が消去を示す場合には、前記音声符号化データを無音に相当する符号化データ、または雑音に相当する符号化データのいずれかに置換して出力し、前記音声符号化データの区間内に含まれる１つ以上の判定の結果が全て非消去を示す場合には、前記音声符号化データをそのまま出力するＤＴＭＦ信号消去処理部と、
を備えることを特徴とするＤＴＭＦ信号処理装置。
【請求項１３】
前記重み付け処理部において、前記解析結果がＤＴＭＦ信号成分を有することを示す場合に、該分割音声データに付加する重み付け情報の値として、前記過去に蓄積された分割音声データの重み付け情報に加算する予定の重み付け値に比べて重要度の高い値を付加する、ことを特徴とする請求項１１又は１２記載のＤＴＭＦ信号処理装置。
【請求項１４】
前記重み付け処理部において、前記解析結果がＤＴＭＦ信号成分を有することを示す場合に、ハングオーバ値として予め定められた値を設定し、ハングオーバ値が無効になるまでの間、バッファ部に入力する分割音声データの重み付け情報に予め定められた重み付け値を付加する、ことを特徴とする請求項１１乃至１３のいずれか１項に記載のＤＴＭＦ信号処理装置。
【請求項１５】
前記重み付け処理部において、外部からデータ損失・誤り情報のみが入力された場合には、分割する予定だった回数分だけ無音データ、または雑音データのいずれかを分割音声データの代替とした上で、直前の分割音声データをバッファに格納した際に実施した重み付け処理と同一の処理を実施する、ことを特徴とする請求項１１乃至１４のいずれか１項記載のＤＴＭＦ信号処理装置。
【請求項１６】
前記重み付け処理部において、音声データと共にデータ損失・誤り情報が外部から入力された場合、前記データ損失・誤り情報に応じて、
（Ａ）ＤＴＭＦ信号成分解析部の結果に係わらず、前回バッファ部に格納した分割済音声データ付属の重み付け情報と同じ値を付加する処理、
（Ｂ）ＤＴＭＦ信号成分解析部の成分有無の判定条件を緩めた上で得られる判定結果に基づいて重み付け処理を実施する処理、
のうち、いずれか１つを実施する、ことを特徴とする請求項１１乃至１５記載のいずれか１項に記載のＤＴＭＦ信号処理装置。
【請求項１７】
前記ＤＴＭＦ信号消去処理部において、
前記バッファ部に格納されている、最も過去に格納され今回、次処理に出力予定の分割音声データ付属の重み付け情報を起点とした一定の区間範囲の中において、
（Ａ）分割音声データ毎の重み付け値について予め定められた重み付け値に達している箇所が規定数に達した場合、
（Ｂ）各分割音声データの重み付け値の総和が規定数に達した場合、
の少なくとも一方の場合に消去すると判定する、ことを特徴とする請求項１１乃至１６のいずれか１項に記載のＤＴＭＦ信号処理装置。
【請求項１８】
前記ＤＴＭＦ信号消去処理部において、前回バッファ部より取り出した分割音声データに対して消去と判定され、今回取り出した分割音声データの重み付け情報の値が有意な値を保持している場合に消去すると判定する、ことを特徴とする請求項１７記載のＤＴＭＦ信号処理装置。
【請求項１９】
前記特定区間を消去するか否かの判定結果、および前記解析の結果、のうち、少なくとも一方の情報を元にＤＴＭＦ信号区間を検出し、検出結果を外部装置に通知する、ことを特徴とする請求項１１乃至１８のいずれか１項に記載のＤＴＭＦ信号処理装置。
【請求項２０】
（Ａ）前記分割音声データに対して消去処理を実施する場合は無音データ、または雑音データのいずれかに置換する、（Ｂ）前記音声符号化データに対して消去処理を実施する場合は、出力先の音声符号化方式が有する、無音データに相当する符号化データ、または雑音データに相当する符号化データのいずれかで置換する、のうち少なくとも一方によってＤＴＭＦ信号を処理する、ことを特徴とする請求項１１乃至１９のいずれか１項に記載のＤＴＭＦ信号処理装置。
【請求項２１】
通信網を終端し、音声符号化データを含む音声情報を出力する第１の通信網終端部と、
前記音声情報から音声符号化データを抽出して出力する音声符号化データ取得部と、
前記音声符号化データを復号し、音声データ、損失・誤り情報、更に音声符号化データを出力する復号部と、
前記音声データと損失・誤り情報に対して、ＤＴＭＦ信号の解析・消去処理を実施し、設定に応じて、音声データ、音声符号化データ、消去判定結果を出力する請求項１１乃至２０のいずれか１項に記載のＤＴＭＦ信号処理装置と、
前記音声データを符号化し、音声符号化データを出力する符号化部と、
前記音声符号化データを送出先に適したデータ形式にして出力する音声符号化データ送信部と、
前記音声符号化データ送信部から出力されるデータを送出先通信網に出力するための通信網を終端する第２の通信網終端部と、
を備え、
一方の通信網から受信するメディア符号化データのうち、音声符号化データを復号し、ＤＴＭＦ解析・消去処理を実施し、必要に応じて符号化を行い、他方の通信網に出力することを特徴とする中継装置。
【請求項２２】
（Ａ）受信する音声符号化データとして送出されてくるＤＴＭＦ信号を検出し、その結果を基にＤＴＭＦ発信元通信端末装置からみて、該中継装置から先の１つ、または複数の通信端末装置方向の処理を切換える機能、
（Ｂ）受信する音声符号化データとして送出されてくるＤＴＭＦ信号を検出し、その結果を基に中継装置内のＤＴＭＦ発信元通信端末装置方向の処理を切換える機能、
（Ｃ）一方から受信するメディア符号化方式から他方に送出するメディア符号化方式に変換する機能、
（Ｄ）一方の通信網を終端する呼制御方式から他方の通信網を終端する呼制御方式に変換する機能、
（Ｅ）複数の接続対象通信端末装置から受信する少なくとも１つのメディア符号化データを、少なくとも１つのミキシングされたメディア符号化データに変換し、複数の接続対象通信端末装置へと送信する機能、
のうち、少なくとも１つの機能を備えることを特徴とする、請求項２１記載の中継装置。
【請求項２３】
送出先の通信網がＩＰ網である場合、前記ＤＴＭＦ信号処理装置から出力される、消去すべきか否かの情報を基に、送信先の通信端末装置に対して、常時送出動作とするか、または消去区間部分に相当する音声パケットの送信を行わない、ことを特徴とする請求項２１または２２記載の中継装置。
【請求項２４】
通信網を終端し、音声符号化データを含む音声情報を出力する通信網終端部と、
前記音声情報から音声符号化データを取得する音声符号化データ取得部と、
前記音声符号化データを復号し、音声データ、損失・誤り情報を出力する復号部と、
前記音声データ、損失・誤り情報に対して、ＤＴＭＦ信号の解析・消去処理を実施し、音声データを出力する請求項１１乃至２０のいずれか１項に記載のＤＴＭＦ信号処理装置と、
前記音声データを再生する音声再生部と、
を備えることを特徴とする通信端末装置。
【請求項２５】
請求項２４記載の通信端末装置と、
請求項２１乃至２３のいずれか１項に記載の中継装置と、
を備え、
少なくとも２台の前記通信端末装置を、通信網および前記中継装置を介して接続することを特徴とする通信システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＤＴＭＦ（Dual Tone Multi Frequency）信号処理方法、処理装置、中継装置、及び通信端末装置に関し、特に双方向メディア通信においてＤＴＭＦ信号を消去する処理方法、処理装置、その処理装置を備える中継装置、及び通信端末装置に関する。
【背景技術】
【０００２】
音声データを符号化し、パケットとしてネットワーク通信するＶｏＩＰ（Ｖｏｉｃｅ  ｏｖｅｒ  Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）の発展は目覚しいものがあり、近年では音声データだけに留まらず、複数のメディアデータを双方向通信できるようなサービスも増えつつある。双方向通信におけるシステムの最小構成例は、２つのメディア通信端末装置間での通信であるが、必ずしも、そのメディア通信端末装置間に介在するネットワーク網、呼制御方式、映像・音声・その他含めたメディアの符号化方式、通信方法が統一されているとは限らない。
【０００３】
その一例として、多人数で双方向通信が可能な多地点会議サービスや、モバイル端末とＩＰ端末間での双方向メディア通話サービス等が挙げられる。このようなシステムでは、メディア通信端末装置間に、１つ、あるいは複数の中継装置を介在させることで、双方向メディア通信を実現している。
【０００４】
このように中継装置が介在する場合に、中継装置に対してメディア通信端末装置がサービスの切替を要求することが考えられる。この切替方法としては、呼制御メッセージによる切替の方法以外に、ＤＴＭＦ信号を音声データとして送出し、中継装置にてＤＴＭＦ信号を検出し、サービスを切り替える方法が想定される。特にモバイル端末においては、その構成上、切替にＤＴＭＦ信号を利用する可能性は非常に高いものである。
【０００５】
上記のようなシステムにおいて、音声データとして送出されたＤＴＭＦ信号は、サービスの切替を行う中継装置にとっては必要な情報であっても、その中継装置以降に存在する、中継装置、もしくはメディア通信端末装置にとっては、不要なデータである。このような場合に、中継装置において、ＤＴＭＦ信号区間を無音データ、または雑音データのいずれかに置き換え、改めて符号化したデータをパケットとして送出する、あるいは該当する区間のパケットを送出しない等の対応を実施することが期待される。また、中継装置に限らず、受信側のメディア通信端末装置にあっても、同様にＤＴＭＦ信号区間を無音データ、または雑音データのいずれかに置き換え、音声データを再生してユーザに聴かせることもまた、目的としては同一である。
【０００６】
なお、関連する技術として、通話用通信路上をＤＴＭＦがデータとして受信側に転送され、受信側でＤＴＭＦの二重受信となることを防止する通信装置が特許文献１において開示されている。また、ＤＴＭＦ信号の検出技術は、特許文献２、特許文献３等に記載されている。
【０００７】
【特許文献１】特開２０００−１８８６１１号公報
【特許文献２】特開平９−３２７０４７号公報
【特許文献３】特開平５−２０７５２３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
ところで、ＤＴＭＦ信号区間を消去する処理において、誤消去を防ぐために、音声符号化データを復号し、得られる音声データをある一定区間貯め、該当区間がＤＴＭＦ信号であるかどうかを判定する必要がある。このため、ＤＴＭＦ信号消去を考慮しない場合に比べて、メディア通信端末装置間の音声遅延の増加が避けられない。しかも、双方向通信中であること、そして１つ、あるいは場合によって複数の中継装置が介在する通信システムであることを想定すると、音声遅延の増加は、サービス性を著しく阻害することとなる。
【０００９】
また、パケット網等でのパケットロス、またはモバイル網での無線エラー等によるデータ損失・誤り等が存在する場合には、これらも考慮した信号消去判定方法であることが望まれる。
【００１０】
従って、本発明は、上記事情を考慮してなされたものであり、本発明の目的は、音声符号化データとして送出されてくるＤＴＭＦ信号に対して、処理遅延の増加を抑えつつ、ＤＴＭＦ信号送出元のメディア通信端末装置以外の他メディア通信端末装置においてＤＴＭＦ信号を聴くことのないよう消去、あるいは消去と同等の処理をするＤＴＭＦ信号処理方法、処理装置、中継装置、通信端末装置を提供することである。
【課題を解決するための手段】
【００１１】
上記目的を達成するため、本発明のＤＴＭＦ信号処理方法は、一つのアスペクトによれば、入力される音声データを予め定められた区間長に分割して分割音声データを得るステップと、分割音声データがＤＴＭＦ信号を有するか否かを解析するステップと、解析の結果、および過去に重み付けした際の重み付け情報に基づいて、分割音声データに対する重み付け情報の付加、および既に蓄積されている過去の分割音声データに対応する重み付け情報への加算、の少なくとも一方を実行するステップと、分割音声データと付加された重み付け情報とを蓄積するステップと、重み付け情報に基づいて、蓄積されている分割音声データの特定区間を消去するか否かを判定するステップと、判定の結果が消去を示す場合には、特定区間を無音データ、または雑音データのいずれかに置換して出力し、判定の結果が非消去を示す場合には、特定区間をそのまま出力するステップと、を含む。
【００１２】
本発明のＤＴＭＦ信号処理方法は、他のアスペクトによれば、入力される音声データを予め定められた区間長に分割して分割音声データを得るステップと、分割音声データがＤＴＭＦ信号を有するか否かを解析するステップと、解析の結果、および過去に重み付けした際の重み付け情報に基づいて、分割音声データに対する重み付け情報の付加、および既に蓄積されている過去の分割音声データに対応する重み付け情報への加算の少なくとも一方を実行するステップと、重み付け情報を蓄積するステップと、分割音声データの生成元となった音声符号化データを蓄積するステップと、重み付け情報に基づいて、蓄積されている重み付け情報に該当する特定区間を消去するか否かを判定するステップと、音声符号化データの区間に対応して存在する判定結果のうち、少なくとも１つの判定の結果が消去を示す場合には、音声符号化データを無音相当の符号化データ、または雑音相当の符号化データに置換して出力し、音声符号化データの区間内に対応して存在する判定結果が全て非消去を示す場合には、音声符号化データをそのまま出力するステップと、を含む。
【００１３】
第１の展開形態において、重み付け情報を付加するステップは、解析結果がＤＴＭＦ信号成分を有することを示す場合に、該分割音声データに付加する重み付け情報の値として、過去に蓄積された分割音声データの重み付け情報に加算する予定の重み付け値に比べて重要度の高い値を付加するようにしてもよい。
【００１４】
第２の展開形態において、重み付け情報を付加するステップは、解析結果がＤＴＭＦ信号成分を有することを示す場合に、ハングオーバ値として予め定められた値を設定し、ハングオーバ値が無効になるまでの間、バッファ部に入力する分割音声データの重み付け情報に予め定められた重み付け値を付加するようにしてもよい。
【００１５】
第３の展開形態において、重み付け情報を付加するステップは、外部からデータ損失・誤り情報のみが入力された場合には、分割する予定だった回数分だけ無音データ、または雑音データのいずれかを分割音声データの代替とした上で、直前の分割音声データをバッファに格納した際に実施した重み付け処理と同一の処理を実施するようにしてもよい。
【００１６】
第４の展開形態において、重み付け情報を付加するステップは、音声データと共にデータ損失・誤り情報が外部から入力された場合、データ損失・誤り情報に応じて、解析の結果に係わらず、前回バッファに格納した分割済音声データ付属の重み付け情報と同じ値を付加する処理、解析におけるＤＴＭＦ信号を有するか否かの判定条件を緩めた上で得られる判定結果に基づいて重み付け処理を実施する処理、のうち、いずれか一方を実施するようにしてもよい。
【００１７】
第５の展開形態において、消去するか否かを判定するステップは、バッファに格納されている、最も過去に格納され今回、次処理に出力予定の分割音声データ付属の重み付け情報を起点とした一定の区間範囲の中において、（Ａ）分割音声データ毎の重み付け値について予め定められた重み付け値に達している箇所が規定数に達した場合、（Ｂ）各分割音声データの重み付け値の総和が規定数に達した場合、の少なくとも一方の場合に消去すると判定するようにしてもよい。
【００１８】
第６の展開形態において、消去するか否かを判定するステップは、前回バッファより取り出した分割音声データに対して消去と判定され、今回取り出した分割音声データの重み付け情報の値が有意な値を保持している場合に消去すると判定するようにしてもよい。
【００１９】
第７の展開形態において、特定区間を消去するか否かの判定結果、および解析の結果、のうち、少なくとも一方の情報を元にＤＴＭＦ信号区間を検出し、検出結果を外部に通知するようにしてもよい。
【００２０】
第８の展開形態において、（Ａ）分割音声データに対して消去処理を実施する場合は無音データ、または雑音データのいずれかに置換する処理、（Ｂ）音声符号化データに対して消去処理を実施する場合は、出力先の音声符号化方式が有する、無音データに相当する符号化データ、または雑音データに相当する符号化データのいずれかで置換する処理、のうち少なくとも一方によってＤＴＭＦ信号を処理するようにしてもよい。
【００２１】
本発明のＤＴＭＦ信号処理装置は、一つのアスペクトによれば、入力される音声データを所定の区間単位に分割し、分割音声データを出力するデータ分割部と、分割音声データに対して、ＤＴＭＦ信号を有するか否かを解析し、解析結果を出力するＤＴＭＦ信号成分解析部と、解析結果、および過去に重み付けした際の処理内容、の少なくとも一方の情報に応じて分割音声データに対する重み付け情報の付加、および既にバッファ部に格納した過去の分割音声データに対する重み付け情報の加算の少なくとも一方を実行する重み付け処理部と、分割音声データと付加された重み付け情報とを格納するバッファ部と、バッファ部に格納された重み付け情報を基に蓄積されている分割音声データの特定区間を消去すべきか否か判定し、分割音声データとともにその判定結果を出力するＤＴＭＦ信号消去判定部と、判定結果に応じて、分割音声データを無音データ、または雑音データのいずれかに置換するＤＴＭＦ信号消去処理部と、を備える。
【００２２】
本発明のＤＴＭＦ信号処理装置は、他のアスペクトによれば、入力される音声データを所定の区間単位に分割し、分割音声データを出力するデータ分割部と、分割音声データに対して、ＤＴＭＦ信号を有するか否かを解析し、解析結果を出力するＤＴＭＦ信号成分解析部と、解析結果、過去に重み付けした際の処理内容、の少なくとも一方の情報に応じて分割音声データに対する重み付け情報の付加、および既にバッファに格納した過去の分割音声データに対する重み付け情報の加算の少なくとも一方を実行する重み付け処理部と、重み付け情報を格納するバッファ部と、分割音声データの生成元となった音声符号化データを蓄積する符号化データバッファ部と、バッファ部に格納された重み付け情報を基に符号化データバッファ部に蓄積された音声符号化データを消去すべきか否か判定し、その判定結果を出力するＤＴＭＦ信号消去判定部と、音声符号化データの区間に対応して存在する判定の結果のうち、少なくとも１つの判定の結果が消去を示す場合には、音声符号化データを無音に相当する符号化データ、または雑音に相当する符号化データのいずれかに置換して出力し、音声符号化データの区間内に含まれる１つ以上の判定の結果が全て非消去を示す場合には、音声符号化データをそのまま出力するＤＴＭＦ信号消去処理部と、を備える。
【００２３】
なお、本発明において、重み付け情報とは、対象となる分割音声データの消去（無音化）の可能性の度合いを示すものであって、ＤＴＭＦ信号検出結果に基づいて与えられ、対象の分割音声データを消去するに際し、消去の判定基準を定めるために用いられる。対象とされる分割音声データの重み付け情報の付加に当たっては、前後の分割音声データの重み付け情報も参照される。重み付け値が高ければ消去される可能性は高くなる。
【発明の効果】
【００２４】
本発明によれば、音声データに含まれるＤＴＭＦ信号に対して、重み付けによる消去判定、並びに前段、後段区間消去を実施することで、ＤＴＭＦ信号消去処理によって生じる音声遅延増加を可能な限り抑えつつ、不要なＤＴＭＦ信号の消去を実現することができる。
【００２５】
また、本発明によれば、ＤＴＭＦ信号区間中での、ＩＰ網でのパケットロスによるデータ欠損や、モバイル網での無線エラーによる誤り混入データに対して比較的耐えうるＤＴＭＦ信号消去処理を実現することができる。
【発明を実施するための最良の形態】
【００２６】
本発明の第１の実施形態に係るＤＴＭＦ信号処理装置は、入力される音声データを分割し、分割音声データを出力する手段と、分割音声データに対して、ＤＴＭＦ信号を有するか否かを解析し、解析結果を出力する手段と、解析結果に応じて分割音声データ、および既にバッファに格納した過去の分割音声データに対して重み付けし、バッファに格納する手段と、分割音声データと付属の重み付け情報を格納する手段と、バッファに格納された分割音声データに付加されている重み付け情報を基に消去すべきか否か判定し、分割音声データとともにその判定結果を出力する手段と、判定結果に応じて、分割音声データを無音データ、または雑音データのいずれかに置換する手段と、分割音声データを再び多重化し、外部処理へと出力する手段と、を備えることで、音声データとして送出されてくるＤＴＭＦ信号データを解析し、ＤＴＭＦ信号と判定した区間に対して消去することを機能とする。
【００２７】
また、本発明の第２の実施形態に係るＤＴＭＦ信号処理装置は、音声データを分割し、分割音声データを出力する手段と、分割音声データに対して、ＤＴＭＦ信号を有するか否かを解析し、解析結果を出力する手段と、解析結果に応じて分割音声データ、および既にバッファに格納した過去の分割音声データに対して重み付けし、バッファに格納する手段と、分割音声データと付属の重み付け情報を格納する手段と、分割音声データの基となった音声符号化データを格納する手段と、バッファに格納された分割音声データに付加されている重み付け情報を基に消去すべきか否か判定し、その判定結果を出力する手段と、判定結果に応じて、音声符号化データを、音声符号化データに備わる無音データに相当する音声符号化データ、または雑音データに相当する音声符号化データのいずれかに置換し、出力する手段と、を備えることで、音声データとして送出されてくるＤＴＭＦ信号データを解析し、ＤＴＭＦ信号と判定した区間に対して音声符号化データ単位で消去することを機能とする。
【００２８】
さらに、本発明の実施形態に係る中継装置は、通信網を終端し音声符号化データを含む音声情報を出力する手段と、音声情報から音声符号化データを抽出し、出力する手段と、音声符号化データを復号し、音声データ、損失・誤り情報、更に音声符号化データを出力する手段と、音声データと損失・誤り情報に対して、第１、または第２の発明のＤＴＭＦ信号消去処理を実施し、設定に応じて、音声データ、音声符号化データ、消去判定結果を出力する手段と、音声データを符号化し、音声符号化データを出力する手段と、音声符号化データを送出先に適したデータ形式（例えばＲＴＰ（Real-time Transport Protocol）化の有無、１送出単位の音声区間の時間長等）にして出力する手段と、適したデータを送出先通信網に出力するための通信網を終端する手段と、を備え、一方の通信網から受信するメディア符号化データのうち、音声符号化データを復号し、ＤＴＭＦ解析・消去処理を実施し、必要に応じて符号化を行い、他方の通信網に出力する。
【００２９】
また、本発明の実施形態に係る通信端末装置は、通信網を終端し、音声符号化データを含む音声情報を出力する手段と、音声情報から音声符号化データを取得する手段と、音声符号化データを復号し、音声データ、損失・誤り情報を出力する手段と、音声データ、損失・誤り情報に対して、第１のＤＴＭＦ信号解析・消去処理を実施し、音声データを出力する手段と、音声データを再生する手段と、を備え、通信網から受信するメディア符号化データのうち、音声符号化データを取得・復号し、ＤＴＭＦ信号消去処理を実施し、得られる音声データを再生する。
【実施例１】
【００３０】
次に、本発明の第１の実施例について図面を参照しながら説明する。図１は、本発明の第１の実施例に係るＤＴＭＦ信号処理装置の構成を示すブロック図である。図１においてＤＴＭＦ信号処理装置１０１は、設定・制御処理部１０２、データ分割部１０３、ＤＴＭＦ信号成分解析部１０４、重み付け処理部１０５、バッファ部１０６、ＤＴＭＦ信号消去判定部１０７、ＤＴＭＦ信号消去処理部１０８、データ多重化部１０９、ＤＴＭＦ信号区間検出部１１０を備える。
【００３１】
設定・制御処理部１０２は、データ分割部１０３、ＤＴＭＦ信号成分解析部１０４、重み付け処理部１０５、ＤＴＭＦ信号消去判定部１０７、ＤＴＭＦ信号消去処理部１０８、データ多重化部１０９、ＤＴＭＦ信号区間検出部１１０に必要な情報の提供、並びに外部装置との制御情報の送受信を行う。また、後に詳細を記載するＤＴＭＦ信号区間検出部１１０からの検出通知を外部装置に出力する機能も備える。
【００３２】
データ分割部１０３は、外部から入力される音声データを、予め設定・制御処理部１０２にて定められた一定の区間長で分割し、複数の分割音声データとしてＤＴＭＦ信号成分解析部１０４に出力する。ＤＴＭＦ信号成分解析部１０４は、分割音声データがＤＴＭＦ信号成分を有するか否かの解析を行う。ＤＴＭＦ信号成分を有するか否かの結果、解析で得られたＤＴＭＦ番号、分割音声データの区間内電力等を、分割音声データと共に重み付け処理部１０５へ出力する。なお、ＤＴＭＦ信号成分解析部１０４での解析方法については、特許文献２、３等に記載の方法でも、その他の解析方法に基づいてもよく、本発明では特に限定しない。
【００３３】
重み付け処理部１０５は、解析の結果を基に、今回ＤＴＭＦ信号成分解析部１０４から出力された分割音声データ、およびバッファ部１０６に格納されている過去の分割音声データ、の少なくとも一方に対して、重み付け情報値を付加する処理を行い、バッファ部１０６に格納する。このときの重み付け方法としては、今回入力された分割音声データがＤＴＭＦ信号成分を有していると判断されていた場合、過去の分割音声データに対しても重み付け値を加算する（ＤＴＭＦ信号前段区間重み付け）。この時、ＤＴＭＦ信号成分を有すると判定された分割音声データには、過去の分割音声データに加算する重み付け値に比べて、大きな重み付け値を付加する。また、前回バッファ部１０６に格納した際の分割音声データがＤＴＭＦ信号成分を有するデータの場合、設定・制御処理部１０２から予め設定されるハングオーバ（Ｈａｎｇｏｖｅｒ）区間数を有効にする。そして、以降ＤＴＭＦ信号解析部１０４から出力される分割音声データがＤＴＭＦ成分を有せず、かつハングオーバ区間数が有効の間は、予め定められた重み付け値を付加した上でバッファ部１０６に格納する（ＤＴＭＦ信号後段区間重み付け）。これも、前段区間重み付けと同様の意図で後段区間の音声データの消去を目的としたものである。
【００３４】
また、データ損失・誤り情報のみがＤＴＭＦ信号処理装置１０１に入力され、かつこのデータ損失・誤り情報が、データ損失、もしくは誤りが発生した旨を示す情報である場合、データ分割部１０３は、無音データ、または雑音データのいずれかを分割音声データの代替として生成する。ただし、ＤＴＭＦ信号成分解析部１０４での処理は行わない。そして、重み付け処理部１０５は、前回の分割音声データをバッファ部１０６に格納した際の重み付け処理と同等の処理を実施し、バッファ部１０６に出力する。
【００３５】
また、データ損失・誤り情報と音声データの両者がＤＴＭＦ信号処理装置１０１に入力され、かつデータ損失・誤り情報が、損失、もしくは誤りが発生した旨を示す情報である場合、先に説明したように、ＤＴＭＦ信号成分解析部１０４の結果に基づいて重み付けを行う。さらに、（Ａ）ＤＴＭＦ信号成分解析部１０４の結果に係わらず、前回バッファ部１０６に格納した１つ過去の分割音声データの重み付け情報と同じ値を付加する処理、（Ｂ）ＤＴＭＦ信号成分解析部１０４の解析条件を緩めた上で得られる判定結果に基づき、先に述べた重み付け処理、のいずれか一方を実施してもよい。
【００３６】
前述の（Ａ）、（Ｂ）は、データ損失、あるいは誤り時に生成される音声データに関して、音声符号化方式に備わる誤り隠蔽処理から生成された音声データものなのか、その他の方法で生成された音声データなのか等、入力条件に応じて切り替えることが好ましい。すなわち、生成された音声データの周波数特性がどの程度正確に再現されているかで、採用する方法を判断する。そして、入力条件は、予め設定・制御処理部１０２において、外部処理との制御を実施し、その実施結果を基にデータ分割部１０３、ＤＴＭＦ信号成分解析部１０４、重み付け処理部１０５に適切な動作が実施可能となるように制御を行う。
【００３７】
次に、本発明の実施例に係る重み付け処理について図２を参照して説明する。図２において、横軸は時間であって左方向に時間が経過するものとし、縦軸は重み付け値の大きさを表す。分割音声データＸ〜Ｘ＋５番目の各分割音声データに対して、以下の（１）〜（５）の手順で重み付け処理を行う。図２では、Ｘ＋２、Ｘ＋３、Ｘ＋５番目の分割音声データがＤＴＭＦ信号成分を有し、かつ有効時のハングオーバ値が１以上の値で設定されるような場合を前提とする。また、重み付けのパターンとしては、パターンの例に示すように、Ｎ番目、Ｎ−１番目、Ｎ−２番目に対し、それぞれ３、１、１の単位の重み付け値を付与するものとする。
【００３８】
（１）Ｘ、Ｘ＋１番目に対する重み付け処理では、ＤＴＭＦ成分無の結果、対象となる分割音声データがＤＴＭＦ成分を有しないので重み付け値を０とする。
【００３９】
（２）Ｘ＋２番目に対する重み付け処理では、ＤＴＭＦ成分有の結果、ハングオーバ値を１以上の値に設定し、Ｘ、Ｘ＋１番目の重み付け情報に重み付け値（重み付け１単位）を加算するとともに、Ｘ＋２番目自体にはそれより大きな重み付け値（重み付け３単位）を付加する（図２のＡ）。
【００４０】
（３）Ｘ＋３番目に対する重み付け処理は、ＤＴＭＦ成分有の結果、ハングオーバ値を１以上の値に設定し、Ｘ＋１、Ｘ＋２番目の重み付け情報に重み付け値（重み付け１単位）を加算するとともに、Ｘ＋３番目自体にはそれより大きな重み付け値（重み付け３単位）を付加する（図２のＢ）。
【００４１】
（４）Ｘ＋４番目に対する重み付け処理は、ＤＴＭＦ信号成分無であるが、ハングオーバ値が有効のため、予め定められた重み付け値（重み付け１単位）を付加する（図２のＣ）。
【００４２】
（５）Ｘ＋５番目に対する処理の際は、ＤＴＭＦ信号成分有の結果、ハングオーバ値を１以上の値に設定し、Ｘ＋３、Ｘ＋４番目の重み付け情報に重み付け値（重み付け１単位）を加算するとともに、Ｘ＋５番目自体にはそれより大きな重み付け値（重み付け３単位）を付加する（図２のＤ）。
【００４３】
なお、図２での各重み付けの値や、その重み付けの対象となる数等は、あくまで説明の容易さの都合上の一例であり、必ずしも限定しないことは勿論である。
【００４４】
バッファ部１０６は、分割音声データと、各分割データに対応して付加される重み付け情報を格納する。
【００４５】
ＤＴＭＦ信号消去判定部１０７は、バッファ部１０６内に格納されている最も過去に格納された分割音声データを取出し、この分割音声データが消去すべきか否かを判定する。本処理では、（Ａ）取り出した分割音声データ、並びにバッファ内に格納されている最も過去の分割音声データを起点とした一定の範囲中の各重み付け情報値が、予め決定された規定数に達し、それを満足した個数が基準値に達した場合、（Ｂ）各重み付け値の総和が予め決定された基準値に達した場合、の少なくとも一方の場合に、その時点で取り出した出力対象の分割音声データを消去すべきであると判定する。その判定結果と共に分割音声データをＤＴＭＦ信号消去処理部１０８へ出力する。
【００４６】
また、前回ＤＴＭＦ信号消去処理部１０８に出力した過去の分割音声データが、消去すべきと判定された場合で、かつ今回取り出した分割済音声データに付加された重み付け情報値が少しでも値を持っている場合には、判定結果を消去すべきであるとの判定に変更した上で、この判定結果と分割音声データをＤＴＭＦ信号消去処理部１０８へ出力する。
【００４７】
ＤＴＭＦ信号消去処理部１０８は、ＤＴＭＦ信号消去判定部１０７から得られる判定結果が、消去すべきであるとの判定であった場合に、バッファ部１０６より出力される分割音声データに対して、無音データ、または雑音データのいずれかに置換し、該判定結果とともにデータ多重化部１０９へ出力する。
【００４８】
データ多重化部１０９は、ＤＴＭＦ信号消去処理部１０８から出力される分割音声データを、設定・制御処理部１０２から指示される音声データ区間長になるまで貯め、一定の区間長毎に音声データを出力先の外部装置へと出力する。更に、少なくとも１つ分割音声データに消去処理が実施されていれば、多重化の対象となった複数の分割音声データに付属する判定結果は、消去すべきとの判定結果として、多重化された音声データとともに出力される。なお、本実施例では、出力する音声データを出力先に見合った時間区間長にした上で出力しているが、そうしなくてもよい。また、出力する判定結果は、出力先で参照する必要がなければ出力しなくともよい。
【００４９】
ＤＴＭＦ信号区間検出部１１０は、ＤＴＭＦ信号成分解析結果から出力される各情報、ＤＴＭＦ信号消去判定部１０７から得られる情報、の少なくとも一方の情報を利用して、ＤＴＭＦ信号を検出したか否かを判定し、その結果を設定・制御処理部１０２へ通知する。なお、ＤＴＭＦ信号区間検出部１１０からの情報を利用する場合には、特許文献２等に記載の方法で実施してもよい。
【００５０】
第１の実施例では、入力音声データを複数の分割音声データに分割し、分割音声データそれぞれに対してＤＴＭＦ信号が含まれているか否かの解析結果を求める。解析結果、あるいはデータ損失・誤り情報の有無、あるいは過去にバッファに格納した際の重み付け処理の内容、の少なくとも１つに基づき、分割音声データ、並びに過去に格納した分割音声データ、に対して重み付け情報を付加する。その重み付け情報、あるいは過去に出力した際の判定結果、の少なくとも１つを基に消去するか否かを判定し、その判定結果に応じて分割音声データを無音データ、または雑音データのいずれかに置換し、出力する。このため、実際の消去処理実施に至るまで、少なくともＤＴＭＦ信号区間長分の音声データをバッファに蓄えておく必要がなく、消去処理に伴う音声遅延を抑えた上でのＤＴＭＦ信号の消去が可能となる。
【実施例２】
【００５１】
図３は、本発明の第２の実施例に係るＤＴＭＦ信号処理装置の構成を示すブロック図である。図３において、ＤＴＭＦ信号処理装置３０１は、設定・制御処理部３０２、データ分割部１０３、ＤＴＭＦ信号成分解析部１０４、重み付け処理部３０３、バッファ部１０６、３０４、ＤＴＭＦ信号消去判定部３０５、ＤＴＭＦ信号消去処理部３０６、ＤＴＭＦ信号区間検出部１１０を備える。図３において、図１と同一の符号は同一物を示し、設定・制御処理部３０２、重み付け処理部３０３、ＤＴＭＦ信号消去判定部３０５、ＤＴＭＦ信号消去処理部３０６は、それぞれ図１の設定・制御処理部１０２、重み付け処理部１０５、ＤＴＭＦ信号消去判定部１０７、ＤＴＭＦ信号消去処理部１０８に相当する。図３において、以下、第１の実施例と異なる箇所を中心に、図面を参照しながら説明する。なお、ＤＴＭＦ信号処理装置３０１は、ＤＴＭＦ信号処理装置１０１の入力音声データの基となる音声符号化データが出力先でも同一であるという前提の下での、別の実施例を示している。
【００５２】
第２の実施例の場合、ＤＴＭＦ信号処理部３０１の入力として、音声データ、データ損失・誤り情報の他に、更に入力する音声データ区間長に相当する音声符号化データを入力に想定している。設定・制御処理部３０２は、第１の実施例に記載の設定・制御処理部１０２の機能の他に、取り扱う音声符号化方式の情報を取得し、データ分割部１０３、ＤＴＭＦ信号成分解析部１０４、重み付け処理部３０３、ＤＴＭＦ信号消去判定部３０５、ＤＴＭＦ信号消去処理部３０６、ＤＴＭＦ信号区間検出部１１０への情報の提供を行う。音声符号化データは、データ分割部１０３、ＤＴＭＦ信号解析部１０４では何も処理されず、重み付け処理部３０３を経て、バッファ部３０４に格納される。そして、ＤＴＭＦ信号消去処理判定部３０５において、取り出した重み付け情報に該当する音声符号化データをバッファ部３０４から取り出し、第１の実施例に記載の方法で得る消去すべきか否かの判定の結果と共にＤＴＭＦ信号消去処理部３０６に出力する。なお、複数の分割音声データで、１つの音声符号化データ相当の区間長を表す場合が考えられるが、音声符号化データを取り出すタイミングは、区間長内の１つ以上の分割音声データに付加された重み付け情報に対する判定処理をしている間であれば、どのタイミングで取り出してもよい。また、バッファ部１０６では、格納する情報として、重み付け情報とともに分割音声データを格納していたが、本実施例においては、バッファ部１０６への分割音声データの格納は実施してもよいし、しなくてもよい。
【００５３】
ＤＴＭＦ信号消去処理部３０６は、音声符号化データに相当する、１つ、または複数の分割音声データの、消去すべきか否かの判定の結果から、少なくとも１つでも消去すべきとの判定結果が含まれていれば、音声符号化データに対しては消去すべきと判定する。そして、音声符号化データに対して消去すべきと判定した場合、音声符号化データに対して無音データに相当する音声符号化データ、または雑音データに相当する音声符号化データのいずれかに置換し、消去すべきとの判定の結果とともに外部処理へと出力する。一方、音声符号化データに対して非消去と判定した場合は、非消去の判定の結果とともに該音声符号化データを出力する。なお、判定の結果については、外部処理が参照しない場合には出力しなくてもよい。
【００５４】
以上の一連の処理により、本実施例は、入出力の音声符号化方式が同じ条件であるという前提ではあるが、音声符号化データの単位で音声データでの消去処理と同等の効果をもたらす。
【００５５】
第２の実施例では、第１の実施例の重み付けと同様の重み付け、判定方法を用いる。その上で、入力に音声符号化データも想定し、音声符号化データを格納するバッファを設け、判定方法の結果得られる消去すべきか否かの結果に応じて、音声符号化データを無音データに相当する音声符号化データ、あるいは雑音データに相当する音声符号化データのいずれかに置換し、出力する。入出力の音声符号化方式が同一の場合には、第１の実施例と同様に消去処理に伴う音声遅延を抑えたＤＴＭＦ信号の消去が可能となる。
【実施例３】
【００５６】
次に、ＤＴＭＦ信号処理装置を適用する通信システムについて説明する。図４は、本発明のＤＴＭＦ信号処理が適用される通信システムの構成を示すブロック図である。図４において、通信システムは、メディア通信端末装置４０１とメディア通信端末装置４０２とが、中継装置４０３を介在し、メディア通信端末装置４０１と中継装置４０３間の通信網４０４と、メディア通信端末装置４０２と中継装置４０３間の通信網４０５とを経由し、双方向通信を実現するシステムである。このような通信システムにおけるメディア通信端末装置４０１、４０２、中継装置４０３において、第１あるいは第２の実施例のＤＴＭＦ信号処理装置が実装される。なお、通信網４０４、４０５は、回線網やＩＰ網であってもよく、特に限定はしない。また、メディア通信端末装置４０１、４０２についても、モバイル端末装置、あるいはＩＰ網で使用されるＩＰ網用メディア通信端末装置であってもよい。また、図４では説明上、１つの中継装置と２つのメディア通信端末装置を想定しているが、前者は通信経路上に複数介在していてもよく、後者もまた３つ以上存在していてもよい。
【００５７】
次に中継装置４０３について説明する。中継装置４０３は、受信する音声符号化データに含まれるＤＴＭＦ信号の消去を実施した後、得られる音声符号化データを送信する機能を備える。さらに、ＤＴＭＦ信号消去・検出と合わせて、（Ａ）音声符号化データとして送出されてくるＤＴＭＦ信号を検出し、その結果を基に、ＤＴＭＦ発信元メディア通信端末装置からみて、該中継装置からの送信先の１つ、または複数のメディア通信端末装置方向の処理を切換える機能（例えば、検出を契機にＤＴＭＦ発信元からの音声や映像の代わりとして、１つ、または複数の接続対象通信端末装置に特定の音声、または特定の映像等、少なくとも１つ以上の切換えが為されたメディア情報を中継装置から送出するための開始・停止・切換等の制御機能や、あるいは類似の機能として、１つ、または複数の接続対象通信端末装置が、該中継装置でのＤＴＭＦ信号検出に伴い送出される通知を受信し、その内容に応じて自装置内の処理を切換える、ことで開始・停止・切換等が実現できる機能でもよい）、（Ｂ）音声符号化データとして送出されてくるＤＴＭＦ信号を検出し、該中継装置内のＤＴＭＦ発信元メディア通信端末装置方向の処理を切換える機能（例えば、ＤＴＭＦ発信者方向への送出音声データの切換、または同映像表示の切換機能や、前記（Ａ）において、送出映像の確認のため、ＤＴＭＦ発信元装置に対しても前記映像のデータを送出する機能等）、（Ｃ）一方から受信するメディア（音声あるいは映像、文字情報等）符号化方式から他方に送出するメディア符号化方式に変換する機能、（Ｄ）一方の通信網を終端する呼制御方式から他方の通信網を終端する呼制御方式に変換する機能、（Ｅ）複数の接続対象通信端末装置から受信する少なくとも１つのメディア符号化データを少なくとも１つのミキシングされたメディア符号化データ（例えば、音声なら複数の話者音声符号化データを１つの音声符号化データに、映像なら複数の話者映像符号化データを縮小や結合等の加工処理した上で１つの映像符号化データに、文字列情報なら複数の話者文字データ情報を、話者情報と文字データを１組とし、１つの結合文字列情報形式）に変換し、複数の接続対象通信端末装置へと送信する機能、のうち、少なくとも１つの機能を更に備える中継装置であってもよい。また、上記（Ｃ）、（Ｅ）は、符号化方式の変換対象が音声だけでなく、非音声（例えば映像や文字列情報）の符号化方式の変換も担う中継装置であってもよい。（Ａ）〜（Ｅ）のいずれの機能を備える場合でも、ＤＴＭＦ信号処理装置１０１を備えるのであれば、入力を音声データ、あるいは損失・誤り情報とし、出力を音声データとする。また、ＤＴＭＦ信号処理装置３０１を備えるのであれば、入力を音声データ及び該当する音声符号化データ、あるいは損失・誤り情報とし、出力を音声符号化データとする。
【００５８】
図５は、本発明の実施例に係る中継装置の構成を示すブロック図である。図５において、中継装置４０３は、設定・呼接続処理部５０２、通信網終端部５０３、音声符号化データ取得部５０４、復号部５０５、ＤＴＭＦ信号処理装置３０１（１０１）、符号化部５０６、音声符号化データ送信部５０７、通信網終端部５０８を備える。なお、説明の容易上、図５は、一方から他方への１対１の通信に介在する中継装置の片方向に対し、ＤＴＭＦ信号処理装置を組み入れた場合の構成としているが、逆方向の処理は、本方向と同様の処理を具備してもよい。
【００５９】
中継装置４０３は、設定・呼接続処理部５０２にて、接続先装置との呼制御情報の送受信、並びに通信網終端部５０３、音声符号化データ取得部５０４、復号部５０５、ＤＴＭＦ信号処理装置３０１（１０１）、符号化部５０６、音声符号化データ送信部５０７、通信網終端部５０８の各処理部に必要な情報、例えば音声符号化方式、通信網終端方式、各種設定情報を設定する。なお、この時の呼接続方式については、特に限定はしない。また、装置内に組み込まれている、ＤＴＭＦ信号処理からのＤＴＭＦ信号検出通知等を受信し、前述のように、自装置内の動作切替や、対向装置への通知等、ＤＴＭＦ信号に対する動作を具備してもよい。
【００６０】
通信網終端部５０３は、受信側の網終端を実施し、音声符号化データを含む音声情報を音声符号化データ取得部５０４へと出力する。音声符号化データ取得部５０４は、音声情報から音声符号化データを抽出し、更にデータ損失の有無、あるいはデータ誤りの有無の情報とともに、復号部５０５へ出力する。復号部５０５では設定・呼接続処理部５０２にて予め設定される音声符号化方式にて、音声符号化データ取得部５０４より得られる音声符号化データを復号し、音声データ、並びにデータ損失・誤り情報をＤＴＭＦ信号処理装置３０１（１０１）に出力する。
【００６１】
ＤＴＭＦ信号処理装置１０１、３０１については、本発明の第１又は第２の実施例を参照することで、ここでの説明は省略する。
【００６２】
符号化部５０６は、ＤＴＭＦ信号処理装置３０１（１０１）から消去すべきか否かの情報と音声データが出力される場合に、該当音声データに対して、設定・呼接続処理部５０２から設定される音声符号化方式に基づき符号化処理を行い、得られる音声符号化データと消去すべきか否かの情報を音声符号化データ送信部５０７へ出力する。
【００６３】
音声符号化データ送信部５０７では、符号化部５０６から出力される音声符号化データ、あるいは、設定呼接続処理部５０２にて予め設定され、結果的にＤＴＭＦ信号消去処理部３０１から出力される音声符号化データに対して、送出先の通信網に応じたデータ形式にし、通信網終端部５０８へと適したデータを出力する。
【００６４】
ここで、送出先通信網がＩＰ網である場合、音声符号化データと共に受け取る、消去すべきか否かの情報と、設定・呼接続処理部５０２から要求される設定とに応じて、以下の（Ａ）、（Ｂ１）、（Ｂ２）の少なくとも１つの動作を行う。
【００６５】
（Ａ）設定・呼接続処理部５０２にて常時送出が要求されていれば、パケット化処理を実施した上で出力する。
（Ｂ１）設定・呼接続処理部５０２にて間欠送信が許可されており、消去すべきか否かの情報が消去すべきであれば、該当音声符号化データのパケット化をせず送出しない。
（Ｂ２）設定・呼接続処理部５０２にて間欠送信が許可されており、消去すべきか否かの情報が消去しないであれば、例えば有音開始時のＲＴＰヘッダ等の値の設定してパケット化し、送出する。
【００６６】
音声符号化データを送信しないことにより、ＤＴＭＦ信号を実際に消去したことと同等の効果が得られ、かつ送出先の帯域を有効に利用することに繋がる。
【００６７】
通信網終端部５０８では、送出先の通信網との網終端を行い、外部装置に適したデータ形式で送出する処理を行う。
【００６８】
第３の実施例では、複数のメディア通信端末装置間に中継装置が介在する双方向メディア通信において、メディア通信端末装置から音声データとしてＤＴＭＦ信号が送出されてくる場合に、間に介在する中継装置、あるいは受信側のメディア通信端末装置では、ＤＴＭＦ信号に対して、処理遅延を抑えつつ消去するように動作する。したがって、利用ユーザによっては不要と為りえるＤＴＭＦ信号を聴かせることなく、かつＤＴＭＦ信号消去に伴う処理遅延による端末間の音声遅延増加を抑えつつ双方向メディア通信を実現できる。
【００６９】
また、中継装置では、第１、第２の実施例で説明したＤＴＭＦ信号処理を組み入れた場合の構成の一例を示している。一方の通信網を終端し、音声符号化データを取得、復号し、ＤＴＭＦ信号消去部から音声データが得られる場合には符号化した後、他方の通信網に適したデータ形式で出力する。第３の実施例においても、第１、第２の実施例と同様に消去処理に伴う音声遅延を抑えたＤＴＭＦ信号の消去が可能となる。そして、このようなＤＴＭＦ信号処理を中継装置に組み入れることで、組み入れた中継装置から先の中継装置、もしくは相手先メディア通信端末装置に対して、不要なＤＴＭＦ信号を送出することなく、双方向通信を実現することが可能となる。
【実施例４】
【００７０】
図６は、本発明の実施例に係るメディア通信端末装置の構成を示すブロック図である。図６において、メディア通信端末装置４０１（４０２）は、設定・呼接続処理部６０２、通信網終端部６０３、音声符号化データ取得部６０４、復号部６０５、ＤＴＭＦ信号処理装置１０１、音声再生部６０６を備える。通信網終端部６０３、音声符号化データ取得部６０４、復号部６０５は、それぞれ図５の通信網終端部５０３、音声符号化データ取得部５０４、復号部５０５に相当する。以下、第３の実施例と異なる箇所のみ、図面を参照しながら説明する。なお、説明の容易上、図６のメディア通信端末装置は、受信側の音声処理のみを図示したものであるが、送信側の処理や、その他複数のメディア符号化データを受信するメディア通信端末装置であってもよい。また、本実施例で記載するメディア通信端末装置は、受信する音声符号化データに含まれているＤＴＭＦ信号を消去し、得られる音声データを再生する機能を備えるが、ＤＴＭＦ信号消去・検出を起点として、非音声メディア（例えば映像や文字情報）の形として、利用ユーザに表示・通知する等の、付加価値サービスを提供してもよい。
【００７１】
メディア通信端末装置４０１（４０２）は、設定・呼接続処理部６０２にて、接続先の中継装置、もしくはメディア通信端末装置との呼制御情報の送受信、並びに通信網終端部６０３、音声符号化データ取得部６０４、復号部６０５、ＤＴＭＦ信号処理装置１０１、音声再生部６０６の各処理部に必要な情報、例えば音声符号化方式、通信網終端方式、各種設定情報を設定する。なお、この時の呼接続方式については、特に限定はしない。
【００７２】
通信網終端部６０３は、網終端を実施し、音声符号化データを含む音声情報を出力する。音声符号化データ取得部６０４は、通信網終端部６０３から出力される音声情報を取得し、音声符号化データを抽出し、更にデータ損失の有無、あるいはデータ誤り有無等の情報とともに、復号部６０５へ出力する。復号部６０５は、設定・呼接続処理部６０２にて予め設定される音声符号化方式にて、音声符号化データを復号し、得られる音声データ、並びに損失・誤り情報をＤＴＭＦ信号処理装置１０１に出力する。
【００７３】
ＤＴＭＦ信号処理装置１０１については、本発明の第１の実施例を参照することで、ここでの説明を省略する。
【００７４】
本実施例の場合、ＤＴＭＦ信号処理装置１０１から得られるのは音声データであり、この音声データは、音声再生部６０６へと出力される。結果としてメディア通信端末装置を使用するユーザは、音声再生部６０６から出力される、ＤＴＭＦ信号の除かれた音声を聴くことが可能となる。
【００７５】
以上のように第４の実施例では、第１、第２の実施例で説明したＤＴＭＦ信号処理装置をメディア通信端末装置に組み入れた場合の構成の一例を示したものである。一方の通信網を終端し、音声符号化データを取得、復号し、ＤＴＭＦ信号処理装置から得られる音声データを再生する。第４の実施例においても、第１、第２の実施例と同様に消去処理に伴う音声遅延を抑えたＤＴＭＦ信号の消去が可能となる。そして、このようなＤＴＭＦ信号処理をメディア通信端末装置に組み入れることで、メディア通信端末装置を使用するユーザに不要なＤＴＭＦ信号を再生することなく、双方向通信を実現することが可能となる。
【図面の簡単な説明】
【００７６】
【図１】本発明の第１の実施例に係わるＤＴＭＦ信号処理装置の構成を示すブロック図である。
【図２】本発明の第１、第２の実施の形態に係わるＤＴＭＦ消去方法を示す図である。
【図３】本発明の第２の実施例に係わるＤＴＭＦ信号処理装置の構成を示すブロック図である。
【図４】本発明の第３の実施例に係わる通信システムの全体の構成を示すブロック図である。
【図５】本発明の第３の実施例に係わる中継装置の構成を示すブロック図である。
【図６】本発明の第４の実施例に係わるメディア通信端末装置の構成を示すブロック図である。
【符号の説明】
【００７７】
１０１、３０１  ＤＴＭＦ信号処理装置
１０２、３０２  設定・制御処理部
１０３  データ分割部
１０４  ＤＴＭＦ信号成分解析部
１０５、３０３  重み付け処理部
１０６、３０４  バッファ部
１０７  ＤＴＭＦ消去判定部
１０８、３０６  ＤＴＭＦ信号消去処理部
１０９  データ多重化部
１１０  ＤＴＭＦ信号区間検出部
３０５  ＤＴＭＦ信号消去判定部
４０１、４０２  メディア通信端末装置
４０３  中継装置
４０４、４０５  通信網
５０２、６０２  設定・呼接続処理部
５０３、５０８、６０３  通信網終端部
５０４、６０４  音声符号化データ取得部
５０５、６０５  復号部
５０６  符号化部
５０７  音声符号化データ送信部
６０６  音声再生部
【図１】
2006222893.tif 000003
【図２】
2006222893.tif 000004
【図３】
2006222893.tif 000005
【図４】
2006222893.tif 000006
【図５】
2006222893.tif 000007
【図６】
2006222893.tif 000008