(57)【要約】【課題】回線の混雑度に応じて、各フレームの画質、音質及び／又は転送速度を変化させてデータ転送することにより、回線の空きを待たずに、一定水準以上の画質及び／又は音質を維持しつつ、効率良くデータの送信を行う。【解決手段】送信側端末２と受信側端末４は夫々同一の送信及び受信機能を有する。送信機能は、各フレーム毎のデータ送信時間を計測し、これが増加傾向又は減少傾向の何れかを判定し、その程度により、画質・音質及び／又はフレームレートを１フレーム毎に変化調整したデータを受信側４に送信する。受信機能は、送信側２から送信された各フレーム毎のデータ受信時間を計測し、該受信時間を送信側２に送信する。送信側端末２は前記データ送信時間及び／又はデータ受信時間から前記画質・音質及び／又はフレームレートの調整を行う。【選択図】　　　　図３
2004080200.tif 000002
【特許請求の範囲】
【請求項１】
可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又は転送レートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを送信するのに要するデータ送信時間を計測し、該データ送信時間からデータ回線の混雑度（空き状態）を判定し、前記データ送信時間の大又は小に応じて、当該フレームデータの画質、音質及び／又は転送フレームレートを低下又は向上させて送信する送信機能を有することを特徴とするデータ通信端末装置。
【請求項２】
可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又は転送レートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを受信側の通信端末装置が受信するのに要するデータ受信時間を用いて、該データ送信時間からデータ回線の混雑度（空き状態）を判定し、前記データ送信時間の大又は小に応じて、当該フレームデータの画質、音質及び／又は転送フレームレートを低下又は向上させて送信する送信機能を有することを特徴とするデータ通信端末装置。
【請求項３】
可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又は転送レートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを当該通信端末装置が送信するのに要するデータ送信時間と、前記当該フレームデータの１つ以上前の各フレームデータを受信側の通信端末装置が受信するのに要するデータ受信時間とを用いて、前記データ送信時間とデータ受信時間からデータ回線の混雑度（空き状態）を判定し、前記データ送信時間の大又は小に応じて、当該フレームデータの画質、音質及び／又は転送フレームレートを低下又は向上させて送信する送信機能を有することを特徴とするデータ通信端末装置。
【請求項４】
可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、他の通信端末装置から順次送信される各フレームデータを受信するのに要するデータ受信時間を計測し、該データ受信時間を送信側の通信端末装置に送信するデータ受信時間計測・送信機能を有することを特徴とする請求項１、２又は３に記載のデータ通信端末装置。
【請求項５】
前記データ送信時間は、送信側の通信端末装置における当該フレームデータの１つ以上前のフレームデータのデータ送信開始時からデータ送信終了までの時間であることを特徴とする請求項１又は３に記載のデータ通信端末装置。
【請求項６】
前記データ受信時間は、受信側の通信端末装置における当該フレームデータの１つ以上前のフレームデータのデータ受信開始時からデータ受信終了までの時間であることを特徴とする請求項２、３又は４に記載のデータ通信端末装置。
【請求項７】
前記データ送信時間からデータ回線の混雑度（空き状態）を判定する場合、現在送信されたフレームＦＮ　のデータ送信時間Ｔｔ　と１つ前のフレームＦ（Ｎ−１）のデータ送信時間との間で、データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームＦ（Ｎ＋１）のデータの画質、音質及び／又は転送フレームレートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームＦ（Ｎ＋１）のデータの画質、音質及び／又は転送フレームレートを向上させてデータの送信を行うことを特徴とする請求項１又は５に記載のデータ通信端末装置。
【請求項８】
前記データ受信時間からデータ回線の混雑度（空き状態）を判定する場合、現在送信されたフレームＦＮ　のデータ送信時間Ｔｔ　と１つ前のフレームＦ（Ｎ−１）のデータ送信時間との間で、データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、１フレーム後に送信するフレームＦ（Ｎ＋２）のデータの画質、音質及び／又は転送フレームレートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、１フレーム後に送信するフレームＦ（Ｎ＋２）のデータの画質、音質及び／又は転送フレームレートを向上させてデータの送信を行うことを特徴とする請求項２、４又は６に記載のデータ通信端末装置。
【請求項９】
前記データ送信時間とデータ受信時間からデータ回線の混雑度（空き状態）を判定する場合、現在送信されたフレームＦＮ　の前記データ受信時間Ｔｒ　と１つ前のフレームＦ（Ｎ−１）の前記データ送信時間Ｔｔ　との間で、時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、１フレーム後に送信するフレームＦ（Ｎ＋２）のデータの画質、音質及び／又は転送レートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、１フレーム後に送信するフレームＦ（Ｎ＋２）のデータの画質、音質及び／又は転送レートを向上させてデータの送信を行うことを特徴とする請求項３、４、５又は６に記載のデータ通信端末装置。
【請求項１０】
前記データ回線の混雑度（空き状態）に応じて、画質、音質及び／又は転送フレームレートを制御する際、転送フレームレートよりも画質及び／又は音質を優先させることを特徴とする請求項１、２、３、６、７、８又は９に記載のデータ通信端末装置。
【請求項１１】
前記画質、音質及び／又は転送レートを低下させてデータの送信を行う際に、再生画像及び再生音声が認識可能な一定品質を維持することを特徴とする請求項１、２、３、６、７、８又は９に記載のデータ通信端末装置。
【請求項１２】
前記画質は画像データのデータ圧縮率及び画面サイズ（画面の縦、横のピクセル数）、音質は音声データのデータ圧縮率からなることを特徴とする請求項１、２、３、６、７、８、９、１０又は１１に記載のデータ通信端末装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、データ回線の混雑度（空き状態）に応じて夫々のデータフレームの画質、音質及び／又は転送レートを調節（制御）してデータ転送するデータ通信端末装置に関する。
【０００２】
【従来の技術】
従来のデータ通信端末装置においては、データ回線の混雑に応じて端末の配信条件の設定範囲を変更してサーバの負荷を軽減するもの（特開２００２−３４０２４号公報参照）、データ回線の混雑度を監視する装置として、監視するデータ送受信の転送時間が予め設定された時間と比べて、下回った時に混雑状態と判定し、回線との接続を中断してデータの送受信を停止するもの（特開２００２−５５９０２号公報参照）、本来のデータファイルの送信とは別に、テストファイルを送信し、テストファイルの転送時間が所定の時間以内か否かによりデータ回線の混雑状況を判定し、テストファイルの転送時間が所定の時間よりも長い時は、データ回線が混雑状態であると判定して、本来の送信データの画像データの圧縮率を上げるか、又は、フレームレートを下げることにより画像を安定させるもの（特開２０００−２９５２７２号公報参照）等があるが、これらは対象となる送受信データが画像データのみであり、本発明のような、画像データと音声データとから構成されるものではなく、更に、データ回線の混雑度を判定する機構も、データ送受信の転送時間と予め設定された時間との比較により行うもので、判定が時事刻刻と変化するデータ回線の混雑度を正確に判定することが出来ず、データ回線の混雑度に応じた画質、音質及び／又は転送フレームレートで効率良く適正な質及び速度でデータを送信するものではないという問題があった。
【０００３】
【発明が解決しようとする課題】
本発明は前記問題点を解消するもので、本発明の目的は、データ回線の時事刻刻の混雑度（空き状態）をリアルタイムで計測し、その時点でのデータ回線の混雑の程度に応じて、単位フレームデータの画質、音質及び／又は転送速度を変化させてデータ転送することにより、簡単な装置構成により、データ回線の空きを待たずに、一定水準以上の画質及び／又は音質を維持しつつ、効率良く画像データと音声データとから構成されるフレームデータの送信又は転送を行うことである。
【０００４】
【課題を解決するための手段】
本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又は転送レートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを送信するのに要するデータ送信時間を計測し、該データ送信時間からデータ回線の混雑度（空き状態）を判定し、前記データ送信時間の大又は小に応じて、当該フレームデータの画質、音質及び／又は転送フレームレートを低下又は向上させて送信する送信機能を有するデータ通信端末装置である。
【０００５】
本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又は転送レートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを受信側の通信端末装置が受信するのに要するデータ受信時間を用いて、該データ送信時間からデータ回線の混雑度（空き状態）を判定し、前記データ送信時間の大又は小に応じて、当該フレームデータの画質、音質及び／又は転送フレームレートを低下又は向上させて送信する送信機能を有するデータ通信端末装置である。
【０００６】
本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又は転送レートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを当該通信端末装置が送信するのに要するデータ送信時間と、前記当該フレームデータの１つ以上前の各フレームデータを受信側の通信端末装置が受信するのに要するデータ受信時間とを用いて、前記データ送信時間とデータ受信時間からデータ回線の混雑度（空き状態）を判定し、前記データ送信時間の大又は小に応じて、当該フレームデータの画質、音質及び／又は転送フレームレートを低下又は向上させて送信する送信機能を有するデータ通信端末装置である。
【０００７】
本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、他の通信端末装置から順次送信される各フレームデータを受信するのに要するデータ受信時間を計測し、該データ受信時間を送信側の通信端末装置に送信するデータ受信時間計測・送信機能を有するデータ通信端末装置である。
【０００８】
本発明は、前記データ送信時間は、送信側の通信端末装置における当該フレームデータの１つ以上前のフレームデータのデータ送信開始時からデータ送信終了までの時間とするデータ通信端末装置である。
【０００９】
本発明は、前記データ受信時間は、受信側の通信端末装置における当該フレームデータの１つ以上前のフレームデータのデータ受信開始時からデータ受信終了までの時間とするデータ通信端末装置である。
【００１０】
本発明は、前記データ送信時間からデータ回線の混雑度（空き状態）を判定する場合、現在送信されたフレームＦＮ　のデータ送信時間Ｔｔ　と１つ前のフレームＦ（Ｎ−１）のデータ送信時間との間で、データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームＦ（Ｎ＋１）のデータの画質、音質及び／又は転送フレームレートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームＦ（Ｎ＋１）のデータの画質、音質及び／又は転送フレームレートを向上させてデータの送信を行うデータ通信端末装置である。
【００１１】
本発明は、前記データ受信時間からデータ回線の混雑度（空き状態）を判定する場合、現在送信されたフレームＦＮ　のデータ送信時間Ｔｔ　と１つ前のフレームＦ（Ｎ−１）のデータ送信時間との間で、データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、１フレーム後に送信するフレームＦ（Ｎ＋２）のデータの画質、音質及び／又は転送フレームレートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、１フレーム後に送信するフレームＦ（Ｎ＋２）のデータの画質、音質及び／又は転送フレームレートを向上させてデータの送信を行うデータ通信端末装置である。
【００１２】
本発明は、前記データ送信時間とデータ受信時間からデータ回線の混雑度（空き状態）を判定する場合、現在送信されたフレームＦＮ　の前記データ受信時間Ｔｒ　と１つ前のフレームＦ（Ｎ−１）の前記データ送信時間Ｔｔ　との間で、時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、１フレーム後に送信するフレームＦ（Ｎ＋２）のデータの画質、音質及び／又は転送レートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、１フレーム後に送信するフレームＦ（Ｎ＋２）のデータの画質、音質及び／又は転送レートを向上させてデータの送信を行うデータ通信端末装置である。
【００１３】
本発明は、前記データ回線の混雑度（空き状態）に応じて、画質、音質及び／又は転送フレームレートを制御する際、転送フレームレートよりも画質及び／又は音質を優先させるデータ通信端末装置である。
【００１４】
本発明は、前記画質、音質及び／又は転送レートを低下させてデータの送信を行う際に、再生画像及び再生音声が認識可能な一定品質を維持するデータ通信端末装置である。
【００１５】
本発明は、前記画質は画像データのデータ圧縮率及び画面サイズ（画面の縦、横のピクセル数）、音質は音声データのデータ圧縮率からなるデータ通信端末装置である。
【００１６】
【発明の実施の形態】
本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータを順次、送信側の通信端末装置からブロードバンドデータ回線を介して受信側の通信端末装置にデータ転送するデータ通信端末装置に関するものである。前記圧縮された可変長のフレームデータＦは図４（ａ）に示すように、可変長のデータ圧縮された画像情報Ｄｂと可変長のデータ圧縮された音声情報Ｄａとから構成される。これら画像情報Ｄｂ及び音声情報Ｄａは圧縮されていない画像情報Ｄｂ’及び音声情報Ｄａ’からなる１フレーム分の可変長フレームデータＦ’を夫々これらに固有の圧縮方式により、データ通信端末装置１内でデータ圧縮される。
【００１７】
本発明のデータ通信端末装置は図１乃至３に示すように、データ回線３を介して送信側と受信側とに設置されるが、送信側データ通信端末装置２と受信側データ通信端末装置４とは全く同一の構成であり、その装置内に基本的な機能であるデータの送信機能Ａ及び受信機能Ｂを具備している。
【００１８】
送信機能Ａは、図１に示すように、送信側端末装置２で計測した各フレーム毎のデータ送信時間Ｔｔ　、図２に示すように、受信側端末装置４で計測した各フレーム毎のデータ受信時間Ｔｒ　、図３に示すように、各フレーム毎の前記データ送信時間Ｔｔ　及びデータ受信時間Ｔｒ　から、これが増加傾向又は減少傾向の何れかを判定し、その程度により、画質・音質及び／又はフレームレートを１フレーム毎に変化調整してデータを受信側４に送信する機能である。
【００１９】
受信機能Ｂは、図２、図３及び図６に示すように、送信側端末装置２から送信され、受信データメモリ４Ａに取り込まれた、各フレーム毎のデータ受信時間Ｔｒ　を受信時間計測部４Ｂで計測し、該受信時間Ｔｒ　を、自装置（受信側端末装置４）の送信機能Ａを経由して送信側２に送信する機能である。
【００２０】
送信側データ通信端末装置２の送信機能Ａの詳細を以下に示す。
図５に示すように、画像情報入力部２Ａから入力された画像データＤｂ’と音声情報入力部２Ｂから入力された音声データＤａ’とを１フレーム分のデータとしてフレームデータメモリ２Ｃに入力する。この圧縮されていない１フレーム分の可変長フレームデータＦ’は、圧縮フレームデータ作成部２Ｆにより、画質設定・調整部２Ｄにより設定された画質と音質データ（データ圧縮率及び画面サイズ）を用いて圧縮画像データＤｂ’と圧縮音声データＤａ’とからなる圧縮フレームデータＦを作成する。前記作成された圧縮フレームデータＦは、伝送速度設定・調整部２Ｅにより設定された伝送速度（転送フレームレート）により送信データメモリ２Ｇから送信（データ転送）される。前記画質設定・調整部２Ｄにより設定された画質、音質データ（データ圧縮率及び画面サイズ）及び伝送速度設定・調整部２Ｅにより設定された伝送速度（転送フレームレート）はデータ回線３の混雑度（空き状況）に応じて画質・伝送速度算出部２Ｉで算出されたデータにより変更調整される。
【００２１】
なお、前記画質、音質及び／又は転送フレームレートの制御においては、転送フレームレートよりも画質及び／又は音質を優先させことができ、データ回線３が混雑している場合、画質及び／又は音質を再生した場合、目視又は聴き取り可能な一定品質以内に迄低下させて、転送フレームレートは一定値に維持することも可能である。また、前記画質は画像データのデータ圧縮率及び画面サイズ（画面の縦、横のピクセル数）、音質は音声データのデータ圧縮率を対象とする。
【００２２】
データ回線３の混雑度（空き状況）の判定は、（１）図１に示す、送信側端末装置２の送信データメモリから１フレーム分のデータが送信されるデータ送信時間Ｔｔ　による判定、（２）図２に示す、受信側端末装置４の受信データメモリに１フレーム分のデータが受信されるデータ受信時間Ｔｒ　による判定、（３）図３に示す、前記データ送信時間Ｔｔ　とデータ受信時間Ｔｒ　による判定、の３つの方法がある。
なお、前記データ送信時間Ｔｔ　は、１フレーム分の圧縮フレームデータＦを送信データメモリ２Ｇから送信開始してから送信完了する迄の時間、即ち、圧縮フレームデータＦの送信開始時刻ｔ１と圧縮フレームデータＦの送信終了時刻ｔ２の時間差であり、前記データ受信時間Ｔｒ　は、１フレーム分の圧縮フレームデータＦを受信データメモリ４Ａが受信開始してから受信完了する迄の時間、即ち、圧縮フレームデータＦの受信開始時刻ｔ１と圧縮フレームデータＦの受信終了時刻ｔ２の時間差であり、これらの時間計測は、計測手段は設ける必要があるが、データ送信用又はデータ受信用のプログラム中の命令ステップを用いて計測するので、構成が簡素化される。
【００２３】
前記データ回線３の混雑度（空き状況）の判定方法のうち、前記（１）のデータ送信時間Ｔｔ　を用いて、圧縮フレームデータＦの画質、音質及び／又は伝送速度（転送フレームレート）を制御・調整する端末装置２の動作の詳細を以下に説明する。
図１又は図５に示すように、端末装置（送信側）２において、送信時間計測部２Ｈは、１フレーム分の圧縮フレームデータＦが送信データメモリ２Ｇにおいて送信開始から送信終了する迄の時間、即ち、圧縮フレームデータＦの送信開始時刻ｔ１と圧縮フレームデータＦの送信終了時刻ｔ２の時間差、をデータ送信時間Ｔｔ　として計測する。画質・伝送速度算出部２Ｉは、図７に示すように、例えば、現在の送信したフレームＦ（Ｎ）のデータ送信時間Ｔｔ　（Ｎ）とこのフレームの直前に送信したフレームＦ（Ｎ−１）のデータ送信時間Ｔｔ　（Ｎ−１）とからＴｔ　（Ｎ）／Ｔｔ　（Ｎ−１）を算出し、Ｔｔ　（Ｎ）／Ｔｔ　（Ｎ−１）が１より大きいか否かにより、データ送信時間Ｔｔ　が増加傾向にあるか、又は減少傾向にあるかを判定し、増加傾向にある場合には、画質設定・調整部２Ｄに▲１▼データ圧縮率を増大、▲２▼画面サイズを縮小、の指定を、伝送速度設定・調整部２Ｅに▲３▼フレームレートを低下、の指定を夫々行い、また、データ送信時間Ｔｔ　が減少傾向にある場合には、画質設定・調整部２Ｄに▲１▼データ圧縮率を減少、▲２▼画面サイズを拡大、の指定を、伝送速度設定・調整部２Ｅに▲３▼フレームレートを上昇、の指定を夫々行う。なお、前記（２）のデータ受信時間Ｔｒ　による判定の場合も図８に示すように、（３）のデータ送信時間Ｔｔ　とデータ受信時間Ｔｒ　による判定の場合も図９に示すように、時間計測後の処理動作は前記（１）のデータ送信時間Ｔｔ　の場合と同様である。
【００２４】
本発明の端末装置においては、図４（ｂ）に示すように、端末装置２から順次送信されるフレームデータＦ１、Ｆ２・・・・・Ｆ（Ｎ−１）、ＦＮのうち、先頭のＦ１又は２番目のＦ２については、画質設定・調整部２Ｄにより当初に設定された画質、音質データ（データ圧縮率及び画面サイズ）及び伝送速度設定・調整部２Ｅにより当初に設定された伝送速度（転送フレームレート）により送信されるが、それ以後のフレームデータについては、前記画質・伝送速度算出部２Ｉにより変更調整された画質、音質データ（データ圧縮率及び画面サイズ）及び／又は伝送速度（転送フレームレート）により送信される。即ち、各フレームデータ（例えば、Ｆ３、Ｆ４・・・）のデータ転送毎に、そのフレームの１つ以上前のフレームデータ（例えば、Ｆ１、Ｆ２・・・）のデータ送信時間（Ｔｔ１、Ｔｔ２・・・）を計測し、この計測時間からデータ回線の混雑度（空き状況）を判定し、データ回線が混雑している時は、当該フレームデータの画質、音質及び／又は転送レートを低下させ、データ回線が空き状態の時は当該フレームデータの画質、音質及び／又は転送レートを向上させて、データ転送するものである。
【００２５】
なお、先頭及び２番目のフレームデータＦ１、Ｆ２の送信は、予め設定した画質及び転送レートに従ってデータ転送する。その理由は、２番目のフレームデータＦ２の送信時までに、フレームデータＦ１の送信時間Ｔｔ１の計測処理、送信時間Ｔｔ１に対応する画質及び伝送速度の算出処理及び前記算出された最適な画質及び伝送速度に調整してフレームデータを作成する処理等が完了できないからである。なお、前記（２）のデータ受信時間Ｔｒ　による判定、（３）のデータ送信時間Ｔｔ　とデータ受信時間Ｔｒ　による判定においては、データ受信時間Ｔｒ　の計測及びこれの送信に多少の時間を要するため、前記そのフレームの２つ以上前のフレームデータのデータ送信時間Ｔｔ及びデータ受信時間Ｔｒ　からデータ回線の混雑度（空き状況）を判定し、当該フレームデータの画質、音質及び／又は転送レートを変更調整してデータ転送する。
【００２６】
受信側データ通信端末装置４の受信機能Ｂの詳細を以下に示す。
受信機能Ｂは、図６に示すように、送信側端末装置２から送信された各フレームデータＦ（データ圧縮された）は、受信データメモリ４Ａに取り込まれる。各フレーム毎のデータ受信時間Ｔｒ　を受信時間計測部４Ｂで計測し、該受信時間Ｔｒ　を、自装置（受信側端末装置４）の送信機能Ａを経由して送信側２に送信する。そして、前記受信データメモリ４Ａに取り込まれた各フレームデータＦは、データ伸長・変換部４Ｃで元のデータ形式に復元し、フレームデータメモリ４Ｄに格納した後、画像情報Ｄｂ’と音声情報Ｄａ’とに分離し、画像情報Ｄｂ’は画像再生装置により再生されて表示部４ｅに表示し、音声情報Ｄａ’はスピーカーを含む音響再生装置により再生される。
【００２７】
【発明の効果】
本発明は単位フレームデータの送信時間又は／及び受信時間から時事刻刻のデータ回線の空き状態（混雑状況）をリアルタイムで計測し、その時点でのデータ回線の混雑の程度に応じて、単位フレームデータの画質、音質及び／又は転送速度を変化させてデータ転送することにより、簡単な装置構成により、データ回線の空きを待たずに、一定水準以上の画質及び／又は音質を維持しつつ、効率良く画像データと音声データとから構成されるフレームデータの送信又は転送を行うことができる。
【図面の簡単な説明】
【図１】本発明のデータ通信端末装置を用いて、送信側端末装置からデータ回線を介して受信側端末装置にデータ転送するシステムにおいて、データ回線の混雑状況を送信側端末の１フレームデータの送信時間から計測する場合の概略構成図である。
【図２】本発明のデータ通信端末装置を用いて、送信側端末装置からデータ回線を介して受信側端末装置にデータ転送するシステムにおいて、データ回線の混雑状況を受信側端末の１フレームデータの受信時間から計測する場合の概略構成図である。
【図３】本発明のデータ通信端末装置を用いて、送信側端末装置からデータ回線を介して受信側端末装置にデータ転送するシステムにおいて、データ回線の混雑状況を送信側端末の１フレームデータの送信時間及び受信側端末の１フレームデータの受信時間から計測する場合の概略構成図である。
【図４】（ａ）本発明のデータ通信端末装置に用いられるフレームデータのデータ構成を示す図である。
（ｂ）本発明のデータ通信端末装置におけるデータ回線の混雑状況の計測動作とデータ回線の混雑状況に対応する画質・伝送速度（フレームレート）の算出動作と算出された画質・伝送速度（フレームレート）によるフレームデータの送信動作との関係を示す図である。
【図５】本発明のデータ通信端末装置（送信側）の構成図（詳細）である。
【図６】本発明のデータ通信端末装置（受信側）の構成図（詳細）である。
【図７】本発明のデータ通信端末装置の画質・伝送速度算出部２Ｉにおいて、１フレームデータの送信時間から画質・伝送速度を算出及び調整する動作フローを示す図である。
【図８】本発明のデータ通信端末装置の画質・伝送速度算出部２Ｉにおいて、１フレームデータの受信時間から画質・伝送速度を算出及び調整する動作フローを示す図である。
【図９】本発明のデータ通信端末装置の画質・伝送速度算出部２Ｉにおいて、１フレームデータの送信時間及び受信時間から画質・伝送速度を算出及び調整する動作フローを示す図である。
【符号の説明】
１　　データ通信端末装置
２　　送信側通信端末装置
Ａ　　送信機能
Ｂ　　受信機能
２Ａ　画像情報入力部
２Ｂ　音声情報入力部
２Ｃ　フレームデータメモリ
２Ｄ　画質設定・調整部
２Ｅ　伝送速度設定・調整部
２Ｆ　圧縮フレームデータ作成部
２Ｇ　送信データメモリ
２Ｈ　送信時間計測部
２Ｉ　画質・伝送速度算出部
３　　データ回線
４　　受信通信端末装置
４Ａ　受信データメモリ
Ｆ’　フレームデータ
Ｄｂ’　画像情報
Ｄａ’　音声情報
Ｆ　　圧縮フレームデータ
Ｄｂ　　圧縮画像情報
Ｄａ　　圧縮音声情報
Ｔｔ　　データ送信時間（１フレーム分）
Ｔｒ　　データ受信時間（１フレーム分）
【図１】
2004080200.tif 000003
【図２】
2004080200.tif 000004
【図３】
2004080200.tif 000005
【図４】
2004080200.tif 000006
【図５】
2004080200.tif 000007
【図６】
2004080200.tif 000008
【図７】
2004080200.tif 000009
【図８】
2004080200.tif 000010
【図９】
2004080200.tif 000011
【手続補正書】
【提出日】平成15年11月10日(2003.11.10)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【特許請求の範囲】
【請求項１】可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又はフレームレートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを送信するのに要するデータ送信時間を用いて、前記データ送信時間からデータ回線の混雑度を判定し、前記データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを向上させてデータ送信する送信機能を有することを特徴とするデータ通信端末装置。
【請求項２】可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又はフレームレートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを受信側の通信端末装置が受信するのに要するデータ受信時間を用いて、前記データ受信時間からデータ回線の混雑度を判定し、前記データ受信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを低下させてデータの送信を行い、前記データ受信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを向上させてデータ送信する送信機能を有することを特徴とするデータ通信端末装置。
【請求項３】可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又はフレームレートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを当該通信端末装置が送信するのに要するデータ送信時間と、前記当該フレームデータの１つ以上前の各フレームデータを受信側の通信端末装置が受信するのに要するデータ受信時間とを用いて前記データ受信時間／データ送信時間を算出し、前記データ受信時間／データ送信時間からデータ回線の混雑度を判定し、前記データ受信時間／データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを低下させてデータの送信を行い、前記データ受信時間／データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを向上させてデータ送信する送信機能を有することを特徴とするデータ通信端末装置。
【請求項４】可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、受信側通信端末装置は、他の通信端末装置から順次送信される各フレームデータを受信するのに要するデータ受信時間を計測し、該データ受信時間を送信側の通信端末装置に送信するデータ受信時間計測・送信機能を有することを特徴とする請求項１、２又は３に記載のデータ通信端末装置。
【請求項５】前記データ送信時間は、送信側通信端末装置における当該フレームデータの１つ以上前のフレームデータのデータ送信開始時からデータ送信終了までの時間であり、送信側通信端末装置が計測することを特徴とする請求項１又は３に記載のデータ通信端末装置。
【請求項６】前記データ受信時間は、受信側の通信端末装置における当該フレームデータの１つ以上前のフレームデータのデータ受信開始時からデータ受信終了までの時間であり、受信側通信端末装置が計測し、送信側通信端末装置に送信することを特徴とする請求項２、３又は４に記載のデータ通信端末装置。
【請求項７】前記データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータ圧縮率を増大、画面サイズを縮小及び／又はフレームレートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータ圧縮率を減少、画面サイズを拡大及び／又はフレームレートを上昇させてデータ送信することを特徴とする請求項１又は５に記載のデータ通信端末装置。
【請求項８】前記データ受信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータ圧縮率を増大、画面サイズを縮小及び／又はフレームレートを低下させてデータの送信を行い、前記データ受信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータ圧縮率を減少、画面サイズを拡大及び／又はフレームレートを上昇させてデータ送信することを特徴とする請求項２又は６に記載のデータ通信端末装置。
【請求項９】前記データ受信時間／データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータ圧縮率を増大、画面サイズを縮小及び／又はフレームレートを低下させてデータの送信を行い、前記データ受信時間／データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータ圧縮率を減少、画面サイズを拡大及び／又はフレームレートを上昇させてデータ送信することを特徴とする請求項３に記載のデータ通信端末装置。
【請求項１０】前記データ回線の混雑度（空き状態）に応じて、画質、音質及び／又はフレームレートを制御する際、フレームレートよりも音質を優先させることを特徴とする請求項１、２又は３に記載のデータ通信端末装置。
【請求項１１】前記画質、音質及び／又はフレームレートを低下させてデータの送信を行う際に、再生画像及び再生音声が認識可能な一定品質を維持することを特徴とする請求項１、２又は３に記載のデータ通信端末装置。
【請求項１２】前記画質は画像データのデータ圧縮率及び画面サイズ（画面の縦、横のピクセル数）、音質は音声データのデータ圧縮率からなることを特徴とする請求項１、２又は３に記載のデータ通信端末装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、データ回線の混雑度（空き状態）に応じて夫々のデータフレームの画質、音質及び／又はフレームレートを調節（制御）してデータ転送するデータ通信端末装置に関する。
【０００２】
【従来の技術】
従来のデータ通信端末装置においては、データ回線の混雑に応じて端末の配信条件の設定範囲を変更してサーバの負荷を軽減するもの（特開２００２−３４０２４号公報参照）、データ回線の混雑度を監視する装置として、監視するデータ送受信の転送時間が予め設定された時間と比べて、下回った時に混雑状態と判定し、回線との接続を中断してデータの送受信を停止するもの（特開２００２−５５９０２号公報参照）、本来のデータファイルの送信とは別に、テストファイルを送信し、テストファイルの転送時間が所定の時間以内か否かによりデータ回線の混雑状況を判定し、テストファイルの転送時間が所定の時間よりも長い時は、データ回線が混雑状態であると判定して、本来の送信データの画像データの圧縮率を上げるか、又は、フレームレートを下げることにより画像を安定させるもの（特開２０００−２９５２７２号公報参照）等があるが、これらは対象となる送受信データが画像データのみであり、本発明のような、画像データと音声データとから構成されるものではなく、更に、データ回線の混雑度を判定する機構も、データ送受信の転送時間と予め設定された時間との比較により行うもので、判定が時事刻刻と変化するデータ回線の混雑度を正確に判定することが出来ず、データ回線の混雑度に応じた画質、音質及び／又はフレームレートで効率良く適正な質及び速度でデータを送信するものではないという問題があった。
【０００３】
【発明が解決しようとする課題】
本発明は前記問題点を解消するもので、本発明の目的は、データ回線の時事刻刻の混雑度（空き状態）をリアルタイムで計測し、その時点でのデータ回線の混雑の程度に応じて、単位フレームデータの画質、音質及び／又は転送速度を変化させてデータ転送することにより、簡単な装置構成により、データ回線の空きを待たずに、一定水準以上の画質及び／又は音質を維持しつつ、効率良く画像データと音声データとから構成されるフレームデータの送信又は転送を行うことである。
【０００４】
【課題を解決するための手段】
（１）本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又はフレームレートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを送信するのに要するデータ送信時間を用いて、前記データ送信時間からデータ回線の混雑度を判定し、前記データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを向上させてデータ送信する送信機能を有するデータ通信端末装置である。
【０００５】
（２）本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又はフレームレートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを受信側の通信端末装置が受信するのに要するデータ受信時間を用いて、前記データ受信時間からデータ回線の混雑度を判定し、前記データ受信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを低下させてデータの送信を行い、前記データ受信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを向上させてデータ送信する送信機能を有するデータ通信端末装置である。
【０００６】
（３）本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、先頭から複数番目までのフレームデータの送信は、予め設定した画質、音質及び／又はフレームレートに従ってデータ送信し、以後のフレームデータの送信は、当該フレームデータの１つ以上前の各フレームデータを当該通信端末装置が送信するのに要するデータ送信時間と、前記当該フレームデータの１つ以上前の各フレームデータを受信側の通信端末装置が受信するのに要するデータ受信時間とを用いて前記データ受信時間／データ送信時間を算出し、前記データ受信時間／データ送信時間からデータ回線の混雑度を判定し、前記データ受信時間／データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを低下させてデータの送信を行い、前記データ受信時間／データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータの画質、音質及び／又はフレームレートを向上させてデータ送信する送信機能を有するデータ通信端末装置である。
【０００７】
（４）本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータであるフレームデータを順次、データ回線を介して他の通信端末装置との間で送信又は受信するデータ通信端末装置であって、受信側通信端末装置は、他の通信端末装置から順次送信される各フレームデータを受信するのに要するデータ受信時間を計測し、該データ受信時間を送信側の通信端末装置に送信するデータ受信時間計測・送信機能を有する前記（１）、（２）又は（３）に記載のデータ通信端末装置である。
【０００８】
（５）本発明は、前記データ送信時間が、送信側通信端末装置における当該フレームデータの１つ以上前のフレームデータのデータ送信開始時からデータ送信終了までの時間であり、送信側通信端末装置が計測する前記（１）又は（３）に記載のデータ通信端末装置である。
【０００９】
（６）本発明は、前記データ受信時間が、受信側の通信端末装置における当該フレームデータの１つ以上前のフレームデータのデータ受信開始時からデータ受信終了までの時間であり、受信側通信端末装置が計測し、送信側通信端末装置に送信する前記（２）、（３）又は（４）に記載のデータ通信端末装置である。
【００１０】
（７）本発明は、前記データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータ圧縮率を増大、画面サイズを縮小及び／又はフレームレートを低下させてデータの送信を行い、前記データ送信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータ圧縮率を減少、画面サイズを拡大及び／又はフレームレートを上昇させてデータ送信する前記（１）又は（５）に記載のデータ通信端末装置である。
【００１１】
（８）本発明は、前記データ受信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータ圧縮率を増大、画面サイズを縮小及び／又はフレームレートを低下させてデータの送信を行い、前記データ受信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータ圧縮率を減少、画面サイズを拡大及び／又はフレームレートを上昇させてデータ送信する前記（２）又は（６）に記載のデータ通信端末装置である。
【００１２】
（９）本発明は、前記データ受信時間／データ送信時間が増加傾向にある場合には、データ回線の混雑度が増大（空き状態が低下）したと判定して、次に送信するフレームのデータ圧縮率を増大、画面サイズを縮小及び／又はフレームレートを低下させてデータの送信を行い、前記データ受信時間が減少傾向にある場合には、データ回線の混雑度が低下（空き状態が増大）したと判定して、次に送信するフレームのデータ圧縮率を減少、画面サイズを拡大及び／又はフレームレートを上昇させてデータ送信する前記（３）に記載のデータ通信端末装置である。
【００１３】
（１０）本発明は、前記データ回線の混雑度（空き状態）に応じて、画質、音質及び／又はフレームレートを制御する際、フレームレートよりも画質及び／又は音質を優先させる前記（１）、（２）又は（３）に記載のデータ通信端末装置である。
【００１４】
（１１）本発明は、前記画質、音質及び／又はフレームレートを低下させてデータの送信を行う際に、再生画像及び再生音声が認識可能な一定品質を維持する前記（１）、（２）又は（３）に記載のデータ通信端末装置である。
【００１５】
（１２）本発明は、前記画質は画像データのデータ圧縮率及び画面サイズ（画面の縦、横のピクセル数）、音質は音声データのデータ圧縮率からなる前記（１）、（２）又は（３）に記載のデータ通信端末装置である。
【００１６】
【発明の実施の形態】
本発明は、可変長のデータ圧縮された画像情報と可変長のデータ圧縮された音声情報とから構成される静止画面１枚分のフレーム単位のデータを順次、送信側の通信端末装置からブロードバンドデータ回線を介して受信側の通信端末装置にデータ転送するデータ通信端末装置に関するものである。前記圧縮された可変長のフレームデータＦは図４（ａ）に示すように、可変長のデータ圧縮された画像情報Ｄｂと可変長のデータ圧縮された音声情報Ｄａとから構成される。これら画像情報Ｄｂ及び音声情報Ｄａは圧縮されていない画像情報Ｄｂ’及び音声情報Ｄａ’からなる１フレーム分の可変長フレームデータＦ’を夫々これらに固有の圧縮方式により、データ通信端末装置１内でデータ圧縮される。
【００１７】
本発明のデータ通信端末装置は図１乃至３に示すように、データ回線３を介して送信側と受信側とに設置されるが、送信側データ通信端末装置２と受信側データ通信端末装置４とは全く同一の構成であり、その装置内に基本的な機能であるデータの送信機能Ａ及び受信機能Ｂを具備している。
【００１８】
送信機能Ａは、図１に示すように、送信側端末装置２で計測した各フレーム毎のデータ送信時間Ｔｔ　、図２に示すように、受信側端末装置４で計測した各フレーム毎のデータ受信時間Ｔｒ　、図３に示すように、各フレーム毎の前記データ送信時間Ｔｔ　及びデータ受信時間Ｔｒ　から、これが増加傾向又は減少傾向の何れかを判定し、その程度により、画質・音質及び／又はフレームレートを１フレーム毎に変化調整してデータを受信側４に送信する機能である。
【００１９】
受信機能Ｂは、図２、図３及び図６に示すように、送信側端末装置２から送信され、受信データメモリ４Ａに取り込まれた、各フレーム毎のデータ受信時間Ｔｒ　を受信時間計測部４Ｂで計測し、該受信時間Ｔｒ　を、自装置（受信側端末装置４）の送信機能Ａを経由して送信側２に送信する機能である。
【００２０】
送信側データ通信端末装置２の送信機能Ａの詳細を以下に示す。
図５に示すように、画像情報入力部２Ａから入力された画像データＤｂ´と音声情報入力部２Ｂから入力された音声データＤａ´とを１フレーム分のデータとしてフレームデータメモリ２Ｃに入力する。この圧縮されていない１フレーム分の可変長フレームデータＦ’は、圧縮フレームデータ作成部２Ｆにより、画質設定・調整部２Ｄにより設定された画質と音質データ（データ圧縮率及び画面サイズ）を用いて圧縮画像データＤｂ´と圧縮音声データＤａ´とからなる圧縮フレームデータＦを作成する。前記作成された圧縮フレームデータＦは、伝送速度設定・調整部２Ｅにより設定された伝送速度（転送レート）により送信データメモリ２Ｇから送信（データ転送）される。前記画質設定・調整部２Ｄにより設定された画質、音質データ（データ圧縮率及び画面サイズ）及び伝送速度設定・調整部２Ｅにより設定された伝送速度（転送レート）はデータ回線３の混雑度（空き状況）に応じて画質・伝送速度算出部２Ｉで算出されたデータにより変更調整される。
【００２１】
なお、前記画質、音質及び／又はフレームレートの制御においては、フレームレートよりも画質及び／又は音質を優先させことができ、データ回線３が混雑している場合、画質及び／又は音質を再生した場合、目視又は聴き取り可能な一定品質以内に迄低下させて、フレームレートは一定値に維持することも可能である。また、前記画質は画像データのデータ圧縮率及び画面サイズ（画面の縦、横のピクセル数）、音質は音声データのデータ圧縮率を対象とする。
【００２２】
データ回線３の混雑度（空き状況）の判定は、（１）図１に示す、送信側端末装置２の送信データメモリから１フレーム分のデータが送信されるデータ送信時間Ｔｔ　による判定、（２）図２に示す、受信側端末装置４の受信データメモリに１フレーム分のデータが受信されるデータ受信時間Ｔｒ　による判定、（３）図３に示す、前記データ送信時間Ｔｔ　とデータ受信時間Ｔｒ　による判定、の３つの方法がある。
なお、前記データ送信時間Ｔｔ　は、１フレーム分の圧縮フレームデータＦを送信データメモリ２Ｇから送信開始してから送信完了する迄の時間、即ち、圧縮フレームデータＦの送信開始時刻ｔ１と圧縮フレームデータＦの送信終了時刻ｔ２の時間差であり、前記データ受信時間Ｔｒ　は、１フレーム分の圧縮フレームデータＦを受信データメモリ４Ａが受信開始してから受信完了する迄の時間、即ち、圧縮フレームデータＦの受信開始時刻ｔ１と圧縮フレームデータＦの受信終了時刻ｔ２の時間差であり、これらの時間計測は、計測手段は設ける必要があるが、データ送信用又はデータ受信用のプログラム中の命令ステップを用いて計測するので、構成が簡素化される。
【００２３】
前記データ回線３の混雑度（空き状況）の判定方法のうち、前記（１）のデータ送信時間Ｔｔ　を用いて、圧縮フレームデータＦの画質、音質及び／又は伝送速度（転送レート）を制御・調整する端末装置２の動作の詳細を以下に説明する。
図１又は図５に示すように、端末装置（送信側）２において、送信時間計測部２Ｈは、１フレーム分の圧縮フレームデータＦが送信データメモリ２Ｇにおいて送信開始から送信終了する迄の時間、即ち、圧縮フレームデータＦの送信開始時刻ｔ１と圧縮フレームデータＦの送信終了時刻ｔ２の時間差、をデータ送信時間Ｔｔ　として計測する。画質・伝送速度算出部２Ｉは、図７に示すように、例えば、現在の送信したフレームＦ（Ｎ）のデータ送信時間Ｔｔ　（Ｎ）とこのフレームの直前に送信したフレームＦ（Ｎ−１）のデータ送信時間Ｔｔ　（Ｎ−１）とからＴｔ　（Ｎ）／Ｔｔ　（Ｎ−１）を算出し、Ｔｔ　（Ｎ）／Ｔｔ　（Ｎ−１）が１より大きいか否かにより、データ送信時間Ｔｔ　が増加傾向にあるか、又は減少傾向にあるかを判定し、増加傾向にある場合には、画質設定・調整部２Ｄに（ａ）データ圧縮率を増大、（ｂ）画面サイズを縮小、の指定を、伝送速度設定・調整部２Ｅに（ｃ）フレームレートを低下、の指定を夫々行い、また、データ送信時間Ｔｔ　が減少傾向にある場合には、画質設定・調整部２Ｄに（ａ）データ圧縮率を減少、（ｂ）画面サイズを拡大、の指定を、伝送速度設定・調整部２Ｅに（ｃ）フレームレートを上昇、の指定を夫々行う。なお、前記（２）のデータ受信時間Ｔｒ　による判定の場合も図８に示すように、（３）のデータ送信時間Ｔｔ　とデータ受信時間Ｔｒ　による判定の場合も図９に示すように、時間計測後の処理動作は前記（１）のデータ送信時間Ｔｔ　の場合と同様である。
【００２４】
本発明の端末装置においては、図４（ｂ）に示すように、端末装置２から順次送信されるフレームデータＦ１、Ｆ２・・・・・Ｆ（Ｎ−１）、ＦＮのうち、先頭のＦ１又は２番目のＦ２については、画質設定・調整部２Ｄにより当初に設定された画質、音質データ（データ圧縮率及び画面サイズ）及び伝送速度設定・調整部２Ｅにより当初に設定された伝送速度（転送レート）により送信されるが、それ以後のフレームデータについては、前記画質・伝送速度算出部２Ｉにより変更調整された画質、音質データ（データ圧縮率及び画面サイズ）及び／又は伝送速度（転送レート）により送信される。即ち、各フレームデータ（例えば、Ｆ３、Ｆ４・・・）のデータ転送毎に、そのフレームの１つ以上前のフレームデータ（例えば、Ｆ１、Ｆ２・・・）のデータ送信時間（Ｔｔ１、Ｔｔ２・・・）を計測し、この計測時間からデータ回線の混雑度（空き状況）を判定し、データ回線が混雑している時は、当該フレームデータの画質、音質及び／又は転送レートを低下させ、データ回線が空き状態の時は当該フレームデータの画質、音質及び／又はフレームレートを向上させて、データ転送するものである。
【００２５】
なお、先頭及び２番目のフレームデータＦ１、Ｆ２の送信は、予め設定した画質及びフレームレートに従ってデータ転送する。その理由は、２番目のフレームデータＦ２の送信時までに、フレームデータＦ１の送信時間Ｔｔ１の計測処理、送信時間Ｔｔ１に対応する画質及び伝送速度の算出処理及び前記算出された最適な画質及び伝送速度に調整してフレームデータを作成する処理等が完了できないからである。なお、前記（２）のデータ受信時間Ｔｒ　による判定、（３）のデータ送信時間Ｔｔ　とデータ受信時間Ｔｒ　による判定においては、データ受信時間Ｔｒ　の計測及びこれの送信に多少の時間を要するため、前記そのフレームの２つ以上前のフレームデータのデータ送信時間Ｔｔ及びデータ受信時間Ｔｒ　からデータ回線の混雑度（空き状況）を判定し、当該フレームデータの画質、音質及び／又はフレームレートを変更調整してデータ転送する。
【００２６】
受信側データ通信端末装置４の受信機能Ｂの詳細を以下に示す。
受信機能Ｂは、図６に示すように、送信側端末装置２から送信された各フレームデータＦ（データ圧縮された）は、受信データメモリ４Ａに取り込まれる。各フレーム毎のデータ受信時間Ｔｒ　を受信時間計測部４Ｂで計測し、該受信時間Ｔｒ　を、自装置（受信側端末装置４）の送信機能Ａを経由して送信側２に送信する。そして、前記受信データメモリ４Ａに取り込まれた各フレームデータＦは、データ伸長・変換部４Ｃで元のデータ形式に復元し、フレームデータメモリ４Ｄに格納した後、画像情報Ｄｂ´と音声情報Ｄａ´とに分離し、画像情報Ｄｂ´は画像再生装置により再生されて表示部４ｅに表示し、音声情報Ｄａ´はスピーカーを含む音響再生装置により再生される。
【００２７】
【発明の効果】
本発明は単位フレームデータの送信時間又は／及び受信時間から時事刻刻のデータ回線の空き状態（混雑状況）をリアルタイムで計測し、その時点でのデータ回線の混雑の程度に応じて、単位フレームデータの画質、音質及び／又は転送速度を変化させてデータ転送することにより、簡単な装置構成により、データ回線の空きを待たずに、一定水準以上の画質及び／又は音質を維持しつつ、効率良く画像データと音声データとから構成されるフレームデータの送信又は転送を行うことができる。
【図面の簡単な説明】
【図１】本発明のデータ通信端末装置を用いて、送信側端末装置からデータ回線を介して受信側端末装置にデータ転送するシステムにおいて、データ回線の混雑状況を送信側端末の１フレームデータの送信時間から計測する場合の概略構成図である。
【図２】本発明のデータ通信端末装置を用いて、送信側端末装置からデータ回線を介して受信側端末装置にデータ転送するシステムにおいて、データ回線の混雑状況を受信側端末の１フレームデータの受信時間から計測する場合の概略構成図である。
【図３】本発明のデータ通信端末装置を用いて、送信側端末装置からデータ回線を介して受信側端末装置にデータ転送するシステムにおいて、データ回線の混雑状況を送信側端末の１フレームデータの送信時間及び受信側端末の１フレームデータの受信時間から計測する場合の概略構成図である。
【図４】（ａ）本発明のデータ通信端末装置に用いられるフレームデータのデータ構成を示す図である。
（ｂ）本発明のデータ通信端末装置におけるデータ回線の混雑状況の計測動作とデータ回線の混雑状況に対応する画質・伝送速度（転送レート）の算出動作と算出された画質・伝送速度（転送レート）によるフレームデータの送信動作との関係を示す図である。
【図５】本発明のデータ通信端末装置（送信側）の構成図（詳細）である。
【図６】本発明のデータ通信端末装置（受信側）の構成図（詳細）である。
【図７】本発明のデータ通信端末装置の画質・伝送速度算出部２Ｉにおいて、１フレームデータの送信時間から画質・伝送速度を算出及び調整する動作フローを示す図である。
【図８】本発明のデータ通信端末装置の画質・伝送速度算出部２Ｉにおいて、１フレームデータの受信時間から画質・伝送速度を算出及び調整する動作フローを示す図である。
【図９】本発明のデータ通信端末装置の画質・伝送速度算出部２Ｉにおいて、１フレームデータの送信時間及び受信時間から画質・伝送速度を算出及び調整する動作フローを示す図である。
【符号の説明】
１　　データ通信端末装置
２　　送信側通信端末装置
Ａ　　送信機能
Ｂ　　受信機能
２Ａ　画像情報入力部
２Ｂ　音声情報入力部
２Ｃ　フレームデータメモリ
２Ｄ　画質設定・調整部
２Ｅ　伝送速度設定・調整部
２Ｆ　圧縮フレームデータ作成部
２Ｇ　送信データメモリ
２Ｈ　送信時間計測部
２Ｉ　画質・伝送速度算出部
３　　データ回線
４　　受信通信端末装置
４Ａ　受信データメモリ
Ｆ’　フレームデータ
Ｄｂ´　画像情報
Ｄａ´　音声情報
Ｆ　　圧縮フレームデータ
Ｄｂ　　圧縮画像情報
Ｄａ　　圧縮音声情報
Ｔｔ　　データ送信時間（１フレーム分）
Ｔｒ　　データ受信時間（１フレーム分）