(57)【要約】ハンドオーバにより映像が停止しても、停止した時点の映像から再生を再開可能な映像伝送システムを実現するためのサーバ装置及び端末装置を提供する。映像データ等を蓄積するデータ装置部を有し、アクセスポイントを解して映像データを端末装置に伝送する映像サーバと、アクセスポイントから伝送されてきた映像データを受信して映像を表示し、アクセスポイントに対する無線チャネルのアソシエーション確立やリリースを行う端末装置を備える映像伝送システムにおいて、前記端末装置は、アクセスポイントと無線チャネルのリリースを行い、映像サーバに対して映像データの伝送停止及び蓄積を要求し、新たなアクセスポイントとのアソシエーションが確立すると、前記端末装置は、前記リリースからアソシエーション確立までの間の蓄積された映像データ等の再送を前記映像サーバに要求する。
2003041341.tif 000002
【特許請求の範囲】
【請求項１】
アクセスポイントを介して端末装置に映像データを伝送する映像伝送システムにおいて、映像データをパケット毎に伝送するサーバ装置は、
映像データをパケット毎に伝送する伝送部と、
映像データを蓄積する映像データ蓄積部と、
端末装置からの要求を受信する受信部、
とを有し、
前記映像蓄積部は、アソシエーション確立しているアクセスポイントから伝送された映像データを受信して映像を表示する端末装置がアソシエーション確立しているアクセスポイントの無線チャネルをリリースすると、前記リリース後の映像データを蓄積し、
前記受信部は、前記端末装置が別のアクセスポイントと無線チャネルのアソシエーションを確立すると、蓄積されている前記リリース後の映像データの再送要求を前記端末装置より受信することを特徴とするサーバ装置。
【請求項２】
前記サーバ装置は、さらに
映像データの伝送を制御する伝送制御部を有し、
前記受信部は、前記端末装置が有する伝送停止要求部からの伝送停止要求及び伝送再送要求部からの伝送再送要求を受信し、
前記伝送制御部は、前記伝送停止要求及び前記伝送再送要求に基づいて、映像データまたは蓄積されている映像データの伝送を制御することを特徴とする請求項１記載のサーバ装置。
【請求項３】
前記サーバ装置は、さらに
映像データを再びエンコードする映像データ再エンコード部を有し、
前記受信部は、前記端末装置が有する伝送再送要求部からの伝送再送要求を受信し、
前記映像データ再エンコード部は、前記伝送再送要求に応じて伝送する蓄積されている映像データの内、１以上のフレームがフレーム内符号化画像となるよう、前記蓄積されている映像データを再びエンコードすることを特徴とする請求項１記載のサーバ装置。
【請求項４】
前記伝送部は、アソシエーション確立している端末装置に映像データを伝送するアクセスポイントおよび前記アクセスポイントと隣り合う複数のアクセスポイントに対してマルチキャストで映像データを伝送することを特徴とする請求項１のサーバ装置。
【請求項５】
アクセスポイントを介して端末装置に映像データを伝送する映像伝送システムにおいて、アソシエーション確立しているアクセスポイントから伝送された映像データを受信して映像を表示する端末装置であって、
パケット毎に伝送された映像データを受信する映像受信部と、
前記映像データに基づいた映像を表示する映像表示部と、
映像データをパケット毎に伝送するサーバ装置に対して、映像データの伝送を停止し蓄積する伝送停止要求を送信する伝送停止要求部と、
前記サーバ装置に対して、映像データの再送要求を送信する伝送再送要求部と、
を有し、
前記伝送停止要求部は、アソシエーション確立しているアクセスポイントの無線チャネルをリリースすると、前記サーバ装置に対して前記リリース後の映像データの伝送停止要求を送出し、
前記伝送再送要求部は、別のアクセスポイントと無線チャネルのアソシエーションを確立すると、前記サーバ装置に対して、蓄積されている前記リリース後の映像データの再送要求を送出することを特徴とする端末装置。
【請求項６】
前記端末装置は、さらに
アクセスポイントから伝送される映像データの受信状況を監視する映像データ受信状況監視部と、
前記映像データ受信状況監視部で監視している映像データの受信状況に基づいて、前記端末装置による別のアクセスポイントとの無線チャネルのアソシエーション確立を検出するアソシエーション確立検出部と、
前記アソシエーション確立検出部によって前記別のアクセスポイントとの無線チャネルのアソシエーション確立を検出すると、前記サーバ装置に蓄積されている前記リリース後の映像データの再送要求を送信する再送要求送信部と、
を有することを特徴とする請求項５記載の端末装置。
【請求項７】
前記端末装置は、さらに
アソシエーション確立しているアクセスポイントの無線チャネルをリリースする直前で、前記サーバ装置に映像データの伝送停止を要求する伝送停止要求部と、
アクセスポイントに対して無線チャネルのアソシエーションを確立すると、前記サーバ装置に映像データの伝送再送を要求する伝送再送要求部とを、有することを特徴とする請求項５記載の端末装置。
【請求項８】
前記伝送再送要求部は、
アソシエーション確立しているアクセスポイントの無線チャネルをリリースし、隣り合う別のアクセスポイントと無線チャネルのアソシエーションを確立した後に、前記アクセスポイントから映像データをどこまで受信したかを前記別のアクセスポイントに通知し、前記別のアクセスポイントから映像データの続きの送信要求を送出することを特徴とする請求項７記載の端末装置。
【請求項９】
前記端末装置は、さらに
１つのＩＰコネクションに対する２つの無線チャネルの切り替えを管理するマルチリンクネットワーク管理部を有し、
前記マルチリンクネットワーク管理部は、
前記端末装置がアクセスポイントとアソシエーション確立している状態で、別のアクセスポイントと無線チャネルのアソシエーションを確立し、前記アクセスポイントの無線チャネルをリリースするよう、前記端末装置における無線チャネルの切り替えを管理することを特徴とする請求５記載の端末装置。
【発明の詳細な説明】
＜技術分野＞
本発明は無線ネットワーク上での映像伝送システムにおいて利用されるサーバ装置及び端末装置に係り、特に、ハンドオーバにより映像が停止しても、停止した時点の映像から再開する映像伝送システムを実現するために利用されるサーバ装置及び端末装置に関する。
＜背景技術＞
映像伝送システムで伝送される映像データは、通常、Ｈ．２６１方式やＭＰＥＧ方式等によって圧縮符号化されている。これらの圧縮符号化方式では、画素値をそのまま符号化するフレーム内符号化画像と、参照フレームとの差分を符号化するフレーム間予測符号化画像とを選択的に切り替えて用いている。動きや変化の少ない映像は現フレームと前フレームとが非常に似ているため、前フレームとの差分を符号化するフレーム間予測符号化画像を用いている。一方、動きや変化の大きい映像やシーンチェンジ時の映像はフレーム間の相関が小さいため、画素値をそのまま符号化するフレーム内符号化画像を用いている。したがって、テレビ会議等のようにあまりシーンチェンジがなく被写体の動きもそれ程大きくない映像を伝送する映像伝送システムでは、最初にフレーム内符号化画像が伝送され、それ以降はフレーム間予測符号化画像が伝送されている。
以下、無線ネットワークを用いた従来の映像伝送システムで、アクセスポイントを介して映像データを送受信可能な端末装置が用いられる場合について説明する。図１７は、当該従来の映像伝送システムを示す構成図である。
図１７に示すように、映像データを送受信可能な端末装置９０１は、アクセスポイントＡＰ１またはＡＰ２を介して映像データの送受信が可能な端末であり、当該端末装置９０１が利用するアクセスポイントＡＰは無線ＬＡＮ収容スイッチ９０３によって切り替えられている。図１８に、従来の映像伝送システムで用いられる端末装置９０１の内部構成を示す。同図に示すように、端末装置９０１は、映像入力部９５１、映像符号化部９５３、映像送信部９５５、音声入力部９５７、音声符号化部９５９、音声送信部９６１、映像受信部９６３、映像復号部９６５、映像表示部９６７、音声受信部９６９、音声復号部９７１および音声出力部９７３を備えて構成されている。
次に、上記説明した端末装置９０１が移動することによって、アソシエーションを確立するアクセスポイントがＡＰ１からＡＰ２に移る場合の動作について説明する。まず、▲１▼端末装置９０１がＡＰ１とアソシエーションが確立している状態において、▲２▼端末装置９０１がアソシエーション確立している無線チャネルをリリースする。ＡＰ１とアソシエーション確立している端末装置９０１にはＡＰ２からＡＰ２のＩＤが送られているため、端末装置９０１は、ＡＰ１との無線チャネルをリリースした後、▲３▼ＡＰ２に対して無線チャネルのアソシエーションの確立を要求する。▲４▼ＡＰ２がこの要求に応じて確立ＯＫとの応答を端末装置９０１に返すと、▲５▼端末装置９０１はＡＰ２と無線チャネルのアソシエーションを確立する。
＜発明の開示＞
しかしながら、上記従来の映像伝送システムにおいてアクセスポイントが切り替わる（ハンドオーバ）際、端末装置９０１には「▲２▼リリース」から「▲５▼新たなアクセスポイントとのアソシエーション確立」までの間の映像データが伝送されない、すなわちパケットロスが発生してしまう。しかも、例えば図１９に示すように、新たなアクセスポイントとのアソシエーションが確立した時点での映像データがフレーム間順方向予測符号化画像（Ｐピクチャ）である場合、Ｐピクチャ（Ｐ３〜Ｐ４）は前フレームとの差分が符号化された性質のデータであるため、端末装置９０１が次に映像を再生するのは、ハンドオーバが終了してはじめてフレーム内符号化画像（Ｉピクチャ）を受信したときである。
したがって、従来の映像伝送システムにあっては、ハンドオーバ開始からハンドオーバ終了後、最初にＩピクチャが伝送されてくるまでの間（映像再生停止区間）の映像が端末装置９０１で再生されることはなかった。このため、ハンドオーバにより映像が停止しても、停止した時点の映像から再開される映像伝送システムが望まれていた。なお、上記説明における「映像」は、視覚的に壊れている映像は含まず、正常な映像のみをいう。
本発明は、上記従来の事情に鑑みてなされたものであって、ハンドオーバにより映像が停止しても、停止した時点の映像から再生を再開可能となる映像伝送システムにおいて利用されるサーバ装置及び端末装置を提供することを目的としている。
上記目的を達成するために、本発明に係るサーバ装置は、アクセスポイントを介して端末装置に映像データを伝送する映像伝送システムにおいて、映像データをパケット毎に伝送するサーバ装置であって、映像データをパケット毎に伝送する伝送部と、映像データを蓄積する映像データ蓄積部と、端末装置からの要求を受信する受信部とを備え、前記映像蓄積部は、アソシエーション確立しているアクセスポイントから伝送された映像データを受信して映像を表示する端末装置がアソシエーション確立しているアクセスポイントの無線チャネルをリリースすると、前記リリース後の映像データを蓄積し、前記受信部は、前記端末装置が別のアクセスポイントと無線チャネルのアソシエーションを確立すると、蓄積されている前記リリース後の映像データの再送要求を前記端末装置より受信する。
また、本発明に係るサーバ装置は、さらに、映像データの伝送を制御する伝送制御部を備え、前記受信部は、前記端末装置が有する伝送停止要求部からの伝送停止要求及び伝送再送要求部からの伝送再送要求を受信し、前記伝送制御部は、前記伝送停止要求及び前記伝送再送要求に基づいて、映像データまたは蓄積されている映像データの伝送を制御する。
また、本発明に係るサーバ装置は、さらに、映像データを再びエンコードする映像データ再エンコード部を備え、前記受信部は、前記端末装置が有する伝送再送要求部からの伝送再送要求を受信し、前記映像データ再エンコード部は、前記伝送再送要求に応じて伝送する蓄積されている映像データの内、１以上のフレームがフレーム内符号化画像となるよう、前記蓄積されている映像データを再びエンコードする。
また、本発明に係るサーバ装置における前記伝送部は、アソシエーション確立している端末装置に映像データを伝送するアクセスポイントおよび前記アクセスポイントと隣り合う複数のアクセスポイントに対してマルチキャストで映像データを伝送する。
次に、本発明に係る端末装置は、アクセスポイントを介して映像データを伝送する映像伝送システムにおいて、アソシエーション確立しているアクセスポイントから伝送された映像データを受信して映像を表示する端末装置であって、パケット毎に伝送された映像データを受信する映像受信部と、前記映像データに基づいた映像を表示する映像表示部と、映像データをパケット毎に伝送するサーバ装置に対して、映像データの伝送を停止し蓄積する伝送停止要求を送信する伝送停止要求部と、前記サーバ装置に対して、映像データの再送要求を送信する伝送再送要求部と、を備え、前記伝送停止要求部は、アソシエーション確立しているアクセスポイントの無線チャネルをリリースすると、前記サーバ装置に対して前記リリース後の映像データの伝送停止要求を送出し、前記伝送再送要求部は、別のアクセスポイントと無線チャネルのアソシエーションを確立すると、前記サーバ装置に対して、蓄積されている前記リリース後の映像データの再送要求を送出する。
本発明に係る端末装置は、さらに、アクセスポイントから伝送される映像データの受信状況を監視する映像データ受信状況監視部と、前記映像データ受信状況監視部で監視している映像データの受信状況に基づいて、前記端末装置による別のアクセスポイントとの無線チャネルのアソシエーション確立を検出するアソシエーション確立検出部と、前記アソシエーション確立検出部によって前記別のアクセスポイントとの無線チャネルのアソシエーション確立を検出すると、前記サーバ装置に蓄積されている前記リリース後の映像データの再送要求を送信する再送要求送信部と、を備える。
また、本発明に係る端末装置は、さらに、アソシエーション確立しているアクセスポイントの無線チャネルをリリースする直前で、前記サーバ装置に映像データの伝送停止を要求する伝送停止要求部と、アクセスポイントに対して無線チャネルのアソシエーションを確立すると、前記サーバ装置に映像データの伝送再送を要求する伝送再送要求部とを、有する。
また、本発明に係る端末装置における前記伝送再送要求部は、アソシエーション確立しているアクセスポイントの無線チャネルをリリースし、隣り合う別のアクセスポイントと無線チャネルのアソシエーションを確立した後に、前記アクセスポイントから映像データをどこまで受信したかを前記別のアクセスポイントに通知し、前記別のアクセスポイントから映像データの続きの送信要求を送出する。
また、本発明に係る前記端末装置は、さらに、１つのＩＰコネクションに対する２つの無線チャネルの切り替えを管理するマルチリンクネットワーク管理部を有し、前記マルチリンクネットワーク管理部は、前記端末装置がアクセスポイントとアソシエーション確立している状態で、別のアクセスポイントと無線チャネルのアソシエーションを確立し、前記アクセスポイントの無線チャネルをリリースするよう、前記端末装置における無線チャネルの切り替えを管理する。
＜発明を実施するための最良の形態＞
本発明に係るサーバ装置及び端末装置は、無線ネットワークを利用して端末装置に映像データを伝送する映像伝送システムにおいて利用されるものであり、映像データはアクセスポイントを介してパケット毎に伝送される。なお、以下の説明おいて出現する「Ｉピクチャ」とは圧縮符号化の際に生成されるフレーム内符号化画像であり、「Ｐピクチャ」とはフレーム間順方向予測符号化画像を示す。
以下、本発明に係るサーバ装置及び端末装置の実施の形態及び当該装置が適用される映像伝送システムについて、〔第１の実施形態〕、〔第２の実施形態〕、〔第３の実施形態〕、〔第４の実施形態〕、〔第５の実施形態〕、〔第６の実施形態〕、〔第７の実施形態〕、〔第８の実施形態〕の順に図面を参照して詳細に説明する。
〔第１の実施形態〕
図１は、本発明の第１の実施形態に係るサーバ装置及び端末装置を構成要素とする映像伝送システムの構成と動作を示す説明図である。同図において、第１の実施形態の映像伝送システムは、特許請求のサーバ装置に該当する映像サーバ１０１と、無線ＬＡＮ収容スイッチ１０３と、アクセスポイントＡＰ１，ＡＰ２と、端末装置１０５とを備えて構成されている。なお、以下の説明において、アクセスポイントＡＰ１，ＡＰ２をまとめてアクセスポイントＡＰと称することもある。
以下、本実施形態の映像伝送システムが有する各構成要素について説明する。
まず、映像サーバ１０１は、映像データ等を蓄積するデータ蓄積部１０７を有し、アクセスポイントＡＰを介して映像データを端末装置１０５に伝送するためのものである。また、無線ＬＡＮ収容スイッチ１０３は、端末装置１０５とアクセスポイントとの接続関係を切り替えるものである。また、アクセスポイントＡＰは、映像サーバ１０１から伝送された映像データを接続関係のある端末装置に送信するものである。また、端末装置１０５は、アクセスポイントＡＰから伝送されてきた映像データを受信して映像を表示するものであり、アクセスポイントＡＰに対する無線チャネルのアソシエーション確立やリリースも行う。
図２に、第１の実施形態の映像伝送システムで用いられる端末装置１０５の内部構成を示す。同図に示すように、端末装置１０５は、映像受信部１５１、映像バッファ１５３、映像復号部１５５、映像表示部１５７、音声受信部１５９、音声バッファ１６１、音声復号部１６３、音声出力部１６５、メディアバッファ管理部１６７、特許請求の範囲の映像データ受信状況監視部に相当するパケット受信状態モニタリング部１６９、アソシエーション確立検出部に該当するハンドオーバ開始／終了検出部１７１および再送要求送信部１７３を備えて構成されている。アクセスポイントＡＰから伝送されてきた映像データは映像受信部１５１で受信された後、映像バッファ１５３に蓄積される。映像バッファ１５３に蓄積された映像データは映像復号部１５５で復号化され、映像表示部１５７で表示される。同様に、音声データも音声受信部１５９で受信された後、音声バッファ１６１に蓄積される。音声バッファ１６１に蓄積された音声データは音声復号部１６３で復号化され、音声出力部１６５から出力される。
メディアバッファ管理部１６７は、映像バッファ１５３または音声バッファ１６１の状態を管理する。また、パケット受信状態モニタリング部１６９は、映像受信部１５１で受信された映像データをパケット毎に監視して、端末装置１０５に映像データが伝送されているかをモニタリングする。また、ハンドオーバ開始／終了検出部１７１は、パケット受信状態モニタリング部１６９で監視しているパケットの受信状況に基づいて、端末装置１０５によるハンドオーバ（端末装置１０５がアクセスポイントＡＰを切り替えること）の開始または終了を検出する。
また、再送要求送信部１７３は、ハンドオーバ開始／終了検出部１７１がハンドオーバの終了を検出すると、ハンドオーバ間の映像データの再送要求をアソシエーション確立しているアクセスポイントに対して行う。例えば図３に示すように、Ｐ１〜Ｐ２ピクチャ間でハンドオーバが行われたことによりパケットロスが発生しても、端末装置１０５は、再送要求送信部１７３から映像データ（Ｐ１，Ｐ２）の再送要求を行う。
次に、上記説明した構成要素を備えた映像伝送システムにおいて、端末装置１０５が移動することによって、アソシエーションを確立するアクセスポイントがＡＰ１からＡＰ２に移る場合の動作を、第１の実施形態の映像停止復帰方法として図１を参照し説明する。
まず、▲１▼端末装置１０５がアクセスポイントＡＰ１とアソシエーション確立している状態において、▲２▼端末装置１０５がアソシエーション確立している無線チャネルをリリースする。ＡＰ１とアソシエーション確立していた端末装置１０５にはアクセスポイントＡＰ２からＡＰ２のＩＤが送られていたため、端末装置１０５は、ＡＰ１とのアソシエーション確立をリリースした後、▲３▼ＡＰ２に対して無線チャネルのアソシエーションの確立を要求する。▲４▼ＡＰ２がこの要求に応じて確立ＯＫとの応答を端末装置１０５に返すと、▲５▼端末装置１０５はＡＰ２と無線チャネルのアソシエーションを確立する。
ＡＰ２と無線チャネルのアソシエーションが確立した後、端末装置１０５はハンドオーバの終了を検出するため、▲６▼端末装置１０５はハンドオーバ間の映像データの再送要求をＡＰ２に対して行う。当該再送要求はＡＰ２から映像サーバ１０１に送られ、映像サーバ１０１はＡＰ２を介して前記映像データを端末装置１０５に送信する。端末装置１０５は、映像サーバ１０１から再送された映像データのパケットとリアルタイムの映像データのパケットとの時間的な前後関係を整理した上で映像データを復号化し、映像の再生を再開する。
以上説明したように、本実施形態の映像伝送システムおよび映像停止復帰方法にあっては、端末装置１０５がハンドオーバしてパケットロスが発生しても、端末装置１０５にはハンドオーバ間の映像データが再送される。したがって、端末装置１０５は、ハンドオーバにより映像が停止しても、停止した時点の映像から再生を再開することができる。
〔第２の実施形態〕
図４は、本発明の第２の実施形態に係るサーバ装置及び端末装置を構成要素とする映像伝送システムの構成と動作を示す説明図である。同図に示すように、第２の実施形態の映像伝送システムの構成は第１の実施形態のそれと略同様であるため、図１（第１の実施形態）と重複する部分には同一の符号を付して説明を省略する。
但し、本実施形態では、アクセスポイントＡＰ１，ＡＰ２に特許請求の範囲の映像データ蓄積部に相当するハンドオーバ用キャッシュバッファ１０９が設けられている。当該ハンドオーバ用キャッシュバッファ（以下、単に「バッファ」という）１０９は、端末装置１０５に送られる所定時間分の最新の映像データをバッファしておくためのものである。また、端末装置１０５には、第１の実施形態の端末装置１０５が有しているパケット受信状態モニタリング部１６９、ハンドオーバ開始／終了検出部１７１および再送要求送信部１７３が設けられていない。
次に、本実施形態の映像伝送システムにおいて、端末装置１０５が移動することによってアソシエーションを確立するアクセスポイントがＡＰ１からＡＰ２に移る場合の動作を、第２の実施形態の映像停止復帰方法として図４を参照し説明する。
まず、▲１▼端末装置１０５がＡＰ１とアソシエーション確立している状態において、▲２▼端末装置１０５がアソシエーション確立している無線チャネルをリリースする。無線チャネルがリリースされると、▲３▼ＡＰ１は端末装置１０５に伝送していた映像データのバッファを開始する。ＡＰ１とアソシエーション確立していた端末装置１０５にはＡＰ２からＡＰ２のＩＤが送られていたため、端末装置１０５は、ＡＰ１との無線チャネルをリリースした後、▲４▼ＡＰ２に対して無線チャネルのアソシエーションの確立を要求する。▲５▼ＡＰ２がこの要求に応じて確立ＯＫとの応答を端末装置１０５に返すと、▲６▼端末装置１０５はＡＰ２と無線チャネルのアソシエーションを確立する。
端末装置１０５がＡＰ２と無線チャネルのアソシエーションが確立すると、▲７▼ＡＰ１のバッファ１０９にバッファされている映像データがＡＰ２に転送され、ＡＰ２は当該映像データを端末装置１０５に送信する。端末装置１０５は、ＡＰ１から転送された映像データのパケットとリアルタイムの映像データのパケットとの時間的な前後関係を整理した上で映像データを復号化し、映像を再生する。
以上説明したように、本実施形態の映像伝送システムおよび映像停止復帰方法にあっては、端末装置１０５がハンドオーバしてパケットロスが発生しても、無線チャネルをリリースしたアクセスポイントＡＰのバッファ１０９には「▲２▼リリース」から「▲６▼新たなアクセスポイントとのアソシエーション確立」までの間の映像データがバッファされており、アソシエーション確立後、当該映像データがＡＰ１からＡＰ２を介して端末装置１０５に転送される。したがって、端末装置１０５は、ハンドオーバにより映像が停止しても、停止した時点の映像から再生を再開することができる。
〔第３の実施形態〕
図５は、本発明の第３の実施形態に係るサーバ装置及び端末装置を構成要素とする映像伝送システムの構成と動作を示す説明図である。同図に示すように、第３の実施形態の映像伝送システムの構成は第２の実施形態と略同様であるため、図４（第２の実施形態）と重複する部分には同一の符号を付して説明を省略する。
以下、本実施形態の映像伝送システムにおいて、端末装置１０５が移動することによってアソシエーションを確立するアクセスポイントがＡＰ１からＡＰ２に移る場合の動作を、第３の実施形態の映像停止復帰方法として図５を参照し説明する。
まず、▲１▼端末装置１０５がＡＰ１とアソシエーション確立している状態において、▲２▼端末装置１０５がこのアソシエーション確立している無線チャネルをリリースする。無線チャネルがリリースされると、▲３▼ＡＰ１は無線ＬＡＮ収容スイッチ１０３に対してリリースされたことを通知する。次に、▲４▼ＡＰ１はリリース直前にバッファリングされていた映像データを端末装置１０５に向けてフラッシュする。ＡＰ１とアソシエーション確立していた端末装置１０５にはＡＰ２からＡＰ２のＩＤが送られていたため、端末装置１０５は、ＡＰ１とのアソシエーション確立をリリースした後、▲５▼ＡＰ２に対して無線チャネルのアソシエーションの確立を要求する。▲６▼ＡＰ２がこの要求に応じて確立ＯＫとの応答を端末装置１０５に返すと、▲７▼端末装置１０５はＡＰ２と無線チャネルのアソシエーションを確立する。
端末装置１０５がＡＰ２と無線チャネルのアソシエーションが確立すると、ＡＰ２は端末装置１０５とアソシエーションが確立したことを無線ＬＡＮ収容スイッチ１０３に通知する。この通知を受け取ると、無線ＬＡＮ収容スイッチ１０３は、ＡＰ１に対して端末装置１０５に送っていた映像データの送信を停止するようＡＰ１に指示する。端末装置１０５は、ＡＰ１から送られた映像データのパケットとリアルタイムの映像データのパケットとの時間的な前後関係を整理した上で映像データを復号化し、映像を再生する。
以上説明したように、本実施形態の映像伝送システムおよび映像停止復帰方法にあっては、端末装置１０５がハンドオーバしてパケットロスが発生しても、端末装置１０５には「▲２▼リリース」から「▲７▼新たなアクセスポイントとのアソシエーション確立」までの間の映像データがリリースしたアクセスポイントから送られる。したがって、端末装置１０５は、ハンドオーバにより映像が停止しても、停止した時点の映像から再生を再開することができる。
〔第４の実施形態〕
図６は、本発明の第４の実施形態に係るサーバ装置及び端末装置を構成要素とする映像伝送システムの構成と動作を示す説明図である。同図に示すように、第４の実施形態の映像伝送システムの構成は、第１の実施形態と略同様であるため、図１（第１の実施形態）と重複する部分には同一の符号を付して説明を省略する。
但し、本実施形態で用いられる端末装置２０１および映像サーバ２０３は、第１の実施形態のそれとは異なる。図７に、第４の実施形態の映像伝送システムで用いられる端末装置２０１および映像サーバ２０３の内部構成を示す。まず、端末装置１１１は、映像受信部２５１、映像復号部２５３、映像表示部２５５、音声受信部２５７、音声復号部２５９および音声出力部２６１の他に、無線チャネルリリース部２６３と、伝送停止要求部２６５と、無線チャネルアソシエーション確立部２６７と、伝送再送要求部２６９とを備えて構成されている。なお、無線チャネルリリース部２６３と無線チャネルアソシエーション確立部２６７とを合わせて「無線チャネル管理部」という。
無線チャネルリリース部２６３は、アソシエーションが確立しているアクセスポイントとの無線チャネルをリリースするものである。また、伝送停止要求部２６５は、無線チャネルリリース部２６３によって無線チャネルのリリースが指示されると、映像サーバ２０３に対して映像データおよび音声データ（以下「映像データ等」という。）の送信を停止するよう要求するものである。また、無線チャネルアソシエーション確立部２６７は、新たなアクセスポイントと無線チャネルのアソシエーションを確立するものである。また、伝送再送要求部２６９は、無線チャネルアソシエーション確立部２６７によって無線チャネルのアソシエーション確立が指示されると、映像サーバ２０３に対して映像データ等の送信を再開するよう要求するものである。
また、映像サーバ２０３は、映像データ蓄積部２７１と、映像データ読出部２７３と、映像データ送出部２７５と、音声データ蓄積部２７７と、音声データ読出部２７９と、音声データ送出部２８１と、伝送停止要求受信部２８３と、伝送再送要求受信部２８５と、伝送制御部２８７とを備えて構成されている。映像データ蓄積部２７１および音声データ蓄積部２７７は図６に示したデータ蓄積部１０７を構成するものであり、それぞれ映像データおよび音声データを蓄積するものである。また、映像データ読出部２７３および音声データ読出部２７９は、それぞれ映像データ蓄積部２７１および音声データ蓄積部２７７から映像データおよび音声データを読み出すものである。
また、伝送停止要求受信部２８３は、端末装置２０１から送られた送信停止要求を受信するものであり、伝送再送要求受信部２８５は、端末装置２０１から送られた送信再開要求を受信するものである。また、伝送制御部２８７は、伝送停止要求受信部２８３が受信した送信停止要求または伝送再送要求受信部２８５が受信した送信再開要求に基づいて、映像データ読出部２７３および音声データ読出部２７９の読出動作を制御するものである。すなわち、送信停止要求を受け取ったときには映像データ等を読み出さないよう各読出部を制御し、送信再開要求を受け取ったときには映像データ等を読み出すよう各読出部を制御する。
次に、上記説明した構成要素を備えた映像伝送システムにおいて、端末装置２０１が移動することによって、アソシエーションを確立するアクセスポイントがＡＰ１からＡＰ２に移る場合の動作を、第４の実施形態の映像停止復帰方法として図６を参照し説明する。
まず、▲１▼端末装置２０１がＡＰ１とアソシエーション確立している状態において、▲２▼端末装置２０１がアソシエーション確立している無線チャネルをリリースする前に、映像データ等の送信を停止して映像データ等を蓄積しておくことを要求する信号（送信停止要求）を映像サーバ２０３に送る。無線チャネルがリリースされると、▲３▼ＡＰ１は無線ＬＡＮ収容スイッチ１０３に対してリリースされたことを通知する。ＡＰ１とアソシエーション確立していた端末装置２０１にはＡＰ２からＡＰ２のＩＤが送られていたため、端末装置２０１は、ＡＰ１とのアソシエーション確立をリリースした後、▲４▼ＡＰ２に対して無線チャネルのアソシエーションの確立を要求する。▲５▼ＡＰ２がこの要求に応じて確立ＯＫとの応答を端末装置２０１に返すと、▲６▼端末装置２０１はＡＰ２と無線チャネルのアソシエーションを確立する。
ＡＰ２と無線チャネルのアソシエーションが確立すると、▲７▼ＡＰ２は無線ＬＡＮ収容スイッチ１０３に対してアソシエーションが確立したことを通知する。このとき、端末装置２０１は、映像データ等の送信を再開して、蓄積された映像データ等を送るよう要求する信号（送信再開要求）を映像サーバ２０３に送る。端末装置２０１は、映像サーバ２０３から送られた映像データのパケットとリアルタイムの映像データのパケットとの時間的な前後関係を整理した上で映像データを復号化し、映像の再生を再開する。
以上説明したように、本実施形態の映像伝送システムおよび映像停止復帰方法にあっては、端末装置２０１がハンドオーバしてパケットロスが発生しても、ハンドオーバ間の映像データ等は映像サーバ２０３に蓄積され、新しいアクセスポイントと無線チャネルのアソシエーションが確立した際には、映像サーバ２０３に蓄積されたハンドオーバ間の映像データ等が端末装置２０１に送られる。したがって、端末装置２０１は、ハンドオーバにより映像が停止しても、図８に示すように停止した時点の映像から再生を再開することができる。
〔第５の実施形態〕
第５の実施形態にかかるサーバ装置と端末装置を構成要素とする映像伝送システムの構成は第４の実施形態のそれと同様であるため、説明を省略する。但し、本実施形態で用いられるサーバ装置である映像サーバ２０５は、図９に示すように、第４の実施形態の映像サーバ２０３が有する構成要素に加え、映像データ再エンコード部２８９を備えて構成されている。映像データ再エンコード部２８９は、ハンドオーバが終了して映像サーバ２０５から映像データを再び送出する際に、映像データ蓄積部１０７から読み出された映像データを再びエンコードするものであり、特に、最初のフレームの映像データがフレーム内符号化画像（Ｉピクチャ）となるようエンコードする。
したがって、図１０に示すように、映像データ蓄積部１０７に蓄積されている映像データのパケットがフレーム内符号化画像（Ｉピクチャ）から開始されるようにエンコードして送出すれば、端末装置２０１はこれをそのまま復号化すれは良いため、ハンドオーバ終了後の映像は正常に再生される。
〔第６の実施形態〕
第６の実施形態の映像伝送システムの構成は第４の実施形態のそれと同様であるため、説明を省略する。但し、本実施形態で用いられるアクセスポイントＡＰは、図１１に示すように、第２の実施形態のアクセスポイントが有するハンドオーバ用キャッシュバッファ１０９とハンドオーバ状態管理部２９１を備えて構成されている。
ハンドオーバ用キャッシュバッファ１０９は、第２の実施形態でも説明したように、端末装置２０１に送られる映像データ等をバッファしておくためのものである。また、ハンドオーバ状態管理部２９１は、端末装置２０１の無線チャネル管理部（無線チャネルリリース部２６３および無線チャネルアソシエーション確立部２６７）による無線チャネルのリリースまたはアソシエーション確立を管理するものであり、その状態に応じてハンドオーバ用キャッシュバッファ１０９への映像データのバッファを制御するものである。
したがって、図１２に示すように、ハンドオーバ期間中の映像データ等はアクセスポイントのバンドオーバ用キャッシュバッファ１０９で蓄積され、ハンドオーバの開始および終了に合わせてバッファされた映像データ等が端末装置２０１に送出されるため、端末装置２０１は、ハンドオーバにより映像が停止しても停止した時点の映像から再生を再開することができる。
〔第７の実施形態〕
図１３は、本発明の第７の実施形態に係る映像伝送システムの構成と動作を示す説明図である。同図に示すように、第７の実施形態の映像伝送システムの構成は、第２の実施形態のそれと略同様である。但し、本実施形態の端末装置３０１、アクセスポイントＡＰ、無線ＬＡＮ収容スイッチ３０３の内部構成は異なる。図１４に、本実施形態の端末装置３０１、アクセスポイントＡＰおよび無線ＬＡＮ収容スイッチ３０３の内部構成を示す。
同図に示すように、本実施形態の端末装置３０１は、マルチキャスト映像受信部３５１、映像復号部３５３、映像表示部３５５、マルチキャスト音声受信部３５７、音声復号部３５９および音声出力部３６１の他に、第４の実施形態でも説明した無線チャネルリリース部２６３および無線チャネルアソシエーション確立部２６７から成る無線チャネル管理部と、映像復号位置通知部３７１とを備えて構成されている。映像復号位置通知部３７１は、ハンドオーバ時に映像の復号位置をアクセスポイントＡＰに通知するものである。
また、本実施形態のアクセスポイントＡＰは、第２の実施形態で説明したハンドオーバ用キャッシュバッファ１０９の他に、ハンドオーバ制御部３７３を備えている。本実施形態では、ハンドオーバ用キャッシュバッファ１０９は、無線ＬＡＮ収容スイッチ３０３から送られるマルチキャストの映像データ等をバッファするものである。なお、ハンドオーバ用キャッシュバッファ１０９に蓄積されたマルチキャストの映像データ等は、端末装置３０１のマルチキャスト映像受信部３５１またはマルチキャスト音声受信部３５７で受信される。また、ハンドオーバ制御部３７３は、端末装置３０１の無線チャネル管理部から指示された無線チャネルのアソシエーション確立やリリースに基づいて、無線ＬＡＮ収容スイッチ３０３に対して新規のアソシエーション確立を通知したり、ハンドオーバ用キャッシュバッファ１０９を制御するものである。
また、本実施形態の無線ＬＡＮ収容スイッチ３０３は、ハンドオーバ管理部３７５を備えている。ハンドオーバ管理部３７５は、アクセスポイントのハンドオーバ制御部３７３から送られた新規アソシエーション確立通知に対して、当該アクセスポイントにマルチキャストの受信指示を行うものである。
上記説明した構成要素を備えた本実施形態の映像伝送システムにおいて、端末装置３０１が移動することによってアソシエーションを確立するアクセスポイントがＡＰ１からＡＰ２に移る場合の動作を、第７の実施形態の映像停止復帰方法として図１３を参照し説明する。
まず、▲１▼端末装置３０１がＡＰ１とマルチキャストで無線チャネルのアソシエーションを確立すると、▲２▼ＡＰ１は端末装置３０１とアソシエーション確立していることを無線ＬＡＮ収容スイッチ３０３に通知する。次に、▲３▼無線ＬＡＮ収容スイッチ３０３は、ＡＰ１のセルと隣接するセルのアクセスポイントＡＰ２に対して、同じマルチキャストアドレスを受信するよう指示する。▲４▼ＡＰ２はハンドオーバに必要な時間分の映像データをハンドオーバ用キャッシュバッファに常にキャッシュする。
このような状態において、▲５▼端末装置３０１がアソシエーション確立している無線チャネルをリリースする。無線チャネルがリリースされると、ＡＰ１とアソシエーション確立していた端末装置３０１にはＡＰ２からＡＰ２のＩＤが送られていたため、端末装置３０１は、ＡＰ１との無線チャネルをリリースした後、▲６▼ＡＰ２に対して無線チャネルのアソシエーションの確立を要求する。▲７▼ＡＰ２がこの要求に応じて確立ＯＫとの応答を端末装置３０１に返すと、▲８▼端末装置３０１はＡＰ２と無線チャネルのアソシエーションを確立する。
端末装置３０１がＡＰ２と無線チャネルのアソシエーションが確立すると、▲９▼ＡＰ２は端末装置３０１とアソシエーション確立したことを無線ＬＡＮ収容スイ
2003041341.tif 000003
ンドオーバ前からの映像データの続きを受信する。端末装置３０１は、受信した映像データの続きを再生した後に、ハンドオーバ後のＡＰ２から送信された映像データを再生する。
以上説明したように、本実施形態の映像伝送システムおよび映像停止復帰方法にあっては、第２の実施形態のようにアクセスポイント間でのデータの転送が発生せず、かつ、ハンドオーバ終了後に端末装置３０１でパケットの前後関係を整理する必要がない。したがって、ハンドオーバにより映像が停止しても、停止した時点からの映像の再開をすばやく行うことができる。
〔第８の実施形態〕
図１５は、本発明の第８の実施形態に係る映像伝送システムの構成と動作を示す説明図である。同図に示すように、第８の実施形態の映像伝送システムの構成は、第２の実施形態のそれを略同様である。但し、本実施形態の端末装置４０１、アクセスポイントＡＰおよび無線ＬＡＮ収容スイッチ４０３の内部構成は異なる。図１６に、本実施形態の端末装置４０１、アクセスポイントＡＰおよび無線ＬＡＮ収容スイッチ４０３の内部構成を示す。
同図に示すように、本実施形態の端末装置４０１は、マルチ受信モジュール搭載の端末であって、映像受信部４５１、映像復号部４５３、映像表示部４５５、音声受信部４５７、音声復号部４５９および音声出力部４６１の他に、第４の実施形態で説明した無線チャネルリリース部２６３および無線チャネルアソシエーション確立部２６７から成る無線チャネル管理部と、チャネル管理テーブル４６３を有したマルチリンクネットワーク管理部４６５とを備えて構成されている。
チャネル管理テーブル４６３は、使用アプリケーションＩＤ、ソケット記述子、サービスクラス、確保帯域、無線チャネルステータスおよび無線チャネルＩＤをその要素として、書き換え可能な記録手段に記録されている。また、マルチリンクネットワーク管理部４６５は、チャネル管理テーブル４６３を参照して、１つのＩＰコネクションに対する２つの無線チャネルの切り替えを管理するものである。
また、本実施形態のアクセスポイントＡＰは、第２の実施形態で説明したハンドオーバ用キャッシュバッファ１０９の他に、第７の実施形態で説明したハンドオーバ制御部３７３を備えている。また、無線ＬＡＮ収容スイッチ４０３は、第７の実施形態で説明したハンドオーバ管理部３７５の他に、アクセスポイントに送出する映像データ等の転送制御を行うデータ転送制御部４６７を備えて構成されている。
なお、アクセスポイントＡＰのハンドオーバ制御部３７３は、端末装置４０１の無線チャネルリリース部２６３からリリース通知を受け取ると、無線ＬＡＮ収容スイッチ４０３のハンドオーバ管理部３７５にアクセスポイントの切替通知（ＡＰ切替通知）を送り、端末装置４０１の無線チャネルアソシエーション確立部２６７から新規アソシエーション通知を受け取ると、無線ＬＡＮ収容スイッチ４０３のハンドオーバ管理部３７５にこれを転送する。
上記説明した構成要素を備えた本実施形態の映像伝送システムにおいて、端末装置４０１が移動することによってアソシエーションを確立するアクセスポイントがＡＰ１からＡＰ２に移る場合の動作を、第８の実施形態の映像停止復帰方法として図１５を参照し説明する。
まず、▲１▼端末装置４０１がＡＰ１とマルチキャストでアソシエーション確立している状態において、▲２▼端末装置４０１がＡＰ２に対して異なる帯域の無線チャネルの利用要求（帯域要求）を行う。▲３▼ＡＰ２がこの要求に応じて利用ＯＫとの応答を端末装置４０１に返すと、端末装置４０１とＡＰ２との間で当該無線チャネルのアソシエーションが確立する。端末装置４０１は、ＡＰ２とのアソシエーションが確立した後、▲５▼ＡＰ１とアソシエーション確立している無線チャネルのリリースを行う。ＡＰ１に対して当該リリースが行われると、▲６▼無線ＬＡＮ収容スイッチ４０３にＡＰ切替通知を行い、▲７▼ＡＰ１はハンドオーバ用キャッシュバッファ１０９にバッファされている映像データ等をＡＰ２に転送する。無線ＬＡＮ収容スイッチ４０３は、ＡＰ切替通知を受け取ると、▲８▼端末装置４０１と既にアソシエーションを確立しているＡＰ２に対して映像データ等を送出することとなり、当該映像データはＡＰ２を介して端末装置４０１に転送されることとなる。
以上説明したように、本実施形態の映像伝送システムおよび映像停止復帰方法にあっては、端末装置４０１がマルチリンクネットワーク管理部４６５を備えているため、１つのＩＰコネクションに対して２つの無線チャネルを切り替えて管理することができるため、アソシエーション確立しているアクセスポイント（ＡＰ１）と無線チャネルのリリースを行う前の段階で、新規のアクセスポイント（ＡＰ２）と無線チャネルのアソシエーションを確立し、当該アソシエーション確立の後に利用中のアクセスポイント（ＡＰ１）の無線チャネルをリリースすることができる。したがって、パケットロスが発生せず、端末装置４０１はハンドオーバによって映像が停止することなく再生し続けることができる。
本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明らかである。
本出願は、２００１年１１月０５日出願の日本特許出願（特願２００１―３３９４７５）に基づくものであり、その内容はここに参照として取り込まれる。
＜産業上の利用可能性＞
以上説明したように、本発明の映像伝送システムおよび映像停止復帰方法によれば、端末装置は、ハンドオーバにより映像が停止しても、停止した時点の映像から再生を再開することができる。
【図面の簡単な説明】
図１は、本発明の第１の実施形態に係る映像伝送システムの構成と動作を示す説明図、
図２は、第１の実施形態の映像伝送システムで用いられる端末装置の内部構成を示すブロック図、
図３は、第１の実施形態においてハンドオーバが行われるときのパケットと映像伝送システムの動作を説明する説明図、
図４は、本発明の第２の実施形態に係る映像伝送システムの構成と動作を示す説明図、
図５は、本発明の第３の実施形態に係る映像伝送システムの構成と動作を示す説明図、
図６は、本発明の第４の実施形態に係る映像伝送システムの構成と動作を示す説明図、
図７は、第４の実施形態の映像伝送システムで用いられる携帯端末および映像サーバの内部構成を示すブロック図、
図８は、第４の実施形態においてハンドオーバが行われるときのパケットと映像伝送システムの動作を説明する説明図、
図９は、第５の実施形態の映像伝送システムで用いられる携帯端末および映像サーバの内部構成を示すブロック図、
図１０は、第５の実施形態においてハンドオーバが行われるときのパケットと映像伝送システムの動作を説明する説明図、
図１１は、第６の実施形態の映像伝送システムで用いられる携帯端末、アクセスポイントおよび映像サーバの内部構成を示すブロック図、
図１２は、第６の実施形態においてハンドオーバが行われるときのパケットと映像伝送システムの動作を説明する説明図、
図１３は、本発明の第７の実施形態に係る映像伝送システムの構成と動作を示す説明図、
図１４は、第７の実施形態の映像伝送システムで用いられる携帯端末、アクセスポイントおよび無線ＬＡＮ収容スイッチの内部構成を示すブロック図
図１５は、本発明の第８の実施形態に係る映像伝送システムの構成と動作を示す説明図、
図１６は、第８の実施形態の映像伝送システムで用いられる携帯端末、アクセスポイントおよび無線ＬＡＮ収容スイッチの内部構成を示すブロック図、
図１７は、従来の映像伝送システムを示す構成図、
図１８は、従来の映像伝送システムで用いられる端末装置の内部構成を示すブロック図、
図１９は、ハンドオーバによりパケットロスが発生したときの映像再生停止区間を示す説明図である。
また、上記図面における参照番号１０１，２０３は、映像サーバ；１０３，３０３，４０３は、無線ＬＡＮ収容スイッチ；ＡＰ，ＡＰ１，ＡＰ２は、アクセスポイント；１０５，１１１，２０１，３０１，４０１は、端末装置；１０７は、データ蓄積部；１０９は、ハンドオーバ用キャッシュバッファ；１５１，２５１，４５１は、映像受信部；１５３は、映像バッファ；１５５，２５３，３５３，４５３は、映像復号部；１５７，２５５，３５５，４５５は、映像表示部；１５９，２５７，４５７は、音声受信部；１６１は、音声バッファ；１６３，２５９，３５９，４５９は、音声復号部；１６５，２６１，３６１，４６１は、音声出力部；１６７は、メディアバッファ管理部；１６９は、パケット受信状態モニタリング部；１７１は、ハンドオーバ開始／終了検出部；１７３は、再送要求送信部；２６３は、無線チャネルリリース部；２６５は、伝送停止要求部；２６７は、無線チャネルアソシエーション確立部；２６９は、伝送再送要求部；２７１は、映像データ蓄積部；２７３は、映像データ読出部；２７５は、映像データ送出部；２７７は、音声データ蓄積部；２７９は、音声データ読出部；２８１は、音声データ送出部；２８３は、伝送停止要求受信部；２８５は、伝送再送要求受信部；２８７は、伝送制御部；２８９は、映像データ再エンコード部；２９１は、ハンドオーバ状態管理部；３５１は、マルチキャスト映像受信部；３５７は、マルチキャスト音声受信部；３７１は、映像復号位置通知部；３７３は、ハンドオーバ制御部；３７５は、ハンドオーバ管理部；４６３は、チャネル管理テーブル；４６５は、マルチリンクネットワーク管理部；４６７は、データ転送制御部をそれぞれ示すものである。
【図１】
2003041341.tif 000004
【図２】
2003041341.tif 000005
【図３】
2003041341.tif 000006
【図４】
2003041341.tif 000007
【図５】
2003041341.tif 000008
【図６】
2003041341.tif 000009
【図７】
2003041341.tif 000010
【図８】
2003041341.tif 000011
【図９】
2003041341.tif 000012
【図１０】
2003041341.tif 000013
【図１１】
2003041341.tif 000014
【図１２】
2003041341.tif 000015
【図１３】
2003041341.tif 000016
【図１４】
2003041341.tif 000017
【図１５】
2003041341.tif 000018
【図１６】
2003041341.tif 000019
【図１７】
2003041341.tif 000020
【図１８】
2003041341.tif 000021
【図１９】
2003041341.tif 000022
【国際調査報告】
2003041341.tif 000023
2003041341.tif 000024
2003041341.tif 000025
2003041341.tif 000026