(57)【要約】【課題】  伝送レートの大きな相違に自動対応する映像伝送システムを実現する。【解決手段】  通信状況監視装置（２４）は、伝送路（１２）の通信状況、具体的には実効伝送レートを監視しており、その監視結果に従い、間引き装置（２２）の間引き率を決定する。間引き装置（２２）は、通信状況監視装置２４からの制御信号に従う間引き率でカメラ（２０）からの映像信号のフレーム又は１画面内の画素を間引く。映像符号化装置（２６）は、間引き装置（２２）からの映像信号を圧縮符号化する。多重化装置（３２）は、映像符号化装置２６からの符号化映像データと通信状況監視装置（２４）からの間引き情報を多重化し、受信装置（１４）に送信する。受信装置（１４）では、補間装置（４４）が、映像復号化装置（４２）により復号化された映像データに対し、間引き情報に従いフレーム又は画素を補間する。【選択図】  図１
2010239389.tif 000002
【特許請求の範囲】
【請求項１】
伝送路を介して映像を伝送する映像伝送システムであって、
当該伝送路の実効レートを監視する監視装置と、
入力映像信号を、当該監視装置の監視結果に従って間引く間引き装置と、
当該間引き装置の出力映像信号を圧縮符号化する映像符号化装置と、
当該映像符号化装置からの符号化映像信号と、当該間引き装置における間引きに関する間引き情報とを多重する多重装置と、
当該伝送路を伝搬した信号から当該符号化映像信号と当該間引き情報を分離する分離装置と、
当該分離装置により分離された当該符号化映像信号を復号化する映像復号化装置と、
当該分離装置により分離された当該間引き情報に従い、当該映像復号化装置の出力映像信号を補間する補間装置
とを具備することを特徴とする映像伝送システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像伝送システムに関する。
【背景技術】
【０００２】
ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）又はインターネットを介して映像・音声を双方向に伝送するビデオ会議システムは広く知られている。ビデオ会議システムでは、伝送データ量を削減するために、映像データを圧縮して伝送する。圧縮方式として、ＭＰＥＧ２やＨ．２６４方式が広く知られている。
【０００３】
従来のビデオ会議システムは、伝送路上の伝送レートとして一定値以上を想定しており、その伝送レートで伝送しても充分な画質を得られるように送信側の圧縮装置（エンコーダ）の量子化ステップサイズ等の圧縮パラメータを固定的に設定する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−３３３４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
昨今、数百ｋｂｐｓ程度の携帯電話の通信網から１Ｇｂｐｓにまで到達する光ファイバまで、伝送レートの異なる多様な伝送媒体を利用できるようになっている。
【０００６】
また、伝送路としてインターネットを利用する場合、実効レートは大幅に変動するのは避けられない。しかし、従来のビデオ会議システムを構成する映像伝送システムは、伝送レートの変動に対して、マニュアルで圧縮パラメータを変更するものであって、面倒な操作が必要であったり、伝送レートの変動に対して自動的に圧縮率を変更するものであっても、対応範囲が狭く、従って、インターネットのような、伝送レートが大きく変動する伝送媒体を使用するビデオ会議システムには不向きであった。
【０００７】
そこで、本発明は、通信回線の大きなレート変動にも対応可能な映像伝送システムを提示することを目的とする。
【課題を解決するための手段】
【０００８】
本発明に係る映像伝送システムは、伝送路を介して映像を伝送する映像伝送システムであって、当該伝送路の実効レートを監視する監視装置と、入力映像信号を、当該監視装置の監視結果に従って間引く間引き装置と、当該間引き装置の出力映像信号を圧縮符号化する映像符号化装置と、当該映像符号化装置からの符号化映像信号と、当該間引き装置における間引きに関する間引き情報とを多重する多重装置と、当該伝送路を伝搬した信号から当該符号化映像信号と当該間引き情報を分離する分離装置と、当該分離装置により分離された当該符号化映像信号を復号化する映像復号化装置と、当該分離装置により分離された当該間引き情報に従い、当該映像復号化装置の出力映像信号を補間する補間装置とを具備することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、伝送路の実効レートの変動に自動対応する映像伝送システムを実現できる。
【図面の簡単な説明】
【００１０】
【図１】本発明の一実施例の概略構成ブロック図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して、本発明の実施例を詳細に説明する。
【実施例１】
【００１２】
図１は、本発明の一実施例である映像伝送システムの概略構成ブロック図を示す。送信装置１０が伝送路１２を介して受信装置１４に映像音声信号を伝送する。
【００１３】
送信装置１０の構成と機能を説明する。カメラ２０は送信装置１０を利用するユーザを撮影し、その映像信号を間引き装置２２に供給する。通信状況監視装置２４は、伝送路１２の通信状況、具体的には実効伝送レートを監視しており、その監視結果に従い、間引き装置２２の間引き率を決定する。通信状況監視装置２４はまた、間引き装置２２による間引きを受信装置１４側で回復できるように、間引き装置２２の間引き情報を多重化装置（ＭＵＸ）３２に供給する。
【００１４】
間引き装置２２は、通信状況監視装置２４からの制御信号に従う間引き率でカメラ２０からの映像信号のフレーム又は１画面内の画素を間引く。例えば、伝送路１２の実効伝送レートが大幅に落ち込む場合にはフレームを間引く。これにより動画としての表現性能は低下するものの、１画面内の解像度の大幅な劣化は防止できる。実効伝送レートの低下が、水平方向の多少の画素の削減で対応できる場合には、水平ライン上の画素を、削減後の画素数になるように再サンプリングすればよい。
【００１５】
映像符号化装置２６は、公知の動画圧縮方式に従い、間引き装置２２からの映像信号を圧縮符号化し、符号化映像データを多重化装置３２に供給する。
【００１６】
他方、マイク２８は、送信装置１０を利用するユーザの発する音声を取り込み、音声符号化装置３０は、マイク２８からの音声信号を所定の方式で符号化し、符号化音声データを多重化装置３２に供給する。
【００１７】
多重化装置３２は、映像符号化装置２６からの符号化映像データ、音声符号化装置３０からの符号化音声データ、及び通信状況監視装置２４からの間引き情報を多重化して、伝送路１２に出力する。
【００１８】
伝送路１２を伝搬した符号化映像データ、符号化音声データ及び間引き情報は、受信装置１４の分離装置（ＤＥＭＵＸ）４０に入力する。分離装置４０は、伝送路１２からのデータを、符号化映像データ、符号化音声データ及び間引き情報に分離し、符号化映像データを映像復号化装置４２に、符号化音声データを音声復号化装置４８に、間引き情報を補間装置４４にそれぞれ供給する。
【００１９】
映像復号化装置４２は符号化映像データを復号化し、復号化により得られた映像信号又は映像データを間引き装置４４に供給する。補間装置４４は、映像復号化装置４２からの映像データに対し、分離装置４０からの間引き情報に従うフレーム又は画素を補間する。映像モニタ４６は、補間装置４４の出力映像信号を画像として表示する。これにより、受信装置１４のユーザは、送信装置１０のユーザの顔等を映像モニタ４６の画面上に視覚的に確認できる。
【００２０】
補間装置４４は、間引き装置２２による間引き前のフレーム数／画素数にまで補間する必要はなく、映像モニタ４６での映像表示に適したフレーム数／画素数にまで映像復号化装置４２の出力映像信号を補間すればよいことは明らかである。
【００２１】
音声復号化装置４８は、分離装置４０からの符号化音声データを復号化する。これにより、音声符号化装置３０に入力音声信号に相当する音声信号が復元される。スピーカ５０は、音声復号化装置４８からの音声信号を音響出力する。これにより、受信装置１４のユーザは、送信装置１０のユーザの発言を音として聞くことができる。
【００２２】
映像復号化装置４８はまた、受信映像の伝送エラーをモニタし、通信状況監視装置５２に通知する。通信状況監視装置５２は、映像復号化装置４８からのエラー情報を逐次又は一定値以上の場合に、送信側の通信状況監視装置２４に通知する。通信状況監視装置５２は、送信装置１０から受信装置１４への映像データの実効伝送レートを通信状況監視装置２４に通知してもよい。これらの情報により、通信状況監視装置２４は、より適切に間引き装置２２の間引きを制御できる。通信状況監視装置５２から通信状況監視装置２４へのこれらの情報の伝送には、伝送路１２を双方向に使用するか、又は、伝送路１２を提供する伝送媒体上に伝送路１２とは逆方向の伝送路を設定し、その伝送路を使用すれば良い。
【００２３】
このように、本実施例では、通信回線となる伝送路１２の実効レートに応じて、映像信号のフレーム数／画素数を調整してから送信するので、映像符号化装置２６における圧縮パラメータ、例えば、量子化ステップサイズを手動調節する必要が無くなる。すなわち、伝送路１２の実効レートが大きく変動する場合には、送信装置１０のユーザの手を煩わせることなしに、映像送信を継続できる。
【００２４】
図１に示す映像伝送システムと同様の逆向きの映像伝送システムを設けることで、映像会議システムを実現できることは明らかである。
【００２５】
伝送路１２の実効伝送レートが大きく変動する場合を説明したが、実効伝送レートが大きく異なる伝送路に切り替えて使用する場合にも、本発明は適用可能である。
【００２６】
特定の説明用の実施例を参照して本発明を説明したが、特許請求の範囲に規定される本発明の技術的範囲を逸脱しないで、上述の実施例に種々の変更・修整を施しうることは、本発明の属する分野の技術者にとって自明であり、このような変更・修整も本発明の技術的範囲に含まれる。
【符号の説明】
【００２７】
１０：送信装置
１２：伝送路
１４：受信装置
２０：カメラ
２２：間引き装置
２４：通信状況監視装置
２６：映像符号化装置
２８：マイク
３０：音声符号化装置
３２：多重化装置
４０：分離装置
４２：映像復号化装置
４４：補間装置
４６：映像モニタ
４８：音声復号化装置
５０：スピーカ
５２：通信状況監視装置
【図１】
2010239389.tif 000003