(57)【要約】【課題】  多者間画像会議のためにビデオ信号を効果的に処理し得る移動通信システムのデジタルビデオ信号処理装置及びその方法を提供しようとする。【解決手段】  画像カメラ１０ａが付着された複数の画像会議用端末機１０と、それら画像会議用端末機１０から受信されたビデオ信号を混合して各画像会議用端末機１０に伝送するＭＣＵ２０と、を含んで移動通信システムのデジタルビデオ信号処理装置を構成する。  画像会議用端末機１０は、画像カメラ１０ａにより入力されたビデオ信号の解像度を縮小して伝送する。また、画像会議用端末機１０は、画像カメラ１０ａにより入力されたビデオ信号の解像度を縮小するダウンスケーリング部を含んで構成される。【選択図】  図１
2005039757.tif 000002
【特許請求の範囲】
【請求項１】
画像カメラが付着された複数の画像会議用端末機と、
それら画像会議用端末機から受信されたビデオ信号を混合して各画像会議用端末機に伝送するＭＣＵ（Ｍｕｌｔｉｐｏｉｎｔ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ）とを含んで構成されることを特徴とする移動通信システムのデジタルビデオ信号処理装置。
【請求項２】
前記画像会議用端末機は、
画像カメラにより入力されたビデオ信号の解像度を縮小して伝送することを特徴とする請求項１記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項３】
前記画像会議用端末機は、
前記画像カメラにより入力されたビデオ信号の解像度を縮小するダウンスケーリング部を含んで構成されることを特徴とする請求項１記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項４】
前記ＭＣＵは、
前記画像会議用端末機から伝送されたビデオ信号が配置される領域を考慮して、マクロブロックアドレスを設定するアドレス設定部を含んで構成されることを特徴とする請求項１記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項５】
前記アドレス設定部は、
前記画像会議用端末機から伝送されて混合された最終映像の各スライス中、最も左側のマクロブロックのみに絶対アドレスを設定することを特徴とする請求項４記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項６】
前記アドレス設定部は、
前記絶対アドレスの設定されたマクロブロックを除いた残りのマクロブロックに対して、以前のマクロブロックとのアドレス差値を符号化することを特徴とする請求項５記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項７】
画像カメラにより入力されるビデオ信号の解像度を縮小して伝送する複数の画像会議用端末機と、
それら画像会議用端末機から受信されたビデオ信号を混合／配置した最終映像を各画像会議用端末機に伝送するＭＣＵと、を含んで構成されることを特徴とする移動通信システムのデジタルビデオ信号処理装置。
【請求項８】
前記画像会議用端末機は、
前記画像カメラにより入力されるビデオ信号をデジタルビデオ信号に変換する変換器と、
デジタルビデオ信号の解像度を縮小するダウンスケーリング部と、
該ダウンスケーリング部の出力信号を圧縮するエンコーディング部と、
該エンコーディング部の出力信号を前記ＭＣＵに伝送する送信部と、から構成されることを特徴とする請求項７記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項９】
前記変換器は、
画像カメラにより入力されるＲＧＢ（Ｒｅｄ−Ｇｒｅｅｎ−Ｂｌｕｅ）フォーマットの信号をＹＣｂＣｒフォーマットのビデオ信号に変換することを特徴とする請求項８記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項１０】
前記ＭＣＵは、
各画像会議用端末機から伝送されたビデオ信号を逆可変長さ符号化する逆ＶＬＣ（Ｖａｒｉａｂｌｅ  Ｌｅｎｇｔｈ  Ｃｏｄｉｎｇ）部と、
該逆ＶＬＣ部から出力されるビデオ信号のマクロブロックアドレスを指定するアドレス設定部と、
アドレスの設定されたビデオ信号を可変長さ符号化するＶＬＣ部と、
それら各ＶＬＣ部から出力されるビデオ信号を混合して最終映像を具現する混合部と、から構成されることを特徴とする請求項７記載の移動通信システムのビデオ信号処理装置。
【請求項１１】
前記アドレス設定部は、
最終映像の各スライス中、最も左側のマクロブロックのみに絶対アドレスを指定することを特徴とする請求項１０記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項１２】
前記アドレス設定部は、
最終映像の最も左側のマクロブロックを除いた残りのマクロブロックに対して、以前のマクロブロックとのアドレス差値を符号化することを特徴とする請求項１０記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項１３】
画像カメラにより入力されたビデオ信号をデジタルビデオ信号に変換する変換器と、
デジタルビデオ信号の解像度を縮小するダウンスケーリング部と、
該ダウンスケーリング部の出力信号を圧縮して送信部に伝送するエンコーディング部と、
受信されたビデオ信号を逆可変長さ符号化によりデコーディングする逆ＶＬＣ部と、
該逆ＶＬＣ部から出力されたビデオ信号のマクロブロックアドレスを設定するアドレス設定部と、
アドレスの設定されたビデオ信号を可変長さ符号化により圧縮するＶＬＣ部と、
複数のビデオ信号を混合して最終映像を出力する混合部と、を含んで構成されることを特徴とする移動通信システムのデジタルビデオ信号処理装置。
【請求項１４】
前記デジタルビデオ信号は、
ＹＣｂＣｒフォーマットのビデオ信号であることを特徴とする請求項１３記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項１５】
前記エンコーディング部は、
ＭＰＥＧ−４方式により動映像を圧縮することを特徴とする請求項１３記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項１６】
前記アドレス設定部は、
最終映像の最も左側のマクロブロック列に対してのみ絶対アドレスを指定することを特徴とする請求項１３記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項１７】
前記アドレス設定部は、
最終映像の最も左側のマクロブロックを除いた残りのマクロブロックに対して、以前のマクロブロックとのアドレス差値を符号化することを特徴とする請求項１３記載の移動通信システムのデジタルビデオ信号処理装置。
【請求項１８】
画像カメラにより撮影されるビデオ信号の解像度を縮小してＭＣＵに伝送する過程と、
受信されたビデオ信号が混合／配置された最終映像を各画像会議用端末機にそれぞれ伝送する過程と、を行うことを特徴とする移動通信システムのデジタルビデオ信号処理方法。
【請求項１９】
前記ＭＣＵにビデオ信号を伝送する過程は、
画像カメラにより入力されたビデオ信号をデジタルビデオ信号処理フォーマットに変換する過程と、
前記デジタルビデオ信号の解像度を縮小して動映像を圧縮する過程と、
該圧縮されたビデオ信号を前記ＭＣＵに伝送する過程と、を順次行うことを特徴とする請求項１８記載の移動通信システムのデジタルビデオ信号処理方法。
【請求項２０】
前記デジタルビデオ信号処理フォーマットは、
ＹＣｂＣｒフォーマットであることを特徴とする請求項１９記載の移動通信システムのデジタルビデオ信号処理方法。
【請求項２１】
前記動映像は、
ＭＰＥＧ−４方式により圧縮されることを特徴とする請求項１９記載の移動通信システムのデジタルビデオ信号処理方法。
【請求項２２】
最終映像を伝送する過程は、
受信されたビデオ信号を逆可変長さ符号化する過程と、
各画像会議用端末機から伝送されるビデオ信号のマクロブロックアドレスを設定する過程と、
前記ビデオ信号を可変長さ符号化する過程と、
可変長さ符号化されたビデオ信号を混合して画像会議用端末機に伝送する過程と、を順次行うことを特徴とする請求項１８記載の移動通信システムのデジタル信号処理方法。
【請求項２３】
前記マクロブロックアドレスを設定する過程は、
該当のビデオ信号が最終映像で配置される領域を設定する過程と、
最終映像のスライス中、最も左側のマクロブロックに対する絶対アドレスを設定する過程と、
最も左側のマクロブロックを除いたマクロブロックは、以前のマクロブロックとの差値でアドレスを符号化する過程と、を行うことを特徴とする請求項２２記載の移動通信システムのデジタル信号処理方法。
【請求項２４】
画像カメラにより入力されるビデオ信号をデジタルビデオ信号フォーマットに変換する過程と、
デジタルビデオ信号の解像度を縮小する過程と、
解像度の縮小されたビデオ信号を圧縮してＭＣＵに伝送する過程と、
複数のビデオ信号を受信したＭＣＵが各ビデオ信号を逆可変長さ符号化によりデコーディングする過程と、
該デコーディングされたビデオ信号のマクロブロックアドレスを設定する過程と、
ビデオ信号を可変長さ符号化によりエンコーディングする過程と、
該エンコーディングされた各ビデオ信号を混合して画像会議用端末機に伝送する過程と、を順次行うことを特徴とする移動通信システムのデジタル信号処理方法。
【請求項２５】
前記デジタルビデオ信号処理フォーマットは、
ＹＣｂＣｒフォーマットであることを特徴とする請求項２４記載の移動通信システムのデジタルビデオ信号処理方法。
【請求項２６】
前記ビデオ信号は、
ＭＰＥＧ−４方式により圧縮されることを特徴とする請求項２４記載の移動通信システムのデジタルビデオ信号処理方法。
【請求項２７】
前記マクロブロックアドレスを設定する過程は、
該当のビデオ信号が最終映像で配置される領域を設定する過程と、
最終映像のスライス中、最も左側のマクロブロックに対して絶対アドレスを設定する過程と、
最も左側のマクロブロックを除いたマクロブロックに対して、以前のマクロブロックとの差値でアドレスを符号化する過程と、を行うことを特徴とする請求項２４記載の移動通信システムのデジタル信号処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、移動通信システムのデジタルビデオ信号処理装置及びその方法に係るもので、詳しくは、多者間画像会議のためにビデオ信号を効果的に処理し得る移動通信システムのデジタルビデオ信号処理装置及びその方法に関するものである
【背景技術】
【０００２】
最近、移動通信端末機により多様なコンテンツ及びマルチメディアサービスが提供されていて、画像通信サービスに対する使用者の関心が増大されつつある。
【０００３】
第１世代画像通信サービスは、１対１（ｏｎｅ−ｔｏ−ｏｎｅ）又は点対点（ｐｏｉｎｔ−ｔｏ−ｐｏｉｎｔ）で画像通信サービスを提供するものであって、最近は、前記第１世代画像通信サービスに基づいて多者間画像通信サービスを提供する技術が活発に研究されている。このとき、前記多者間画像通信サービスは、サービスを利用する複数の対象から伝送されるビデオ信号の効果的な処理方法に最大の難点がある。
【０００４】
前記画像通信の代表的な応用例として画像会議が挙げられるが、一般に、画像会議システムは、複数の画像会議参加者が各端末機により使用者間の映像及び音声を交換するシステムである。
【０００５】
図６は一般的な多者間画像会議システムの構成を示したブロック図で、４人の会議出席者（ｃｏｎｆｒｅｅ）が画像会議に参加する例を示している。
【０００６】
前記多者間画像会議システムは、画像カメラ１０ａが付着された複数の画像会議用端末機１０と、それら画像会議用端末機１０から受信されたビデオ信号を処理して新しいビデオ信号に変換／出力するＭＣＵ（Ｍｕｌｔｉｐｏｉｎｔ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ）２０と、を含んで構成されている。
【０００７】
又、前記ＭＣＵ２０は、Ｈ．３２ｘ端末機標準で多者間画像会議を維持・管理する装置であって、各画像会議用端末機１０から受信されたビデオ信号を混合して、それら画像会議用端末機１０の解像度に適合した新しいビデオ信号を生成した後、該当の画像会議用端末機１０にビデオ信号をそれぞれ伝送する。
【０００８】
このとき、前記ＭＣＵ２０は、前記画像会議用端末機１０から伝送されたビデオ信号を画像会議に適合したフォーマットのビデオ信号に変換するビデオ信号処理部（Ｖｉｄｅｏ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）（図示せず）を含んでいる。
【０００９】
図６中、点線で表示された信号は、前記画像会議用端末機１０から前記ＭＣＵ２０に入力されるコーディングされたビデオ信号を示し、実線で表示された信号は、前記ＭＣＵ２０から各画像会議用端末機１０に伝送される再コーディングされたビデオ信号を示している。
【００１０】
図７は従来ＭＣＵのビデオ信号処理動作を示したブロック図で、図８は図７に示されたＭＣＵの細部的な構成を示したブロック図である。
【００１１】
図７に示されたように、前記ＭＣＵ２０は、前記画像会議用端末機１０から入力されるビデオ信号をＤＣＴ（離散コサイン変換）（Ｄｉｓｃｒｅｔｅ  Ｃｏｓｉｎｅ  Ｔｒａｎｓｆｏｒｍ）又はピクセル単位にデコーディングするデコーディング部２１と、該デコーディング部２１から出力されるデコーディング信号の解像度を縮小するダウンスケーリング部（ｄｏｗｎ  ｓｃａｌｉｎｇ  ｕｎｉｔ）２２と、該ダウンスケーリング部２２から出力された各ビデオ信号を再びコーディングする再コーディング部２３と、該再コーディング部２３でコーディングされた複数のビデオ信号を混合して該当の画像会議用端末機１０に伝送する混合器２４と、から構成されている。
【００１２】
又、図８に示されたように、前記デコーディング部２１は、前記画像会議用端末機１０から伝送されるコーディングされたビデオ信号を逆可変長さ符号化する逆ＶＬＣ（Ｖａｒｉａｂｌｅ  Ｌｅｎｇｔｈ  Ｃｏｄｉｎｇ）部２１ａと、該逆ＶＬＣ部２１ａの出力信号を逆離散コサイン変換する逆ＤＣＴ部２１ｂと、該逆ＤＣＴ部２１ｂの出力信号を逆量子化する逆量子化部２１ｃと、から構成される。このとき、前記逆ＤＣＴ部２１ｂの出力信号はＤＣＴ単位に出力され、前記逆ＤＣＴ部２１ｂの出力信号が前記逆量子化部２１ｃを経て出力されると、ピクセル単位に出力される。
【００１３】
又、前記ダウンスケーリング部２２は、前記デコーディング部２１から出力されたビデオ信号の解像度を１／２、１／４、・・・１／２ｎ（但し、ｎは１以上の自然数）倍に縮小させる。
【００１４】
又、前記再コーディング部２３は、前記ダウンスケーリング部２２の出力信号を量子化する量子化部２３ａと、該量子化部２３ａの出力信号を離散コサイン変換して出力するＤＣＴ部２３ｂと、該ＤＣＴ部２３ｂの出力信号を可変長さ符号化して出力するＶＬＣ部２３ｃと、から構成される。
【００１５】
以下、このように構成されたＭＣＵのビデオ信号処理動作に対して説明する。
【００１６】
まず、前記画像会議用端末機１０から受信された複数のビデオ信号は、前記デコーディング部２１に入力されて、ＤＣＴ領域又はピクセル領域（ｐｉｘｅｌ  ｄｏｍａｉｎ）にデコーディングされた後で出力される。次いで、前記デコーディング部２１の出力信号は、前記ダウンスケーリング部２２で解像度縮小アルゴリズムが適用された後、前記再コーディング部２３から再びコーディングされる。次いで、前記混合器２４は、前記再コーディング部２３から出力された各ビデオ信号を混合して前記画像会議用端末機１０に伝送される。このとき、前記デコーディング部２１に入力された各ビデオ信号は、ＤＣＴ領域で処理する場合は逆ＤＣＴ部２１ｂまで、ピクセル領域で処理する場合は逆量子化部２１ｃまで適用されて出力される。
【００１７】
又、前記逆ＤＣＴ部２１ａ及び逆量子化部２１ｂでビデオ信号をデコーディングする過程と、前記量子化部２３ａ及びＤＣＴ部２３ｂでビデオ信号をコーディングする過程は、両方とも損失符号化特性を含んでいる。
【００１８】
以上説明したように、従来のＭＣＵは、損失符号化特性を有するデコーディング及びコーディングを連続的に適用してビデオ信号を処理するため、画質が劣化するという問題点があった。
【００１９】
又、ビデオ信号を逆ＤＣＴ部、逆量子化部、量子化部及びＤＣＴ部を経て連続的に処理するため、ビデオ信号の処理時間が遅延するという問題点があった。
【発明の開示】
【発明が解決しようとする課題】
【００２０】
即ち、従来のビデオ信号処理装置及びその方法においては、ビデオ信号処理をＭＣＵのみに依存するため、信号処理に要求される時間が遅延するだけでなく、処理されたビデオ信号の画質が劣化するという不都合な点があった。
【００２１】
本発明は、このような従来の課題に鑑みてなされたもので、多者間画像会議のためにビデオ信号を効果的に処理し得る移動通信システムのデジタルビデオ信号処理装置及びその方法を提供することを目的とする。
【課題を解決するための手段】
【００２２】
このような目的を達成するため、本発明に係る移動通信システムのデジタルビデオ信号処理装置は、画像カメラが付着された複数の画像会議用端末機と、それら画像会議用端末機から受信されたビデオ信号を混合して各画像会議用端末機に伝送するＭＣＵと、を含んで構成されることを特徴とする。
【００２３】
又、画像カメラにより入力されるビデオ信号の解像度を縮小して伝送する複数の画像会議用端末機と、それら画像会議用端末機から受信されたビデオ信号を混合／配置した最終映像を各画像会議用端末機に伝送するＭＣＵと、を含んで構成されることを特徴とする。
【００２４】
又、画像カメラにより入力されたビデオ信号をデジタルビデオ信号に変換する変換器と、デジタルビデオ信号の解像度を縮小するダウンスケーリング部と、該ダウンスケーリング部の出力信号を圧縮して送信部に伝送するエンコーディング部と、受信されたビデオ信号を逆可変長さ符号化によりデコーディングする逆ＶＬＣ部と、該逆ＶＬＣ部から出力されたビデオ信号のマクロブロックアドレスを設定するアドレス設定部と、アドレスの設定されたビデオ信号を可変長さ符号化により圧縮するＶＬＣ部と、複数のビデオ信号を混合して最終映像を出力する混合部と、を含んで構成されることを特徴とする。
【００２５】
且つ、本発明に係る移動通信システムのデジタルビデオ信号処理方法は、画像カメラにより撮影されるビデオ信号の解像度を縮小してＭＣＵに伝送する過程と、受信したビデオ信号を混合／配置した最終映像を各画像会議用端末機にそれぞれ伝送する過程と、を行うことを特徴とする。
【００２６】
又、画像カメラにより入力されるビデオ信号をデジタルビデオ信号フォーマットに変換する過程と、デジタルビデオ信号の解像度を縮小する過程と、解像度の縮小されたビデオ信号を圧縮してＭＣＵに伝送する過程と、複数のビデオ信号を受信したＭＣＵが各ビデオ信号を逆可変長さ符号化によりデコーディングする過程と、該デコーディングされたビデオ信号のマクロブロックアドレスを設定する過程と、ビデオ信号を可変長さ符号化によりエンコーディングする過程と、該エンコーディングされた各ビデオ信号を混合して画像会議用端末機に伝送する過程と、を順次行うことを特徴とする。
【００２７】
前記画像会議用端末機は、画像カメラにより入力されたビデオ信号の解像度を縮小して伝送することを特徴とする。
【００２８】
前記画像会議用端末機は、前記画像カメラにより入力されたビデオ信号の解像度を縮小するダウンスケーリング部を含んで構成されることを特徴とする。
【００２９】
前記ＭＣＵは、前記画像会議用端末機から伝送されたビデオ信号が配置される領域を考慮して、マクロブロックアドレスを設定するアドレス設定部を含んで構成されることを特徴とする。
【００３０】
前記アドレス設定部は、前記画像会議用端末機から伝送されて混合された最終映像の各スライス中、最も左側のマクロブロックのみに絶対アドレスを設定することを特徴とする。
【００３１】
前記アドレス設定部は、前記絶対アドレスの設定されたマクロブロックを除いた残りのマクロブロックに対して、以前のマクロブロックとのアドレス差値を符号化することを特徴とする。
【００３２】
前記画像会議用端末機は、前記画像カメラにより入力されるビデオ信号をデジタルビデオ信号に変換する変換器と、デジタルビデオ信号の解像度を縮小するダウンスケーリング部と、該ダウンスケーリング部の出力信号を圧縮するエンコーディング部と、該エンコーディング部の出力信号を前記ＭＣＵに伝送する送信部と、から構成される。
【００３３】
前記変換器は、画像カメラにより入力されるＲＧＢ（Ｒｅｄ−Ｇｒｅｅｎ−Ｂｌｕｅ）フォーマットの信号をＹＣｂＣｒフォーマットのビデオ信号に変換することを特徴とする。
【００３４】
前記ＭＣＵは、各画像会議用端末機から伝送されたビデオ信号を逆可変長さ符号化する逆ＶＬＣ（Ｖａｒｉａｂｌｅ  Ｌｅｎｇｔｈ  Ｃｏｄｉｎｇ）部と、該逆ＶＬＣ部から出力されるビデオ信号のマクロブロックアドレスを指定するアドレス設定部と、アドレスの設定されたビデオ信号を可変長さ符号化するＶＬＣ部と、それら各ＶＬＣ部から出力されるビデオ信号を混合して最終映像を具現する混合部と、から構成される。
【００３５】
前記アドレス設定部は、最終映像の各スライス中、最も左側のマクロブロックのみに絶対アドレスを指定することを特徴とする。
【００３６】
前記アドレス設定部は、最終映像の最も左側のマクロブロックを除いた残りのマクロブロックに対して、以前のマクロブロックとのアドレス差値を符号化することを特徴とする。
【００３７】
本発明は、移動通信システムのデジタルビデオ信号処理装置であって、画像カメラにより入力されたビデオ信号をデジタルビデオ信号に変換する変換器と、デジタルビデオ信号の解像度を縮小するダウンスケーリング部と、該ダウンスケーリング部の出力信号を圧縮して送信部に伝送するエンコーディング部と、受信されたビデオ信号を逆可変長さ符号化によりデコーディングする逆ＶＬＣ部と、該逆ＶＬＣ部から出力されたビデオ信号のマクロブロックアドレスを設定するアドレス設定部と、アドレスの設定されたビデオ信号を可変長さ符号化により圧縮するＶＬＣ部と、複数のビデオ信号を混合して最終映像を出力する混合部と、を含んで構成され、これにより上記目的が達成される。
【００３８】
前記デジタルビデオ信号は、ＹＣｂＣｒフォーマットのビデオ信号であることを特徴とする。
【００３９】
前記エンコーディング部は、ＭＰＥＧ−４方式により動映像を圧縮することを特徴とする。
【００４０】
前記アドレス設定部は、最終映像の最も左側のマクロブロック列に対してのみ絶対アドレスを指定することを特徴とする。
【００４１】
前記アドレス設定部は、最終映像の最も左側のマクロブロックを除いた残りのマクロブロックに対して、以前のマクロブロックとのアドレス差値を符号化することを特徴とする。
【００４２】
本発明は、移動通信システムのデジタルビデオ信号処理方法であって、画像カメラにより撮影されるビデオ信号の解像度を縮小してＭＣＵに伝送する過程と、受信されたビデオ信号が混合／配置された最終映像を各画像会議用端末機にそれぞれ伝送する過程と、を行い、これにより上記目的が達成される。
【００４３】
前記ＭＣＵにビデオ信号を伝送する過程は、画像カメラにより入力されたビデオ信号をデジタルビデオ信号処理フォーマットに変換する過程と、前記デジタルビデオ信号の解像度を縮小して動映像を圧縮する過程と、該圧縮されたビデオ信号を前記ＭＣＵに伝送する過程と、を順次行うことを特徴とする。
【００４４】
前記デジタルビデオ信号処理フォーマットは、ＹＣｂＣｒフォーマットであることを特徴とする。
【００４５】
前記動映像は、ＭＰＥＧ−４方式により圧縮されることを特徴とする。
【００４６】
本発明は、移動通信システムのデジタル信号処理方法であって、最終映像を伝送する過程は、受信されたビデオ信号を逆可変長さ符号化する過程と、各画像会議用端末機から伝送されるビデオ信号のマクロブロックアドレスを設定する過程と、前記ビデオ信号を可変長さ符号化する過程と、可変長さ符号化されたビデオ信号を混合して画像会議用端末機に伝送する過程と、を順次行い、これにより上記目的が達成される。
【００４７】
前記マクロブロックアドレスを設定する過程は、該当のビデオ信号が最終映像で配置される領域を設定する過程と、最終映像のスライス中、最も左側のマクロブロックに対する絶対アドレスを設定する過程と、最も左側のマクロブロックを除いたマクロブロックは、以前のマクロブロックとの差値でアドレスを符号化する過程と、を行うことを特徴とする。
【００４８】
本発明は、移動通信システムのデジタル信号処理方法であって、画像カメラにより入力されるビデオ信号をデジタルビデオ信号フォーマットに変換する過程と、デジタルビデオ信号の解像度を縮小する過程と、解像度の縮小されたビデオ信号を圧縮してＭＣＵに伝送する過程と、複数のビデオ信号を受信したＭＣＵが各ビデオ信号を逆可変長さ符号化によりデコーディングする過程と、該デコーディングされたビデオ信号のマクロブロックアドレスを設定する過程と、ビデオ信号を可変長さ符号化によりエンコーディングする過程と、該エンコーディングされた各ビデオ信号を混合して画像会議用端末機に伝送する過程と、を順次行い、これにより上記目的が達成される。
【００４９】
前記デジタルビデオ信号処理フォーマットは、ＹＣｂＣｒフォーマットであることを特徴とする。
【００５０】
前記ビデオ信号は、ＭＰＥＧ−４方式により圧縮されることを特徴とする。
【００５１】
前記マクロブロックアドレスを設定する過程は、該当のビデオ信号が最終映像で配置される領域を設定する過程と、最終映像のスライス中、最も左側のマクロブロックに対して絶対アドレスを設定する過程と、最も左側のマクロブロックを除いたマクロブロックに対して、以前のマクロブロックとの差値でアドレスを符号化する過程と、を行うことを特徴とする。
【発明の効果】
【００５２】
以下で説明するように、本発明に係る移動通信システムのデジタルビデオ信号処理装置及びその方法においては、ＭＣＵが非損失符号化過程の逆ＶＬＣ部及びＶＬＣ部を経てビデオ信号を連続的に処理するため、画質の劣化を防止し得るという効果がある。
【００５３】
又、複数の画像会議用端末機で解像度が縮小されて伝送されるビデオ信号を逆ＶＬＣ部、アドレス設定部及びＶＬＣ部を経て混合するため、ビデオ信号処理時間及びＭＣＵの計算複雑度が減少されることで、信号処理効率を増加し得るという効果がある
【発明を実施するための最良の形態】
【００５４】
以下、本発明の実施の形態に対し、図面に基づいて説明する。
【００５５】
本発明に係る移動通信システムのデジタルビデオ信号処理装置は、画像カメラが付着された複数の画像会議用端末機と、それら画像会議用端末機から受信されたビデオ信号を混合した新しいビデオ信号を各画像会議用端末機にそれぞれ伝送するＭＣＵと、を含んで構成されている。
【００５６】
又、本発明のＭＣＵは、従来のＭＣＵとは異なって、ダウンスケーリング過程が省略されるが、該ダウンスケーリング過程は、本発明の画像会議用端末機で行われる。
【００５７】
図１は本発明に係る画像会議用端末機のビデオ信号処理動作を示したブロック図で、図示されたように、本発明に係る画像会議用端末機は、画像カメラにより入力された画像会議参加者の映像をデジタルビデオ信号処理のためのフォーマットに変換する変換器１１０と、該変換器１１０から出力されたビデオ信号の解像度を縮小するダウンスケーリング部１２０と、該ダウンスケーリング部１２０から出力されたビデオ信号をＭＰＥＧ−４方式によりコーディングするエンコーディング部１３０と、該エンコーディング部１３０から出力されたビデオ信号をＭＣＵに伝送する送信部１４０と、から構成されている。
【００５８】
前記画像カメラにより入力される映像は、ＲＧＢ（赤−緑−青）（Ｒｅｄ−Ｇｒｅｅｎ−Ｂｌｕｅ）フォーマットのＶＧＡ（Ｖｉｄｅｏ  Ｇｒａｐｈｉｃ  Ａｒｒａｙ）信号であって、前記変換器１１０を経てＹＣｂＣｒフォーマットのＶＧＡ信号に変換される。このとき、前記ＹＣｂＣｒフォーマットは、ＲＧＢフォーマットのビデオ信号をデジタルビデオ信号として処理するためのフォーマットであって、Ｙは輝度信号を、Ｃｂ及びＣｒは色差信号をそれぞれ示したものである。
【００５９】
又、前記ダウンスケーリング部１２０は、前記変換器１１０から出力されたＹＣｂＣｒフォーマットのＶＧＡ信号をＹＣｂＣｒフォーマットのＱＶＧＡ（Ｑｕａｒｔｅｒ  ＶＧＡ）信号として解像度を縮小し、前記ダウンスケーリング部１２０から出力されたＱＶＧＡ信号は、エンコーディング部１３０を経て前記ＭＣＵに伝送される。このとき、前記ダウンスケーリング部１２０は、サブサンプリング（ｓｕｂ−ｓａｍｐｌｉｎｇ）方式やダウンサンプリング（ｄｏｗｎ−ｓａｍｐｌｉｎｇ）方式などを適用して前記ビデオ信号の解像度を縮小する。
【００６０】
図２は本発明に係るＭＣＵの内部構造を示したブロック図で、図示されたように、本発明に係るＭＣＵは、前記画像会議用端末機から伝送されるビデオ信号を逆可変長さ符号化する逆ＶＬＣ部２１０と、該逆ＶＬＣ部２１０から出力される信号のマクロブロックアドレスを指定するアドレス設定部２２０と、該アドレス設定部２２０から出力されたビデオ信号を可変長さ符号化するＶＬＣ部２３０と、該ＶＬＣ部２３０から出力された複数のビデオ信号を領域配置を考慮して混合する混合部２４０と、から構成されている。
【００６１】
且つ、前記ＭＣＵは、前記画像会議用端末機から解像度が縮小されて入力されるビデオ信号を混合するだけで各画像会議用端末機にそれぞれ伝送する。このとき、前記混合過程は、ＶＬＣ領域で行い得るため、ピクセル領域やＤＣＴ領域までデコーディングする必要がない。よって、前記ＭＣＵは、非損失符号化過程を行う逆ＶＬＣ部２１０及びＶＬＣ部２３０のみを含んでいる。
【００６２】
又、前記アドレス設定部２２０は、各画像会議用端末機から伝送された画面が最終ビデオ画面で配置される領域を考慮してマクロブロックアドレスを設定する。
【００６３】
且つ、前記ＭＰＥＧ標準シンタクスには、ＭＢ＿ａｄｄｒ＿ｉｎｃｒｅｍｅｎｔフィールドが存在するが、該ＭＢ＿ａｄｄｒ＿ｉｎｃｒｅｍｅｎｔフィールドは、現在のマクロブロックの絶対アドレスの代わりに、以前のマクロブロックとのアドレス差値のみを符号化することで符号量を減少させる。
【００６４】
図３は本発明に係るアドレス設定部で処理されるマクロブロックの位置を、４人が参加する多者間会議に適用して示した図である。
【００６５】
図示されたように、分離された４個の画面に関係なく、各スライス中、最も左側のマクロブロックアドレスに対してのみＭＢ＿ａｄｄｒ＿ａｄｊｕｓｔブロックを適用して絶対アドレスを設定し、残りのマクロブロックに対してはアドレス差値のみを符号化することで、符号量及び計算複雑度を減少することができる。このとき、前記ＭＢ＿ａｄｄｒ＿ａｄｊｕｓｔブロックは、ＭＣＵで混合される最終ビデオ領域の配置を考慮して、マクロブロックの絶対アドレスを指定するブロックである。
【００６６】
即ち、４個の画面の左側の各マクロブロックアドレスに対して、ＭＢ＿ａｄｄｒ＿ａｄｊｕｓｔブロックを全て適用することなく、最終画面の最も左側のマクロブロックアドレスのみにＭＢ＿ａｄｄｒ＿ａｄｊｕｓｔブロックを適用し、全体画面の右側に位置する画面の左側のマクロブロックアドレスは、前記ＭＢ＿ａｄｄｒ＿ｉｎｃｒｅｍｅｎｔフィールドであるので、以前のマクロブロックとの差値を符号化して表示する。
【００６７】
図４は本発明に係る移動通信システムのデジタルビデオ信号処理方法を示したフローチャートで、画像会議用端末機の画像カメラにより入力されたビデオ信号の解像度を縮小してＭＣＵに伝送する過程と、縮小されて前記ＭＣＵに伝送されたビデオ信号を混合して各画像会議用端末機にそれぞれ伝送する過程と、を行う。
【００６８】
まず、画像会議用端末機に具備された画像カメラにより実時間に入力された（Ｓ１）ビデオ信号は、変換器１１０でデジタル信号処理のための信号に変換される（Ｓ２）。即ち、前記変換器１１０は、入力されたＲＧＢフォーマットのＶＧＡ信号をＹＣｂＣｒフォーマットのＶＧＡ信号に変換して出力する。
【００６９】
次いで、前記変換器１１０から出力されたＹＣｂＣｒフォーマットのＶＧＡ信号は、前記ダウンスケーリング部１２０で解像度が縮小されて、ＹＣｂＣｒフォーマットのＱＶＧＡ信号に出力され（Ｓ３）、解像度の縮小されたデジタルビデオ信号は、ＭＰＥＧ−４コーディング過程を経て圧縮されて（Ｓ４）、前記ＭＣＵに伝送される（Ｓ５）。
【００７０】
次いで、各画像会議用端末機から前記ＭＣＵに伝送されたビデオ信号は、逆可変長さ符号化されて出力され（Ｓ６）、前記逆ＶＬＣ部２１０で逆可変長さ符号化されて出力されたビデオ信号は、最終画面で配置される領域によってマクロブロックアドレスが決定される（Ｓ７）。
【００７１】
以下、前記アドレス設定部２２０でビデオ信号のマクロブロックアドレスを設定する過程に対して説明する。
【００７２】
まず、４個の画像会議用端末機から伝送された各映像が最終画面で配置される位置を考慮して、各スライド中、最も左側のマクロブロックに対してのみ絶対アドレスを指定し、前記最も左側のマクロブロックを除いた残りのマクロブロックに対してはアドレス増加値を設定する。よって、全てのマクロブロックに対して絶対アドレスを設定することなく、アドレス増加値を符号化するため、前記マクロブロックアドレスを指定するのに要求される計算過程及びデータ量を減少することができる。
【００７３】
次いで、前記アドレス設定部２２０の出力信号は、ＶＬＣ部２３０で可変長さ符号化されて出力され（Ｓ８）、各ＶＬＣ部２３０から出力された信号が前記混合部２４０で混合された後（Ｓ９）、各画像会議用端末機に伝送される（Ｓ１０）。このとき、前記混合部２４０から出力されたビデオ信号は、４個の画面を一つの最終画面として構成する。
【００７４】
図５は本発明によって解像度の縮小されたビデオ信号を混合して最終画面を具現した例示図である。
【００７５】
以上のように、本発明の好ましい実施形態を用いて本発明を例示してきたが、本発明は、この実施形態に限定して解釈されるべきものではない。本発明は、特許請求の範囲によってのみその範囲が解釈されるべきであることが理解される。当業者は、本発明の具体的な好ましい実施形態の記載から、本発明の記載および技術常識に基づいて等価な範囲を実施することができることが理解される。本明細書において引用した特許、特許出願および文献は、その内容自体が具体的に本明細書に記載されているのと同様にその内容が本明細書に対する参考として援用されるべきであることが理解される。
【図面の簡単な説明】
【００７６】
【図１】本発明に係る画像会議用端末機の構成を示したブロック図である。
【図２】本発明に係るＭＣＵの内部構造を示したブロック図である。
【図３】本発明に係るアドレス設定部で処理されるマクロブロックの位置を示した図である。
【図４】本発明に係る移動通信システムのデジタルビデオ信号処理方法を示したフローチャートである。
【図５】本発明によって解像度が縮小されたビデオ信号を混合した最終画面の表示図である。
【図６】一般的な多者間画像会議システムの構成を示したブロック図である。
【図７】従来ＭＣＵの構成を示したブロック図である。
【図８】図７に示されたＭＣＵの細部構成を示したブロック図である。
【符号の説明】
【００７７】
１１０  変換器
１２０  ダウンスケーリング部
１３０  エンコーディング部
１４０  送信部
２１０  逆ＶＬＣ部
２２０  アドレス設定部
２３０  ＶＬＣ部
２４０  混合部
【図１】
2005039757.tif 000003
【図２】
2005039757.tif 000004
【図３】
2005039757.tif 000005
【図４】
2005039757.tif 000006
【図７】
2005039757.tif 000007
【図８】
2005039757.tif 000008
【図５】
2005039757.tif 000009
【図６】
2005039757.tif 000010