【手続補正書】
【提出日】平成16年4月30日(2004.4.30)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
受信機能を有する通信端末と複数の送信機能を有する通信端末との間で動画像信号を送受信する多地点会議システムにおいて、
前記送信機能を有する端末は、
動画像信号を入力する手段と、
前記入力された動画像信号から第１の解像度で第１のフレームレートの第１の動画像信号を生成するとともに、第１の解像度より高い第２の解像度で第１のフレームレートより低い第２のフレームレートの第２の動画像信号を生成する手段と、
前記第１の動画像信号および第２の動画像信号を送出する手段とを有し、
前記受信機能を有する端末は、
受信した前記第１の動画像信号および第２の動画像信号から第２の解像度で第１のフレームレートの第３の動画像信号を生成する手段と、
前記生成した第３の動画像信号を表示する手段とを有することを特徴とする多地点会議システム。
【請求項２】
請求項１に記載の多地点会議システムにおいて、
前記第２のフレームレートは、前記第１のフレームレートの整数分の１のフレームレートであることを特徴とする多地点会議システム。
【請求項３】
請求項１又は請求項２に記載の多地点会議システムにおいて、
前記送信機能を有する端末は、前記送出した第１の動画像信号および前記第２の動画像信号をメモリに保持し、送出する第１の動画像信号をメモリに保持した第１の動画像信号を参照画像とした動き補償を用いて符号化して送出するとともに、送出する第２の動画像信号をメモリに保持した第２の動画像信号を参照画像とした動き補償を用いて符号化して送出することを特徴とする多地点会議システム。
【請求項４】
請求項１又は請求項２に記載の多地点会議システムにおいて、
前記送信機能を有する端末は、前記送出した第１の動画像信号および前記第２の動画像信号をメモリに保持し、送出する第１の動画像信号をメモリに保持した第１の動画像信号を参照画像とした動き補償を用いて符号化して送出するとともに、
第２の動画像信号を第１の動画像信号の符号化結果を用いて補完することによって第２の解像度および第１のフレームレートを持つ補完動画像信号を生成してメモリに保持し、送出する第２の動画像信号を補完動画像信号を参照画像とした動き補償を用いて符号化して送出することを特徴とする多地点会議システム。
【請求項５】
請求項４に記載の多地点会議システムにおいて、
符号化された第１の動画像信号を再復号して得られた各画素の値と、直前の補完動画像信号の前記画素に対応した領域の平均値の差が所定値以上の場合に、直前の補完動画像信号の前記画素に対応した領域の値を前記画素の動画像信号の値で置き換えることによって補完動画像信号を生成することを特徴とする多地点会議システム。
【請求項６】
請求項４に記載の多地点会議システムにおいて、
直前の補完動画像信号を第１の動画像信号の符号化の際に求められた動きベクトルによって変更し、第１の動画像信号の符号化の際に求められた残差信号を第２の解像度に解像度変換して加算することにより補完動画像信号を生成することを特徴とする多地点会議システム。
【請求項７】
請求項４乃至請求項６のいずれか１項に記載の多地点会議システムにおいて、
第１の動画像信号の符号化の際に求められた動きベクトルを第２の動画像信号の動きベクトルとして用いて第２の動画像信号の符号化を行うことを特徴とする多地点会議システム。
【請求項８】
請求項１乃至請求項７のいずれか１項に記載の多地点会議システムにおいて、
前記受信機能を有する端末において、第１の解像度で動画像を表示する場合は符号化された第１の動画像信号を復号して表示し、
第２の解像度で動画像を表示する場合は符号化された第２の動画像信号を復号した動画像を、第１の動画像信号を復号した動画像を用いて補完して前記第３の動画像を生成して表示することを特徴とする多地点会議システム。
【請求項９】
請求項１乃至請求項５及び請求項７又は請求項８のいずれか１項に記載の多地点会議システムにおいて、
符号化された第１の動画像信号を復号化して得られた各画素の値と、直前に表示された動画像の前記画素に対応した領域の動画像信号の平均値の差が所定値以上の場合に、前記画素に対応した領域の動画像信号の値を前記画素の動画像信号の値で置き換えることによって前記第３の動画像を生成して表示することを特徴とする多地点会議システム。
【請求項１０】
請求項１乃至請求項４及び請求項６乃至請求項８のいずれか１項に記載の多地点会議システムにおいて、
前記受信機能を有する端末において、第１の解像度で動画像を表示する場合は符号化された第１の動画像信号を復号して表示し、
第２の解像度で動画像を表示する場合は、第２の動画像信号が受信されたフレームでは符号化された第２の動画像信号を復号して表示し、第２の動画像信号が受信されないフレームでは、直前に表示された動画像を符号化された第１の動画像信号中の動きベクトルによって変更し、前記符号化された第１の動画像信号中の残差信号を第２の解像度に解像度変換して加算して前記第３の動画像を生成して表示することを特徴とする多地点会議システム。
【請求項１１】
請求項１乃至請求項１０のいずれか１項に記載の多地点会議システムにおいて、
第１の動画像信号および第２の動画像信号の送出をマルチキャストで行うことを特徴とする多地点会議システム。
【請求項１２】
請求項１１に記載の多地点会議システムにおいて、
前記送信機能を有する端末は、第１の動画像信号を第１のマルチキャストチャネルで送出し、第２の動画像信号を第２のマルチキャストチャネルで送出し、
前記受信機能を有する端末は、少なくとも第１のマルチキャストチャネルを常時受信し、必要に応じて第２のマルチキャストチャネルを受信することを特徴とする多地点会議システム。
【請求項１３】
請求項１乃至請求項１２のいずれか１項に記載の多地点会議システムにおいて、
複数の受信機能を有する端末は、動画像を表示する解像度を送信側の端末に通知し、
前記送信機能を有する端末は、通信された解像度のうち最も低い解像度を第１の解像度に設定し、他の解像度を前記第２の解像度に設定することを特徴とする多地点会議システム。
【請求項１４】
請求項１乃至請求項１３のいずれか１項に記載の多地点会議システムにおいて、
前記送信機能を有する端末は、通信回線もしくはネットワークの使用状況を監視し、帯域が不足している場合は、複数の第２の動画像信号の一部もしくは全部の送出を規制することを特徴とする多地点会議システム。
【請求項１５】
請求項１乃至請求項１３のいずれか１項に記載の多地点会議システムにおいて、
各受信機能を有する端末が送信側の端末に優先度を付けて、自端末の計算能力もしくは表示領域が不足した場合に前記優先度の低い送信側端末からの動画像を第１の解像度もしくは第２の解像度のうちより低い解像度で表示することを特徴とする多地点会議システム。
【請求項１６】
請求項１５に記載の多地点会議システムにおいて、
現在発言している送信機能を有する端末の前記優先度を、他の送信機能を有する端末の優先度より高く設定することを特徴とする多地点会議システム。
【請求項１７】
受信機能を有する通信端末と複数の送信機能を有する通信端末との間で動画像信号を送受信する多地点会議システムにおける動画像信号の処理方法であって、
前記送信機能を有する端末において、
入力された動画像信号から第１の解像度で第１のフレームレートの第１の動画像信号を生成するとともに、第１の解像度より高い第２の解像度で第１のフレームレートより低い第２のフレームレートの第２の動画像信号を生成し、
前記第１の動画像信号および第２の動画像信号を送出し、
前記受信機能を有する端末において、
受信した前記第１の動画像信号および第２の動画像信号から第２の解像度で第１のフレームレートの第３の動画像信号を生成し、
前記生成した第３の動画像信号を表示することを特徴とする多地点会議システムにおける動画像信号の処理方法。
【請求項１８】
請求項１７に記載の多地点会議システムにおける動画像信号の処理方法において、
前記受信機能を有する端末において、
第１の解像度で動画像を表示する場合は符号化された第１の動画像信号を復号して表示し、
第２の解像度で動画像を表示する場合は符号化された第２の動画像信号を復号した動画像を、第１の動画像信号を復号した動画像を用いて補完して前記第３の動画像を生成して表示することを特徴とする多地点会議システムにおける動画像信号の処理方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
【課題を解決するための手段】
本発明では、多地点会議に参加している端末が、他の会議参加者の動画像を端末の計算能力および表示能力に応じた任意な解像度でフレキシブルに表示できるようにするために、送信側の端末（すなわち、送信機能を有する端末）に複数の解像度の動画像を比較的低い負荷で符号化して送信する手段を設け、受信側の端末（すなわち、受信機能を有する端末）に受け取った動画像データから所望の解像度の動画像を生成して表示する手段を設けている。