【手続補正書】
【提出日】平成20年7月29日(2008.7.29)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像処理装置と画像処理方法と画像処理プログラム及び情報記録媒体
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数フレームの入力画像信号を用いて、前記入力画像信号における注目フレームの所定位置の動きを検出する動き検出手段と、
前記動き検出手段で検出された動きと前記複数フレームの入力画像信号に基づいて中間画像情報を生成する中間画像情報生成手段と、
前記中間画像情報生成手段で生成された中間画像情報に基づいて、前記注目フレームに存在しない画角の周辺画像信号を生成する周辺画像信号生成手段とを備える画像処理装置。
【請求項２】
前記中間画像情報生成手段は、
前記所定位置の動きに基づいたレイヤ分類を行って、前記所定位置を複数レイヤのいずれかに分類するレイヤ分類手段と、
前記レイヤ分類手段での分類結果と前記入力画像信号と前記所定位置の動きに基づき、前記レイヤ毎の動き量と前記レイヤ毎の画像信号を前記中間画像情報として生成する情報生成処理手段を有する請求項１記載の画像処理装置。
【請求項３】
前記レイヤ分類手段は、
前記レイヤ分類を行う際に用いる閾値を、所定フレーム数の前記所定位置の動き量に基づいて決定する閾値設定手段を有する請求項２記載の画像処理装置。
【請求項４】
前記情報生成手段では、前記レイヤ毎の動き量に基づいて前記入力画像信号から信号の抽出をレイヤ毎に行い前記レイヤ毎の画像信号を生成する請求項２記載の画像処理装置。
【請求項５】
前記情報生成処理手段は、
前記レイヤ毎の画像信号に基づく画像を所定の順序で張り合わせたときに画像の無くなる領域がある場合は、前記画像の無くなる領域の周辺領域の画像信号を用いて補間処理を行い、前記画像の無くなる領域の画像信号を作成する中間画像補間処理手段を有する請求項２記載の画像処理装置。
【請求項６】
前記レイヤ分類手段でレイヤ分類を行う際の前記複数レイヤは、奥行きを示す請求項２記載の画像処理装置。
【請求項７】
前記動き検出手段では、前記注目フレームの所定位置の画像と、前記注目フレーム対する前フレームあるいは後フレームの画像との相関を検出して、前記注目フレームの所定位置と相関が最も高い画像の位置から動き方向と動き量を検出する請求項２記載の画像処理装置。
【請求項８】
前記レイヤ分類手段では、前記複数フレームの入力画像信号から、前記所定位置の動き方向に基づいて動きパターンの検出を行い、検出結果に応じて前記複数のレイヤを設定する請求項７記載の画像処理装置。
【請求項９】
前記レイヤ分類手段では、前記動き検出手段で検出された前記所定位置の動き量に基づき、前記複数レイヤへの分類を行う請求項８記載の画像処理装置。
【請求項１０】
入力画像信号に基づく画像を所定面に射影した射影画像の画像信号を生成する幾何変換手段を有し、
前記動き検出手段では、前記射影画像の画像信号を用いて前記注目フレームの所定位置の動きを検出し、
前記中間画像情報生成手段では、前記動き検出手段で検出された動きと前記射影画像の画像信号に基づいて前記中間画像情報を生成する請求項１記載の画像処理装置。
【請求項１１】
前記動き検出手段は、
前記射影画像の所定領域の画像信号をフレーム毎に抽出して動き判別画像の画像信号を生成する動き判別画像生成手段と、
前記射影画像の位置をフレーム毎にずらした画像信号を用いて所定フレーム分の平均値画像信号を順次生成すると共に、該平均値画像信号からフレーム毎に画像信号を抽出して積分画像の画像信号を生成し、さらに前記射影画像のずらし量を変えて前記積分画像の画像信号を複数生成する積分画像生成手段と、
前記動き判別画像生成手段で生成した前記動き判別画像の画像信号と、前記積分画像生成手段で生成した前記複数の積分画像の画像信号との相関を検出して、前記所定位置と最も相関が高いとされた積分画像の画像信号を生成したときのずらし量から前記所定位置の動き量を判別する動き量判別手段を有する請求項１０記載の画像処理装置。
【請求項１２】
前記レイヤ分類手段では、前記動き量判別手段で判別された動き量に応じて、レイヤ分類を行う請求項１１記載の画像処理装置。
【請求項１３】
前記周辺画像信号生成手段は、
前記周辺画像信号を前記入力画像信号に対応させて出力できるように、前記中間画像情報蓄積手段からの前記中間画像情報の読み出しと前記周辺画像信号の生成を制御する制御手段を有する請求項１記載の画像処理装置。
【請求項１４】
前記周辺画像信号生成手段は、
前記レイヤ毎の画像信号を所定のレイヤ順序で貼り付けて前記周辺画像信号を生成する画像信号生成処理手段を有する請求項２記載の画像処理装置。
【請求項１５】
前記周辺画像信号生成手段は、
前記レイヤ毎の画像信号を所定のレイヤ順序で貼り付けた画像信号に画像の無い領域がある場合は、前記画像の無い領域の周辺領域の画像信号を用いて補間処理を行い、前記画像信号が無い領域の画像信号を作成する周辺画像補間処理手段を有する請求項１４記載の画像処理装置。
【請求項１６】
前記周辺画像信号生成手段は、
前記レイヤ毎の動き量に基づき前記貼り付けた画像信号をレイヤ毎に移動してから、新たな画像信号を前記レイヤ毎に貼り付けて前記画像信号生成処理手段に供給するレイヤ画像生成処理手段を有する請求項１４記載の画像処理装置。
【請求項１７】
前記周辺画像信号生成手段は、
前記レイヤ画像生成処理手段で生成された画像信号の射影変換を行って前記画像信号生成処理手段に供給し、あるいは前記画像信号生成処理手段で生成された画像信号の射影変換を行って出力する射影変換手段を有する請求項１６記載の画像処理装置。
【請求項１８】
前記射影変換手段では、前記入力画像信号に基づく画像の画像表示面と前記周辺画像信号に基づく画像の画像表示面との位置関係に応じた射影変換を行って、前記周辺画像信号を生成する請求項１７記載の画像処理装置。
【請求項１９】
前記入力画像信号は蓄積されている信号である請求項１記載の画像処理装置。
【請求項２０】
複数フレームの入力画像信号を用いて、前記入力画像信号における注目フレームの所定位置の動きを検出するものとし、
検出された動きと前記複数フレームの入力画像信号に基づいて中間画像情報を生成し、
生成された前記中間画像情報に基づいて、前記注目フレームに存在しない画角の周辺画像信号を生成する画像処理方法。
【請求項２１】
画像信号を処理するコンピュータに、
複数フレームの入力画像信号を用いて、前記入力画像信号における注目フレームの所定位置の動きを検出する動き検出手順と、
前記動き検出手順で検出された動きと前記複数フレームの入力画像信号に基づいて中間画像情報を生成する中間画像情報生成手順と、
前記中間画像情報生成手順で生成された中間画像情報に基づいて、前記注目フレームに存在しない画角の周辺画像信号を生成する周辺画像信号生成手順を実行させる画像処理プログラム。
【請求項２２】
画像信号を処理するコンピュータに、
複数フレームの入力画像信号を用いて、前記入力画像信号おける注目フレームの所定位置の動きを検出する動き検出手順と、
前記動き検出手順で検出された動きと前記複数フレームの入力画像信号に基づいて中間画像情報を生成する中間画像情報生成手順と、
前記中間画像情報生成手順で生成された中間画像情報に基づいて、前記注目フレームに存在しない画角の周辺画像信号を生成する周辺画像信号生成手順を実行させるためのプログラムを記録した情報記録媒体。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
【発明の属する技術分野】
この発明は画像処理装置と画像処理方法と画像処理プログラム及び情報記録媒体に関する。詳しくは、複数フレームの入力画像信号を用いて、注目フレームの所定位置の動きを検出するものとし、検出された動きと複数フレームの入力画像信号に基づいて中間画像情報を生成し、この生成された中間画像情報に基づいて、注目フレームに存在しない画角の周辺画像信号を生成するものである。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
そこで、この発明では、複数のビデオカメラや特殊レンズを用いたビデオカメラを用いることなく、広画角な画像を容易に提示できる画像処理装置と画像処理方法と画像処理プログラム及び情報記録媒体を提供するものである。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００７４
【補正方法】変更
【補正の内容】
【００７４】
2003052055.tif 000001