【手続補正書】
【提出日】平成30年6月1日(2018.6.1)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数のカメラによりそれぞれ異なる方向から撮影される特定オブジェクトの三次元空間における位置を示す第１位置情報を取得する第１取得手段と、
前記複数のカメラにより取得される撮影画像に基づく仮想視点画像の生成に係る仮想視点の前記三次元空間における位置を示す第２位置情報を取得する第２取得手段と、
前記撮影画像に基づいて生成される前記仮想視点画像内に表示させる仮想オブジェクトの前記三次元空間における位置を、前記第１取得手段により取得される前記第１位置情報と前記第２取得手段により取得される前記第２位置情報とに基づいて決定する決定手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記決定手段は、前記特定オブジェクトの画像と前記仮想オブジェクトの画像とが前記仮想視点画像において重ならないように前記仮想オブジェクトの前記三次元空間における位置を決定することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記三次元空間における位置は、前記複数のカメラにより撮影される空間に対応する三次元座標系によって規定されることを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記決定手段により決定される前記仮想オブジェクトの前記三次元空間における位置を示す情報と、前記第２取得手段により取得される前記第２位置情報と、前記特定オブジェクトのデータと、前記仮想オブジェクトのデータとを用いて、前記仮想オブジェクトを含む仮想視点画像を生成する生成手段を有することを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
【請求項５】
前記決定手段により決定された前記仮想オブジェクトの前記三次元空間における位置を示す情報を、前記仮想オブジェクトを含む仮想視点画像を生成する生成装置へ出力する出力手段を有することを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
【請求項６】
前記決定手段は、前記仮想視点の前記三次元空間における位置と前記特定オブジェクトの前記三次元空間における位置との距離が第１の距離である場合は、前記仮想視点の前記三次元空間における位置と前記特定オブジェクトの前記三次元空間における位置との距離が前記第１の距離より長い第２の距離である場合よりも、前記仮想視点の前記三次元空間における位置と前記仮想オブジェクトの前記三次元空間における位置との距離が遠くなるように、前記仮想オブジェクトの前記三次元空間における位置を決定することを特徴とする請求項１乃至５の何れか１項に記載の画像処理装置。
【請求項７】
前記特定オブジェクトの移動方向を検出する検出手段と、
前記検出手段により検出された前記特定オブジェクトの移動方向に基づいて、前記仮想オブジェクトの位置及びサイズのうち少なくとも一方を変更する変更手段と
を有することを特徴とする請求項１乃至５の何れか１項に記載の画像処理装置。
【請求項８】
前記撮影画像に含まれる背景の形状を特定する形状特定手段を有し、
前記決定手段は、前記第１取得手段により取得された前記第１位置情報と、前記第２取得手段により取得された前記第２位置情報と、前記形状特定手段により特定された前記背景の形状とに基づいて、前記仮想オブジェクトの前記三次元空間における位置を決定することを特徴とする請求項１乃至７の何れか１項に記載の画像処理装置。
【請求項９】
前記決定手段は、前記第１取得手段により取得される前記第１位置情報と前記第２取得手段により取得される前記第２位置情報とに応じて決まる前記仮想視点画像における前記特定オブジェクトのサイズに基づいて、前記仮想オブジェクトの前記三次元空間における位置を決定することを特徴とする請求項１乃至８の何れか１項に記載の画像処理装置。
【請求項１０】
前記決定手段は、前記仮想オブジェクトの大きさを、前記第１取得手段により取得された前記第１位置情報と前記仮想オブジェクトの前記三次元空間における位置との関係に基づいて決定することを特徴とする請求項１乃至９の何れか１項に記載の画像処理装置。
【請求項１１】
前記決定手段は、前記仮想オブジェクトの内容を、前記第１取得手段により取得された前記第１位置情報と前記仮想オブジェクトの前記三次元空間における位置との関係に基づいて決定することを特徴とする請求項１乃至９の何れか１項に記載の画像処理装置。
【請求項１２】
前記決定手段は、前記仮想オブジェクトを配置する仮想オブジェクト領域の前記三次元空間における位置を決定し、当該仮想オブジェクト領域の前記仮想視点画像におけるサイズに基づいて、当該仮想オブジェクト領域に配置する前記仮想オブジェクトの大きさ及び内容のうち少なくとも一方を決定することを特徴とする請求項１乃至９の何れか１項に記載の画像処理装置。
【請求項１３】
前記決定手段は、仮想視点画像内に広告を表示させるための前記仮想オブジェクトの位置を決定することを特徴とする請求項１乃至１２の何れか１項に記載の画像処理装置。
【請求項１４】
前記決定手段は、前記複数のカメラの撮影対象に関する付加情報を仮想視点画像内に表示させるための前記仮想オブジェクトの位置を決定することを特徴とする請求項１乃至１２の何れか１項に記載の画像処理装置。
【請求項１５】
前記決定手段は、前記撮影画像に基づく仮想視点画像が生成される前に前記仮想オブジェクトの前記三次元空間における位置を決定することを特徴とする請求項１乃至１４の何れか１項に記載の画像処理装置。
【請求項１６】
複数のカメラによりそれぞれ異なる方向から撮影される特定オブジェクトの三次元空間における位置を示す第１位置情報を取得する第１取得工程と、
前記複数のカメラにより取得される撮影画像に基づく仮想視点画像の生成に係る仮想視点の前記三次元空間における位置を示す第２位置情報を取得する第２取得工程と、
前記撮影画像に基づいて生成される前記仮想視点画像内に表示させる仮想オブジェクトの前記三次元空間における位置を、前記第１取得工程において取得される前記第１位置情報と前記第２取得工程において取得される前記第２位置情報とに基づいて決定する決定工程と、
を有することを特徴とする画像処理方法。
【請求項１７】
前記決定工程においては、前記特定オブジェクトの画像と前記仮想オブジェクトの画像とが前記仮想視点画像において重ならないように前記仮想オブジェクトの前記三次元空間における位置が決定されることを特徴とする請求項１６に記載の画像処理方法。
【請求項１８】
前記決定工程において決定される前記仮想オブジェクトの前記三次元空間における位置を示す情報と、前記第２取得工程において取得される前記第２位置情報と、前記特定オブジェクトのデータと、前記仮想オブジェクトのデータとを用いて、前記仮想オブジェクトを含む仮想視点画像を生成する生成工程を有することを特徴とする請求項１６又は１７に記載の画像処理方法。
【請求項１９】
コンピュータを、請求項１乃至１５の何れか１項に記載の画像処理装置の各手段として動作させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像処理装置、画像処理方法及びプログラム
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
本発明は、画像処理装置、画像処理方法及びプログラムに関する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
そこで、本発明は、画像処理装置であって、複数のカメラによりそれぞれ異なる方向から撮影される特定オブジェクトの三次元空間における位置を示す第１位置情報を取得する第１取得手段と、前記複数のカメラにより取得される撮影画像に基づく仮想視点画像の生成に係る仮想視点の前記三次元空間における位置を示す第２位置情報を取得する第２取得手段と、前記撮影画像に基づいて生成される前記仮想視点画像内に表示させる仮想オブジェクトの前記三次元空間における位置を、前記第１取得手段により取得される前記第１位置情報と前記第２取得手段により取得される前記第２位置情報とに基づいて決定する決定手段と、を有することを特徴とする。