【手続補正書】
【提出日】平成23年11月16日(2011.11.16)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
立体像の標準モデルデータからなるデータベースと、
複数枚の多視点画像の画像データを取得する画像データ取得手段と、
３次元データ作成装置を、前記複数枚の多視点画像から３次元形状データを生成する３次元形状データ生成手段として機能させる３次元形状データ生成プログラムと、
前記画像データ取得手段により取得した複数枚の画像データからそれぞれ人物領域を抽出し、抽出した人物領域から検出した顔の特徴部位と前記データベースの標準モデルデータとの対応点を取得してから、前記３次元形状データ生成プログラムにより３次元形状データを得る３次元データ作成制御手段と、
を備え、
前記画像データ取得手段は、取得する画像データの撮影位置や撮影方向等のカメラ情報が既知の場合にそのカメラ情報を取得するカメラ情報取得手段を含み、
前記立体像の標準モデルデータは、人物の顔および頭部の標準モデルデータ、表情変化の標準モデルデータを含み、
前記３次元データ作成制御手段は、抽出した人物領域から検出した顔の特徴部位と前記人物の顔の標準モデルデータとの対応点から表情データを取得し、表情データにおける顔の表情と前記標準モデルデータの表情とを比較して表情データにおける顔の表情の変化が閾値より大きい場合には前記表情変化のモデルデータに基づいて顔の表情を所定の表情に補正し、前記カメラ情報取得手段によりカメラ情報が既知の場合には３次元形状データ生成プログラムに含まれている第１の３次元形状データ生成プログラムにより前記人物の３次元形状データを生成し、カメラ情報が未知の場合には３次元形状データ生成プログラムに含まれている第２の３次元形状データ生成プログラムにより前記人物の３次元形状データを生成する、
ことを特徴とする３次元データ作成装置。
【請求項２】
前記第１の３次元形状データ生成プログラムは、３次元データ作成装置を、前記画像データ取得手段によって取得した複数枚の多視点画像の画像データと前記カメラ情報取得手段によって取得されたカメラ情報を元に３次元形状データを生成する３次元形状データ生成手段として機能することを特徴とする請求項１に記載の３次元データ作成装置。
【請求項３】
前記第２の３次元形状データ生成プログラムは、３次元データ作成装置を、前記画像データ取得手段によって取得した複数枚の多視点画像の画像データを元に視体積交差法によって３次元形状データを生成する３次元形状データ生成手段として機能することを特徴とする請求項１に記載の３次元データ作成装置。
【請求項４】
前記第２の３次元形状データ生成プログラムは、３次元データ作成装置を、前記画像データ取得手段によって取得した複数枚の多視点画像の画像データを元に因子分解法によって３次元形状データを生成する３次元形状データ生成手段として機能することを特徴とする請求項１に記載の３次元データ作成装置。
【請求項５】
立体像の標準モデルデータからなるデータベースと、
複数枚の多視点画像の画像データを取得する画像データ取得手段と、
３次元データ作成装置を、前記複数枚の多視点画像から３次元形状データを生成する３次元形状データ生成手段として機能させる３次元形状データ生成プログラムと、
前記画像データ取得手段により取得した複数枚の画像データからそれぞれ人物領域を抽出し、抽出した人物領域から検出した顔の特徴部位と前記データベースの標準モデルデータとの対応点を取得してから、前記３次元形状データ生成プログラムにより３次元形状データを得る３次元データ作成制御手段と、
を備え、
前記立体像の標準モデルデータは、人物の顔および頭部の標準モデルデータ、表情変化の標準モデルデータ、服装および髪型の標準モデルデータを含み、
前記３次元データ作成制御手段は、抽出した人物領域から検出した顔の特徴部位を元に各画像データから頭部の形および顔貌の特徴を抽出し、前記人物の顔および頭部の標準モデルデータを検索して頭部の形および顔貌の特徴に最も類似する３次元モデルデータを取得し、取得した３次元モデルデータの曲面上に前記複数枚の多視点画像の画像データを射影変換して顔および頭部の３次元形状データを生成する、
ことを特徴とする３次元データ作成装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
上記課題を解決するために、請求項１に記載の発明では、立体像の標準モデルデータからなるデータベースと、複数枚の多視点画像の画像データを取得する画像データ取得手段と、３次元データ作成装置を、前記複数枚の多視点画像から３次元形状データを生成する３次元形状データ生成手段として機能させる３次元形状データ生成プログラムと、前記画像データ取得手段により取得した複数枚の画像データからそれぞれ人物領域を抽出し、抽出した人物領域から検出した顔の特徴部位と前記データベースの標準モデルデータとの対応点を取得してから、前記３次元形状データ生成プログラムにより３次元形状データを得る３次元データ作成制御手段と、を備え、前記画像データ取得手段は、取得する画像データの撮影位置や撮影方向等のカメラ情報が既知の場合にそのカメラ情報を取得するカメラ情報取得手段を含み、前記立体像の標準モデルデータは、人物の顔および頭部の標準モデルデータ、表情変化の標準モデルデータを含み、前記３次元データ作成制御手段は、抽出した人物領域から検出した顔の特徴部位と前記人物の顔の標準モデルデータとの対応点から表情データを取得し、表情データにおける顔の表情と前記標準モデルデータの表情とを比較して表情データにおける顔の表情の変化が閾値より大きい場合には前記表情変化のモデルデータに基づいて顔の表情を所定の表情に補正し、前記カメラ情報取得手段によりカメラ情報が既知の場合には３次元形状データ生成プログラムに含まれている第１の３次元形状データ生成プログラムにより前記人物の３次元形状データを生成し、カメラ情報が未知の場合には３次元形状データ生成プログラムに含まれている第２の３次元形状データ生成プログラムにより前記人物の３次元形状データを生成する、ことを特徴とする３次元データ作成装置を提供する。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
また、請求項２に記載の発明では、前記第１の３次元形状データ生成プログラムは、３次元データ作成装置を、前記画像データ取得手段によって取得した複数枚の多視点画像の画像データと前記カメラ情報取得手段によって取得されたカメラ情報を元に３次元形状データを生成する３次元形状データ生成手段として機能することを特徴とする請求項１に記載の３次元データ作成装置を提供する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
また、請求項３に記載の発明では、前記第２の３次元形状データ生成プログラムは、３次元データ作成装置を、前記画像データ取得手段によって取得した複数枚の多視点画像の画像データを元に視体積交差法によって３次元形状データを生成する３次元形状データ生成手段として機能することを特徴とする請求項１に記載の３次元データ作成装置を提供する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
また、請求項４に記載の発明では、前記第２の３次元形状データ生成プログラムは、３次元データ作成装置を、前記画像データ取得手段によって取得した複数枚の多視点画像の画像データを元に因子分解法によって３次元形状データを生成する３次元形状データ生成手段として機能することを特徴とする請求項１に記載の３次元データ作成装置を提供する。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
また、請求項５に記載の発明では、立体像の標準モデルデータからなるデータベースと、複数枚の多視点画像の画像データを取得する画像データ取得手段と、３次元データ作成装置を、前記複数枚の多視点画像から３次元形状データを生成する３次元形状データ生成手段として機能させる３次元形状データ生成プログラムと、前記画像データ取得手段により取得した複数枚の画像データからそれぞれ人物領域を抽出し、抽出した人物領域から検出した顔の特徴部位と前記データベースの標準モデルデータとの対応点を取得してから、前記３次元形状データ生成プログラムにより３次元形状データを得る３次元データ作成制御手段と、を備え、前記立体像の標準モデルデータは、人物の顔および頭部の標準モデルデータ、表情変化の標準モデルデータ、服装および髪型の標準モデルデータを含み、前記３次元データ作成制御手段は、抽出した人物領域から検出した顔の特徴部位を元に各画像データから頭部の形および顔貌の特徴を抽出し、前記人物の顔および頭部の標準モデルデータを検索して頭部の形および顔貌の特徴に最も類似する３次元モデルデータを取得し、取得した３次元モデルデータの曲面上に前記複数枚の多視点画像の画像データを射影変換して顔および頭部の３次元形状データを生成する、ことを特徴とする３次元データ作成装置を提供する。