【手続補正書】
【提出日】平成22年3月2日(2010.3.2)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像データに含まれる顔領域を検出する顔検出部と、
前記顔検出部の検出した顔領域から顔構成部位を検出する顔構成部位検出部と、
前記顔構成部位検出部において顔構成部位の検出された顔画像の視線判別処理を実行する視線判別部を有し、
前記視線判別部は、
顔構成部位の検出された顔画像データの視線について、
（ａ）視線がカメラ方向を向いているポジティブ状態、
（ｂ）視線がカメラ方向を向いていないネガティブ状態、
上記（ａ），（ｂ）の２状態のいずれであるかを判別する処理を、上記（ａ），（ｂ）各状態に対応する分類データからなる学習データを格納した視線判別辞書と入力顔画像データとの照合処理によって実行する構成であることを特徴とする情報処理装置。
【請求項２】
前記顔構成部位検出部は、
前記顔検出部の検出した顔領域から目鼻口を検出する構成であり、
前記視線判別部は、
目鼻口の検出された顔画像データの視線判別処理を実行する構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記視線判別部は、
画像の特定位置の画素ペアの差分値を比較照合データとして利用するＰｉｘＤｉｆアルゴリズムを利用した処理によって視線判別処理を実行する構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項４】
前記情報処理装置は、
前記顔構成部位検出部において顔構成部位の検出された顔画像の回転処理、サイズ正規化処理、顔領域切り出し処理を実行する画像処理部を有し、
前記視線判別部は、
前記画像処理部における処理画像を入力して視線判別処理を実行する構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項５】
前記顔検出部は、
画像データに含まれる顔領域検出処理を、様々な顔領域画像情報を格納した顔検出辞書を参照して、画像の特定位置の画素ペアの差分値を比較照合データとして利用するＰｉｘＤｉｆアルゴリズムを利用して実行する構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項６】
前記顔構成部位検出部は、
前記顔検出部の検出した顔領域からの顔構成部位検出処理を、様々な顔構成部位画像情報を格納した顔構成部位検出辞書を参照して、画像の特定位置の画素ペアの差分値を比較照合データとして利用するＰｉｘＤｉｆアルゴリズムを利用して実行する構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項７】
前記情報処理装置は、
音声認識処理を実行する音声認識部を有し、
前記視線判別部における視線判別結果と、前記音声認識部における音声認識結果を統合して、発話者の解析を実行する構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項８】
前記情報処理装置は撮像装置であり、
前記視線判別部における視線判別結果を入力して撮像装置のシャッター制御を実行するシャッター制御部を有し、
前記シャッター制御部は、
撮像装置の取得画像に含まれる顔の視線中に、視線がカメラ方向を向いていないネガティブ状態の顔画像が含まれる場合に、シャッター操作を不可とする制御を行う構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項９】
前記情報処理装置は、さらに、
前記視線判別部において判別された複数の画像フレームに対応する視線判別結果を入力して、画像データの選別処理を行うフレーム選別部を有し、
前記フレーム選別部は、
ポジティブ状態とネガティブ状態の各状態情報を適用して画像フレームの選別を行う構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項１０】
前記情報処理装置は撮像装置であり、
前記視線判別部における視線判別結果を入力して警告出力を実行する警告出力部を有し、
前記警告出力部は、
撮像装置の取得画像に含まれる顔の視線中に、視線がカメラ方向を向いていないネガティブ状態の顔画像が含まれる場合に、警告出力を行う構成であることを特徴とする請求項１に記載の情報処理装置。
【請求項１１】
前記情報処理装置は、
前記視線判別部の視線判別結果をデータ検索処理に適用して、
（ａ）視線がカメラ方向を向いているポジティブ状態、
（ｂ）視線がカメラ方向を向いていないネガティブ状態、
上記（ａ），（ｂ）の２状態のいずれかの画像を選択抽出する検索処理を実行する構成を有することを特徴とする請求項１に記載の情報処理装置。
【請求項１２】
前記情報処理装置は、
画像データの視線判別処理結果を記憶部に格納する画像データの対応情報として記憶部に格納する処理を行う構成を有することを特徴とする請求項１に記載の情報処理装置。
【請求項１３】
情報処理装置において実行する情報処理方法であり、
顔検出部が、画像データに含まれる顔領域を検出する顔検出ステップと、
顔構成部位検出部が、前記顔検出ステップにおいて検出した顔領域から顔構成部位を検出する顔構成部位検出ステップと、
視線判別部が、前記顔構成部位検出ステップにおいて顔構成部位の検出された顔画像の視線判別処理を実行する視線判別ステップを有し、
前記視線判別ステップは、
顔構成部位の検出された顔画像データの視線について、
（ａ）視線がカメラ方向を向いているポジティブ状態、
（ｂ）視線がカメラ方向を向いていないネガティブ状態、
上記（ａ），（ｂ）の２状態のいずれであるかを判別する処理を、上記（ａ），（ｂ）各状態に対応する分類データからなる学習データを格納した視線判別辞書と入力顔画像データとの照合処理によって実行するステップであることを特徴とする情報処理方法。
【請求項１４】
前記顔構成部位検出ステップは、
前記顔検出ステップにおいて検出された顔領域から目鼻口を検出するステップであり、
前記視線判別ステップは、
目鼻口の検出された顔画像データの視線判別処理を実行するステップであることを特徴とする請求項１３に記載の情報処理方法。
【請求項１５】
前記視線判別ステップは、
画像の特定位置の画素ペアの差分値を比較照合データとして利用するＰｉｘＤｉｆアルゴリズムを利用した処理によって視線判別処理を実行するステップであることを特徴とする請求項１３に記載の情報処理方法。
【請求項１６】
前記情報処理方法は、さらに、
画像処理部が、前記顔構成部位検出部において顔構成部位の検出された顔画像の回転処理、サイズ正規化処理、顔領域切り出し処理を実行する画像処理ステップを有し、
前記視線判別ステップは、
前記画像処理ステップにおいて処理された画像を入力して視線判別処理を実行するステップであることを特徴とする請求項１３に記載の情報処理方法。
【請求項１７】
前記顔検出ステップは、
画像データに含まれる顔領域検出処理を、様々な顔領域画像情報を格納した顔検出辞書を参照して、画像の特定位置の画素ペアの差分値を比較照合データとして利用するＰｉｘＤｉｆアルゴリズムを利用して実行するステップであることを特徴とする請求項１３に記載の情報処理方法。
【請求項１８】
前記顔構成部位検出ステップは、
前記顔検出ステップにおいて検出された顔領域からの顔構成部位検出処理を、様々な顔構成部位画像情報を格納した顔構成部位検出辞書を参照して、画像の特定位置の画素ペアの差分値を比較照合データとして利用するＰｉｘＤｉｆアルゴリズムを利用して実行するステップであることを特徴とする請求項１３に記載の情報処理方法。
【請求項１９】
前記情報処理方法は、さらに、
音声認識部が、音声認識処理を実行する音声認識ステップと、
データ処理部が、視線判別結果と、前記音声認識部における音声認識結果を統合して、発話者の解析を実行するステップを有することを特徴とする請求項１３に記載の情報処理方法。
【請求項２０】
情報処理装置において情報処理を実行させるコンピュータ・プログラムであり、
顔検出部に、画像データに含まれる顔領域を検出させる顔検出ステップと、
顔構成部位検出部に、前記顔検出ステップにおいて検出した顔領域から顔構成部位を検出させる顔構成部位検出ステップと、
視線判別部に、前記顔構成部位検出ステップにおいて顔構成部位の検出された顔画像の視線判別処理を実行させる視線判別ステップを有し、
前記視線判別ステップは、
顔構成部位の検出された顔画像データの視線について、
（ａ）視線がカメラ方向を向いているポジティブ状態、
（ｂ）視線がカメラ方向を向いていないネガティブ状態、
上記（ａ），（ｂ）の２状態のいずれであるかを判別する処理を、上記（ａ），（ｂ）各状態に対応する分類データからなる学習データを格納した視線判別辞書と入力顔画像データとの照合処理によって実行させるステップであることを特徴とするコンピュータ・プログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】削除
【補正の内容】
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】削除
【補正の内容】
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】削除
【補正の内容】