【手続補正書】
【提出日】平成20年12月22日(2008.12.22)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像画像データを取得する撮像画像取得手段と、
上記撮像画像取得手段により取得した撮像画像データの画像解析を行い、その撮像画像データの画像内に特定種別の被写体画像が存在した場合、該被写体画像の画像サイズに応じて、該被写体画像の画素領域を画像変換処理の処理対象領域に設定する対象領域設定手段と、
上記処理対象領域の被写体画像に対して画像変換処理を行って変換画像データを生成する変換処理手段と、
を備えたことを特徴とする画像処理装置。
【請求項２】
上記対象領域設定手段は、上記特定種別の被写体画像の画像サイズについて、大サイズか小サイズを判別する処理を行い、小サイズと判別された場合に、当該被写体画像の画素領域を上記処理対象領域に設定することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
上記対象領域設定手段は、上記特定種別の被写体画像の画像サイズについて、大サイズか小サイズを判別する処理を行い、大サイズと判別された場合に、当該被写体画像の画素領域を上記処理対象領域に設定することを特徴とする請求項１に記載の画像処理装置。
【請求項４】
上記対象領域設定手段は、上記撮像画像データが手動操作によるタイミングで撮像された撮像画像データであるか、自動撮像された撮像画像データであるかを判別するとともに、
上記撮像画像データが、手動操作によるタイミングで撮像された撮像画像データである場合は、上記特定種別の被写体画像の画像サイズについて、大サイズか小サイズを判別する処理を行い、小サイズと判別された場合に、当該被写体画像の画素領域を上記処理対象領域に設定し、
上記撮像画像データが、自動撮像された撮像画像データである場合は、上記特定種別の被写体画像の画像サイズについて、大サイズか小サイズを判別する処理を行い、大サイズと判別された場合に、当該被写体画像の画素領域を上記処理対象領域に設定することを特徴とする請求項１に記載の画像処理装置。
【請求項５】
上記特定種別の被写体画像とは、人間の顔の画像であることを特徴とする請求項１に記載の画像処理装置。
【請求項６】
上記特定種別の被写体画像とは、著作物の画像であることを特徴とする請求項１に記載の画像処理装置。
【請求項７】
上記変換処理手段は、上記画像変換処理として、上記処理対象領域の被写体画像を認識不能又は認識困難な画像とする処理を行うことを特徴とする請求項１に記載の画像処理装置。
【請求項８】
上記変換処理手段は、上記画像変換処理として、上記処理対象領域の被写体画像を他の画像に置き換える処理を行うことを特徴とする請求項１に記載の画像処理装置。
【請求項９】
上記変換処理手段は、上記画像変換処理として、上記処理対象領域の顔画像を、その顔画像の属性又は表情の判別結果に応じて、他の画像に置き換える処理を行うことを特徴とする請求項１に記載の画像処理装置。
【請求項１０】
上記撮像画像取得手段は、画像撮像を行う撮像部を有し、上記撮像部での撮像により、上記撮像画像データを取得することを特徴とする請求項１に記載の画像処理装置。
【請求項１１】
上記撮像画像取得手段は、外部機器と通信を行う通信部を有し、上記通信部での外部機器と通信により、上記撮像画像データを受信して取得することを特徴とする請求項１に記載の画像処理装置。
【請求項１２】
上記撮像画像取得手段は、可搬性記録媒体から情報を再生する再生部を有し、上記再生部による上記可搬性記録媒体の再生により、上記撮像画像データを取得することを特徴とする請求項１に記載の画像処理装置。
【請求項１３】
上記変換処理手段で生成された変換画像データについて保存処理を行う保存処理手段を、さらに備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項１４】
上記保存処理手段は、記録媒体に対して情報の記録を行う記録部を有し、上記保存処理として、上記変換画像データを、上記記録媒体に記録することを特徴とする請求項１３に記載の画像処理装置。
【請求項１５】
上記保存処理手段は、外部機器と通信を行う通信部を有し、上記保存処理として、上記変換画像データを、外部機器に送信することを特徴とする請求項１３に記載の画像処理装置。
【請求項１６】
上記変換処理手段で生成された上記変換画像データについての出力処理を行う画像出力手段を、さらに備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項１７】
上記画像出力手段は、表示部を有し、上記出力処理として、上記表示部において上記変換画像データについての表示出力を行うことを特徴とする請求項１６に記載の画像処理装置。
【請求項１８】
上記画像出力手段は、外部機器と通信を行う通信部を有し、上記出力処理として、上記通信部により上記変換画像データについての外部機器への送信出力を行うことを特徴とする請求項１６に記載の画像処理装置。
【請求項１９】
上記画像出力手段は、可搬性記録媒体に情報を記録する記録部を有し、上記出力処理として、上記記録部によって上記可搬性記録媒体に上記変換画像データを記録することを特徴とする請求項１６に記載の画像処理装置。
【請求項２０】
撮像画像データを取得するステップと、
取得した撮像画像データの画像解析を行い、その撮像画像データの画像内に特定種別の被写体画像が存在した場合、該被写体画像の画像サイズに応じて、該被写体画像の画素領域を画像変換処理の処理対象領域に設定するステップと、
上記処理対象領域の被写体画像に対して画像変換処理を行って変換画像データを生成するステップと、
を備えたことを特徴とする画像処理方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
画像解析／変換部１２は、この撮像装置１が取得した撮像画像データについて、画像解析や画像変換の処理を行い、変換画像データを生成する。
例えば撮像部３で得られる撮像画像データに対して画像解析を行って、画像内における処理対象領域を検出する処理を行う。
また検出された処理対象領域の被写体画像について画像変換処理を行う。例えばモザイク化、ソフトフォーカス化、暗号化（画像スクランブル処理）、顔画像への目線等の追加などの画像変換処理を行って変換画像データを生成する。
また、被写体画像を他の画像に置き換える処理も可能である。例えば顔画像や著作物をアニメーション画像や各種イメージ画像などに置き換える画像変換処理を行う。
なおアニメーション画像など、画像の置き換えに使用する画像データはＲＯＭ或いはフラッシュメモリなどとしてのメモリ１２ａに登録されている。但し、後述するストレージ部１４から読み出される画像データや、通信部１５で受信される画像データを用いて被写体画像の置き換え処理を行うことも考えられる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００４０
【補正方法】変更
【補正の内容】
【００４０】
操作入力部１１は、このように操作子、加速度センサ、角速度センサ、振動センサ、圧力センサ、生体センサ等として得られる情報をシステムコントローラ１０に供給し、システムコントローラ１０はこれらの情報によりユーザの操作を検知する。
なお、ユーザの挙動を検出するための構成としては、さらにユーザの声を検知するセンサ、唇の動きを検知するセンサなど、他のセンサが設けられても良い。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００４４
【補正方法】変更
【補正の内容】
【００４４】
図４（ｃ）は、撮像装置１の通信部１５が、特にインターネット等のネットワーク６０を介した通信アクセス機能を備えることで、ネットワーク６０で接続される外部機器７０と通信を行う例である。動作例は上記図４（ｂ）の場合と同様に考えられる。
ネットワーク６０とは、インターネットの他に、携帯電話通信網、ＰＨＳ通信網、アドホックネットワーク、ＬＡＮなど、各種考えられる。
また図４（ｂ）（ｃ）における外部機器７０とは、図２のような構成の他の撮像装置１も想定できるし、通信機能を備えたデータサーバ、パーソナルコンピュータ、ビデオプレーヤ、ビデオカメラ、デジタルスチルカメラ、撮像機能を備えた携帯電話機、ＰＤＡなど多様な機器が想定できる。特に撮像画像データをネットワーク上で共有できるようにする画像共有システムのサーバ装置も外部機器７０として想定される。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００６４
【補正方法】変更
【補正の内容】
【００６４】
例えば画像解析／変換部１２は、自動撮像であると判別した場合、ステップＦ２５１で自動撮像フラグをオンとする。
そしてステップＦ２００で顔画像の抽出処理を行い、またステップＦ２０１，Ｆ２０２の変数Ｍ、Ｙ、Ｘの設定処理を行う。
この処理例では、ステップＦ２０４で顔画像ＦＣ（Ｙ）のサイズを算出したら、ステップＦ２５２で、自動撮像フラグのオン／オフに応じて処理を分岐する。
自動撮像フラグがオフであれば（即ち手動撮像による撮像画像データを処理しているのであれば）、ステップＦ２５４に進み、算出した顔画像ＦＣ（Ｙ）のサイズＳＺを、閾値ＳＺｔｈ１と比較し、顔画像ＦＣ（Ｙ）が小サイズの顔画像であるか否かを判別する。
一方、自動撮像フラグがオンであれば（即ち自動撮像による撮像画像データを処理しているのであれば）、ステップＦ２５３に進み、算出した顔画像ＦＣ（Ｙ）のサイズＳＺを、閾値ＳＺｔｈ２と比較し、顔画像ＦＣ（Ｙ）が大サイズの顔画像であるか否かを判別する
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００９０
【補正方法】変更
【補正の内容】
【００９０】
図１５（ｃ）の動作手順は次のようになる。
ステップＳＴ１２０で撮像画像データを取得する。
ステップＳＴ１２１では、ステップＳＴ１２０で取得した撮像画像データを画像解析／変換部１２に供給し、画像変換処理を実行させる。
ステップＳＴ１２２では、ステップＳＴ１２１で画像解析／変換部１２が生成した変換画像データを出力する。
なお、図１５（ｃ）（ｄ）、図１６（ａ）（ｂ）（ｄ）における「変換画像出力」とは、変換画像データを表示制御部７に転送して表示部２で表示出力させるか、または通信部１５に転送して外部機器７０に送信出力させるか、またはストレージ部１４（ストレージ部１４に可搬性記録媒体に対する記録再生部が設けられている場合）に転送し、可搬性記録媒体に記録させることを示す。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００９３
【補正方法】変更
【補正の内容】
【００９３】
図１６（ａ）の動作手順は次のようになる。
ステップＳＴ１４０で撮像画像データを取得する。
ステップＳＴ１４１では、ステップＳＴ１４０で取得した撮像画像データを画像解析／変換部１２に供給し、画像変換処理を実行させる。
ステップＳＴ１４２では、ステップＳＴ１４０で取得した撮像画像データと、ステップＳＴ１４１で画像解析／変換部１２が生成した変換画像データを、ストレージ部１４において保存させる。
ステップＳＴ１４３では、ステップＳＴ１４１で画像解析／変換部１２が生成した変換画像データを出力する。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】０１０２
【補正方法】変更
【補正の内容】
【０１０２】
本発明は、上記実施の形態に限られず、撮像装置１の構成例や処理例として各種の変形例や拡張例が考えられる。
本発明の画像処理装置は、撮像装置１として実現する以外に、多様な装置が想定される。
図１７は、本発明の画像処理装置としての構成要素として、システムコントローラ１０と、画像取得部２０と、画像解析／変換部１２と、保存処理部２２と、画像出力部２１を示している。
例えばこのような構成要素を備える各種機器として本発明の画像処理装置を実現できる。特に、少なくとも画像取得部２０と画像解析／変換部１２が設けられればよい。
また画像出力部２１や保存処理部２２の両方又は一方を設けない構成も本発明の画像処理装置として想定される。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０１０４
【補正方法】変更
【補正の内容】
【０１０４】
画像解析／変換部１２については、上述してきた実施の形態のように処理対象領域設定処理と画像変換処理を行う。つまり本発明請求項でいう対象領域設定手段と、変換処理手段とが、画像解析／変換部１２によって実現される。
もちろん画像解析を行って処理対象領域を設定する対象領域設定手段と、処理対象領域の画像について変換処理を行う変換処理手段が、例えば別体の演算処理回路部などの別の回路ブロックとして構成されても良い。