(57)【特許請求の範囲】
【請求項１】
注目被写体の有無の情報と距離と奥行きに関する情報を含む画像データを画像変換処理する画像処理装置であって、
前記画像データに含まれる前記距離と奥行きに関する情報に基づいて、前記注目被写体を認識する注目被写体認識部と、
画像変換処理を開始するに当たり、前記画像データの前記注目被写体の有無の情報を確認し、注目被写体が含まれていると判断した場合は、前記画像データのうち、前記注目被写体認識部によって認識された前記注目被写体に対応する画像データ部分を、前記注目被写体を除く画像の他の部分に対応する画像データ部分とは、異なるように、前記画像データを画像変換処理するとともに、注目被写体が含まれていないと判断した場合は、前記画像データ全体を画調変換処理する画像変換処理部と、を含む、
画像処理装置。
【請求項２】
前記画像変換処理部は、
前記画像データのうち、前記注目被写体認識部によって認識された前記注目被写体の領域を、前記注目被写体を除く画像の他の領域より鮮明となるように、前記画像データを画像変換処理する、
請求項１記載の画像処理装置。
【請求項３】
前記画像変換処理部は、前記注目被写体に対応する画像データ部分にフィルタ処理を実行するフィルタ部と、
フィルタ処理された画像データ部分に対してアート変換を実行するためのパラメータの変更を行うパラメータ変更部と、を有する、
請求項１記載の画像処理装置。
【請求項４】
注目被写体の有無の情報と距離と奥行きに関する情報を含む画像データを画像変換処理する画像処理装置のコンピュータを、
前記画像データに含まれる前記距離と奥行きに関する情報に基づいて、前記注目被写体を認識する注目被写体認識手段として機能させると共に、
画像変換処理を開始するに当たり、前記画像データの前記注目被写体の有無の情報を確認し、注目被写体が含まれていると判断した場合は、前記画像データのうち、前記注目被写体認識手段によって認識された前記注目被写体に対応する画像データ部分を、前記注目被写体を除く画像の他の部分に対応する画像データ部分とは異なるように前記画像データを画像変換処理させ、注目被写体が含まれていないと判断した場合は、前記画像データ全体を画調変換処理させる画像変換処理手段として機能させる
画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及びプログラムに関し、特に、視覚的に効果的なアート変換処理を可能にする技術に関する。
【背景技術】
【０００２】
近年、デジタルカメラやカメラ付き携帯電話機などの撮像装置が普及している。かかる撮像装置により撮像された被写体の画像は、加工が容易な画像データの形態で保存される。
【０００３】
例えば、特許文献１、特許文献２などに、撮像された画像の画像データを画像処理して、画家の一筆一筆の筆触に似せた画素グループごとによって表現された絵画風の画像の画像データを生成する画像処理方法が開示されている。このように画像データを変換してアート風の画像データを生成する画像処理を、以後、「アート変換」と呼ぶ。
【０００４】
また、撮像された画像の画像データから、人間の顔を認識して、顔の領域は他の領域よりも階調補正を弱めて処理するなど、顔の領域に他の領域と異なる画像処理を行う電子カメラが、特許文献３に開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平１０−１１５６９号公報
【特許文献２】特開２００６−３１６８８号公報
【特許文献３】特開２００７−２８２１１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
撮像された画像の画像データをアート変換する画像処理は、画家が描く絵画のような個性的な画像を生成する上で有効である。しかし、アート変換を行う際に強めの変換を行うと、画像が潰れてしまい、何を撮影したものかわかりにくくなることがある。例えば、思い出として有名建造物を背景の一部に撮影した画像の画像データにアート変換をした場合、思い出となる有名建造物が識別できなくなってしまう懸念がある。一方で、強めのアート変換を好むユーザや、特定の建造物のみにアート変換を行いたいユーザの要求も存在する。
【０００７】
識別可能性を維持すべき対象が人間であれば、例えば、特許文献３に開示された手法のように人間の顔を認識し、顔の領域だけ差別化してアート変換を行うことも考えられる。しかし、識別可能性を維持すべき対象を人間以外の特定の被写体、具体的には、地域ごとに固有の被写体、例えば、有名建築物、風景などとした場合、特許文献３に開示された手法では限界がある。
【０００８】
そこで、本発明は、画像データにアート変換を実行する際、例え、有名建築物などの特定の被写体、又は、地域ごとの固有の被写体であっても、該特定の被写体の識別可能性を維持することができる、あるいは、該特定の被写体の領域と、該特定の被写体を除く領域とを差別化して画像処理することができる、視覚的に効果的な画像処理を可能にする画像処理装置及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
請求項１記載の発明は、注目被写体の有無の情報と距離と奥行きに関する情報を含む画像データを画像変換処理する画像処理装置であって、 前記画像データに含まれる前記距離と奥行きに関する情報に基づいて、前記注目被写体を認識する注目被写体認識部と、画像変換処理を開始するに当たり、前記画像データの前記注目被写体の有無の情報を確認し、注目被写体が含まれていると判断した場合は、前記画像データのうち、前記注目被写体認識部によって認識された前記注目被写体に対応する画像データ部分を、前記注目被写体を除く画像の他の部分に対応する画像データ部分とは、異なるように、前記画像データを画像変換処理するとともに、注目被写体が含まれていないと判断した場合は、前記画像データ全体を画調変換処理する画像変換処理部と、を含む、画像処理装置を提供するものである。
【００１０】
請求項４記載の発明は、注目被写体の有無の情報と距離と奥行きに関する情報を含む画像データを画像変換処理する画像処理装置のコンピュータを、前記画像データに含まれる前記距離と奥行きに関する情報に基づいて、前記注目被写体を認識する注目被写体認識手段として機能させるとともに、画像変換処理を開始するに当たり、前記画像データの前記注目被写体の有無の情報を確認し、注目被写体が含まれていると判断した場合は、前記画像データのうち、前記注目被写体認識手段によって認識された前記注目被写体に対応する画像データ部分を、前記注目被写体を除く画像の他の部分に対応する画像データ部分とは異なるように前記画像データを画像変換処理させ、注目被写体が含まれていないと判断した場合は、前記画像データ全体を画調変換処理させる画像変換処理手段として機能させる画像処理プログラムを提供するものである。
【発明の効果】
【００１３】
本発明によれば、視覚的に効果的なアート変換を行うことができる。
【図面の簡単な説明】
【００１４】
【図１】第１実施形態に係るステレオデジタルカメラのハードウェアの構成を示すブロック図である。
【図２】図１のステレオデジタルカメラのデータ処理部の機能的構成を示す機能ブロック図である。
【図３】図２のデータ処理部のメモリに記憶される注目被写体特定テーブルの一例を示す図である。
【図４】図２のデータ処理部のメモリに記憶される画像変換処理内容テーブルの一例を示す図である。
【図５】図２のデータ処理部が実行するアート変換処理により変換された画像の一例を示す図である。
【図６】図２のデータ処理部が実行するアート変換処理により流れを説明するフローチャートである。
【図７】図２のデータ処理部が実行するアート変換処理により変換された画像の一例を示す図である。
【図８】図２のデータ処理部が実行するアート変換処理により変換された画像の一例を示す図である。
【図９】第２実施形態に係るデジタルカメラのハードウェアの構成を示すブロック図である。
【図１０】図９のデジタルカメラのデータ処理部の機能的構成を示す機能ブロック図である。
【図１１】図９のデータ処理部のメモリに記憶されるパターンマッチングテーブルの一例を示す図である。
【図１２】図９のデータ処理部が実行するアート変換処理により流れを説明するフローチャートである。
【発明を実施するための形態】
【００１５】
以下、本発明の実施形態に係る画像処理装置を、図面を参照して説明する。なお、以下では、画像処理装置の一例としてデジタルカメラを用いて説明するが、あくまでも例示にすぎず、本発明を限定するものではない。
【００１６】
［第１実施形態］
図１乃至図７を参照して、本発明の一実施形態について説明する。
【００１７】
［デジタルカメラの構成］
図１乃至図４を参照して、本発明の画像処理装置の第１実施形態に係るステレオデジタルカメラ１について説明する。なお、図１は、ステレオデジタルカメラ１の内部のハードウェア構成を示すブロック図である。また、図２は、ステレオデジタルカメラ１のデータ処理部１２データの機能的構成を示す機能ブロック図である。また、図３及び図４は、ステレオデジタルカメラ１のメモリ３４内に格納される注目被写体特定テーブル１１２Ａ及び画像変換処理内容テーブル１１３Ａの一例を示す図である。
【００１８】
図１に示すように、ステレオデジタルカメラ１は、撮影部１１と、データ処理部１２と、ユーザインタフェース部１３と、を備える。
【００１９】
撮影部１１は、３次元画像の画像データを取得するように構成されている。このため、撮影部１１は、左右の光学レンズ部２１と、左右の光学レンズ部のそれぞれに対応する２つのイメージセンサ２２と、を備える。
【００２０】
左右の光学レンズ部２１の各々は、被写体を撮影するために、光を集光する前玉レンズ（図示せず）の他、被写体をそれぞれのイメージセンサ２２の受光面の結像させるフォーカスレンズ（図示せず）、焦点距離を一定の範囲で自在に変化させるズームレンズ（図示せず）などで構成される。左右の光学レンズ部２１の各々にはまた、必要に応じて、焦点、露出、ホワイトバランスなどの設定パラメータを調整する周辺回路が設けられる。
【００２１】
２つのイメージセンサ２２の各々は、光電変換素子や、ＡＦＥ(Analog  Front  End)などから構成される。光電変換素子は、例えばＣＭＯＳ(Complementary  Metal  Oxide  Semiconductor)型の光電変換素子などから構成される。光電変換素子には、光学レンズ部２１からシャッタ部（図示せず）を介して被写体像が入射される。そこで、光電変換素子は、一定時間ごとに被写体像を光電変換（撮影）して画像信号を蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ(Analog/Digital)変換処理などの各種信号処理を実行する。各種信号処理によって、デジタル信号が生成され、イメージセンサ２２の出力信号として出力される。なお、以下、画像信号のデジタル信号を、「画像データ」と呼ぶ。このように呼称すると、イメージセンサ２２からは画像データが出力されて、データ処理部１２に供給される。
【００２２】
データ処理部１２は、ＣＰＵ(Central  Processing  Unit)３１と、ＲＯＭ(Read  Only  Memory)３２と、ＲＡＭ(Random  Access  Memory)３３と、メモリ３４と、表示制御部３５と、画像処理部３６と、を備える。
【００２３】
ユーザインタフェース部１３は、ステレオデジタルカメラ１の筐体に設けられたディスプレイなどで構成される表示部４１と、ステレオデジタルカメラ１の現在位置と被写体に関する情報を取得する位置情報取得部４２と、ユーザの指示操作を受け付ける操作部４３と、外部機器との間での通信を制御する通信部４４と、画像データを記憶するリムーバブル記憶媒体５１に対するデータの読み書きを行うドライブ４５と、を備えている。位置情報取得部４２は、ＧＰＳ（Global  Positioning  System）用衛星（複数）からのＧＰＳ信号を受信して、ＧＰＳ信号に基づいて、ステレオデジタルカメラ１の現在位置を示す緯度及び経度を算出するＧＳＰ部（図示していない）と、注目被写体とステレオデジタルカメラ１との距離を測距する測距センサ、ステレオデジタルカメラ１の撮影方位（光軸方向）を取得する方位センサなどの各種センサとを含む。また、撮影時の注目被写体とステレオデジタルカメラ１の距離は、測距センサが例えば、赤外線センサを備えた構成の場合、赤外線、超音波などを照射し、その反射波が戻るまでの時間や、照射角度により距離を検出することができる。あるいは、ステレオデジタルカメラ１が、例えば、パッシブ方式の場合、コントラストオートフォーカス時のレンズ位置から取得することもできる。。この場合、測距センサは必須ではない。
【００２４】
ＣＰＵ３１は、ＲＯＭ３２に記録されているプログラムに従って各種の処理を実行する。本実施形態のステレオデジタルカメラ１は、通常撮影モードに加え、後述する、撮影された画像、又は、リムーバブル記憶媒体５１などにより入力された画像にアート変換処理を実行するアート変換モードを備える。ＲＯＭ３２には、通常撮影モード及び、後述するアート変換処理を含むアート変換モード時の処理などの各種処理、表示制御部３５、画像処理部３６、及びユーザインタフェース部１３を含む各種機能を実行するためのプログラムが記憶されている。ＣＰＵ３１が、ＲＯＭ３２に記憶されているプログラムに従って処理を行うことで、表示制御部３５、画像処理部３６、及びユーザインタフェース部１３を含む各種機能、及び通常撮影モード及び、後述するアート変換処理を含むアート変換モード時の各種処理が実現される。
ＲＡＭ３３には、ＣＰＵ３１が各種の処理を実行する上において必要なデータなどが適宜記憶される。
【００２５】
メモリ３４は、ＤＲＡＭ(Dynamic  Random  Access  Memory)やＲＯＭ(Read  Only  Memory)などで構成される。ＤＲＡＭには、イメージセンサ２２から出力された画像データが一時的に記憶される。ＲＯＭには、地域情報、及びアート変換処理内容等を含む、各種画像処理に必要な画像データ、パラメータ、各種フラグの値、閾値などが記憶される。ＲＯＭに記憶される地域情報は、後に詳述する、注目被写体と、注目被写体が存在する位置情報、例えば、緯度及び経度の範囲と地域とを対応付けて記憶する注目被写体特定テーブル１１２Ａ、及び地図情報を含む。また、メモリ３４には、画像変換処理の内容と設定可能なパラメータを対応付けて記憶した画像変換処理内容テーブル１１３Ａ、及び、画像表示用の画像データ（以下、「表示画像データ」と呼ぶ）の保存と読み出しを行うための表示メモリ領域も含まれている。
【００２６】
表示制御部３５は、メモリ３４の表示メモリ領域に格納された表示画像データを読み出し、表示画像データにより表現される画像（以下、「表示画像」と呼ぶ）を、ユーザインタフェース部１３の表示部４１に表示させる制御を実行する。例えば、表示制御部３５は、当該表示画像データに基づいてＲＧＢ信号を生成し、当該ＲＧＢ信号を表示部４１に供給することにより、表示画像を表示部４１に表示させる。なお、表示制御部３５により生成されたＲＧＢ信号は、ユーザインタフェース部１３の通信部４４によって、図示せぬ外部機器に出力させることもできる。これにより、外部機器、例えば、テレビジョン受像機、パソコン、プロジェクタなどでも、表示画像の表示が可能になる。
【００２７】
画像処理部３６は、ＤＳＰ(Digital  Signal  Processor)などで構成され、メモリ３４に記憶された画像データに対して、ホワイトバランス補正処理やγ補正処理などの各種画像処理を実行する。本実施形態では、図２で後述する撮影対象認識部１０１、対象距離解析部１０２、フィルタ部１０３、パラメータ変更部１０４、アート変換部１０５が実行する各種画像処理のうち少なくとも一部が、画像処理部３６において実行され、残りの一部がＣＰＵ３１において実行される。即ち、本実施形態では、後述する撮影対象認識部１０１、対象距離解析部１０２、フィルタ部１０３、パラメータ変更部１０４、アート変換部１０５は、ＣＰＵ３１及び画像処理部３６というハードウェアと、ＲＯＭ３２に記憶されたプログラム（ソフトウェア）との組み合わせとして構成されている。
【００２８】
なお、リムーバブル記憶媒体５１は、データ処理部１２により生成された画像データを記憶する。リムーバブル記憶媒体５１は、例えば、メモリカードなどにより実現され、記憶手段を構成する。
【００２９】
また、操作部４３は、図示は省略するが、シャッターキー、電源ボタン、ズームキー、及びモード切替キーなどを含み、各操作に基づき操作信号を発生してデータ処理部１２へ送出する。例えば、操作者によりモード切替キーが操作されて、アート変換モードが指定されると、操作信号がデータ処理部１２に送られ、ＣＰＵ３１は、モードを指定されたアート変換モードに切り替える。同様に、操作者によりモード切替キーが操作されて、通常撮影モードが指定されると、ＣＰＵ３１は、モードを指定された通常撮影モードに切り替える。この他にも操作者による操作部４３の操作に伴い、各種操作信号がデータ処理部１２に送られ、ＣＰＵ３１は、操作信号に応じて処理を行う。
【００３０】
次に、図２を参照して、データ処理部１２の機能的構成について説明する。
【００３１】
データ処理部１２は、メモリ３４と、表示制御部３５と、撮影対象認識部１０１と、対象距離解析部１０２と、フィルタ部１０３と、パラメータ変更部１０４と、アート変換部１０５と、を備えている。また、データ処理部１２のメモリ３４内には、原フレーム記憶部１１１と、撮影対象物情報記憶部１１２と、画像変換処理内容記憶部１１３と、処理フレーム記憶部１１４と、が構成されている。撮影対象物情報記憶部１１２には、注目被写体と、注目被写体が存在する位置情報、例えば、緯度及び経度の範囲と地域とを対応付けて記憶する注目被写体特定テーブル１１２Ａが記憶されている。画像変換処理内容記憶部１１３には、画像変換処理の内容と設定可能なパラメータを対応付けて記憶した画像変換処理内容テーブル１１３Ａが記憶されている。
【００３２】
図３に、撮影対象物情報記憶部１１２に記憶された注目被写体特定テーブル１１２Ａの一例を示す。図３に示すように、注目被写体特定テーブル１１２Ａは、注目被写体と、注目被写体が存在する緯度及び経度の範囲とが対応付けられている。
【００３３】
「注目被写体」とは、アート変換を行う場合であってもユーザが識別可能性を維持することを希望する被写体、又は、ユーザが当該被写体の領域を当該被写体を除く領域と差別化してアート変換することを希望する被写体であって、具体的には、有名建造物、風景など、地域ごとに固有の被写体が好ましい。注目被写体特定テーブル１１２Ａには、注目被写体として、予め知名度の高い建造物、風景などを位置情報とともに記憶している。なお、ユーザは操作部４３を操作することによって、この注目被写体特定テーブル１１２Ａに、別途、注目被写体として自らが希望する建造物、風景などを位置情報と対応付けて追加して登録するようにしてもよい。あるいは、注目被写体特定テーブル１１２Ａに記憶されている注目被写体を個別に、撮影時ユーザは操作部４３を操作することによって、無効となるようにしてもよい。この場合、例えば、注目被写体特定テーブル１１２Ａに注目被写体ごとに有効無効を設定するフラグを設け、ユーザによる操作部４３の操作に応じて、フラグの有効無効の設定を変更可能にすればよい。
【００３４】
図４に、画像変換処理内容記憶部１１３に記憶された画像変換処理内容テーブル１１３Ａの一例を示す。図４に示すように、画像変換処理内容テーブル１１３Ａには、詳細は省略するが、実行する画像変換処理の内容と設定可能なパラメータ、及びその有効無効が対応付けて記憶されている。
【００３５】
操作者がシャッターキーを押下すると、撮影部１１は、画角内に含まれる被写体を撮影し、その結果得られる３次元の画像（以下、「フレーム画像」と呼ぶ）の画像データを出力する。撮影部１１は、撮影した画像の画像データに、ステレオデジタルカメラ１から被写体までの距離情報、さらに被写体の奥行き情報、及び、必要に応じてステレオデジタルカメラ１の撮影時の位置と方位に関する情報も付与する。これらの、ステレオデジタルカメラ１から被写体までの撮影時の距離、さらに被写体の奥行きに関する情報を「注目被写体の距離と奥行きに関する情報」と呼ぶ。
【００３６】
具体的には、撮影部１１は、位置情報取得部４２を制御して、ＧＰＳ用衛星（複数）からのＧＰＳ信号と地図情報に基づいて、ステレオデジタルカメラ１の現在位置を示す緯度及び経度を取得する。なお、位置情報取得部４２は、緯度及び経度の演算に関し、ＧＰＳ用衛星からのＧＰＳ信号の誤差情報や無線基地局の位置情報などを利用することで、演算の精度を高めることともできる。さらに、撮影部１１は、位置情報取得部４２の各種センサを用いて、ステレオデジタルカメラ１の位置、方向、被写体とステレオデジタルカメラ１との間の距離、及び左右のイメージセンサ２２から得られた画像情報に基づく被写体の奥行き情報も取得して画像データに３次元情報として付加する。このような３次元情報の付加については、例えば、特開２００５−３７３７９号公報などにも開示されおり、任意の公知の手法を用いることができるので、詳細の説明は省略する。
【００３７】
本実施形態では、さらに、撮影した画像の画像データに、例えば、注目被写体が撮影されているか否か、即ち、注目被写体の有無の情報も付与される。注目被写体の有無の情報については、撮影時にユーザが自ら操作部４３を操作して自ら当該画像データに対して記録してもよい。あるいは、メモリ３４に記憶された注目被写体特定テーブル１１２Ａを参照して、ＣＰＵ３１が撮影した画像の画像データに注目被写体が含まれているか否かを判定し、判定に基づいて当該画像データに対して、注目被写体の有無の情報を記録してもよい。
【００３８】
原フレーム記憶部１１１は、撮影部１１から出力されたフレーム画像の画像データを、原フレーム画像の画像データとして記憶する。
【００３９】
なお、原フレーム記憶部１１１は、撮影部１１から出力されたフレーム画像だけでなく、リムーバブル記憶媒体５１から読み出されたフレーム画像の画像データ、又は、通信部４４から取得したフレーム画像の画像データも、原フレーム画像の画像データとして記憶される。
【００４０】
撮影対象認識部１０１は、原フレーム記憶部１１１に記憶されたフレーム画像の画像データに記録された情報に基づいて、注目被写体が撮影されているか否かを判断する。
【００４１】
対象距離解析部１０２は、撮影対象認識部１０１によって注目被写体が撮影されていると判断されたフレーム画像の注目被写体に対して、画像データ内に埋め込まれた注目被写体の距離と奥行きに関する情報に基づいて、被写体を特定する。具体的には、対象距離解析部１０２は、注目被写体を撮影したカメラから注目被写体までの撮影時の距離情報と、被写体の奥行き情報が等しい被写体を判定し、距離情報の等しい被写体を注目被写体として特定する。画像データにステレオデジタルカメラ１の撮影時の位置と方位に関する情報が含まれている場合は、対象距離解析部１０２は、注目被写体を撮影したカメラから注目被写体までの撮影時の距離と、ステレオデジタルカメラ１の撮影時の位置と方位に基づいて注目被写体が存在する位置情報を特定し、注目被写体と注目被写体が存在する位置情報とを対応付ける注目被写体特定テーブル１１２Ａを参照して、画像データ内の注目被写体を特定してもよい。対象距離解析部１０２は注目被写体認識部を構成する。また、対象距離解析部１０２が注目被写体特定テーブル１１２Ａを参照する場合は、対象距離解析部１０２と撮影対象物情報記憶部１１２とが注目被写体認識部を構成する。
【００４２】
フィルタ部１０３は、対象距離解析部１０２によって特定された注目被写体に対応する領域の画像データの画素にフィルタをかける。
【００４３】
パラメータ変更部１０４は、アート変換部１０５によってアート変換を行う際、画像があまり元の画像から形状が歪みすぎないように注目被写体に対応する領域の画像データに対してパラメータの設定を行う。
【００４４】
アート変換部１０５は、フィルタ部１０３によってフィルタをかけられた領域を除く領域の画像データに対して通常のアート変換処理を実行する。一方で、アート変換部１０５は、フィルタ部１０３によってフィルタをかけられた領域の画像データに対してはパラメータ変更部１０４によって設定されたパラメータに従って、アート変換処理を実行する。フィルタ部１０３と、パラメータ変更部１０４と、アート変換部１０５とが画像変換処理部を構成する。
【００４５】
本実施形態では、アート変換部１０５は、画像データに対して、画調を変更する処理を実行する。ここで、画調とは、画像から感じることができる印象に基づいて規定されるもので、「日本画調」、「西洋画調」、「水彩画調」、「水墨画調」、「ペン画調」、「ゴッホ調」、「パステル調」など、様々な分類がある。
【００４６】
画像データを特定の画調に変更する手法については、例えば、特開平１０−０１１５６９号公報及び特開２００６−０３１６８８号公報に開示された技術を用いてもよい。具体的には、画像データを構成する画素から、色などを基準として相関の高い画素を集め、グループを形成する。続いて、それぞれのグループの画素に対して、同一のグループの画素については色を該グループの代表色に置き換える。こうして色を代表色に置き換えられた画素のグループがそれぞれの筆触を形成する。かかる画像加工処理によると、グループとして集められる画素の相関の取り方、及び同一の色（代表色）の画素により構成されるグループの形状（長さ（距離）、扁平度）を変化させることによって、形成される筆触を変化させることができ、結果的に、画像データが表す画像の画調を様々な絵画調に変更することができる。本実施形態では、各種画調毎に、それぞれの処理で用いる相関度、グループの形状を表す長さ、扁平度などのパラメータの最適な組み合わせが設定されており、この情報がメモリ３４の画像変換処理内容テーブル１１３Ａに記憶されている。アート変換部１０５はメモリ３４の画像変換処理内容テーブル１１３Ａに記憶されたパラメータの情報に基づいて各種画調への変更を行う。
【００４７】
複数の被写動体の画像データの各々を異なる筆触に変更することは、例えば、画調を変更する際に、筆触を構成する画素を集めたグループの形状、例えば、グループの扁平度を調整することによって実現できる。
【００４８】
図５に、このようにして生成される筆触を表す画素のグループの一例を示す。例えば、図５（１）（ａ）に示すように、筆触を表す同一の色の画素によって構成されるグループの扁平度を大きくすると、筆触は太くなり、結果として画像のタッチは荒く表示される。図５（１）（ｃ）に示すように、同一の色の画素によって構成されるグループの扁平度を小さくすると、細い筆触を作り出すことができ、結果として、画像のタッチが細かく表示される。図５（１）（ｂ）に示すグループは標準的な筆触を表している。
【００４９】
ここで、図４の画像変換処理内容テーブル１１３Ａの例では、複数の被写動体の画像データのうち、フィルタリングされている注目被写体の領域の画像データの筆触を小さくし（タッチを細かくし）、フィルタリングされない領域、即ち、注目被写体を除く領域の画像データの筆触を太くする（タッチを荒くする）パラメータが有効となるようにパラメータが設定されて、画像変換処理が行われる。そのため、図５（２）（ａ）に示すように、通常の被写体７３Ａの画像データの画調を変更する際、生成されるグループの扁平度を高く設定しておく。一方、注目被写体７３Ｅを構成する画像データについては、通常の被写体７３Ａを構成する画像データを処理する場合よりも、生成されるグループの扁平度を低く設定しておく。これにより、通常の被写体７３Ａの画像データは太い筆触からなる画調の画像に加工され、注目被写体７３Ｅの画像データは細い筆触からなる画調の画像に加工される。その結果、注目被写体７３Ｅについては、画像が潰れてしまい、何を撮影したのかわかりにくくなることを回避し、識別可能性を維持できる。
【００５０】
この他にも、アート変換処理は、例えば、アドビシステム社のソフトウェアであるフォトショップ（登録商標）等の市販のソフトウェアを用いて行うこともできる。画調変更する際のパラメータとして、一例をあげると、例えば、コントラスト、明るさ、色の濃さ、色合い、シャープネス、必要に応じて、ノイズ低減フィルタの効果設定、色温度、γ補正のγ値などがあり、これらパラメータの何れか、あるいは組み合わせを指定することができる。しかしながら、本発明はこれに限定されず、上述の画調を表現するために妥当であれば、如何なるパラメータを含んでもよい。
本実施形態では、各種画調ごとに、上述のパラメータの最適な組み合わせが予め設定して画像変換処理内容テーブル１１３Ａに対応付けて記憶されているものとする。
【００５１】
このようにして、原フレーム画像の画像データに対してアート変換部１０５によりアート変換処理が施されることによって得られるフレーム画像（以下、「アート変換画像」と呼ぶ）の画像データは、処理フレーム記憶部１１４に記憶される。
【００５２】
表示制御部３５は、処理フレーム記憶部１１４に記憶された画像データを読み出し、当該画像データにより表現される画像、即ちアート変換画像を表示部４１に表示させる制御を実行する。
【００５３】
なお、処理フレーム記憶部１１４に記憶されたアート変換画像の画像データを、リムーバブル記憶媒体５１に記憶させることとしてもよい。
【００５４】
［アート変換処理のフロー］
ユーザによる操作部４３のモード切替キーの操作に伴いアート変換モードに切り替えられると、ＣＰＵ３１がＲＯＭ３２に記憶されたアート変換処理プログラムに従って、データ処理部１２を含む各種機能を制御する。以下、アート変換モードで主としてデータ処理部１２によって実行されるアート変換処理について説明する。
【００５５】
図６を参照して、ステレオデジタルカメラ１の一機能であるアート変換処理の流れを説明する。以下に示す処理は、以下に示す処理は、ユーザによるモード切替キーの操作に伴いアート変換モードに切り替えられることによって開始する。また、処理対象の画像データには、注目被写体の有無の情報、撮影時のステレオデジタルカメラ１から注目被写体までの距離情報、さらに被写体の奥行き情報、及び、必要に応じて、撮影時のステレオデジタルカメラ１の位置情報が付加されているものとする。
【００５６】
まず、ＣＰＵ３１がＲＯＭ３２に記憶されたアート変換処理プログラムに従って、リムーバブル記憶媒体５１に記憶された画像データから１枚の画像の画像データを読み込み、原フレーム画像の画像データとして原フレーム記憶部１１１に記憶する（ステップＳ１１）。
【００５７】
続いて、撮影対象認識部１０１は、原フレーム記憶部１１１に記憶されたフレーム画像の画像データに記録された情報に基づいて、注目被写体が撮影されているか否かを判断する（ステップＳ１２）。ステップＳ１２において、注目被写体が撮影されていないと判断された場合は、ステップＳ２１に進み、アート変換部１０５が画像データに対してアート変換処理を実行する。一方で、ステップＳ１２において、注目被写体が撮影されていると判断された場合は、ステップＳ１３に進む。
【００５８】
ステップＳ１３において、対象距離解析部１０２は、撮影対象認識部１０１によって注目被写体が撮影されていると判断されたフレーム画像の注目被写体に対して、画像データ内に埋め込まれたカメラから注目被写体までの距離情報Ｒを取得する。
【００５９】
続いて、対象距離解析部１０２は、距離情報解析処理を実行して画像データの距離情報を解析する（ステップＳ１４）。具体的には、対象距離解析部１０２は、撮影対象認識部１０１によって注目被写体が撮影されていると判断されたフレーム画像の被写体に対して、画像データ内に埋め込まれた、被写体を撮影したカメラから注目被写体までの距離情報Ｒと、被写体の奥行き情報が等しいか否かを判定し、等しいと判定された被写体を注目被写体として特定する。この際、被写体の位置情報が判明する場合は、注目被写体特定テーブル１１２Ａを参照して、注目被写体が存在する位置情報を判定し、その被写体を注目被写体として特定してもよい（ステップＳ１５）。
【００６０】
フィルタ部１０３は、対象距離解析部１０２によって特定された注目被写体に対応する領域の画像データの画素にフィルタ処理を行う（ステップＳ１６）。
【００６１】
アート変換部１０５は、フィルタ部１０３によってフィルタをかけられた領域を除く領域の画像データに対して通常のアート変換処理を実行する（ステップＳ１７）。
【００６２】
パラメータ変更部１０４は、パラメータの変換を行う（ステップＳ１８）。具体的には、パラメータ変更部１０４は、アート変換部１０５によるアート変換によって、注目被写体に対応する領域の画像があまり元の画像の形状と比較して歪みすぎることのないようにパラメータの変更を行う。例えば、パラメータ変更部１０４は、図５の例では、フィルタ部１０３によってフィルタ処理がされた注目被写体７３Ｅの領域の画像データについては、フィルタ部１０３によってフィルタ処理がされていない、注目被写体の領域を除く領域、例えば、通常の被写体７３Ａを処理する場合よりも、生成されるグループの扁平度が低くなるように筆触のパラメータを変更する。
【００６３】
アート変換部１０５は、フィルタ部１０３によってフィルタをかけられた領域の画像データに対して、パラメータ変更部１０４によって設定されたパラメータに従って、アート変換処理を実行する（ステップＳ１９）。
【００６４】
このようにして、原フレーム画像の画像データに対してアート変換部１０５により画調変更処理が施されることによって得られるアート変換画像の画像データは、処理フレーム記憶部１１４に記憶される。
【００６５】
表示制御部３５は、処理フレーム記憶部１１４に記憶されたアート変換画像の画像データを読み出し、表示部４１を制御して、アート変換画像を表示部４１に表示させる。
これにより、アート変換処理は終了となる。
【００６６】
［アート変換処理の例］
図７及び図８を参照して、アート変換処理に伴う画調変更を具体的に説明する。
【００６７】
図７を参照して、注目被写体の領域の識別可能性を維持しながら、画像データがアート変換される例について説明する。図７（１）は、アート変換前の原フレーム画像２１０を示す図であり、図７（２）は、アート変更後のアート変換画像２１０Ａを示す図である。注目被写体を除く領域を中心にアート変換が行われている。
【００６８】
図７（１）において、原フレーム画像２００には、前景被写体として人物被写体２１１と背景被写体として凱旋門２１２が含まれている。
【００６９】
例えば、図７（１）では、注目被写体として、凱旋門２１２が注目被写体の領域として対象距離解析部１０２によって認識されているものとする。
この場合、原フレーム画像２００は、フィルタ部１０３によって当該注目被写体領域の画像データにフィルタがかけられる。アート変換部１０５によって、当該注目被写体の領域を除く画像データは太い筆触からなる画調の画像に加工される一方で、フィルタ処理がされた注目被写体の領域の画像データは細い筆触からなるように画像データがアート変換処理される（図７（２））。具体的には、図７（２）に示すように、注目被写体ではない人物被写体２１１Ａは強くアート変換されながらも、注目被写体の領域である凱旋門２１２Ａは識別可能性が残る程度に、鮮明な画像となる。
【００７０】
このように、アート変換処理によって、フィルタ処理がされていない、注目被写体の領域を除く画像データは太い筆触からなる画調の画像に加工される一方で、フィルタ処理がされた注目被写体の領域の画像データは細い筆触からなる画調の画像に加工される。このため、表示部４１に表示される画像では、注目被写体の領域については、画像が潰れてしまい、何を撮影したのかわかりにくくなることを回避し、識別可能性を維持できる。このため、注目被写体を地域ごとに固有の被写体、例えば、有名建築物、風景としたとしても、該注目被写体の識別可能性を維持することができる、又は、該特定の被写体の領域と、該特定の被写体を除く領域とを差別化してアート変換することができる。したがって、視覚的に効果的なアート変換を実現することができる。
【００７１】
［他のアート変換処理の例］
本実施形態では、注目被写体の領域について識別可能性を維持しながら、注目被写体を除く領域については、強いアート変換処理を実行する場合について説明したが、本発明はこれに限定されない。例えば、注目被写体を除く領域についてのみ識別可能性を維持しながら、注目被写体の領域については強いアート変換を実行することも可能である。
【００７２】
例えば、ユーザが操作部４３の操作により、画像変換処理内容記憶部１１３に記憶された画像変換処理内容テーブル１１３Ａ（図４参照）の設定を変更し、アート変換を有効としながらも、「フィルタリング領域のタッチ」の項目を「荒くする」、「非フィルタリング領域のタッチ」の項目を「細かくする」パラメータが有効となるようにパラメータの設定を変更すればよい。
【００７３】
図８に、このようにして、注目被写体を除く領域を注目被写体の領域よりも識別可能性が高くなるように設定してアート変換を実行した例を示す。図８（１）は、アート変換前の原フレーム画像４００を示す図であり、図８（２）は、画調変更後のアート変換画像４００Ａを示す図である。注目被写体を中心にアート変換が行われている。
【００７４】
図８（１）において、原フレーム画像４００には、前景被写体として人物被写体４１１と背景被写体として凱旋門４１２が含まれている。
【００７５】
図８（１）でも、注目被写体として、凱旋門４１２が注目被写体の領域として対象距離解析部１０２によって認識されているものとする。
原フレーム画像４００は、フィルタ部１０３によって当該注目被写体領域の画像データにフィルタがかけられ、アート変換部１０５によって、当該注目被写体の領域を除く画像データは細い筆触からなる画調の画像に加工される一方で、フィルタ処理がされた注目被写体の領域の画像データは太い筆触からなるように画像データがアート変換処理される（図８（２））。具体的には、図８（２）に示すように、注目被写体の領域である凱旋門４１２Ｂは強くアート変換されながらも、注目被写体ではない人物被写体４１１Ａは識別可能性が残る程度に、鮮明な画像となる。
【００７６】
このように、フィルタ処理がされていない、注目被写体の領域を除く画像データは細い筆触からなる画調の画像に加工される一方で、フィルタ処理がされた注目被写体の領域の画像データは太い筆触からなる画調の画像に加工されて画像データがアート変換処理される。表示部４１に表示される画像では、注目被写体を除く領域については、画像が潰れてしまい、何を撮影したのかわかりにくくなることを回避し、識別可能性を維持できる。このように、画像変換処理内容テーブル１１３Ａの設定を変更し、フィルタ処理された領域に対するアート変換の内容を変化させることによって、強くアート変換を行う領域、又は、識別可能性を残す程度にアート変換を行う領域を、注目被写体とすることもできるし、あるいは、注目被写体を除く領域とすることもできる。このため、注目被写体を地域ごとに固有の被写体、例えば、有名建築物、風景としても、該注目被写体と該注目被写体を除く領域との間で、アート変換の強度を自在に変化させることができる。即ち、該注目被写体と該注目被写体を除く領域とを差別化してアート変換することができる。したがって、視覚的に効果的なアート変換を実現することができる。
【００７７】
［他の画像変換処理の例］
さらに、注目被写体の領域と注目被写体を除く領域とを差別化してアート変換処理を実行する例について説明したが、本発明はこれに限定されない。アート変換の代わりに、ホワイトバランス処理、色処理、階調補正処理、輸郭強調などの画像変換処理などにおいても適用可能である。また、設定するパラメータについても、「タッチを細かくする」、「荒くする」としたが、これは一例に過ぎず、「荒い」、「細かい」の他に様々な段階を設けてもよく、さらにこれ以外の設定を設けてもよい。これによって、より詳細なアート変換を実現することができる。
【００７８】
具体的には、図６を参照して説明した、ステップＳ１１からＳ１６、Ｓ１７、Ｓ１８までの処理を実行した後に、Ｓ１７、Ｓ１９、及びＳ２１において、アート変換処理に代えて、ホワイトバランス処理、色処理、階調補正処理、輸郭強調などの画像処理を、フィルタリングされた領域とフィルタリングされていない領域とでパラメータが異なるように実行してもよく、パラメータの項目も詳細に設定できるように多数設けてもよい。ユーザが操作部４３を操作することによって、画像変換処理内容記憶部１１３に記憶した画像変換処理内容テーブル１１３Ａで設定可能となるようにしてもよい。これによって、注目被写体の領域と、該注目被写体を除く領域とを差別化してより詳細な画像変換を行うことができる。
【００７９】
また、本実施形態では、デジタルカメラとして、ステレオデジタルカメラを用いて説明したが、本発明はステレオデジタルカメラに限定されない。２次元画像撮影用のデジタルカメラにも適用可能である。これについて次の実施形態で説明する。
【００８０】
［第２実施形態］
続いて、本発明の第２実施形態に係るデジタルカメラについて、図９乃至図１１を参照して説明する。第１実施形態では、ステレオデジタルカメラを用いて説明したが、本実施形態では、２次元画像撮影用のデジタルカメラを用いる点が異なる。
具体的には、図９に示すように、本実施形態に係るデジタルカメラ１Ｂは、３次元の画像データを取得するように構成された撮影部１１に代えて、１つの光学レンズ部２１Ｂと、１つのイメージセンサ２２Ｂとを有する、２次元の画像データを取得するように構成された撮影部１１Ｂを備える。さらに、本実施形態に係るデジタルカメラ１Ｂは、撮影対象認識部１０１、注目被写体特定テーブル１１２Ａを記憶した撮影対象物情報記憶部１１２、及び対象距離解析部１０２に代えて、注目被写体画像テーブル１１５Ｂを記憶した２次元被写体情報記憶部１１５、及びパターンマッチング部１１６を備える。さらにこれらの点に加えて、本実施形態に係るデジタルカメラ１Ｂは、２次元の画像データを処理する点において、第１実施形態に係るステレオデジタルカメラ１とは異なるが、２次元画像データの処理については技術的に公知であるので、略同様の機能を有する構成部には同様の番号を付して詳細な説明を省略する。
【００８１】
以下、第１実施形態に係るステレオデジタルカメラ１と異なる点を中心に説明を進める。
【００８２】
２次元被写体情報記憶部１１５は、注目被写体のテンプレート画像の画像データを記憶した注目被写体画像テーブル１１５Ｂを記憶している。２次元被写体情報記憶部１１５は注目被写体記憶部を構成する。パターンマッチング部１１６は、原フレーム記憶部１１１に記憶されたフレーム画像の画像データと、２次元被写体情報記憶部１１５に記憶された注目被写体画像テーブル１１５Ｂに記憶されたテンプレート画像の画像データと、を比較して、原フレーム記憶部１１１に記憶されたフレーム画像の画像に含まれる被写体が注目被写体であるか否かを判定し、注目被写体に相当する被写体の領域を特定する。パターンマッチング部１１６は、注目被写体認識部を構成する。
【００８３】
図１１に、注目被写体画像テーブル１１５Ｂの一例を示す。図１１に示すように、注目被写体画像テーブル１１５Ｂは、注目被写体のテンプレート画像の画像データと、パターンマッチング部１１６が実行する検索処理を効率化するための、注目被写体を識別する情報を対応付けて記憶している。例えば、注目被写体の画像データとともに、注目被写体の名称、必要に応じて、注目被写体が存在する地域の情報、さらには、注目被写体ごとに有効無効を設定するフラグを対応付けて記憶することができる。
【００８４】
［アート変換処理のフロー］
図１１を参照して、アート変換処理の流れを説明する。以下に示す処理は、ユーザによるモード切替キーの操作に伴いアート変換モードに切り替えられることによって開始する。
【００８５】
まず、ＣＰＵ３１がＲＯＭ３２に記憶されたアート変換処理プログラムに従って、リムーバブル記憶媒体５１に記憶された画像データから１枚の画像の画像データを読み込み、原フレーム画像の画像データとして原フレーム記憶部１１１に記憶する（ステップＳ１１）。
【００８６】
パターンマッチング部１１６が原フレーム記憶部１１１に記憶されたフレーム画像の画像データと、２次元被写体情報記憶部１１５に記憶された注目被写体画像テーブル１１５Ｂに記憶されたテンプレート画像の画像データとを比較するパターンマッチングを行い（ステップＳ２２）、注目被写体が特定されたか否かを判断し（ステップＳ２３）、注目被写体が特定された場合は、ステップＳ１６に進み、注目被写体が注目されなかった場合はステップＳ２１に進む。
【００８７】
フィルタ部１０３は、対象距離解析部１０２によって特定された注目被写体に対応する領域の画像データの画素にフィルタ処理を行う（ステップＳ１６）。
【００８８】
アート変換部１０５は、フィルタ部１０３によってフィルタをかけられた領域を除く領域の画像データに対して通常のアート変換処理を実行する（ステップＳ１７）。
【００８９】
パラメータ変更部１０４は、アート変換部１０５によって、注目被写体に対応する領域の画像データに対してアート変換を行う際、画像があまり元の画像から形状が歪みすぎないようにパラメータの設定を行う（ステップＳ１８）。
【００９０】
アート変換部１０５は、フィルタ部１０３によってフィルタをかけられた領域の画像データに対して、パラメータ変更部１０４によって設定されたパラメータに従って、アート変換処理を実行する（ステップＳ１９）。
【００９１】
このようにして、原フレーム画像の画像データに対してアート変換部１０５により画調変更処理が施されることによって得られるアート変換画像の画像データは、処理フレーム記憶部１１４に記憶される。
【００９２】
表示制御部３５は、処理フレーム記憶部１１４に記憶されたアート変換画像の画像データを読み出し、表示部４１を制御して、アート変換画像を表示部４１に表示させる。
これにより、アート変換処理は終了となる。
【００９３】
本実施形態では、第１実施形態と同様の機能を有する構成部には同様の番号を付して詳細な説明を省略しているが、本実施形態のアート変換部１０５についてのみ、簡単に説明する。
【００９４】
本実施形態においても、アート変換部１０５は第１実施形態と同様の処理を行うことができる。第１実施形態で既に説明したので詳細は省略するが、本実施の形態においても、アート変換部１０５は画像データに対して、「日本画調」、「西洋画調」、「水彩画調」、「水墨画調」、「ペン画調」、「ゴッホ調」、「パステル調」などへの様々な画調変換を実行する。
【００９５】
画像データを特定の画調に変更する手法についても、第１実施形態で説明したように、画像データを構成する画素から、色などを基準として相関の高い画素を集め、グループを形成する。続いて、それぞれのグループの画素に対して、同一のグループの画素については色を該グループの代表色に置き換える。こうして色を代表色に置き換えられた画素のグループがそれぞれの筆触を形成する。かかる画像加工処理によると、グループとして集められる画素の相関の取り方、及び同一の色（代表色）の画素により構成されるグループの形状（長さ（距離）、扁平度）を変化させることによって、形成される筆触を変化させることができ、結果的に、画像データが表す画像の画調を様々な絵画調に変更することができる。本実施形態では、各種画調毎に、それぞれの処理で用いる相関度、グループの形状を表す長さ、扁平度などのパラメータの最適な組み合わせが設定されており、この情報がメモリ３４の画像変換処理内容テーブル１１３Ａに記憶されている。アート変換部１０５はメモリ３４の画像変換処理内容テーブル１１３Ａに記憶されたパラメータの情報に基づいて各種画調への変更を行う。
【００９６】
複数の被写動体の画像データの各々を異なる筆触に変更することは、例えば、図５を参照して説明したように、画調を変更する際に、筆触を構成する画素を集めたグループの形状、例えば、グループの扁平度を調整することによって実現してもよい。
【００９７】
この他にも、アート変換処理は、例えば、アドビシステム社のソフトウェアであるフォトショップ（登録商標）等の市販のソフトウェアを用いて行うこともできる。画調変更する際のパラメータとして、一例をあげると、例えば、コントラスト、明るさ、色の濃さ、色合い、シャープネス、必要に応じて、ノイズ低減フィルタの効果設定、色温度、γ補正のγ値などがあり、これらパラメータの何れか、あるいは組み合わせを指定することができる。しかしながら、本発明はこれに限定されず、上述の画調を表現するために妥当であれば、如何なるパラメータを含んでもよい。
【００９８】
さらに、図７を参照して説明したように、注目被写体の領域について識別可能性を維持しながら、注目被写体を除く領域については、強いアート変換処理を実行する場合のみならず。例えば、図８を参照して説明したように、注目被写体を除く領域についてのみ識別可能性を維持しながら、注目被写体の領域については強いアート変換を実行することも可能である。このため、注目被写体を地域ごとに固有の被写体、例えば、有名建築物、風景としたとしても、該注目被写体の識別可能性を維持することができる。あるいは、該注目被写体と該注目被写体を除く領域との間で、アート変換の強度を自在に変化させることもできる。即ち、該注目被写体と該注目被写体を除く領域とを差別化してアート変換することができる。したがって、視覚的に効果的なアート変換を実現することができる。
【００９９】
本実施形態では、各種画調ごとに、上述のパラメータの最適な組み合わせが予め設定して画像変換処理内容テーブル１１３Ａに対応付けて記憶されているものとする。
さらに、注目被写体の領域と注目被写体を除く領域とを差別化してアート変換処理を実行する例について説明したが、本発明はこれに限定されない。アート変換の代わりに、ホワイトバランス処理、色処理、階調補正処理、輸郭強調などの画像変換処理などにおいても適用可能である。また、設定するパラメータについても、「タッチを細かくする」、「荒くする」としたが、これは一例に過ぎず、「荒い」、「細かい」の他に様々な段階を設けてもよく、さらにこれ以外の設定を設けてもよい。
【０１００】
具体的には、図１２を参照して説明した、ステップＳ１１、Ｓ２２、Ｓ２３、Ｓ１７、Ｓ１８までの処理を実行した後に、Ｓ１７、Ｓ１９、及びＳ２１において、アート変換処理に代えて、ホワイトバランス処理、色処理、階調補正処理、輸郭強調などの画像処理を、フィルタリングされた領域とフィルタリングされていない領域とでパラメータが異なるように実行してもよい。また、この際に、パラメータの項目も詳細に設定できるように多数設けてもよい。ユーザが操作部４３を操作することによって、画像変換処理内容記憶部１１３に記憶した画像変換処理内容テーブル１１３Ａで設定可能となるようにしてもよい。これによって、注目被写体の領域と、該注目被写体を除く領域とを差別化してより詳細な画像変換を行うことができる。
【０１０１】
このように、本実施形態では、２次元画像撮影用の通常のデジタルカメラ１Ｂでも、注目被写体の領域の画像データにフィルタ処理をして、フィルタ処理がなされている領域の画像データとフィルタ処理がなされていない画像データとを差別化して画像処理変換することができる。例えば、第１実施形態に係るステレオデジタルカメラ１を用いた場合と同様に、表示部４１に表示される画像では、注目被写体の領域については、画像が潰れてしまい、何を撮影したのかわかりにくくなることを回避し、識別可能性を維持することができる。したがって、視覚的に効果的なアート変換及び画像処理を行うことができる。あるいは、該注目被写体と該注目被写体を除く領域との間で、アート変換の強度を自在に変化させることもできる。したがって、視覚的に効果的なアート変換及び画像処理を実現することができる。
【０１０２】
以上、本発明の実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良などは本発明に含まれるものである。
【０１０３】
また、上述した実施形態では、本発明が適用される画像処理装置は、ステレオデジタルカメラを含むデジタルカメラとして構成される例として説明した。しかしながら、通信部４４、又は、リムーバブル記憶媒体５１から必要とする元画像の画像データを取得できるのであれば、撮影部１１は必須でない。したがって、本発明は、デジタルカメラに特に限定されず、電子機器一般に適用することができる。具体的には例えば、本発明は、フォトフレーム、プロジェクタ、テレビジョン受像器、ビデオカメラ、携帯型ナビゲーション装置、ポータブルゲーム機、あるいは、ステレオデジタルカメラから外部供給された撮像画像を再生表示する情報処理装置など、画像を処理して表示させる機能を有する装置に適用可能である。
【０１０４】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
【０１０５】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータなどにネットワークや記録媒体からインストールされる。コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパソコンであってもよい。
【０１０６】
このようなプログラムを含む記録媒体は、図示はしないが、ユーザにプログラムを提供するために装置本体とは別に配布されるリムーバブルメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体などで構成される。リムーバブルメディアは、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、又は光磁気ディスクなどにより構成される。光ディスクは、例えば、ＣＤ−ＲＯＭ（Compact  Disk-Read  Only  Memory），ＤＶＤ（Digital  Versatile  Disk）などにより構成される。光磁気ディスクは、ＭＤ（Mini-Disk）などにより構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図１のＲＯＭ３２や、図示せぬハードディスクなどで構成される。
【０１０７】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【符号の説明】
【０１０８】
１、１Ｂ・・・デジタルカメラ、１１・・・撮影部、１２、１２Ｂ・・・データ処理部（画像処理装置）、１３・・・ユーザインタフェース部、３１・・・ＣＰＵ、３２・・・ＲＯＭ（プログラム）、３３・・・ＲＡＭ、３４・・・メモリ、３５・・・表示制御部、３６・・・画像処理部、４１・・・表示部（表示手段）、４２・・・位置情報取得部、４３・・・操作部、４４・・・通信部、４５・・・ドライブ、５１・・・リムーバブル記憶媒体、１１１・・・原フレーム記憶部（画像データ記憶部）、１１２・・・撮影対象物情報記憶部（注目被写体画像記憶部）、１１３・・・画像変換処理内容記憶部、１１４・・・処理フレーム記憶部、１１５・・・２次元被写体情報記憶部（注目被写体画像記憶部）、１１５・・・パターンマッチング部（注目被写体認識部）、１０３・・・フィルタ部、１０４・・・パラメータ変更部、１０５・・・アート変換部（画像変換処理部）
【図１】
0005625499.tif 000002
【図２】
0005625499.tif 000003
【図３】
0005625499.tif 000004
【図４】
0005625499.tif 000005
【図５】
0005625499.tif 000006
【図６】
0005625499.tif 000007
【図７】
0005625499.tif 000008
【図８】
0005625499.tif 000009
【図９】
0005625499.tif 000010
【図１０】
0005625499.tif 000011
【図１１】
0005625499.tif 000012
【図１２】
0005625499.tif 000013