(57)【要約】【課題】  電子カメラのような画像撮像装置を用いて、演算性能やメモリなどのリソースを減らし、高速かつ自然な合成画像を形成するための処理手順を提案するものである。【解決手段】  本発明は、撮像した画像と同時に形成される低解像度画像の特徴量を評価する画像構成評価手段と撮像した画像を分割し、それぞれの分割画像の特徴量を評価する分割画像構成評価手段を持ち、あらかじめ用意されていた複数の低解像度画像の中からそれぞれの分割画像の特徴に最も近い特徴量を有する画像を選択して分割画像に置き換えるという合成画像の生成手段とで構成されている。【選択図】        図１
2005184206.tif 000002
【特許請求の範囲】
【請求項１】
撮像した静止画像及び或いは動画像を記録媒体に記録及び再生表示する画像処理装置であって、
撮像手段と、
画像情報を表示する表示手段と、
前記撮像手段により撮像された撮像画像から低解像度画像を同時に作成する低解像度画像作成手段と、
前記低解像度画像作成手段により作成された低解像度画像の画像構成を評価する画像構成評価手段と、
前記画像構成評価手段によって評価された特徴量を前記低解像度画像と関連付けて撮像画像と共に記録する記録手段と、
前記撮像手段により撮像された撮像画像の画像領域を任意の分割数で分割する分割手段と、
前記分割手段により分割された前記撮像画像の分割領域ごとに画像構成を評価する、分割画像構成評価手段と、
前記分割画像構成評価手段によって評価された分割画像の特徴量を用いて、予め特徴量と関連付けて記録されていた複数の低解像度画像の中から、一つを選択する選択手段と、
前記選択手段で選択された前記低解像度画像を前記撮像画像の分割領域に置き換えることによって処理画像を生成する生成手段と、
前記記録手段によって記録された撮像画像を消去する画像消去手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記画像構成評価手段は、画像の特徴量として画像中の各色の色レベルを用いることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記画像構成評価手段は、画像の特徴量として画像中の各色における色レベルの状態を複数のパターンに分類したときの分類番号とすることを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記画像構成評価手段は、画像の特徴量として色レベルの状態と画像中の平均輝度レベルを用いることを特徴とする請求項１ないし３いずれかに記載の画像処理装置。
【請求項５】
前記分割手段は、前記低解像度画像の画像サイズを変更せずに、前記撮像画像を任意の大きさ・形に変形させることで、撮像画像を任意の分割数で分割することを特徴とする請求項１ないし４いずれかに記載の画像処理装置。
【請求項６】
前記分割手段は、前記撮像画像の画像サイズを変更せずに、前記低解像度画像を任意の大きさ・形に変形させることで、撮像画像を任意の分割数で分割することを特徴とする請求項１ないし４いずれかに記載の画像処理装置。
【請求項７】
前記分割手段は、前記撮像画像や前記低解像度画像をそれぞれ任意の大きさ・形に変形させることで、任意の分割数で撮像画像を分割することを特徴とする請求項１ないし４いずれかに記載の画像処理装置。
【請求項８】
前記画像消去手段は、前記低解像度画像作成手段により同時に作成された低解像度画像とこれに関連付けられた特徴量を残し、撮像画像のみを消去することが選択出来ることを特徴とする請求項１ないし７いずれかに記載の画像処理装置。
【請求項９】
撮像した静止画像及び或いは動画像を記録媒体に記録及び再生表示する画像処理装置の制御方法であって、
撮像工程と、
画像情報を表示する表示工程と、
前記撮像工程により撮像された撮像画像から低解像度画像を同時に作成する低解像度画像作成工程と、
前記低解像度画像作成工程により作成された低解像度画像の画像構成を評価する画像構成評価工程と、
前記画像構成評価工程において評価された特徴量を前記低解像度画像と関連付けて撮像画像と共に記録する記録工程と、
前記撮像工程により撮像された撮像画像の画像領域を任意の分割数で分割する分割工程と、
前記分割工程により分割された前記撮像画像の分割領域ごとに画像構成を評価する、分割画像構成評価工程と、
前記分割画像構成評価工程によって評価された分割画像の特徴量を用いて、予め特徴量と関連付けて記録されていた複数の低解像度画像の中から一つを選択する選択工程と、
前記選択工程で選択された前記低解像度画像を前記撮像画像の分割領域に置き換えることによって処理画像を生成する生成工程と、
前記記録工程によって記録された撮像画像を消去する画像消去工程と、
を備えることを特徴とする画像処理装置の制御方法。
【請求項１０】
前記画像構成評価工程は、画像の特徴量として各色の色レベルを用いることを特徴とする請求項９に記載の画像処理装置の制御方法。
【請求項１１】
前記画像構成評価工程は、画像の特徴量として画像中の各色における色レベルの状態を複数のパターンに分類したときの分類番号とすることを特徴とする請求項９または１０に記載の画像処理装置の制御方法。
【請求項１２】
前記画像構成評価工程は、画像の特徴量として色レベルの状態と画像中の平均輝度レベルを用いることを特徴とする請求項９ないし１１いずれかに記載の画像処理装置の制御方法。
【請求項１３】
前記分割工程は、前記低解像度画像の画像サイズを変更せずに、前記撮像画像を任意の大きさ・形に変形させることで、撮像画像を任意の分割数で分割することを特徴とする請求項９ないし１２いずれかに記載の画像処理装置の制御方法。
【請求項１４】
前記分割工程は、前記撮像画像の画像サイズを変更せずに、前記低解像度画像を任意の大きさ・形に変形させることで、撮像画像を任意の分割数で分割することを特徴とする請求項９ないし１２いずれかに記載の画像処理装置の制御方法。
【請求項１５】
前記分割工程は、前記撮像画像や前記低解像度画像をそれぞれ任意の大きさ・形に変形させることで、任意の分割数で撮像画像を分割することを特徴とする請求項９ないし１２いずれかに記載の画像処理装置の制御方法。
【請求項１６】
前記画像消去工程は、前記低解像度画像作成工程により同時に作成された低解像度画像とこれに関連付けられた特徴量を残し、撮像画像のみを消去することが選択出来ることを特徴とする請求項９ないし１５いずれかに記載の画像処理装置の制御方法。
【請求項１７】
撮像した静止画像及び或いは動画像を記録媒体に記録及び再生表示する画像処理装置を制御する制御プログラムを格納した記憶媒体であって、
該制御プログラムが、
撮像工程と、
画像情報を表示する表示工程と、
前記撮像工程により撮像された撮像画像から低解像度画像を同時に作成する低解像度画像作成工程と、
前記低解像度画像作成工程により作成された低解像度画像の画像構成を評価する画像構成評価工程と、
前記画像構成評価工程において評価された特徴量を前記低解像度画像と関連付けて撮像画像と共に記録する記録工程と、
前記撮像工程により撮像された撮像画像の画像領域を任意の分割数で分割する分割工程と、
前記分割工程により分割された前記撮像画像の分割領域ごとに画像構成を評価する、分割画像構成評価工程と、
前記分割画像構成評価工程によって評価された分割画像の特徴量を用いて、予め特徴量と関連付けて記録されていた複数の低解像度画像の中から一つを選択する選択工程と、
前記選択工程で選択された前記低解像度画像を前記撮像画像の分割領域に置き換えることによって処理画像を生成する生成工程と、
前記記録工程によって記録された撮像画像を消去する画像消去工程を含んだコードを具備することを特徴とする記憶媒体。
【請求項１８】
前記画像構成評価工程は、画像の特徴量として各色の色レベルを用いることを特徴とする請求項１７に記載の記憶媒体。
【請求項１９】
前記画像構成評価工程は、画像の特徴量として画像中の各色における色レベルの状態を複数のパターンに分類したときの分類番号とすることを特徴とする請求項１７または１８に記載の記憶媒体。
【請求項２０】
前記画像構成評価工程は、画像の特徴量として色レベルの状態と画像中の平均輝度レベルを用いることを特徴とする請求項１７ないし１９いずれかに記載の記憶媒体。
【請求項２１】
前記分割工程は、前記低解像度画像の画像サイズを変更せずに、前記撮像画像を任意の大きさ・形に変形させることで、撮像画像を任意の分割数で分割することを特徴とする請求項１７ないし２０いずれかに記載の記憶媒体。
【請求項２２】
前記分割工程は、前記撮像画像の画像サイズを変更せずに、前記低解像度画像を任意の大きさ・形に変形させることで、撮像画像を任意の分割数で分割することを特徴とする請求項１７ないし２０いずれかに記載の記憶媒体。
【請求項２３】
前記分割工程は、前記撮像画像や前記低解像度画像をそれぞれ任意の大きさ・形に変形させることで、任意の分割数で撮像画像を分割することを特徴とする請求項１７ないし２０いずれかに記載の記憶媒体。
【請求項２４】
前記画像消去工程は、前記低解像度画像作成工程により同時に作成された低解像度画像とこれに関連付けられた特徴量を残し、撮像画像のみを消去することが選択出来ることを特徴とする請求項１７ないし２３いずれかに記載の記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、静止画像や動画像を撮像、記録、再生する画像処理装置及び方法に関し、特に要求される演算性能やメモリなどのリソースを減らし、高速にモザイク画像を形成するのに適した画像処理装置、画像処理装置の制御方法及び記憶媒体に関する。
【背景技術】
【０００２】
モザイク画像とは、多数の写真画像を組み合わせて図案あるいは一つの写真画像を構成する画像構成技法であることが広く知られている。
【０００３】
このような技法を画像データ処理に適用することで、オリジナル画像をオリジナルよりも小さな画像に置き換えることによって同様のモザイク合成画像を作成することが可能となった（例えば、特許文献１参照。）。
【０００４】
しかし、電子カメラなどの画像撮像装置においては、撮像した画像に対してモザイク処理を施すとき、一般的にはオリジナル画像を任意の分割数で分割して、その分割した各ブロックの中で各色の色レベルを平均化するなどの処理によりモザイク画像が構成されてきた。
【特許文献１】特開平１１−３４５３２８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
その理由の一つとして、電子カメラのような画像撮像装置に、上記の先願に示すような高い処理性能を必要とするモザイク画像合成手法を取り入れることは、処理時間やメモリ量といった問題から現実的な手法ではなかったためである。
【０００６】
さらに、より自然なモザイク画像を合成するためには、合成画像の分割数が多く、さらに素材となる画像の色や明るさなどの画像を構成する要素が多岐にわたっているほど良いとされるため、要求されるメモリ量も膨大なものとなってしまう。
【０００７】
そこで、本発明は上記の問題に鑑みてなされたもので、要求される演算性能やメモリ量を大幅に減らし、高速に良好なモザイク画像を生成することが可能な画像処理装置及びその方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記の目的を達成するために、本発明の一態様による画像処理装置は例えば以下の構成を備える。
【０００９】
撮像した静止画像及び或いは動画像を記録媒体に記録及び再生表示する画像処理装置であって、
撮像手段と、
画像情報を表示する表示手段と、
前記撮像手段により撮像された撮像画像から低解像度画像を同時に作成する低解像度画像作成手段と、
前記低解像度画像作成手段により作成された低解像度画像の画像構成を評価する画像構成評価手段と、
前記画像構成評価手段において評価された特徴量を前記低解像度画像と関連付けて撮像画像と共に記録する記録手段と、
前記撮像手段により撮像された撮像画像の画像領域を任意の分割数で分割する分割手段と、
前記分割手段により分割された前記撮像画像の分割領域ごとに画像構成を評価する、分割画像構成評価手段と、
前記分割画像構成評価手段によって評価された分割画像の特徴量を用いて、予め特徴量と関連付けて記録されていた複数の低解像度画像の中から一つを選択する選択手段と、
前記選択手段で選択された前記低解像度画像を前記撮像画像の分割領域に置き換えることによって処理画像を生成する生成手段と、
前記記録手段によって記録された撮像画像を消去する画像消去手段と、
を備えることを特徴とする。
【００１０】
本発明に係る画像処理装置の制御方法に於いては、
撮像した静止画像及び或いは動画像を記録媒体に記録及び再生表示する画像処理装置の制御方法であって、
撮像工程と、
画像情報を表示する表示工程と、
前記撮像工程により撮像された撮像画像から低解像度画像を同時に作成する低解像度画像作成工程と、
前記低解像度画像作成工程により作成された低解像度画像の画像構成を評価する画像構成評価工程と、
前記画像構成評価工程において評価された特徴量を前記低解像度画像と関連付けて撮像画像と共に記録する記録工程と、
前記撮像工程により撮像された撮像画像の画像領域を任意の分割数で分割する分割工程と、
前記分割工程により分割された前記撮像画像の分割領域ごとに画像構成を評価する、分割画像構成評価工程と、
前記分割画像構成評価工程によって評価された分割画像の特徴量を用いて、予め特徴量と関連付けて記録されていた複数の低解像度画像の中から一つを選択する選択工程と、
前記選択工程で選択された前記低解像度画像を前記撮像画像の分割領域に置き換えることによって処理画像を生成する生成工程と、
前記記録工程によって記録された撮像画像を消去する画像消去工程とを備える。
【００１１】
本発明に係る記憶媒体に於いては、
撮像した静止画像及び或いは動画像を記録媒体に記録及び再生表示する画像処理装置を制御する制御プログラムを格納した記憶媒体であって、
該制御プログラムが、
撮像工程と、
画像情報を表示する表示工程と、
前記撮像工程により撮像された撮像画像から低解像度画像を同時に作成する低解像度画像作成工程と、
前記低解像度画像作成工程により作成された低解像度画像の画像構成を評価する画像構成評価工程と、
前記画像構成評価工程において評価された特徴量を前記低解像度画像と関連付けて撮像画像と共に記録する記録工程と、
前記撮像工程により撮像された撮像画像の画像領域を任意の分割数で分割する分割工程と、
前記分割工程により分割された前記撮像画像の分割領域ごとに画像構成を評価する、分割画像構成評価工程と、
前記分割画像構成評価工程によって評価された分割画像の特徴量を用いて、予め特徴量と関連付けて記録されていた複数の低解像度画像の中から一つを選択する選択工程と、
前記選択工程で選択された前記低解像度画像を前記撮像画像の分割領域に置き換えることによって処理画像を生成する生成工程と、
前記記録工程によって記録された撮像画像を消去する画像消去工程を含んだコードを具備する。
【００１２】
上記手段により、要求される演算性能やメモリ量を大幅に減らし、高速に良好なモザイク画像を生成することが可能な画像処理装置及びその方法を提供することができる。
【発明の効果】
【００１３】
本発明によれば、非常に高い演算処理性能を必要とするモザイク画像合成を電子カメラのような画像撮像装置において、より簡単で高速に処理することを実現可能とした。
【００１４】
また、より自然なモザイク画像を合成するためには、合成画像の分割数が多く、さらに素材となる画像の色や明るさなど、画像を構成する要素が多岐に渡って効率よく含まれるように収集する必要があるが、本発明では、合成画像の分割数を任意に設定することが可能となり、また使用者本人が画像撮像装置を持ち出して撮影を行い、素材収集を少ないメモリ容量で簡単に行うことが可能となる画像撮像装置及び画像撮像装置制御方法を提供するものである。
【発明を実施するための最良の形態】
【００１５】
以下、図面を参照して本発明の実施例を説明する。
【実施例】
【００１６】
（第１の実施例）
図１は、本発明の実施例の構成を示す図である。
【００１７】
図１において、１００は画像処理装置である。
【００１８】
１０は撮影レンズ、１２は絞り機能を備えるシャッター、１４は光学像を電気信号に変換する撮像素子、１６は撮像素子１４のアナログ信号出力をディジタル信号に変換するＡ／Ｄ変換器である。
【００１９】
１８は撮像素子１４、Ａ／Ｄ変換器１６、Ｄ／Ａ変換器２６にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。
【００２０】
２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。
【００２１】
また、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路５０が露光制御手段４０、測距制御手段４２に対して制御を行う、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理を行っている。
【００２２】
さらに、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。
【００２３】
２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。
【００２４】
Ａ／Ｄ変換器１６のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１６のデータが直接メモリ制御回路２２を介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００２５】
２４は画像表示メモリ、２６はＤ／Ａ変換器、２８はＴＦＴ  ＬＣＤ等から成る画像表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。
【００２６】
画像表示部２８を用いて撮像した画像データを逐次表示すれば、電子ファインダ機能を実現することが可能である。
【００２７】
また、画像表示部２８は、システム制御回路５０の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合には画像処理装置１００の電力消費を大幅に低減することが出来る。
【００２８】
３０は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。
【００２９】
これにより、複数枚の静止画像を連続して撮影する連射撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。
【００３０】
また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００３１】
３２は適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する圧縮・伸長回路であり、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。
【００３２】
４０は絞り機能を備えるシャッター１２を制御する露光制御手段であり、フラッシュ４８と連携することによりフラッシュ調光機能も有するものである。
【００３３】
４２は撮影レンズ１０のフォーカシングを制御する測距制御手段、４４は撮影レンズ１０のズーミングを制御するズーム制御手段、４６はバリアである保護手段１０２の動作を制御するバリア制御手段である。
【００３４】
４８はフラッシュであり、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。
【００３５】
露光制御手段４０、測距制御手段４２はＴＴＬ方式を用いて制御されており、撮像した画像データを画像処理回路２０によって演算した演算結果に基づき、システム制御回路５０が露光制御手段４０、測距制御手段４２に対して制御を行う。
【００３６】
５０は画像処理装置１００全体を制御するシステム制御回路、５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶するメモリである。
【００３７】
５４はシステム制御回路５０でのプログラムの実行に応じて、文字、画像、音声等を用いて動作状態やメッセージ等を表示する液晶表示装置、スピーカー等の表示部であり、画像処理装置１００の操作部近辺の視認し易い位置に単数或いは複数個所設置され、例えばＬＣＤやＬＥＤ、発音素子等の組み合わせにより構成されている。
【００３８】
また、表示部５４は、その一部の機能が光学ファインダ１０４内に設置されている。
【００３９】
表示部５４の表示内容のうち、ＬＣＤ等に表示するものとしては、シングルショット／連写撮影表示、セルフタイマー表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、シャッタースピード表示、絞り値表示、露出補正表示、フラッシュ表示、赤目緩和表示、マクロ撮影表示、ブザー設定表示、時計用電池残量表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体２００及び２１０の着脱状態表示、通信Ｉ／Ｆ動作表示、日付け・時刻表示、等がある。
【００４０】
また、表示部５４の表示内容のうち、光学ファインダ１０４内に表示するものとしては、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示、等がある。
【００４１】
５６は電気的に消去・記録可能な不揮発性メモリであり、例えばＥＥＰＲＯＭ等が用いられる。
【００４２】
６０、６２、６４、６６、６８及び７０は、システム制御回路５０の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００４３】
ここで、これらの操作手段の具体的な説明を行う。
【００４４】
６０はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替え設定することが出来る。
【００４５】
６２はシャッタースイッチＳＷ１で、不図示のシャッターボタンの操作途中でＯＮとなり、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作開始を指示する。
【００４６】
６４はシャッタースイッチＳＷ２で、不図示のシャッターボタンの操作完了でＯＮとなり、撮像素子１２から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に画像データを書き込む露光処理、画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理、メモリ３０から画像データを読み出し、圧縮・伸長回路３２で圧縮を行い、記録媒体２００或いは２１０に画像データを書き込む記録処理という一連の処理の動作開始を指示する。
【００４７】
６６は画像表示ＯＮ／ＯＦＦスイッチで、画像表示部２８のＯＮ／ＯＦＦを設定することが出来る。
【００４８】
この機能により、光学ファインダ１０４を用いて撮影を行う際に、ＴＦＴ  ＬＣＤ等から成る画像表示部への電流供給を遮断することにより、省電力を図ることが可能となる。
【００４９】
６８はクイックレビューＯＮ／ＯＦＦスイッチで、撮影直後に撮影した画像データを自動再生するクイックレビュー機能を設定する。なお、本実施例では特に、画像表示部２８をＯＦＦとした場合におけるクイックレビュー機能の設定をする機能を備えるものとする。
【００５０】
７０は各種ボタンやタッチパネル等からなる操作部で、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン等がある。
【００５１】
８０は電源制御手段で、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されており、電池の装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。
【００５２】
８２はコネクタ、８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる電源手段である。
【００５３】
９０及び９４はメモリカードやハードディスク等の記録媒体とのインターフェース、９２及び９６はメモリカードやハードディスク等の記録媒体と接続を行うコネクタ、９８はコネクタ９２及び或いは９６に記録媒体２００或いは２１０が装着されているか否かを検知する記録媒体着脱検知手段である。
【００５４】
なお、本実施例では記録媒体を取り付けるインターフェース及びコネクタを２系統持つものとして説明している。もちろん、記録媒体を取り付けるインターフェース及びコネクタは、単数或いは複数、いずれの系統数を備える構成としても構わない。また、異なる規格のインターフェース及びコネクタを組み合わせて備える構成としても構わない。
【００５５】
インターフェース及びコネクタとしては、ＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成して構わない。
【００５６】
さらに、インターフェース９０及び９４、そしてコネクタ９２及び９６をＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成した場合、ＬＡＮカードやモデムカード、ＵＳＢカード、ＩＥＥＥ１３９４カード、Ｐ１２８４カード、ＳＣＳＩカード、ＰＨＳ等の通信カード、等の各種通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことが出来る。
【００５７】
１０２は、画像処理装置１００のレンズ１０を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである保護手段である。
【００５８】
１０４は光学ファインダであり、画像表示部２８による電子ファインダ機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。また、光学ファインダ１０４内には、表示部５４の一部の機能、例えば、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示などが設置されている。
【００５９】
１１０は通信手段で、ＲＳ２３２ＣやＵＳＢ、ＩＥＥＥ１３９４、Ｐ１２８４、ＳＣＳＩ、モデム、ＬＡＮ、無線通信、等の各種通信機能を有する。
【００６０】
１１２は通信手段１１０により画像処理装置１００を他の機器と接続するコネクタ或いは無線通信の場合はアンテナである。
【００６１】
２００はメモリカードやハードディスク等の記録媒体である。
【００６２】
記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、画像処理装置１００とのインターフェース２０４、画像処理装置１００と接続を行うコネクタ２０６を備えている。
【００６３】
２１０はメモリカードやハードディスク等の記録媒体である。
【００６４】
記録媒体２１０は、半導体メモリや磁気ディスク等から構成される記録部２１２、画像処理装置１００とのインターフェース２１４、画像処理装置１００と接続を行うコネクタ２１６を備えている。
【００６５】
図２を参照して、第１の実施例の動作を説明する。
【００６６】
図２は本実施例の画像処理装置１００の主ルーチンのフローチャートを示す。
【００６７】
Ｓ１０１では撮影を行い、撮影画像を保存する。
【００６８】
このとき、撮影画像よりも低解像度の画像も同時に作成するが（Ｓ１０８）、本実施例ではこの低解像度画像を、サムネイル画像（３２０×２４０ｐｉｘｃｅｌ）として説明を続ける。
【００６９】
上記サムネイル画像については、平均輝度レベルなどの特徴量となる値を算出して、画像と共に関連付けて保存する（Ｓ１０９）。
【００７０】
次に、保存した撮影画像をサムネイル画像のサイズでＳ個に分割する（Ｓ１０２）。このとき撮影画像がサムネイル画像のサイズで等分できない場合は、最大分割数となるように分割する。
【００７１】
分割した画像それぞれについて、平均輝度レベルなどの特徴量となる値を算出し、撮影画像、サムネイル画像などと共に、関連付けて保存する（Ｓ１０３）。
【００７２】
上記操作により、あらかじめメモリ媒体に保存されている複数のサムネイル画像の特徴量（Ｓ１１０）とモザイク画像を合成しようとする撮影画像の分割画像の特徴量を比較して、最も近い特徴量を有するサムネイル画像を一枚ずつ選択していく（Ｓ１０４）。
【００７３】
Ｓ個の分割画像すべてにおいて、対応するサムネイル画像を一枚ずつ選択し終わったら、それぞれに対応するＳ箇所全てにサムネイル画像を当て嵌め、モザイク画像を合成する（Ｓ１０６）。さらに合成したモザイク画像はメモリ媒体に保存する（Ｓ１０７）。
【００７４】
また、一度保存された画像であっても、必要が無くなればメモリ媒体から削除しても構わない。
【００７５】
（第２の実施例）
第１の実施例では、サムネイル画像、撮影画像それぞれにおいて画像の平均輝度レベルなどの特徴量を算出したが（Ｓ１０３，Ｓ１０９）、本実施例では、画像の特徴量として画像中の各色の平均色レベルを用いてもよい。
【００７６】
上記のような処理により、モザイク合成に使用する特徴量に色情報を用いることで、より自然な合成画像となるように処理を行っても構わない。
【００７７】
（第３の実施例）
第２の実施例では、モザイク画像の合成のために特徴量としてＲＧＢ各色の色レベルの平均値を用いたが、撮影画像の各分割画像の特徴量と全てのサムネイル画像の特徴量を比較して、最も特徴量が近い値を有する画像を選択するような処理を行うと、処理時間が長くなってしまう。
【００７８】
そこで、図３に示すようにＳ分割された画像それぞれについてＲＧＢ各色の平均レベルを算出し（Ｓ２０１）、図１１に示す色分布パターンをもとに各色の色分布をパターン分類する（Ｓ２０２）。
【００７９】
上記分類された色分布パターン番号を撮影画像の各分割画像に関連付けて（Ｓ２０３）、メモリ媒体に保存する（Ｓ２０４）。
【００８０】
同様に図４に示すようにサムネイル画像についてもＲＧＢ各色の平均レベルを算出し（Ｓ３０１）、図１１に示す色分布パターンをもとに各色の色分布をパターン分類する（Ｓ３０２）。
【００８１】
上記分類された色分布パターン番号をサムネイル画像に関連付けて（Ｓ３０３）、メモリ媒体に保存する（Ｓ３０４）。
【００８２】
上記分割画像の色分布パターン番号が同じ番号となるサムネイル画像を一枚選択して、モザイク画像を合成する。
【００８３】
上記のような処理により、画像を保存する際に色分布パターン番号で分類することで、モザイク画像を合成するための処理時間を短くするように処理を行っても良い。
【００８４】
（第４の実施例）
第３の実施例では、色分布パターン番号だけを用いて各分割画像に対応するサムネイル画像を選択し、モザイク合成を行ってきたが、図５に示すように本実施例では、各分割画像を色分布パターンで分類後（Ｓ４０２）、画像の平均輝度レベルを算出して（Ｓ４０３）関連付けを行い（Ｓ４０４）、保存する（Ｓ４０５）。
【００８５】
同様にサムネイル画像も図６に示すように色分布パターンで分類後（Ｓ５０２）、画像の平均輝度レベルを算出して（Ｓ５０３）関連付けを行い（Ｓ５０４）、保存する（Ｓ５０５）。
【００８６】
これにより、各分割画像の色分布パターン番号と同じパターン番号をもつサムネイル画像を全て選択し、その中から平均輝度レベルが最も近い値を有するサムネイル画像を選択して合成する。
【００８７】
上記のような処理により、色分布パターン番号が同じサムネイル画像から、さらに輝度レベルが最も近い画像を選択することで、処理時間が短く、より自然なモザイク画像を合成するように処理を行っても良い。
【００８８】
上記、モザイク合成処理のイメージ図を図１２に示す。尚、この図では分類パターン番号として、特徴量Ａ、Ｂ、Ｃ、……と表現している。
【００８９】
（第５の実施例）
第１の実施例では、撮影画像をサムネイル画像のサイズで分割するとあるが、図７に示すように、サムネイル画像のサイズを変更せずに撮影画像の画像サイズを拡大・縮小・変形させることで（Ｓ６０７）、任意の分割数Ｓでモザイク画像を合成するようにしてもよい。
【００９０】
（第６の実施例）
第１の実施例では、撮影画像をサムネイル画像のサイズで分割するとあるが、図８に示すように、撮影画像のサイズを変更せずにサムネイル画像の画像サイズを拡大・縮小・変形させることで（Ｓ６０８）、任意の分割数Ｓでモザイク画像を合成するようにしてもよい。
【００９１】
（第７の実施例）
第１の実施例では、撮影画像をサムネイル画像のサイズで分割するとあるが、図９に示すように、撮影画像のサイズとサムネイル画像のサイズのどちらか一方、もしくは双方を任意のサイズに拡大・縮小・変形させることで（Ｓ６０９）、任意の分割数Ｓでモザイク画像を合成するようにしてもよい。
【００９２】
（第８の実施例）
第１の実施例では、一度保存された画像であっても、必要が無くなればメモリ媒体から削除しても構わないとあるが、本実施例では、図１０に示すように、保存した撮影画像を消去する際、撮影画像に関連付けて保存しているサムネイル画像とその特徴量も同時に削除するかを選択し（Ｓ７０２）、「同時に削除する」を選択した場合は、メモリ媒体から関連付けられた一連のファイルをすべて削除し、「同時に削除せずに撮影画像のみを削除する」を選択した場合は、撮影画像と撮影画像を分割した際に関連付けて保存されている特徴量のみを削除して、サムネイル画像とその特徴量はメモリ媒体に残すことで、素材画像を減らすことなくメモリ量を節約するようにする。
【００９３】
モザイク画像をより自然な画像となるように合成するためには、画像の分割数を多くし、尚且つ各分割領域に非常に近い特徴量をもつサムネイル画像が用意されることが望ましい。そこで、上記のような処理により、限られたメモリ媒体により多くの素材となるサムネイル画像とその特徴量を保存することで、より自然なモザイク画像を合成するように処理を行っても良い。
【００９４】
以上、図１から図１１までの図を用いて本発明の実施例の説明を行った。
【００９５】
なお、上記実施例では、撮影画像やサムネイル画像に特徴量を関連付けるとあるが、画像のヘッダ部分に特徴量を保存しておいても良いし、画像とは異なるファイルに特徴量を保存しておいても良いことは言うまでも無い。
【００９６】
また、上記実施例では、撮影画像とサムネイル画像を関連付けて保存した後に、撮影画像をＳ分割して、それぞれの特徴量をあらためて撮影画像に関連付けて保存するように説明したが、サムネイル画像と撮影画像の分割画像の特徴量を算出した後に撮影画像と関連付けて保存するようにしても構わない。
【００９７】
また、上記実施例では、低解像度画像をサムネイル画像として説明したが、サムネイル画像とは別に、異なる画像サイズで保存しても構わない。
【００９８】
また、上記実施例では、図１１に示す色分布パターンの表を用いて画像の色分布をパターン分類して説明したが、色レベルだけでなく輝度レベルや画像の内容などの情報を用いてパターン分類しても良いことは言うまでも無い。
【図面の簡単な説明】
【００９９】
【図１】本発明の一実施例の構成を示すブロック図である。
【図２】本実施例の主ルーチンのフローチャートである。
【図３】本実施例の主ルーチンのフローチャートの一部である。
【図４】本実施例の主ルーチンのフローチャートの一部である。
【図５】本実施例の主ルーチンのフローチャートの一部である。
【図６】本実施例の主ルーチンのフローチャートの一部である。
【図７】本実施例の主ルーチンのフローチャートである。
【図８】本実施例の主ルーチンのフローチャートである。
【図９】本実施例の主ルーチンのフローチャートである。
【図１０】本実施例の画像削除ルーチンのフローチャートである
【図１１】本実施例の色分布パターンの表である
【図１２】本実施例のイメージ図である
【符号の説明】
【０１００】
１０  撮影レンズ
１２  シャッター
１４  撮像素子
１６  Ａ／Ｄ変換器
１８  タイミング発生回路
２０  画像処理回路
２２  メモリ制御回路
２４  画像表示メモリ
２６  Ｄ／Ａ変換器
２８  画像表示部
３０  メモリ
３２  画像圧縮・伸長回路
４０  露光制御手段
４２  測距制御手段
４４  ズーム制御手段
４６  バリア制御手段
４８  フラッシュ
５０  システム制御回路
５２  メモリ
５４  表示部
５６  不揮発性メモリ
６０  モードダイアルスイッチ
６２  シャッタースイッチＳＷ１
６４  シャッタースイッチＳＷ２
６６  画像表示ＯＮ／ＯＦＦスイッチ
６８  クイックレビューＯＮ／ＯＦＦスイッチ
７０  操作部
８０  電源制御手段
８２  コネクタ
８４  コネクタ
８６  電源手段
９０  インターフェース
９２  コネクタ
９４  インターフェース
９６  コネクタ
９８  記録媒体着脱検知手段
１００  画像処理装置
１０２  保護手段
１０４  光学ファインダ
１１０  通信手段
１１２  コネクタ（またはアンテナ）
２００  記録媒体
２０２  記録部
２０４  インターフェース
２０６  コネクタ
２１０  記録媒体
２１２  記録部
２１４  インターフェース
２１６  コネクタ
【図１】
2005184206.tif 000003
【図２】
2005184206.tif 000004
【図３】
2005184206.tif 000005
【図４】
2005184206.tif 000006
【図５】
2005184206.tif 000007
【図６】
2005184206.tif 000008
【図７】
2005184206.tif 000009
【図８】
2005184206.tif 000010
【図９】
2005184206.tif 000011
【図１０】
2005184206.tif 000012
【図１１】
2005184206.tif 000013
【図１２】
2005184206.tif 000014