(57)【要約】【課題】モザイク画像生成処理の実用性の向上を図る。【解決手段】画像処理装置は、動画を取得する動画取得手段と、取得された動画から複数の静止画を取得する静止画取得手段と、取得された複数の静止画のそれぞれに対して、当該静止画の画像の特徴量を分析する分析手段と、分析された分析結果に基づいて、複数の静止画を特徴量ごとに分類する分類手段と、任意の静止画を取得する画像取得手段と、取得された任意の静止画の画像を複数のエリアに分割する分割手段と、エリアに分割された画像の特徴量を当該エリアごとに検出する検出手段と、分析された分析結果と、検出された検出結果とに基づいて、分割されたエリアのそれぞれの画像を、分類された静止画の中から適合可能な静止画にそれぞれ置換することにより、取得された任意の静止画の画像をあらわすモザイク画像を生成する生成手段と、を備える。【選択図】        図１
2006279454.tif 000002
【特許請求の範囲】
【請求項１】
動画を取得する動画取得手段と、
前記動画取得手段によって取得された前記動画から複数の静止画を取得する静止画取得手段と、
前記静止画取得手段によって取得された複数の前記静止画のそれぞれに対して、当該静止画の画像の特徴量を分析する分析手段と、
前記分析手段によって分析された分析結果に基づいて、複数の前記静止画を前記特徴量ごとに分類する分類手段と、
任意の静止画を取得する画像取得手段と、
前記画像取得手段によって取得された任意の前記静止画の画像を複数のエリアに分割する分割手段と、
前記分割手段によって前記エリアに分割された前記画像の特徴量を当該エリアごとに検出する検出手段と、
前記分析手段によって分析された分析結果と、前記検出手段によって検出された検出結果とに基づいて、前記分割手段によって分割された前記エリアのそれぞれの画像を、前記分類手段によって分類された前記静止画の中から適合可能な静止画にそれぞれ置換することにより、前記画像取得手段によって取得された任意の前記静止画の画像をあらわすモザイク画像を生成する生成手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記静止画取得手段は、
前記動画取得手段によって取得された前記動画を所定時間あるいは所定単位でサンプリングして複数の前記静止画を取得することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記分析手段は、
前記静止画の画像の色調および明暗のうち少なくともいずれかを前記特徴量として検出し分析することを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記画像取得手段は、
前記動画取得手段によって取得された前記動画から任意の前記静止画を抽出して取得することを特徴とする請求項１〜３のいずれか一つに記載の画像処理装置。
【請求項５】
動画を取得する動画取得工程と、
前記動画取得工程によって取得された前記動画から複数の静止画を取得する静止画取得工程と、
前記静止画取得工程によって取得された複数の前記静止画のそれぞれに対して、当該静止画の画像の特徴量を分析する分析工程と、
前記分析工程によって分析された分析結果に基づいて、複数の前記静止画を前記特徴量ごとに分類する分類工程と、
任意の静止画を取得する画像取得工程と、
前記画像取得工程によって取得された任意の前記静止画の画像を複数のエリアに分割する分割工程と、
前記分割工程によって前記エリアに分割された前記画像の特徴量を当該エリアごとに検出する検出工程と、
前記分析工程によって分析された分析結果と、前記検出工程によって検出された検出結果とに基づいて、前記分割工程によって分割された前記エリアのそれぞれの画像を、前記分類工程によって分類された前記静止画の中から適合可能な静止画にそれぞれ置換することにより、前記画像取得工程によって取得された任意の前記静止画の画像をあらわすモザイク画像を生成する生成工程と、
を含んだことを特徴とする画像処理方法。
【請求項６】
請求項５に記載の画像処理方法をコンピュータに実行させることを特徴とする画像処理プログラム。
【請求項７】
請求項６に記載の画像処理プログラムを記録したことを特徴とするコンピュータに読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、動画からモザイク画像を生成する画像処理装置、画像処理方法、画像処理プログラム、および記録媒体に関する。
【背景技術】
【０００２】
近年、たとえば写真画像などの静止画を多数組み合わせて、一つのある画像を表現する、いわゆるモザイク画像を生成することができる画像処理装置が提供されている。
【０００３】
このような画像処理装置は、たとえばつぎのように構成される。すなわち、画像処理装置は、動画より複数の静止画を取り込む静止画像群抽出工程と、静止画像群の各々の画像を複数の領域に分割し、あらかじめ複数の素材画像を記憶する素材画像記憶手段が記憶する素材画像群より分割された各領域に類似した素材画像を選択して選択された画像群を貼り合わせて静止画像群を合成するモザイク画像生成工程と、貼り合わせた静止画像群を連続表示する表示工程とを有し、モザイク画像を連続表示して動きのある動画モザイクを生成することができる構成とされている（たとえば、特許文献１を参照。）。
【０００４】
【特許文献１】特開２００１−２１８１０９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記従来技術の画像処理装置では、たとえばモザイク画像を連続表示する動画モザイクを生成することはできるが、動画からモザイク画像の素材画像を取得し、その動画から抽出されたあるいは任意に選択された静止画をあらわすモザイク画像を生成することについては想定されておらず、モザイク画像生成処理の実用性の向上を図るものではないと思われる。
【０００６】
この発明は、上記課題を解決するためになされたものであり、モザイク画像生成処理の実用性の向上を図ることができる携帯情報端末と印刷装置との間で各種情報の送受信をおこなって印刷することができる画像処理装置、画像処理方法、画像処理プログラム、および記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、この発明にかかる画像処理装置は、動画を取得する動画取得手段と、前記動画取得手段によって取得された前記動画から複数の静止画を取得する静止画取得手段と、前記静止画取得手段によって取得された複数の前記静止画のそれぞれに対して、当該静止画の画像の特徴量を分析する分析手段と、前記分析手段によって分析された分析結果に基づいて、複数の前記静止画を前記特徴量ごとに分類する分類手段と、任意の静止画を取得する画像取得手段と、前記画像取得手段によって取得された任意の前記静止画の画像を複数のエリアに分割する分割手段と、前記分割手段によって前記エリアに分割された前記画像の特徴量を当該エリアごとに検出する検出手段と、前記分析手段によって分析された分析結果と、前記検出手段によって検出された検出結果とに基づいて、前記分割手段によって分割された前記エリアのそれぞれの画像を、前記分類手段によって分類された前記静止画の中から適合可能な静止画にそれぞれ置換することにより、前記画像取得手段によって取得された任意の前記静止画の画像をあらわすモザイク画像を生成する生成手段と、を備えることを特徴とする。
【０００８】
この発明の画像処理装置によれば、動画が取得され、取得された動画から複数の静止画が取得され、取得された複数の静止画のそれぞれに対して画像の特徴量が分析され、分析された分析結果に基づいて複数の静止画が特徴量ごとに分類され、任意の静止画が取得され、取得された任意の静止画の画像が複数のエリアに分割され、分割された画像の特徴量がエリアごとに検出され、分析結果と検出結果とに基づいて分割されたエリアのそれぞれの画像が、分類された静止画の中から適合可能な静止画にそれぞれ置換されて、任意の静止画の画像をあらわすモザイク画像が生成される。
【０００９】
これにより、動画を用いて任意の静止画をあらわすモザイク画像を容易に生成することができ、モザイク画像生成処理の実用性の向上を図ることができる。
【００１０】
また、この発明の画像処理装置の前記静止画取得手段は、前記動画取得手段によって取得された前記動画を所定時間あるいは所定単位でサンプリングして複数の前記静止画を取得することを特徴とする。
【００１１】
このため、複数の静止画は、取得された動画を所定時間あるいは所定単位でサンプリングして取得される。
【００１２】
これにより、たとえば動画からユーザが指定した時間や単位の映像（画像）を用いてモザイク画像を生成することができる。
【００１３】
また、この発明の画像処理装置の前記分析手段は、前記静止画の画像の色調および明暗のうち少なくともいずれかを前記特徴量として検出し分析することを特徴とする。
【００１４】
このため、取得された複数の静止画の画像の特徴量として、画像の色調および明暗のうち少なくともいずれかが検出され分析される。
【００１５】
これにより、モザイク画像生成の際に、色調および明暗などによって、分割されたエリアのそれぞれの画像を分類された静止画の中から適合可能な静止画にそれぞれ置換することができる。
【００１６】
また、この発明の画像処理装置の前記画像取得手段は、前記動画取得手段によって取得された前記動画から任意の前記静止画を抽出して取得することを特徴とする。
【００１７】
このため、取得された動画から任意の静止画が抽出され取得される。
【００１８】
これにより、動画から任意の静止画を抽出して取得し、取得した任意の静止画のモザイク画像を生成することができる。
【００１９】
さらに、この発明にかかる画像処理方法は、動画を取得する動画取得工程と、前記動画取得工程によって取得された前記動画から複数の静止画を取得する静止画取得工程と、前記静止画取得工程によって取得された複数の前記静止画のそれぞれに対して、当該静止画の画像の特徴量を分析する分析工程と、前記分析工程によって分析された分析結果に基づいて、複数の前記静止画を前記特徴量ごとに分類する分類工程と、任意の静止画を取得する画像取得工程と、前記画像取得工程によって取得された任意の前記静止画の画像を複数のエリアに分割する分割工程と、前記分割工程によって前記エリアに分割された前記画像の特徴量を当該エリアごとに検出する検出工程と、前記分析工程によって分析された分析結果と、前記検出工程によって検出された検出結果とに基づいて、前記分割工程によって分割された前記エリアのそれぞれの画像を、前記分類工程によって分類された前記静止画の中から適合可能な静止画にそれぞれ置換することにより、前記画像取得工程によって取得された任意の前記静止画の画像をあらわすモザイク画像を生成する生成工程と、を含んだことを特徴とする。
【００２０】
この発明の画像処理方法によれば、動画が取得され、取得された動画から複数の静止画が取得され、取得された複数の静止画のそれぞれに対して画像の特徴量が分析され、分析された分析結果に基づいて複数の静止画が特徴量ごとに分類され、任意の静止画が取得され、取得された任意の静止画の画像が複数のエリアに分割され、分割された画像の特徴量がエリアごとに検出され、分析結果と検出結果とに基づいて分割されたエリアのそれぞれの画像が、分類された静止画の中から適合可能な静止画にそれぞれ置換されて、任意の静止画の画像をあらわすモザイク画像が生成される。
【００２１】
これにより、動画を用いて任意の静止画をあらわすモザイク画像を容易に生成することができ、モザイク画像生成処理の実用性の向上を図ることができる。
【００２２】
また、この発明の画像処理プログラムは、上述した画像処理方法をコンピュータに実行させることを特徴とする。
【００２３】
このため、この発明の画像処理プログラムを実行することにより、上述した画像処理方法によって得られる動作がコンピュータによって実現される。
【００２４】
これにより、上述した画像処理方法の実現によって得られる各種効果を奏することができる。
【００２５】
さらに、この発明の記録媒体は、上述した画像処理プログラムをコンピュータに読み取り可能に記録している。
【００２６】
このため、記録された画像処理プログラムをコンピュータによって読み取らせ、実行させることによって、上述した画像処理プログラムの実行によって得られる各種動作が実現される。
【００２７】
これにより、上述した画像処理プログラムの実行によって得られる各種効果を奏することができる。
【発明を実施するための最良の形態】
【００２８】
以下に添付図面を参照して、この発明にかかる画像処理装置、画像処理方法、画像処理プログラム、および記録媒体の好適な実施の形態を詳細に説明する。
【００２９】
（画像処理装置の機能的構成）
図１は、この実施の形態における画像処理装置の機能的構成の一例を示すブロック図である。この実施の形態における画像処理装置は、動画取得部１０１と、静止画取得部１０２と、分析部１０３と、分類部１０４と、画像取得部１０５と、分割部１０６と、検出部１０７と、生成部１０８と、を備え、さらに表示部１０９と、印刷出力部１１０と、操作部１１１と、を含んで構成されている。
【００３０】
動画取得部１０１は、動画を取得する。動画取得部１０１が取得する動画は、複数の静止画を含む形態のものであってもよいし、複数の静止画をキャプチャなどによって取り出し可能な形態のものであってもよい。静止画取得部１０２は、動画取得部１０１によって取得された動画から複数の静止画を取得する。また、静止画取得部１０２は、動画取得部１０１によって取得された動画を所定時間（たとえば１０分間など）あるいは所定単位（たとえば１０００コマなど）でサンプリングして複数の静止画を取得する。
【００３１】
分析部１０３は、静止画取得部１０２によって取得された複数の静止画のそれぞれに対して、静止画の画像の特徴量を分析する。この分析部１０３が分析する画像の特徴量は、たとえば画像の色調および明暗のうち少なくともいずれかによって検出された特徴量である。なお、分析部１０３は、静止画を構成する（あらわす）色の色変換処理（ＲＧＢ／ＣＭＹＫ変換）機能を備えていてもよい。
【００３２】
分類部１０４は、分析部１０３によって分析された分析結果に基づいて、複数の静止画を特徴量ごとに分類する。この分類部１０４による分類は、たとえば静止画の画像全体が明るいあるいは暗いとか、赤、緑、および青のいずれかが強いとか弱いとかの特徴量を参照して複数の静止画を特徴量ごとに分類する。
【００３３】
画像取得部１０５は、任意の静止画を取得する。また、画像取得部１０５は、動画取得部１０１によって取得された動画から任意の静止画を抽出して取得する。画像取得部１０５によって取得される任意の静止画は、たとえばユーザによって選択指定されて画像処理装置に取り込まれた静止画や、ユーザによって選択指定されて動画から抽出された静止画などが挙げられる。
【００３４】
分割部１０６は、画像取得部１０５によって取得された任意の静止画を複数のエリアに分割する。複数のエリアは、たとえば所定単位で任意の静止画の画像に対して格子状に画像を分割したものが挙げられる。検出部１０７は、分割部１０６によってエリアに分割された画像の特徴量を当該エリアごとに検出する。
【００３５】
生成部１０８は、分析部１０３によって分析された分析結果と、検出部１０７によって検出された検出結果とに基づいて、分割部１０６によって分割されたエリアのそれぞれの画像を、分類部１０４によって分類された静止画の中から適合可能な静止画にそれぞれ置換することにより、画像取得部１０５によって取得された任意の静止画の画像をあらわすモザイク画像を生成する。生成部１０８によって任意の静止画の分割されたエリアのそれぞれの画像に置換される静止画は、分類された静止画の中から最適なものが選定される。ここで、最適な静止画は、たとえば上記画像の特徴量が近似あるいは類似している静止画のことをいう。
【００３６】
表示部１０９は、たとえば動画取得部１０１、静止画取得部１０２、および画像取得部１０５によって取得された動画、複数の静止画、および任意の静止画の画像や、生成部１０８によって生成されたモザイク画像などを表示する。印刷出力部１１０は、たとえば生成部１０８によって生成されたモザイク画像を印刷出力する。操作部１１１は、たとえばユーザによる文字、数値、各種指示などの入力を受け付ける。
【００３７】
（画像処理装置のハードウェア構成）
図２は、この実施の形態における画像処理装置のハードウェア構成の一例を示すブロック図である。なお、以降において、既に説明した部分と重複する箇所は同一の符号を附して説明を省略する。この実施の形態における画像処理装置は、ＣＰＵ２０１と、ＲＯＭ２０２と、ＲＡＭ２０３と、ディスプレイ２０４と、操作パネル２０５と、プリンタ２０６と、インタフェース（Ｉ／Ｆ）２０７と、スキャナ２０８と、ＨＤＤ２０９と、ＨＤ２１０と、記録媒体デコード部２１１と、を含み、さらに記録媒体２１２を備えて構成されている。
【００３８】
ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）２０１は、所定の演算処理を実行し、この画像処理装置の全体を制御するとともに、前述の分析部１０３、分類部１０４、分割部１０６、検出部１０７、および生成部１０８の機能を実現する。ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）２０２は、各種制御プログラムを格納する。ＲＯＭ２０２に格納されたデータは、ユーザの操作によって書き換えることが可能ではあるが、電源ＯＦＦによって消去されることはないものとする。
【００３９】
ＣＰＵ２０１は、たとえばＲＯＭ２０２などに格納された制御プログラムに基づいて、後述するＩ／Ｆ２０７や記録媒体デコード部２１１を介して動画を取得し、取得した動画から複数の静止画を取得するとともに、任意の静止画を取得する。また、ＣＰＵ２０１は、取得した複数の静止画の画像の特徴量を分析し、分析結果に基づいてこれらの静止画を特徴量ごとに分類する。
【００４０】
さらに、ＣＰＵ２０１は、取得した任意の静止画を複数のエリアに分割し、分割された画像の特徴量をエリアごとに検出する。また、ＣＰＵ２０１は、分析結果および検出結果に基づいて、分割したエリアのそれぞれの画像を分類した静止画の中から適合可能な（最適な）静止画にそれぞれ置換し、取得した任意の静止画の画像をあらわすモザイク画像を生成する。そして、ＣＰＵ２０１は、たとえば後述するプリンタ２０６を制御して、生成したモザイク画像の印刷をおこなう。このように、前述の印刷出力部１１０は、たとえばＣＰＵ２０１およびプリンタ２０６によってその機能を実現する。
【００４１】
また、ＣＰＵ２０１は、たとえば後述するディスプレイ２０４を制御して、生成したモザイク画像を表示する。ＣＰＵ２０１は、このモザイク画像の他に、取得した任意の静止画の画像や、分割したエリアのそれぞれの画像に置換される静止画の画像、さらに各種情報などを表示してもよい。このように、前述の表示部１０９は、たとえばＣＰＵ２０１およびディスプレイ２０４によってその機能を実現する。
【００４２】
ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）２０３は、可変的なデータを書き換え自在に記憶し、ＣＰＵ２０１のワークエリアとして使用される。ＲＡＭ２０３は、電源ＯＦＦによって記憶されたデータが消去される揮発性のメモリであってもよいし、バッテリなどによってバックアップされることによる不揮発性のメモリとしてもよい。このＲＡＭ２０３は、たとえば取得した任意の画像や生成したモザイク画像などの各種情報を一時的あるいは恒久的に記憶する。
【００４３】
ディスプレイ２０４は、たとえばＣＲＴ（Ｃａｔｈｏｄｅ  Ｒａｙ  Ｔｕｂｅ）、ＴＦＴ（Ｔｈｉｎ  Ｆｉｌｍ  Ｔｒａｎｓｉｓｔｏｒ）液晶ディスプレイ、有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ、プラズマディスプレイなどのディスプレイ装置を含む。このディスプレイ２０４は、具体的には、たとえば図示しない映像Ｉ／Ｆや映像Ｉ／Ｆに接続された映像表示用のディスプレイ装置によって構成することができる。映像Ｉ／Ｆは、具体的には、たとえば、ディスプレイ装置全体の制御を行うグラフィックコントローラと、即時表示可能な画像情報を一時的に記憶するＶＲＡＭ（Ｖｉｄｅｏ  ＲＡＭ）などのバッファメモリと、グラフィックコントローラから出力される画像情報に基づいて、ディスプレイ装置を表示制御する制御ＩＣやＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）などによって構成される。
【００４４】
ディスプレイ２０４には、アイコン、カーソル、メニュー、ウィンドウ、あるいは文字や画像などの各種情報が表示される。また、ディスプレイ２０４には、たとえば生成されたモザイク画像や、各種の印刷条件などの情報が表示される。なお、印刷条件などの情報は、たとえばアイコンの形態で表示されており、後述する操作パネル２０５によってカーソルを操作しアイコンを指定することで、印刷条件などを指定することができる。
【００４５】
操作パネル２０５は、前述の操作部１１１の機能を実現し、文字、数値、各種指示など、ユーザによって入力操作された情報をＣＰＵ２０１に対して出力する。操作パネル２０５の構成としては、物理的な押下／非押下を検出する押ボタンスイッチ、タッチパネル、キーボード、ジョイスティック、トラックボールなど公知の各種形態を採用することが可能である。なお、この操作パネル２０５に代えて、あるいは操作パネル２０５とともに、たとえば外部からの音声を入力するマイクなどを用いて、音声によって画像処理装置への入力操作をおこなうことができる構成を採用してもよい。
【００４６】
なお、この操作パネル２０５は、画像処理装置本体に対して一体的に設けられていてもよいし、リモコンのように画像処理装置に対して着脱可能で離間的に操作可能な形態であってもよい。ユーザは、操作パネル２０５の形態に応じて適宜入力操作をおこなうことで情報を入力する。操作パネル２０５の操作によって入力される情報として、たとえばモザイク画像生成に際して各種の設定条件や各種の印刷条件を指示する情報などが挙げられる。
【００４７】
操作パネル２０５の形態として、たとえば、タッチパネルを採用する場合、このタッチパネルはディスプレイ２０４の表示画面側に積層して使用される。この場合、ディスプレイ２０４における表示タイミングとタッチパネル（操作パネル２０５）に対する操作タイミングおよびその位置座標とを管理することによって、入力情報を認識する。操作パネル２０５の形態としてディスプレイ２０４に積層されたタッチパネルを採用することにより、操作パネル２０５を大型化することなく多くの情報入力を行うことができる。なお、タッチパネルとしては、抵抗膜式、感圧式など公知の各種タッチパネルを用いることが可能である。
【００４８】
プリンタ２０６は、ＣＰＵ２０１とともに前述の印刷出力部１１０の機能を実現し、生成したモザイク画像やその他の画像、文字などの印刷出力をおこなう。
【００４９】
Ｉ／Ｆ２０７は、たとえば通信回線２１３を通じてネットワークに接続され、ネットワークを介して、図示しないパーソナルコンピュータなどと接続される。そして、Ｉ／Ｆ２０７は、ネットワークと画像処理装置とのインタフェースを司り、画像処理装置に対する情報の入出力を制御する。このＩ／Ｆ２０７は、モデムやＬＡＮアダプタなどで構成することができ、たとえばネットワークを介して画像処理装置に画像を取り込む場合には、前述の動画取得部１０１および画像取得部１０５の機能を実現する。なお、Ｉ／Ｆ２０７が通信インタフェースの機能を備える場合、たとえばリモートコントロール機器などの他の機器と画像処理装置との間で各種情報の送受信をおこなう。
【００５０】
ここで、このＩ／Ｆ２０７における各種情報の送受信は、たとえば、有線、無線を問わずおこなわれる。この実施の形態のＩ／Ｆ２０７は、たとえば携帯電話機のように、図示しない基地局を介して通信サーバと通信をおこなう通信モジュールであってもよく、情報端末などとの間で直接無線通信をおこなう通信モジュールであってもよい。
【００５１】
ここで、Ｉ／Ｆ２０７による無線通信とは、通信の媒体となるワイヤ線を使用せずに、電波や赤外線、超音波などを用いておこなわれる通信のことをいう。無線通信を可能とする規格には、たとえば無線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ）、ＨｏｍｅＲＦ（Ｈｏｍｅ  Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ）、ＢｌｕｅＴｏｏｔｈなどの各種の技術があるが、この実施の形態においては公知の各種の無線通信技術を利用することができる。
【００５２】
スキャナ２０８は、印刷された画像の画像情報などを画像処理装置に取り込む。このスキャナ２０８は、画像情報を用紙などの記録媒体の紙面上に印刷された画像などから取得する場合には、前述の画像取得部１０５の機能を実現する。また、印刷された複数枚の画像から動画が構成される場合には、前述の動画取得部１０１の機能を実現する。
【００５３】
ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）２０９は、ＨＤ（Ｈａｒｄ  Ｄｉｓｋ）２１０に対する情報の読み取り／書き込みの制御を行う。なお、画像処理プログラムが、たとえば、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ）、ＣＤ（Ｃｏｍｐａｃｔ  Ｄｉｓｋ）、ＣＤ−ＲＯＭ（ＣＤ−Ｒ、ＣＤ−ＲＷ）、ＭＯ（Ｍａｇｎｅｔｏ−Ｏｐｔｉｃａｌ  ｄｉｓｋ）、メモリカードなどに記録されている場合、ＨＤＤ２０９に代えて、これらに記録された情報の少なくとも読み取りが可能な専用のドライブ装置を用いることができる。
【００５４】
ＨＤ２１０は、各種制御プログラムや各種情報をコンピュータに読み取り可能に記録する。ＨＤ２１０は、ＨＤＤ２０９による情報の書き込みを受け付けるとともに、書き込まれた情報を不揮発に記録する。この実施の形態のＨＤ２１０には、たとえば後述する画像処理装置のモザイク画像生成処理の実行を実現する画像処理プログラムや画像情報、および画像を構成する色に関する色変換（ＲＧＢ／ＣＭＹＫ変換）テーブルや色変換パラメータなどが記録されている。これにより、この実施の形態では、ＨＤ２１０によってこの発明の記録媒体が実現される。また、この実施の形態のＨＤ２１０には、画像処理プログラムの実行に際して必要な各種の情報が記録されている。
【００５５】
なお、画像処理プログラムは、ＨＤ２１０に記録されているものに限らない。ＨＤ２１０に代えて、上述したＤＶＤ、ＣＤ、ＣＤ−ＲＯＭ（ＣＤ−Ｒ、ＣＤ−ＲＷ）、ＭＯ、メモリカードなどに画像処理プログラムが記録されていてもよい。画像処理プログラムの実行に際し、ＤＶＤ、ＣＤ、ＣＤ−ＲＯＭ（ＣＤ−Ｒ、ＣＤ−ＲＷ）、ＭＯ、メモリカードなどに記録された画像処理プログラムを用いる場合、この画像処理装置では、ＤＶＤ、ＣＤ、ＣＤ−ＲＯＭ（ＣＤ−Ｒ、ＣＤ−ＲＷ）、ＭＯ、メモリカードなどに記録された情報の読み取りが可能な専用の読取装置を設け、画像処理プログラムを読み取る。
【００５６】
また、ＨＤ２１０には、たとえばプリンタ２０６やスキャナ２０８を駆動するための専用の駆動ドライバが格納されている。駆動ドライバは、プリンタ２０６やスキャナ２０８を動作させるためのソフトウェアによる処理で、ＣＰＵ２０１とプリンタ２０６やスキャナ２０８との橋渡し的役割を担う。なお、これに限らず、駆動ドライバを、たとえばファームウェアにより構成したり、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）により構成したりしてもよい。
【００５７】
記録媒体デコード部２１１は、たとえば記録媒体２１２に記録された画像情報や画像処理プログラムなどの各種情報の読み取りを制御する。なお、この発明を実現する記録媒体（この実施の形態ではＨＤ２１０）と、記録媒体デコード部２１１が読み取り対象とする記録媒体２１２とは異なるものである。以降、記録媒体デコード部２１１が読み取り対象とする記録媒体２１２を記録メディアとして符号２１２を付して説明する。また、画像情報などは、記録媒体２１２に記録されたものに限られず、Ｉ／Ｆ２０７を介して画像処理装置に取得されたものなど、種々の形態のものを利用することができる。
【００５８】
記録媒体デコード部２１１は、可搬性を有し、記録媒体デコード部２１１に対して着脱可能な記録メディア２１２を読み取り対象とする。具体的に、記録メディア２１２は、たとえば、ＤＶＤ、ＣＤ、ＣＤ−ＲＯＭ（ＣＤ−Ｒ、ＣＤ−ＲＷ）、ＭＯ、メモリカードなどによって実現することができる。
【００５９】
記録メディア２１２が、たとえば、ＣＤ−ＲＯＭ（ＣＤ−Ｒ、ＣＤ−ＲＷ）である場合、記録媒体デコード部２１１は、ＣＤ−ＲＯＭドライブによって実現される。ＣＤ−ＲＯＭドライブについては、公知の技術であるため、図示および説明を省略する。たとえば、ＤＶＤ、ＣＤ、ＣＤ−ＲＯＭ（ＣＤ−Ｒ、ＣＤ−ＲＷ）、ＭＯ、メモリカードなどによって記録メディア２１２を実現した場合には、これらの記録メディア２１２に対する情報の読み取りが可能なドライブ装置によって記録媒体デコード部２１１が実現される。
【００６０】
（画像処理装置のモザイク画像生成処理手順）
図３は、この実施の形態における画像処理装置のモザイク画像生成処理手順の一例を示すフローチャートである。図３を参照して、以下に、この実施の形態におけるモザイク画像生成処理手順について説明する。なお、以降において、主に図１および図２を参照しながら説明をおこなうが、既に説明した部分と重複する箇所は同一の符号を附して説明を省略する。
【００６１】
具体的に、図３に示す処理は、図２に示した画像処理装置のＲＯＭ２０２、ＲＡＭ２０３、ＨＤ２１０、記録媒体（記録メディア）２１２などに記憶（記録）された画像処理プログラムをＣＰＵ２０１が実行することによって実現する。モザイク画像生成処理手順は、まず、ＣＰＵ２０１によって、Ｉ／Ｆ２０７、ＨＤＤ２０９、および記録媒体デコード部２１１などを介してネットワーク、ＨＤ２１０、および記録メディア２１２などから動画を取得する（ステップＳ３０１）。動画を取得したのち、ＣＰＵ２０１によって、取得した動画から複数の静止画を取得する（ステップＳ３０２）。このステップＳ３０２の処理では、たとえばユーザが操作パネル２０５を介して入力した、動画を所定時間や所定単位でサンプリングするように指定する情報を参照して、指定された所定時間や所定単位において動画から複数の静止画を取得するようにしてもよい。
【００６２】
つぎに、ＣＰＵ２０１によって、取得した複数の静止画のそれぞれの画像の特徴量を分析し（ステップＳ３０３）、ＲＡＭ２０３やＨＤ２１０にこの分析結果を記憶する（ステップＳ３０４）。ステップＳ３０３においては、画像の色調や明暗などを検出して分析をおこなう。画像の分析については公知の分析技術を用いることができるため、ここでは説明を省略する。
【００６３】
そして、画像の特徴量を分析した分析結果に基づいて、ＣＰＵ２０１によって、複数の静止画を特徴量ごとに分類し（ステップＳ３０５）、ＲＡＭ２０３やＨＤ２１０にこの分類結果を記憶する（ステップＳ３０６）。ステップＳ３０５においては、各静止画の画像全体の明るさや暗さ、または画像全体から示される色（たとえば、画像全体が赤、緑、および青のいずれかの色が強い）などの特徴量を、たとえばあらかじめＨＤ２１０に備えられた色変換テーブルや色変換パラメータと比較参照して複数の静止画を特徴量ごとに分類する。
【００６４】
こうして、ステップＳ３０６において分類結果を記憶すると、ＣＰＵ２０１によって、Ｉ／Ｆ２０７、ＨＤＤ２０９、および記録媒体デコード部２１１などを介してネットワーク、ＨＤ２１０、および記録メディア２１２などから任意の静止画を取得する（ステップＳ３０７）。このステップＳ３０７においては、たとえばユーザが操作パネル２０５を介して入力した、動画から任意の静止画を抽出して取得するように指定する情報を参照して、指定された任意の静止画を動画から取得するようにしてもよい。
【００６５】
つぎに、ＣＰＵ２０１は、取得した任意の静止画の画像を複数のエリアに分割し（ステップＳ３０８）、エリアに分割した画像の特徴量をエリアごとに検出する（ステップＳ３０９）。このステップＳ３０９の処理は、上記ステップＳ３０３の分析処理と同様の処理によりおこなわれる。
【００６６】
こうして、任意の静止画の画像の特徴量をエリアごとに検出すると、ＣＰＵ２０１によって、ステップＳ３０４において記憶された分析結果と、ステップＳ３０６において記憶された分類結果とに基づいて、すなわち画像の特徴量を参照して、任意の静止画のエリアの画像を最適な静止画に置換し（ステップＳ３１０）、すべてのエリアの画像が置換されたか否かを判定する（ステップＳ３１１）。すべてのエリアの画像が置換されていないと判定した場合（ステップＳ３１１：Ｎｏ）は、ステップＳ３１０に移行して置換処理を繰り返す。
【００６７】
一方、すべてのエリアの画像が置換されたと判定した場合（ステップＳ３１１：Ｙｅｓ）は、画像処理装置によって任意の静止画の画像をあらわすモザイク画像が生成されたことになり、ＣＰＵ２０１によって、たとえばユーザが操作パネル２０５を介して入力した、生成したモザイク画像の印刷出力を選択する情報を参照して、生成したモザイク画像を印刷出力するか否かを判断する（ステップＳ３１２）。
【００６８】
このステップＳ３１２において、印刷出力すると判断した場合（ステップＳ３１２：Ｙｅｓ）は、ＣＰＵ２０１によってプリンタ２０６を制御して、生成したモザイク画像を印刷出力し（ステップＳ３１３）、処理を終了する。一方、ステップＳ３１２において、印刷出力しないと判断した場合（ステップＳ３１２：Ｎｏ）は、ＣＰＵ２０１によって、ＲＡＭ２０３、ＨＤ２１０、および記録メディア２１２に生成したモザイク画像を記憶し（ステップＳ３１４）、処理を終了する。これにより、本フローチャートによる一連のモザイク画像生成処理を終了する。なお、上記ステップＳ３１３において、生成したモザイク画像を印刷出力するとともに、ＲＡＭ２０３などに記憶するようにしてもよい。
【００６９】
以上説明したように、この発明の実施の形態の画像処理装置によれば、動画が取得され、取得された動画から複数の静止画が取得され、取得された複数の静止画のそれぞれに対して画像の特徴量が分析され、分析された分析結果に基づいて複数の静止画が特徴量ごとに分類され、任意の静止画が取得され、取得された任意の静止画の画像が複数のエリアに分割され、分割された画像の特徴量がエリアごとに検出され、分析結果と検出結果とに基づいて分割されたエリアのそれぞれの画像が、分類された静止画の中から適合可能な静止画にそれぞれ置換されて、任意の静止画の画像をあらわすモザイク画像が生成される。これにより、動画を用いて任意の静止画をあらわすモザイク画像を容易に生成することができ、モザイク画像生成処理の実用性の向上を図ることができる。
【００７０】
また、この発明の実施の形態の画像処理装置によれば、複数の静止画は、取得された動画を所定時間あるいは所定単位でサンプリングして取得される。これにより、たとえば動画からユーザが指定した時間や単位の映像（画像）を用いてモザイク画像を生成することができる。
【００７１】
また、この発明の実施の形態の画像処理装置によれば、取得された複数の静止画の画像の特徴量として、画像の色調および明暗のうち少なくともいずれかが検出され分析される。これにより、モザイク画像生成の際に、色調および明暗などによって、分割されたエリアのそれぞれの画像を分類された静止画の中から適合可能な静止画にそれぞれ置換することができる。
【００７２】
また、この発明の実施の形態の画像処理装置によれば、取得された動画から任意の静止画が抽出され取得される。これにより、動画から任意の静止画を抽出して取得し、取得した任意の静止画のモザイク画像を生成することができる。
【００７３】
なお、本実施の形態で説明した画像処理方法は、あらかじめ用意されたプログラムを、たとえば画像処理装置に組み込まれたコンピュータやパーソナルコンピュータなどで実行することにより実現することができる。このプログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤなどのコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。またこのプログラムは、インターネットなどのネットワークを介して配布することが可能な伝送媒体であってもよい。
【図面の簡単な説明】
【００７４】
【図１】画像処理装置の機能的構成の一例を示すブロック図。
【図２】画像処理装置のハードウェア構成の一例を示すブロック図。
【図３】画像処理装置のモザイク画像生成処理手順の一例を示すフローチャート。
【符号の説明】
【００７５】
１０１  動画取得部、１０２  静止画取得部、１０３  分析部、１０４  分類部、１０５  画像取得部、１０６  分割部、１０７  検出部、１０８  生成部、２０１  ＣＰＵ、２０２  ＲＯＭ、２０３  ＲＡＭ、２０４  ディスプレイ、２０５  操作パネル、２０６  プリンタ、２０７  Ｉ／Ｆ、２０８  スキャナ、２０９  ＨＤＤ、２１０  ＨＤ、２１１  記録媒体デコード部、２１２  記録媒体（記録メディア）
【図１】
2006279454.tif 000003
【図２】
2006279454.tif 000004
【図３】
2006279454.tif 000005