(57)【要約】  【課題】ユーザが撮影した画像に文字・背景などを合成した画像をプリントした際に、撮影画像と背景・文字領域の双方で満足する再現となるプリントを得るための画像処理方法および装置を提供すること。  【解決手段】任意の入力画像に対して、背景やイラスト，文字などを合成する画像処理システムにおける画像処理方法であって、入力された画像データと後で付加された画像データとに、それぞれ異なる色変換処理を施すステップと、それぞれの変換画像を合成して単一の出力画像を得るステップとを有することを特徴とする画像処理方法およびこれを具体化した装置。より詳細には、上記色変換処理は、少なくとも、彩度を重視した色域変換処理と、色相を重視した色域変換処理を含むことが好ましい。【選択図】図１
2005094306.tif 000002
【特許請求の範囲】
【請求項１】
任意の入力画像に対して、背景やイラスト，文字などを合成する画像処理システムにおける画像処理方法であって、
入力された画像データと後で付加された画像データとに、それぞれ異なる色変換処理を施すステップと、
それぞれの変換画像を合成して単一の出力画像を得るステップと
を有することを特徴とする画像処理方法。
【請求項２】
前記色変換処理が、色域変換処理である
ことを特徴とする請求項１に記載の画像処理方法。
【請求項３】
前記色域変換処理が、入力された画像データと後で付加された画像データとのそれぞれについて異なる複数の色域変換処理を施し、また、想定される画像出力装置において色域外となる比率をそれぞれ算出し、この比率に応じて前記色域変換処理後の画像を加算する処理である
ことを特徴とする請求項２に記載の画像処理方法。
【請求項４】
前記異なる複数の色域変換処理が、少なくとも、彩度を重視した色域変換処理と、色相を重視した色域変換処理を含む
ことを特徴とする請求項３に記載の画像処理方法。
【請求項５】
任意の入力画像とこれに付加される背景やイラスト，文字画像を、それぞれ別に格納可能な画像記憶領域と、
記憶された画像に対して任意の色変換処理を施す色変換処理手段と、
複数の画像を合成する画像合成手段と
を有することを特徴とする画像処理装置。
【請求項６】
前記色変換処理手段が、色域変換処理手段である
ことを特徴とする請求項５に記載の画像処理装置。
【請求項７】
前記色域変換処理手段が、少なくとも、彩度を重視した色域変換処理を行う手段と、色相を重視した色域変換処理を行う手段とを含む
ことを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記各手段に加えて、さらに
出力装置の色域情報を取得する手段と、
取得した色域情報と画像データとを比較して色域外画素比率を求める手段とを有するとともに、
前記画像合成手段として、上で求めた色域外画素比率に応じて画像を合成する手段を用いる
ことを特徴とする請求項６または７に記載の画像処理装置。
【請求項９】
請求項１〜４のいずれか１項に記載の画像処理方法をコンピュータ制御により実行するためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理方法および装置に関し、より詳細には、ユーザが撮影した画像に、文字，背景，などを合成した画像をプリントした際に、撮影画像と背景・文字領域の双方で満足する再現となるプリントを得るための、画像処理方法および装置に関する。
【背景技術】
【０００２】
近年、パーソナルコンピュータ（ＰＣ）の普及に加えて、デジタルカメラやスキャナなどの装置が一般化して、一般ユーザが容易にデジタル画像を扱えるような環境が広がりつつある。このような中で、ユーザが自分で撮影した画像に対し、好みの背景を加えたり、任意の文字を加えるなどして、楽しむという使われ方が現れてきている。
【０００３】
このようにしてユーザが加工した画像は、モニタに表示したり、ハードコピーとしてプリントされたりして利用される。ここで、一般的にこのような画像の加工は、モニタ上で行われるのであるが、モニタの色再現範囲はプリンタの色再現範囲とは一致しないことから、少なくともモニタ上に存在可能な色で、プリンタの色再現範囲外にある色ついては、何らかの色変換処理を施す必要がある。
【０００４】
このような色変換処理は、色域マッピング処理と呼ばれ、色を再現する際の目的や画像の色分布等によって最適なマッピング手法は異なることが知られている。
ところで、上述のようにユーザが撮影した画像に背景などを合成して１枚の画像を作成し、これに色域マッピング処理を施してプリントした場合に、満足な色再現を得られない場合があった。
【０００５】
この理由は、ユーザが撮影した画像には、本人が良く知っているものが写っていることから、色相の忠実な再現性が要求されるのに対して、背景や文字などの領域では、高彩度色が多用されていることから、色相よりもむしろ彩度が重視されるためと考えられる。
【０００６】
従って、例えば、ユーザが撮影した画像を良好にする色域マッピング手法を選択した場合には、背景や文字の領域の彩度再現に不満が生じ、一方、背景や文字の彩度を重視したマッピング手法を選択した場合にはユーザ撮影画像の色再現に不満が生じてしまうことがあった。
【発明の開示】
【発明が解決しようとする課題】
【０００７】
本発明は上記事情に鑑みてなされたもので、その目的とするところは、前述の従来技術に基づく問題点を解消し、ユーザが撮影した画像に文字・背景などを合成した画像をプリントした際に、撮影画像と背景・文字領域の双方で満足する再現となるプリントを得るための画像処理方法および装置を提供することにある。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明に係る画像処理方法は、任意の入力画像に対して、背景やイラスト，文字などを合成する画像処理システムにおける画像処理方法であって、入力された画像データと後で付加された画像データとに、それぞれ異なる色変換処理を施すステップと、それぞれの変換画像を合成して単一の出力画像を得るステップとを有することを特徴とする。
【０００９】
ここで、前記色変換処理は、色域変換処理であることが好ましい。また、前記色域変換処理は、入力された画像データと後で付加された画像データとのそれぞれについて異なる複数の色域変換処理を施し、また、想定される画像出力装置において色域外となる比率をそれぞれ算出し、この比率に応じて前記色域変換処理後の画像を加算する処理であることが好ましい。
【００１０】
さらに、前記異なる複数の色域変換処理は、少なくとも、彩度を重視した色域変換処理と、色相を重視した色域変換処理を含むことが好ましい。
【００１１】
一方、本発明に係る画像処理装置は、任意の入力画像とこれに付加される背景やイラスト，文字画像を、それぞれ別に格納可能な画像記憶領域と、記憶された画像に対して任意の色変換処理を施す色変換処理手段と、複数の画像を合成する画像合成手段とを有することを特徴とする。
【００１２】
ここで、前記色変換処理手段は、色域変換処理手段であることが好ましい。また、前記色域変換処理手段は、少なくとも、彩度を重視した色域変換処理を行う手段と、色相を重視した色域変換処理を行う手段とを含むことが好ましい。
【００１３】
前記各手段に加えて、さらに出力装置の色域情報を取得する手段と、取得した色域情報と画像データとを比較して色域外画素比率を求める手段とを有するとともに、前記画像合成手段として、上で求めた色域外画素比率に応じて画像を合成する手段を用いることが好ましい。
【００１４】
なお、本発明に係る画像処理方法は、これをコンピュータ制御により実行させることが可能であり、本発明の技術範囲は、これに用いるプログラムにも及ぶものであることはいうまでもない。
【発明の効果】
【００１５】
本発明によれば、ユーザが撮影した画像に文字・背景などを合成した画像をプリントした際に、撮影画像と背景・文字領域の双方で満足する再現となるプリントを得るための画像処理方法および装置を実現できるという顕著な効果を奏する。
【００１６】
本発明の特徴は、１つの画像処理装置について、複数の（より具体的には、色再現特性の異なる複数の）出力装置が選択可能な場合に、ユーザにより選択された出力装置に対応する適切な色再現特性が得られるという点で、特に有効である。
【発明を実施するための最良の形態】
【００１７】
以下、図面に示す好適実施形態に基づいて、本発明を詳細に説明する。
【００１８】
図１は、本発明の一実施形態に係る画像処理装置の概要を示すブロック図である。図において、１２はユーザに画像等の情報を表示するモニタ機能と共に、ユーザからの入力を受け付けるタッチパネル式の入力機能を備えたモニタ（以下、モニタ兼タッチパネルという）である。１４はこの画像処理装置の全体的な制御機能を司る演算処理装置であり、図示されていないが、ＲＯＭ，ＲＡＭ，ＣＰＵなどから構成されている。
【００１９】
１６は入力画像に合成される背景画像のテンプレートを格納している背景テンプレート画像格納部、１８は本画像処理装置に接続される各出力装置の出力色域を格納している色域情報格納部、２６は上記色域情報格納部１８内に格納されている情報に基づいて、ユーザにより指定された出力装置における色域外画素の存在比率を算出する色域外画素比率算出部である。
【００２０】
また、２０，２２，２４はいずれも画像メモリであり、画像メモリ２０は入力画像データ（主たる画像データである）を主に格納し、画像メモリ２４は背景テンプレート画像格納部１６から読み出されて提示された背景中から、ユーザが選択した背景画像のデータを記憶する。画像メモリ２２はユーザが主画像，背景画像にさらに加える文字やイラストの画像データを記憶する。
【００２１】
２８は各出力装置対応に、上述の主画像，背景画像並びに文字やイラスト画像に対して、それらの画像を最も好ましい色再現で出力するための画像変換を行うためのデータ（ここでは、３次元変換テーブルの形で用意されている）を格納する画像変換テーブル格納部、３０は画像変換テーブル格納部２８中のテーブルを用いて、演算処理装置１４の制御の下で所定の画像変換を行う画像変換部である。
【００２２】
なお、本実施例においては、上述の画像変換テーブル格納部２８中に格納される３次元変換テーブルの内容として、少なくとも、彩度を重視した色域変換処理を行うためのテーブルと、色相を重視した色域変換処理を行うためのテーブルとを含むように構成されている。この画像変換テーブル格納部２８中に格納される画像変換を行う手段は、これ以外にも、各種のものが用い得る。
【００２３】
また、３２は画像変換部３０において所定の画像変換処理を施された主画像，背景画像並びに文字やイラスト画像の各画像データを、前述の色域外画素比率算出部２６で算出された色域外画素比率に基づいて合成処理する画像合成部である。
なお、図１においては、演算処理装置による制御の流れを示す制御線は、煩雑化するのを防止するため、一部省略している。
【００２４】
〔実施例１〕
以下、上述のような各機能部により構成される本実施形態に係る画像処理装置の動作について、シールプリント（いわゆる、プリクラ）作成の場合を例に挙げて、図２，図３に示すフローチャートをも参照して説明する。なお、下記の各ステップは、原則的に全て演算処理装置１４の制御の下に実行される。
【００２５】
ステップ４１：
ユーザがデジタルカメラまたはスキャナ等により取得したデジタル画像データが入力されると、このデータを画像メモリ２０に記憶する。
【００２６】
ステップ４２：
次に、画像メモリ２０に記憶したデジタル画像データを、モニタ兼タッチパネル１２の画面上に表示する。この画像を、以下、主画像と呼ぶ。
【００２７】
ステップ４３：
ユーザは、表示された主画像を確認すると、モニタ兼タッチパネル１２の入力機能を用いて、上記主画像に付加する背景やそれにさらに追加する文字やイラスト等を選択する。まず、背景画像は、背景テンプレート画像格納部１６から取り出されて表示される、予め作成されているサンプル中からの選択による。選択された背景画像は、画像メモリ２４に送られて記憶される。
【００２８】
また、文字やイラスト等は、モニタ兼タッチパネル１２に備えられているペンを用いてユーザが手書き入力する。この情報は、画像データに変換されて、画像メモリ２４に送られて記憶される。ユーザは、主画像に付加された背景画像並びに文字やイラスト等の全体的なバランス等を見て、満足すべきものであれば、それを「決定」ボタン（図示されていない）等により入力し、本ステップを終了する。
【００２９】
ステップ４４：
次に、ユーザは、モニタ兼タッチパネル１２の画面上に表示された画像出力装置の中から使用する出力装置を選択する。デフォルトでは、本実施形態に係る画像処理装置に接続されているプリンタが選択されるが、もしユーザが、自己の携帯電話など、別の出力装置を選択する場合には、その旨を入力・指示すればよい。但し、この場合、当該携帯電話の色域情報が取得できること、および画像の転送が可能であることが必要なことはいうまでもない。
【００３０】
ステップ４５：
ユーザによる出力装置の選択が終了すると、この情報が演算処理装置１４に送られ、演算処理装置１４は、色域情報格納部１８に記憶されている情報の中から、選択された出力装置に対応する色域情報を取得する。
【００３１】
ステップ４６：
次に、演算処理装置１４は、画像メモリ２０，２２，２４に記憶された画像データのそれぞれが、ユーザが選択した出力装置において、適正に出力可能か否かをチェックするために、画像メモリ２０，２２，２４に記憶された画像データのそれぞれを色域外画素比率算出部２６に送る。色域外画素比率算出部２６では、出力装置の有する色域に対して、送られた画像の何％が色域外になるかを計算し、その結果を画像合成部３２に送る。
【００３２】
ステップ４７：
画像変換部３０では、画像メモリ２０，２２，２４に記憶された画像データのそれぞれを、画像出力装置に入力可能な信号に変換する。この際、それぞれの画像について、予め画像変換テーブル格納部２８中に設定しておいた複数の画像変換テーブルのなから、変換対象となる画像に適する画像変換テーブルを読み出してきて用いる。
【００３３】
ここでは、上述の、画像変換テーブルの選択の目安として、ＪＩＳ Ｚ８７３０に記載のΔＣ＊ａｂおよびΔＨ＊ａｂの平均値の関係が以下のようなものを以って、彩度を重視した色域変換処理テーブルと、色相を重視した色域変換処理テーブルとを使い分けるように構成している（図３参照）。
【００３４】
すなわち、
【数１】
2005094306.tif 000003
の場合には、彩度を重視した色域変換処理テーブルを選択してこれに基づく色域変換処理を行う（ステップ４７ａ，４７ｂ）。
ここで、αは定数であり、通常、１前後の値である。
【００３５】
また、
【数２】
2005094306.tif 000004
の場合には、色相を重視した色域変換処理テーブルを選択してこれに基づく色域変換処理を行う（ステップ４７ａ，４７ｃ）。
ここで、αは定数であり、通常、１前後の値である。
【００３６】
一般的には、前記主画像は概ね式（２）を満足するので、色相を重視した色域変換処理テーブルに基づく色域変換処理が行われ、背景画像や文字・イラストなどは式（１）を満足し、彩度を重視した色域変換処理テーブルに基づく色域変換処理が行われる。変換後の各画像データは、それぞれ画像合成部３２に送られる。
【００３７】
ここで、色相を重視した色域変換処理，彩度を重視した色域変換処理の一例について、図４を用いて説明する。
例えば、画像出力装置であるプリンタの色再現域が図４に示すようなものであったとした場合、図中にＰで示される位置にあった画素は、色相を重視した色域変換処理を行う場合はＱ点（すなわち、色相を変えずに彩度を下げる方向）に、また、彩度を重視した色域変換処理を行う場合はＲ点（すなわち、彩度を変えずに色相を変える方向）にそれぞれ変換される。
【００３８】
ステップ４８：
画像合成部３２では、上述のように、原則的に複数の色域変換処理方法により色域変換処理された各画像データを、先に説明した色域外画素比率算出部２６から送られた色域外画素比率に応じて加算し、最終的に１枚の出力画像を得る。
【００３９】
ステップ４９：
画像合成部３２で作成された出力画像は、画像出力装置（例えば、カラープリンタ）に出力され、ハードコピーとして出力される。なお、前述のように、ユーザが自己の携帯電話を出力装置として指定し、その色域情報が取得された場合には、上記出力画像が、ユーザの携帯電話の表示画面に出力される。
【００４０】
以上が、本実施形態に係る画像出力装置の動作説明である。
上に示した実施例によれば、ＪＩＳ Ｚ８７３０に規定された測定方法に基づいて求めたΔＣ＊ａｂおよびΔＨ＊ａｂの値の大小関係に基づいて、色域変換処理の適用方法を変更するようにしたことにより、シールプリント作成時等に有効な、主画像（撮影画像）と背景・文字画像の双方が適正に再現可能な画像処理方法および装置を実現できる。
【００４１】
ここで、前述の通り、本発明に係る画像処理方法ないし装置は、１つの画像処理装置について、複数の（より具体的には、色再現特性の異なる複数の）出力装置が選択可能な場合に、ユーザにより選択された出力装置に対応する適切な色再現特性が得られるという点で、特に有効なものである。
【００４２】
なお、上記実施の形態は、本発明の一例を示したものであり、本発明は上記実施の形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲内において、種々の変更や改良を行ってもよいことはいうまでもない。
【００４３】
例えば、前述の色域変換処理の方法等は、実施例に示した方法以外の方法を用いてもよく、また、これらの処理のいずれを適用するかの判断基準（ステップ４７ａ参照）としても、他の値を用いることが可能である。
【００４４】
また、前述のように、本発明に係る画像処理方法は、これをコンピュータ制御により実行させることが可能であり、本発明の技術範囲は、これに用いるプログラムにも及ぶことはいうまでもない。
【図面の簡単な説明】
【００４５】
【図１】本発明の一実施形態に係る画像処理装置の概要を示すブロック図である。
【図２】一実施形態に係る画像処理装置の動作を示すフローチャート（その１）である。
【図３】一実施形態に係る画像処理装置の動作を示すフローチャート（その２）である。
【図４】色域変換処理の概念を説明する図である。
【符号の説明】
【００４６】
１２  モニタ兼タッチパネル
１４  演算処理装置
１６  背景テンプレート画像格納部
１８  色域情報格納部
２０，２２，２４  画像メモリ
２６  色域外画素比率算出部
２８  画像変換テーブル格納部
３０  画像変換部
３２  画像合成部
４１〜４９  処理ステップ
【図１】
2005094306.tif 000005
【図２】
2005094306.tif 000006
【図３】
2005094306.tif 000007
【図４】
2005094306.tif 000008