(57)【要約】【課題】複数のデバイスによる出力画像を重畳して得られる重畳画像における画質低下を抑制する。【解決手段】画像形成装置により形成された印刷画像上に画像投影装置により投影画像を投射して重畳画像として再現するシステムにおいて、画像形成装置及び画像投影装置それぞれに提供する画像信号を入力画像信号に基づいて生成する画像処理装置は、入力画像信号を入力する入力手段と、所与の変換ルールと入力画像信号とに基づいて、画像形成装置に提供する第１の画像信号と画像投影装置に提供する第２の画像信号とを生成する信号生成手段と、信号生成手段により生成された第１の画像信号を画像形成装置に出力し第２の画像信号を画像投影装置に出力する出力手段と、を有する。所与の変換ルールは、画像形成装置により形成される印刷画像の粒状特性に少なくとも基づいて決定され、重畳画像の再現可能範囲として取り得る各信号値に対応する第１の画像信号の信号値と第２の画像信号の信号値との組み合わせを規定する。【選択図】図１
2019075659.tif 000002
【特許請求の範囲】
【請求項１】
画像形成装置により形成された印刷画像上に画像投影装置により投影画像を投射して重畳画像として再現するシステムにおいて、前記画像形成装置及び前記画像投影装置それぞれに提供する画像信号を入力画像信号に基づいて生成する画像処理装置であって、
入力画像信号を入力する入力手段と、
所与の変換ルールと前記入力画像信号とに基づいて、前記画像形成装置に提供する第１の画像信号と前記画像投影装置に提供する第２の画像信号とを生成する信号生成手段と、
前記信号生成手段により生成された前記第１の画像信号を前記画像形成装置に出力し前記第２の画像信号を前記画像投影装置に出力する出力手段と、
を有し、
前記所与の変換ルールは、前記画像形成装置により形成される印刷画像の粒状特性に少なくとも基づいて決定され、前記重畳画像の再現可能範囲として取り得る各信号値に対応する前記第１の画像信号の信号値と前記第２の画像信号の信号値との組み合わせを規定する
ことを特徴とする画像処理装置。
【請求項２】
前記所与の変換ルールとしてのルックアップテーブル（ＬＵＴ）を生成するＬＵＴ生成手段を更に有し、
前記ＬＵＴ生成手段は、
前記重畳画像の再現可能範囲に基づいて設定されたＬＵＴの各格子点について、
前記画像形成装置に提供した場合に注目格子点に対応する色特性を再現可能である１以上の信号値のうち粒状性が相対的に良好な１つの信号値を、該注目格子点に対応する前記第１の画像信号の信号値として決定し、
前記決定された前記第１の画像信号の信号値を前記画像形成装置に提供した状況において、前記画像投影装置に提供した場合に前記注目格子点に対応する色特性を前記重畳画像において再現可能である信号値を、該注目格子点に対応する前記第２の画像信号の信号値として決定する
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記所与の変換ルールとしてのルックアップテーブル（ＬＵＴ）を生成するＬＵＴ生成手段を更に有し、
前記ＬＵＴ生成手段は、
前記重畳画像の再現可能範囲に基づいて設定されたＬＵＴの各格子点について、
注目格子点に対応する色特性を再現可能である前記画像形成装置に提供する信号値と前記画像投影装置に提供する信号値との１以上の組み合わせを決定し、
前記１以上の組み合わせのうち、前記重畳画像における粒状性が相対的に良好な１つの組み合わせを、該注目格子点に対応する前記第１の画像信号の信号値及び前記第２の画像信号の信号値として決定する
ことを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記所与の変換ルールは、前記画像形成装置が画像形成に用いる記録剤の耐候特性に更に基づいて決定される
ことを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
【請求項５】
画像形成装置により形成された印刷画像上に画像投影装置により投影画像を投射して重畳画像として再現するシステムにおいて、前記画像形成装置及び前記画像投影装置それぞれに提供する画像信号を入力画像信号に基づいて生成する画像処理装置であって、
入力画像信号を入力する入力手段と、
所与の変換ルールと前記入力画像信号とに基づいて、前記画像形成装置に提供する第１の画像信号と前記画像投影装置に提供する第２の画像信号とを生成する信号生成手段と、
前記信号生成手段により生成された前記第１の画像信号を前記画像形成装置に出力し前記第２の画像信号を前記画像投影装置に出力する出力手段と、
を有し、
前記所与の変換ルールは、前記画像形成装置が画像形成に用いる記録剤の耐候特性に少なくとも基づいて決定され、前記重畳画像の再現可能範囲として取り得る各信号値に対応する前記第１の画像信号の信号値と前記第２の画像信号の信号値との組み合わせを規定する
ことを特徴とする画像処理装置。
【請求項６】
前記出力手段は、
前記信号生成手段により生成された前記第２の画像信号に対してローパスフィルタ処理を適用した第２の修正画像信号を前記画像投影装置に出力し、
前記信号生成手段により生成された前記第１の画像信号に対して、前記ローパスフィルタ処理によって低減された高周波画像成分を補償する信号を付与した第１の修正画像信号を前記画像形成装置に出力する
ことを特徴とする請求項１乃至５の何れか１項に記載の画像処理装置。
【請求項７】
画像形成装置により形成された印刷画像上に画像投影装置により投影画像を投射して重畳画像として再現するシステムにおいて、前記画像形成装置及び前記画像投影装置それぞれに提供する画像信号を入力画像信号に基づいて生成する画像処理装置の制御方法であって、
入力画像信号を入力する入力工程と、
所与の変換ルールと前記入力画像信号とに基づいて、前記画像形成装置に提供する第１の画像信号と前記画像投影装置に提供する第２の画像信号とを生成する信号生成工程と、
前記信号生成工程により生成された前記第１の画像信号を前記画像形成装置に出力し前記第２の画像信号を前記画像投影装置に出力する出力工程と、
を含み、
前記所与の変換ルールは、前記画像形成装置により形成される印刷画像の粒状特性に少なくとも基づいて決定され、前記重畳画像の再現可能範囲として取り得る各信号値に対応する前記第１の画像信号の信号値と前記第２の画像信号の信号値との組み合わせを規定する
ことを特徴とする画像処理装置の制御方法。
【請求項８】
画像形成装置により形成された印刷画像上に画像投影装置により投影画像を投射して重畳画像として再現するシステムにおいて、前記画像形成装置及び前記画像投影装置それぞれに提供する画像信号を入力画像信号に基づいて生成する画像処理装置の制御方法であって、
入力画像信号を入力する入力工程と、
所与の変換ルールと前記入力画像信号とに基づいて、前記画像形成装置に提供する第１の画像信号と前記画像投影装置に提供する第２の画像信号とを生成する信号生成工程と、
前記信号生成工程により生成された前記第１の画像信号を前記画像形成装置に出力し前記第２の画像信号を前記画像投影装置に出力する出力工程と、
を含み、
前記所与の変換ルールは、前記画像形成装置が画像形成に用いる記録剤の耐候特性に少なくとも基づいて決定され、前記重畳画像の再現可能範囲として取り得る各信号値に対応する前記第１の画像信号の信号値と前記第２の画像信号の信号値との組み合わせを規定する
ことを特徴とする画像処理装置の制御方法。
【請求項９】
コンピュータを、請求項１乃至６の何れか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数のデバイスによる出力画像を重畳する技術に関するものである。
【背景技術】
【０００２】
近年、より広い輝度範囲の情報が記録されたハイダイナミックレンジ画像（ＨＤＲ画像）として保存する機能を備えたデジタルカメラ等が増えてきている。このようなＨＤＲ画像を鑑賞する際には、表示出力デバイスでは、被写体をより忠実に再現することが期待されている。特に、画像を大画面で表示できるプロジェクタや、高精細な大判出力が可能な大判プリンタ等において、被写体のより忠実な再現のための利用が期待されている。
【０００３】
しかしながら、一般に、プロジェクタや、大判プリンタ等が有するダイナミックレンジや色域は、ＨＤＲ画像を再現するには十分ではない。そのため、ＨＤＲ画像をこれらのデバイスで表示出力する際には、トーンマッピングと呼ばれる階調圧縮処理や、色域圧縮処理が施される場合が多い。
【０００４】
一方、特許文献１には、プリンタによる形成画像にプロジェクタによる投影画像を重畳することにより、実物（被写体）の色や階調をより忠実に再現するための技術が開示されている。具体的には、形成画像の分光反射率及び投影画像の分光分布に基づいて、入力画像を、プリンタ用の信号とプロジェクタ用の信号とに変換する技術が提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１０−１０３８６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
ところで、特許文献１に記載された手法では、色（分光特性）を考慮して各デバイスへの出力信号を決定しているが、一般に、略同一な色となるプロジェクタ信号とプリンタ信号の組み合わせは多数存在する。そのため、特許文献１に記載された手法では、色（分光特性）の再現は実現可能である一方で、画質における色以外の他の評価項目については不適切な組み合わせを選択してしまう場合があった。その結果、重畳画像において、例えばざらつきなどの画質低下が発生する場合がある。
【０００７】
本発明はこのような問題を鑑みてなされたものであり、複数のデバイスによる出力画像を重畳して得られる重畳画像における画質低下を抑制する技術を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上述の問題点を解決するため、本発明に係る画像処理装置は以下の構成を備える。すなわち、画像形成装置により形成された印刷画像上に画像投影装置により投影画像を投射して重畳画像として再現するシステムにおいて、前記画像形成装置及び前記画像投影装置それぞれに提供する画像信号を入力画像信号に基づいて生成する画像処理装置は、
入力画像信号を入力する入力手段と、
所与の変換ルールと前記入力画像信号とに基づいて、前記画像形成装置に提供する第１の画像信号と前記画像投影装置に提供する第２の画像信号とを生成する信号生成手段と、
前記信号生成手段により生成された前記第１の画像信号を前記画像形成装置に出力し前記第２の画像信号を前記画像投影装置に出力する出力手段と、
を有し、
前記所与の変換ルールは、前記画像形成装置により形成される印刷画像の粒状特性に少なくとも基づいて決定され、前記重畳画像の再現可能範囲として取り得る各信号値に対応する前記第１の画像信号の信号値と前記第２の画像信号の信号値との組み合わせを規定する。
【０００９】
上述の問題点を解決するため、本発明に係る他の画像処理装置は以下の構成を備える。すなわち、画像形成装置により形成された印刷画像上に画像投影装置により投影画像を投射して重畳画像として再現するシステムにおいて、前記画像形成装置及び前記画像投影装置それぞれに提供する画像信号を入力画像信号に基づいて生成する画像処理装置は、
入力画像信号を入力する入力手段と、
所与の変換ルールと前記入力画像信号とに基づいて、前記画像形成装置に提供する第１の画像信号と前記画像投影装置に提供する第２の画像信号とを生成する信号生成手段と、
前記信号生成手段により生成された前記第１の画像信号を前記画像形成装置に出力し前記第２の画像信号を前記画像投影装置に出力する出力手段と、
を有し、
前記所与の変換ルールは、前記画像形成装置が画像形成に用いる記録剤の耐候特性に少なくとも基づいて決定され、前記重畳画像の再現可能範囲として取り得る各信号値に対応する前記第１の画像信号の信号値と前記第２の画像信号の信号値との組み合わせを規定する。
【発明の効果】
【００１０】
本発明によれば、複数のデバイスによる出力画像を重畳して得られる重畳画像における画質低下を抑制する技術を提供することができる。
【図面の簡単な説明】
【００１１】
【図１】第１実施形態における画像処理システムのブロック図である。
【図２】信号分解ＬＵＴの一例を示す図である。
【図３】信号分解処理のフローチャートである。
【図４】重畳画像の三刺激特性をＬＵＴ化した例を示す図である。
【図５】印刷画像の粒状特性をＬＵＴ化した例を示す図である。
【図６】第１実施形態における信号分解ＬＵＴ作成処理のフローチャートである。
【図７】信号分解処理の結果の一例を示す図である。
【図８】粒状特性の一例を示す図である。
【図９】重畳画像の輝度特性の一例を示す図である。
【図１０】印刷画像の三刺激特性をＬＵＴ化した例を示す図である。
【図１１】三刺激特性（プロジェクタ）をＬＵＴ化した例を示す図である。
【図１２】第２実施形態における信号分解ＬＵＴ作成処理のフローチャートである。
【図１３】粒状特性をＬＵＴ化した例を示す図である。
【図１４】耐候特性をＬＵＴ化した例を示す図である。
【図１５】第４実施形態における画像処理システムのブロック図である。
【図１６】ローパスフィルタ処理のフローチャートである。
【図１７】ローパスフィルタ処理の各ステップにおける信号値の例を示す図である。
【図１８】位置ずれが生じた場合の重畳画像の信号値の例を示す図である。
【図１９】信号分解処理結果の一例を示す図である。
【発明を実施するための形態】
【００１２】
以下に、図面を参照して、この発明の実施の形態の一例を詳しく説明する。なお、以下の実施の形態はあくまで例示であり、本発明の範囲を限定する趣旨のものではない。
【００１３】
（第１実施形態）
本発明に係る画像処理装置の第１実施形態として、重畳画像の生成に利用されるプリンタ及びプロジェクタに提供する信号を、粒状性を考慮して生成する画像処理装置を例に挙げて以下に説明する。
【００１４】
＜システム構成＞
図１は、第１実施形態における画像処理システムのブロック図である。画像処理システムは、画像処理装置２、画像形成装置（プリンタ）３、画像投影装置（プロジェクタ）４を含む。画像処理装置２は、入力端子２０１を介して取得した入力画像１に基づき、画像形成装置３及び画像投影装置４へ提供する画像データを生成する。画像処理装置２は出力端子２０７を介して画像形成装置３と接続され、画像処理装置２は出力端子２０８を介して画像投影装置４と接続される。
【００１５】
画像形成装置３によって用紙（シート）などの記録媒体上に形成された印刷画像上に、画像投影装置４によって投射された投影画像を重畳することで、重畳画像５が得られる。このように構成することで、入力画像１を高ダイナミックレンジかつ広色域に再現した重畳画像５を提供することができる。なお、以下の説明では、画像形成装置３はインクジェットプリンタであり、画像投影装置４は液晶プロジェクタであることを想定する。また、印刷画像データはプリンタＲＧＢであり、投影画像データはプロジェクタＲＧＢであるとする。
【００１６】
画像処理装置２は、例えば一般的なパーソナルコンピュータ（ＰＣ）が後述の処理を実行するプログラムを実行しＰＣを制御することにより実現され得る。もちろん、１以上の機能部を専用のハードウェアにより実現してもよい。なお、図１においては、画像処理装置２、画像形成装置３、画像投影装置４は別体の構成として示しているが、画像処理装置２が画像形成装置３と画像投影装置４の少なくとも１つを含む構成としても良い。
【００１７】
画像処理装置２は、入力端子２０１を介して入力画像信号を含む入力画像データを受け取る。入力された画像データは信号分解処理部２０２へ送られる。ここでは、重畳画像の各画素の再現目標となる色特性である三刺激値Ｘｔ、Ｙｔ、Ｚｔが入力画像データとして入力される。なお、入力画像データの色特性は三刺激値に限らず、たとえばＲＧＢ各８ビットの３チャンネルカラー画像として入力してもよい。その場合、画像処理装置２に色変換処理部（不図示）を備えておき、入力された画像の各画素に対し、ＲＧＢ→ＣＩＥＸＹＺの変換処理をおこなうことで、重畳画像の再現目標となる三刺激値Ｘｔ、Ｙｔ、Ｚｔを算出するとよい。
【００１８】
信号分解処理部２０２は、上述の三刺激値Ｘｔ、Ｙｔ、Ｚｔを重畳画像の再現目標とし、画像形成装置に入力する画像信号（印刷画像データ）と画像投影装置に入力する画像信号（投影画像データ）とを算出（信号生成）する。このとき、信号分解処理部２０２は、所与の変換ルールを規定する信号分解ルックアップテーブル（ＬＵＴ）２０３を参照して分解処理を行う。
【００１９】
図２は、信号分解ＬＵＴ２０３の一例を示す図である。信号分解ＬＵＴ２０３には、三刺激値ＸＹＺの各格子点に対応したプリンタＲＧＢ値とプロジェクタのＲＧＢ値の組み合わせを規定する情報が格納されている。詳しくは後述するが、この組み合わせは、格子点の三刺激値と重畳画像の三刺激値とが等しくなり、かつ、重畳画像の粒状性が良好となるように予め設定されている。
【００２０】
信号分解ＬＵＴ生成部２０４は、三刺激特性２０５および粒状特性２０６を参照して信号分解ＬＵＴを生成する。なお、信号分解ＬＵＴ生成部２０４によるＬＵＴ作成処理の詳細については後述する。
【００２１】
＜装置の動作＞
以下では、信号分解処理部２０２における信号分解処理、及び、信号分解ＬＵＴ生成部２０４による信号分解ＬＵＴ２０３の作成処理について説明する。
【００２２】
＜信号分解処理部２０２における信号分解処理＞
図３は、信号分解処理のフローチャートである。信号分解処理は、例えば、ユーザによる操作により、画像形成装置３及び画像投影装置４による重畳画像の表示指示がなされた場合に実行される。
【００２３】
Ｓ３０１では、信号分解処理部２０２は、信号分解ＬＵＴ２０３を取得する。ここでは、信号分解ＬＵＴ２０３は、図２に示すものであるとする。Ｓ３０２では、信号処理部２０２は、入力端子２０１より再現目標となる入力画像データを取得する。ここでは、入力画像データを構成する各画素の三刺激値Ｘｔ，Ｙｔ，Ｚｔを取得する。なお、取得に際しては、入力画像データを構成する全画素の三刺激値Ｘｔ，Ｙｔ，Ｚｔを取得して不図示のメモリ内に展開してもよいし、１画素ずつ取得するよう構成してもよい。
【００２４】
Ｓ３０３では、信号分解処理部２０２は、Ｓ３０１で取得した信号分解ＬＵＴ２０３を用い、各画素について、三刺激値Ｘｔ，Ｙｔ，ＺｔからプロジェクタＲＧＢ値とプリンタＲＧＢ値との組み合わせを算出する。なお、信号分解ＬＵＴ２０３と共に補間処理を用いてもよい。例えば、公知の四面体補間処理を用いることが可能である。
【００２５】
以上のＳ３０１〜Ｓ３０３の処理により、再現目標の三刺激値Ｘｔ，Ｙｔ，Ｚｔを重畳画像として再現するプリンタＲＧＢ値とプロジェクタＲＧＢ値とを算出することができる。
【００２６】
＜信号分解ＬＵＴ生成部２０４における信号分解ＬＵＴ２０３の作成処理＞
ここでは、信号分解ＬＵＴ２０３の各格子点における三刺激値Ｘｉ，Ｙｉ，Ｚｉに対するプリンタＲＧＢ値とプロジェクタのＲＧＢ値との組み合わせを算出し、信号分解ＬＵＴ２０３を作成する処理について説明する。具体的には、重畳画像の三刺激値がＸｉ，Ｙｉ，Ｚｉと等しく、かつ、重畳画像の粒状性が良好となる、プリンタＲＧＢ値とプロジェクタのＲＧＢ値との組み合わせを三刺激特性２０５と粒状特性２０６を参照して算出する。
【００２７】
三刺激特性２０５とは、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせに対する重畳画像の三刺激値の測定値である。なお、三刺激特性２０５は、別途プリンタＲＧＢ値とプロジェクタＲＧＢ値とを組み合わせて得られる重畳画像を、不図示のカメラや測色器により測定することにより得られる。
【００２８】
図４は、重畳画像の三刺激特性をＬＵＴ化した例を示す図である。ここでは、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせに対して重畳画像の三刺激値の測定値が格納されたＬＵＴを、三刺激特性２０５として保持する。
【００２９】
粒状特性２０６とは、プリンタＲＧＢ値に対する印刷画像の粒状性の測定値である。たとえばプリンタＲＧＢ値に対する公知のＲＭＳ粒状度の測定値を用いることができる。ＲＭＳ粒状度は、印刷画像から別途フラットヘッドスキャナ等により取り込んだ画像から算出することにより得られる。
【００３０】
図５は、印刷画像の粒状特性をＬＵＴ化した例を示す図である。ここでは、プリンタＲＧＢ値に対して印刷画像の粒状性の測定値が格納されたＬＵＴを、粒状特性２０５として保持する。
【００３１】
図６は、第１実施形態における信号分解ＬＵＴ２０３の作成処理のフローチャートである。例えば、ユーザによる操作により、信号分解ＬＵＴの作成指示がなされた場合に実行される。
【００３２】
Ｓ６０１では、信号分解ＬＵＴ生成部２０４は、重畳画像５の再現可能範囲である三刺激値ＸＹＺの範囲Ｇを三刺激特性２０５より取得する。Ｓ６０２では、信号分解ＬＵＴ生成部２０４は、三刺激値ＸＹＺの範囲Ｇを均等に分割するように信号分解ＬＵＴの格子点を設定する。
【００３３】
Ｓ６０３では、信号分解ＬＵＴ生成部２０４は、処理対象となる注目格子点である格子点ｉにおける三刺激値Ｘｉ，Ｙｉ，Ｚｉを取得する。Ｓ６０４では、信号分解ＬＵＴ生成部２０４は、三刺激特性２０５と粒状特性２０６とを参照し、格子点ｉの三刺激値Ｘｉ，Ｙｉ，Ｚｉを再現可能であり、かつ、もっとも粒状性が良好であるプリンタＲＧＢ値を選択し、信号分解ＬＵＴに格納する。
【００３４】
たとえば、粒状性が良好な順にプリンタＲＧＢ値を探索していき、格子点ｉの三刺激値Ｘｉ，Ｙｉ，Ｚｉを再現可能なプリンタＲＧＢ値が見つかった時点で、該ＲＧＢ値を格子点ｉの三刺激値Ｘｉ，Ｙｉ，Ｚｉに対するプリンタＲＧＢ値とすればよい。このとき、三刺激値Ｘｉ，Ｙｉ，Ｚｉを再現可能であるかは、各プリンタＲＧＢ値と任意のプロジェクタＲＧＢ値との組み合わせで再現できる三刺激値の範囲内にＸｉ，Ｙｉ，Ｚｉが含まれるか否かによって判断可能である。
【００３５】
Ｓ６０５では、信号分解ＬＵＴ生成部２０４は、格子点ｉのプロジェクタＲＧＢ値を算出する。具体的には、三刺激特性２０５を参照し、Ｓ６０４にて決定されたプリンタＲＧＢ値による印刷出力と重畳した状況において格子点ｉの三刺激値Ｘｉ、Ｙｉ、Ｚｉを再現可能なプロジェクタＲＧＢ値を算出する。そして、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせを、格子点ｉの三刺激値Ｘｉ、Ｙｉ、Ｚｉに対応付け、信号分解ＬＵＴ２０３に格納する。
【００３６】
Ｓ６０６では、信号分解ＬＵＴ生成部２０４は、全格子点についてＳ６０３〜６０５までの処理をおこなったか否かを判断する。判断の結果、全格子点に対して処理済であれば、ＬＵＴの作成処理を終了する。一方、未処理の格子点が存在する場合は、当該未処理の格子点から１点を選択しＳ６０３へ戻る。そして、当該選択した格子点に対応する三刺激値ＸＹＺを新しい三刺激値Ｘｉ，Ｙｉ，ＺｉとしてＳ６０３〜６０５までの処理を繰り返す。
【００３７】
以上のＳ６０１〜Ｓ６０６の処理により、図３に示すような信号分解ＬＵＴ２０３を作成することができる。すなわち、各格子点の三刺激値Ｘｉ，Ｙｉ，Ｚｉに対する、プロジェクタＲＧＢ値とプリンタＲＧＢ値との組み合わせを指定する信号分解ＬＵＴ２０３を作成することができる。
【００３８】
＜信号分解処理の結果の一例＞
図７は、信号分解処理の結果の一例を示す図である。図７は、図３に示す信号分解処理後のプリンタＲＧＢ値とプロジェクタＲＧＢ値をグラフとして可視化したものである。具体的には、三刺激値に対するプリンタＲＧＢの信号特性とプロジェクタのＲＧＢの信号特性を示している。ただし、図が煩雑となることを避けるため、三刺激値ＸＹＺのうちＹに対するプリンタＲＧＢのＲＧＢ平均値（実線７ａ）とプロジェクタＲＧＢのＲＧＢ平均値（点線７ｂ）のみを示している。
【００３９】
実線７ａは、横軸を再現目標の三刺激値Ｙｔ、縦軸を分解後のプリンタＲＧＢ値とした場合の、Ｙｔに対するプリンタＲＧＢの平均値を示している。なお、Ｙ＿ｍｉｎは重畳画像５がとりうる最小のＹ値であり、Ｙ＿ｍａｘは最大のＹ値であるとする。同様に、点線７ｂは、横軸を再現目標の三刺激値Ｙｔ、縦軸を分解後のプロジェクタＲＧＢ値とした場合の、Ｙｔに対するプロジェクタＲＧＢの平均値を示している。
【００４０】
図７から理解されるように、再現目標の三刺激値に対して、プリンタＲＧＢは離散的な値をとる。これは、信号分解ＬＵＴ２０３の作成におけるプリンタＲＧＢの選択（Ｓ６０４）において、粒状性が良好な順に探索してプリンタＲＧＢを選択しているためである。すなわち、印刷画像の粒状性が最小となるプリンタＲＧＢを選択しているためである。
【００４１】
＜信号分解ＬＵＴの作成処理において、プリンタＲＧＢを決定した後にプロジェクタＲＧＢを決定する理由＞
信号分解ＬＵＴの作成処理（図６）においては、各格子点に対応する三刺激値Ｘｉ，Ｙｉ，Ｚｉに対して、プリンタＲＧＢ値を選択した後にプロジェクタＲＧＢ値を算出するよう構成した理由について説明する。
【００４２】
ＩＪプリンタに代表される画像形成装置では面積変調によって階調を再現している。そのため、入力信号によって粒状性が異なることが知られている。一方で、液晶プロジェクタに代表される画像投影装置では画素毎に輝度を変調できる。そのため、ドットに粗密が生じず、入力信号による粒状性の変動は少ない。図８は、粒状特性の一例を示す図である。図８（ａ）は、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせに対する重畳画像の粒状性評価値の一例を示している。
【００４３】
図８（ｂ）は、図８（ａ）に示すグラフをプリンタＲＧＢ軸と平行な面で切り取った場合の断面を示している。すなわち、図８（ｂ）は、プロジェクタＲＧＢ値を一定として、プリンタＲＧＢ値を変化させた場合の、重畳画像における粒状性の変化を示している。一方、図８（ｃ）は、図８（ａ）に示すグラフをプロジェクタＲＧＢ軸と平行な面で切り取った場合の断面を示している。すなわち、図８（ｃ）は、プリンタＲＧＢ値を一定として、プロジェクタＲＧＢ値を変化させた場合の、重畳画像における粒状性の変化を示している。
【００４４】
なお、図８（ｂ）及び図８（ｃ）において、横軸は入力信号を無彩色の黒（＝０）から白（＝２５５）としたときの、プリンタ及びプロジェクタのＲＧＢ値（Ｒ＝Ｇ＝Ｂ）である。また、縦軸は粒状性の評価値を示しており、値が大きいほど粒状性が悪く（＝ざらついている）、値が小さいほど粒状性が良い（＝滑らかである）ことを示している。
【００４５】
図８（ｂ）の実線８ｂから、プリンタＲＧＢに対して粒状性が大きく変動することが理解される。一方、図８（ｃ）の実線８ｃから、プロジェクタＲＧＢに対して粒状性は大きく変動しないことが理解される。すなわち、プリンタＲＧＢに対する粒状性の変動に比べ、プロジェクタＲＧＢに対する粒状性の変動は少ない。このことは、重畳画像の粒状性の変動は、プリンタＲＧＢに依存する粒状性の変動に起因するものが支配的であることを示している。
【００４６】
そのため、信号分解ＬＵＴの作成処理（図６）においては、重畳画像の粒状性を主に決定づけるプリンタＲＧＢ値を先に決定し、その後、プロジェクタＲＧＢ値を決定しているのである。
【００４７】
以上説明したとおり第１実施形態によれば、重畳画像の生成に利用されるプリンタ及びプロジェクタに提供する信号を、プリンタにより形成される印刷画像の粒状性を考慮して生成する。具体的には、信号分解ＬＵＴを印刷画像の粒状性を考慮して生成し、当該信号分解ＬＵＴに基づいてプリンタ及びプロジェクタに提供する信号を入力画像データから生成する。このような構成により、入力画像を高ダイナミックレンジかつ広色域に再現し、かつ、良好な粒状性を有する重畳画像を生成することが可能となる。
【００４８】
なお、上記の説明においては、重畳画像の色空間として、公知の三刺激値ＸＹＺを用いて説明した。しかしながら色空間は必ずしも三刺激値ＸＹＺでなくともよく、たとえば目標値として公知のＹＣＣを用いてもよい。あるいは、ＣＩＥ  Ｌａｂを用いることも可能である。
【００４９】
また、インクジェットプリンタにより形成された印刷画像に、液晶プロジェクタによる投影画像を重畳する形態について説明した。しかしながら、液晶や有機ＥＬなどのディスプレイによって表示される表示画像に、インクジェットプリンタやレーザープリンタによって透過型フィルムに形成された印刷画像を重畳する形態にも適用可能である。
【００５０】
＜重畳画像の三刺激特性をより簡易に得る形態＞
上述の第１実施形態においては、各プリンタＲＧＢ画像とプロジェクタＲＧＢ画像を重畳した重畳画像を不図示のカメラや測色器によりあらかじめ測定することで、重畳画像の三刺激特性２０５を取得することを想定した。
【００５１】
一方、重畳画像の三刺激値Ｘ＿ｐｉｌｅ、Ｙ＿ｐｉｌｅ、Ｚ＿ｐｉｌｅは、プリンタＲＧＢに対する印刷画像の三刺激値及びプロジェクタＲＧＢに対する投影画像の三刺激値から推測することも可能である。具体的には、以下の数式（１）〜（３）のように、印刷画像の三刺激値と投影画像の三刺激値との積により、重畳画像の三刺激値を推測することができる。
【００５２】
Ｘ＿ｐｉｌｅ＝Ｘ＿ｐｒｉｎｔ×Ｘ＿ｐｒｏｊｅｃｔ （１）
Ｙ＿ｐｉｌｅ＝Ｙ＿ｐｒｉｎｔ×Ｙ＿ｐｒｏｊｅｃｔ （２）
Ｚ＿ｐｉｌｅ＝Ｚ＿ｐｒｉｎｔ×Ｚ＿ｐｒｏｊｅｃｔ （３）
ここで、Ｘ＿ｐｒｉｎｔ、Ｙ＿ｐｒｉｎｔ、Ｚ＿ｐｒｉｎｔは、各プリンタＲＧＢにおける印刷画像の三刺激値である。また、Ｘ＿ｐｒｏｊｅｃｔ、Ｙ＿ｐｒｏｊｅｃｔ、Ｚ＿ｐｒｏｊｅｃｔは、各プロジェクタＲＧＢにおける投影画像の三刺激値である。詳しくは後述する。
【００５３】
上述の数式（１）〜（３）を用いる場合には、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせではなく、プリンタＲＧＢに対する三刺激値の特性及びプロジェクタＲＧＢに対する三刺激値の特性を測定すればよい。そのため、重畳画像を直接測定する手間を省くことができる。
【００５４】
なお、プリンタＲＧＢに対する三刺激値は、画像形成装置３によって各ＲＧＢ値における印刷画像をそれぞれ、不図示の分光濃度計を用いて測定することによって得られる。このとき、分光濃度計ではなく、分光特性が既知であるカメラやフラットヘッドスキャナを用いて測定をおこなうことも可能である。
【００５５】
図９は、重畳画像の輝度特性の一例を示す図である。図９（ａ）は、プリンタＲＧＢに対する印刷画像の三刺激特性を示している。なお、図が煩雑となることを避けるため、３次元入力（プリンタＲＧＢ）に対する３次元出力（三刺激値ＸＹＺ）の特性のうち、プリンタのＲＧＢ値がＲ＝Ｇ＝Ｂに対する三刺激値Ｙの値のみを実線９ａとして示している。
【００５６】
また、ここではプリンタＲＧＢに対する三刺激値Ｙに対して、最大値を１．０とする正規化処理をおこなっている。そのため、印刷画像の三刺激特性は、図９（ａ）に示すように０．０〜１．０に正規化された特性として保持される。つまり、ここでは、印刷画像の三刺激特性を、最大となる三刺激値Ｙ＿ｍａｘに対する各プリンタＲＧＢにおける三刺激値Ｙの比の特性として保持している。
【００５７】
同様に、残りの三刺激値Ｘ，Ｚについても、Ｘ＿ｍａｘ＝０．９５１、Ｚ＿ｍａｘ＝１．０８９が最大値となるように正規化処理をおこなっている。すなわち、印刷画像の三刺激特性は、三刺激値Ｘ＿ｍａｘ、Ｚ＿ｍａｘに対する各プリンタＲＧＢにおける三刺激値Ｘ、Ｚの比をとして保持される。
【００５８】
なお、一般的なインクジェットプリンタでは減法混色によって色を再現している。そのため、インクを吐出しないＲＧＢ値（たとえばＲ＝Ｇ＝Ｂ＝２５５）において、Ｘ＝０．９５１、Ｙ＝１，０００、Ｚ＝１．０８９となる。
【００５９】
図９（ｂ）は、プロジェクタのＲＧＢ値がＲ＝Ｇ＝Ｂに対する投影画像の三刺激値Ｙの特性を示している。投影画像の三刺激特性は、プリンタＲＧＢにおいてインクを吐出しない信号値（たとえばＲ＝Ｇ＝Ｂ＝２５５）、すなわち「紙白」に対して各ＲＧＢにて投影される画像を測定することによって得ることができる。測定には、例えば、公知の分光輝度計、もしくは分光特性が既知であるカメラやフラットヘッドスキャナを用いることが出来る。このとき、投影画像の三刺激に対しては、正規化処理をおこなわない。すなわち、ここでは、投影画像の三刺激特性として、紙白に対して各ＲＧＢにおける画像が投影された場合の三刺激値の絶対値を保持する。
【００６０】
このように印刷画像の三刺激特性と投影画像の三刺激特性とを保持する。それにより、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせと上述の数式（１）〜（３）から、重畳画像として再現される三刺激値Ｙ＿ｐｉｌｅを推定することが可能となる。なお、印刷画像の三刺激特性および投影画像の三刺激特性は、不図示のメモリ内にＬＵＴ化して保持すればよい。
【００６１】
図１０は、印刷画像（プリンタＲＧＢ）の三刺激特性をＬＵＴ化した例を示す図である。また、図１１は、投影画像（プロジェクタＲＧＢ）の三刺激特性をＬＵＴ化した例を示す図である。例えば、図１０に示すＬＵＴには、１７×１７×１７＝４９１３通りのプリンタＲＧＢに対する、三刺激値ＸＹＺが格納される。なお、ＬＵＴに格納されていないＲＧＢに対する三刺激値は、近傍ＲＧＢの三刺激値から、公知の補間処理によって算出すればよい。
【００６２】
なお、重畳画像の三刺激特性２０５の保持方法の別の例として、ＬＵＴを用いず、関数として保持することも可能である。たとえば、三刺激値Ｘ０、Ｙ０、Ｚ０を印刷画像５０１もしくは投影画像５０２上のＸＹＺへ変換する線形変換式を、重畳画像の三刺激特性２０５として保持してもよい。ここで、三刺激値Ｘ０、Ｙ０、Ｚ０は、プリンタＲＧＢもしくはプロジェクタＲＧＢをｓＲＧＢとして計算してもよい。このとき、画像形成装置３および画像投影装置４による印刷画像５０１、投影画像５０２上の三刺激値ＸＹＺは、三刺激値Ｘ０、Ｙ０、Ｚ０に対して線形となるように設定しておくことが好適である。
【００６３】
＜ＬＵＴ作成部および信号分解ＬＵＴを用いない形態＞
上述の第１実施形態においては、信号分解ＬＵＴ生成部２０４によって作成されたＬＵＴを参照して三刺激値ＸＹＺをプリンタＲＧＢとプロジェクタＲＧＢとに分解した。しかしながら、必ずしも信号分解ＬＵＴ生成部２０４を備え、信号分解ＬＵＴを作成、保持しておく必要はない。
【００６４】
すなわち、Ｓ３０２において入力信号ＲＧＢ値から算出される再現目標の三刺激値Ｘｔ，Ｙｔ，Ｚｔに対し、信号分解処理部２０２がＳ６０４と同様に粒状性が良好なプリンタＲＧＢ値を算出する。その後、Ｓ６０５と同様にプロジェクタＲＧＢ値を算出してもよい。
【００６５】
このように、信号分解ＬＵＴを作成、保持せずに処理をおこなうことで、処理に必要な計算量は増大するが、ＬＵＴを保持するメモリが不要となる。
【００６６】
＜印刷画像の粒状性測定を行わない形態＞
上述の第１実施形態においては、あらかじめプリンタにて画像を出力し、出力された印刷画像の粒状性を測定、保持することで、粒状性の良好となるプリンタＲＧＢを決定していた。しかしながら、印刷画像の粒状性測定は必須ではない。
【００６７】
たとえば、一般的なインクジェットプリンタで形成される画像では、インクを吐出しない場合（すなわち「紙白」）における粒状性が最も良好となることが知られている。そこで、Ｓ６０４において、信号分解処理部２０２は、粒状特性２０６を参照する代わりに、インクを吐出しないプリンタＲＧＢ（たとえばＲ＝Ｇ＝Ｂ＝２５５）を優先して選択するよう構成する。
【００６８】
このようにプリンタＲＧＢを決定することで、一般的なインクジェットプリンタで粒状性が最も良好となる「インクを吐出しないプリンタＲＧＢ」が優先してＬＵＴ内に格納されることになる。そのため、粒状特性２０６を用いずに信号分解ＬＵＴ２０３を作成することが可能となる。
【００６９】
（第２実施形態）
第２実施形態では、重畳画像の粒状特性に基づいて、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせを決定する形態について説明する。すなわち、上述の第１実施形態においては、印刷画像の粒状特性に基づいてプリンタＲＧＢ値を決定した。しかしながら、図８に示すように、重畳画像の粒状特性は印刷画像（プリンタＲＧＢ）によって主に決定されるが、投影画像（プロジェクタＲＧＢ）によっても変化する。そこで、第１実施形態に比較し更に良好な粒状性の重畳画像を得る手法について説明する。
【００７０】
具体的には、まず、再現目標となる三刺激値Ｘｔ、Ｙｔ、Ｚｔを満たすプリンタＲＧＢ値とプロジェクタＲＧＢ値との１以上の組み合わせを探索する。そして、１以上の組み合わせの中から重畳画像の粒状性が良好となる組み合わせを選択し、三刺激値Ｘｔ、Ｙｔ、Ｚｔに対応付けて信号分解ＬＵＴに格納する。このように信号分解ＬＵＴを作成することで、より粒状性に優れた重畳画像を得られる。
【００７１】
＜信号分解ＬＵＴ生成部２０４における信号分解ＬＵＴ２０３の作成処理＞
図１２は、第２実施形態における信号分解ＬＵＴ２０３の作成処理のフローチャートである。なお、第１実施形態と同様の部分については説明を簡易化または省略する。
【００７２】
Ｓ１２０１では、信号分解ＬＵＴ生成部２０４は、重畳画像５の色域として再現可能な三刺激値ＸＹＺの範囲Ｇを三刺激特性２０５より取得する。Ｓ１２０２では、信号分解ＬＵＴ生成部２０４は、三刺激値ＸＹＺの範囲Ｇを均等に分割するように信号分解ＬＵＴの格子点を設定する。
【００７３】
Ｓ１２０３では、信号分解ＬＵＴ生成部２０４、処理対象となる格子点ｉにおける三刺激値Ｘｉ，Ｙｉ，Ｚｉを取得する。Ｓ１２０４では、信号分解ＬＵＴ生成部２０４は、三刺激値Ｘｉ，Ｙｉ，Ｚｉを満たすプリンタＲＧＢ値とプロジェクタＲＧＢ値との１以上の組み合わせを探索する。
【００７４】
Ｓ１２０５では、信号分解ＬＵＴ生成部２０４は、探索された１以上の組み合わせの中から、重畳画像の粒状性が良好となる１つの組み合わせを選択し、三刺激値Ｘｉ，Ｙｉ，Ｚｉに対応付けてＬＵＴに格納する。より具体的には、各組み合わせに対する粒状性評価値を、粒状特性２０６を参照して算出し、もっとも評価値が良い組み合わせを選択する。
【００７５】
図１３は、粒状特性をＬＵＴ化した例を示す図である。具体的には、粒状特性２０６として、プロジェクタＲＧＢとプリンタＲＧＢの組み合わせに対して粒状性評価値が格納されたＬＵＴを示している。なお、図１３に格納される粒状性評価値には、たとえば公知のＲＭＳ粒状度を用いることができる。その場合、プロジェクタとプリンタとの重畳画像をカメラで撮影し、撮影画像から公知手法によりＲＭＳ粒状度を算出することで、各プリンタＲＧＢおよびプロジェクタＲＧＢに対応する粒状性評価値を算出し、粒状特性ＬＵＴを作成できる。
【００７６】
Ｓ１２０６では、信号分解ＬＵＴ生成部２０４は、全格子点についてＳ１２０３〜１２０５までの処理をおこなったか否かを判断する。判断の結果、全格子点に対して処理済であれば、ＬＵＴの作成処理を終了する。一方、未処理の格子点が存在する場合は、当該未処理の格子点から１点を選択しＳ１２０３へ戻る。そして、当該選択した格子点に対応する三刺激値ＸＹＺを新しい三刺激値Ｘｉ，Ｙｉ，ＺｉとしてＳ１２０３〜１２０５までの処理を繰り返す。
【００７７】
以上説明したとおり第２実施形態によれば、重畳画像の粒状特性に基づいて、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせを決定する。これいにより、第１実施形態に比較し更に良好な粒状性の重畳画像を得ることが可能となる。
【００７８】
（第３実施形態）
第３実施形態では、プリンタ及びプロジェクタに提供する信号を、プリンタが画像形成に使用する記録剤（インク、トナーなど）の耐候性を考慮して生成する画像処理装置を例に挙げて以下に説明する。
【００７９】
一般に、プリンタが備えるインクの種類によって、光やガスによる退色などの経年変化の仕方（耐候性）が異なる。耐候性の低い記録剤を用いた場合、時間と共に形成画像の色が変化することになり、結果として、投影画像との重畳画像における色も時間と共に変化することになる。そこで、プリンタで形成される画像の耐候性が良好となるプリンタのＲＧＢを優先して決定することで、経年変化の少ない安定した重畳画像を得る形態について説明する。なお、第１及び第２実施形態と共通の部分については説明を簡易化または省略する。
【００８０】
信号分解処理部２０２は、三刺激特性と耐候特性に基づいて作成した信号分解ＬＵＴ２０３を用いて、分解処理をおこなう。
【００８１】
図１４は、耐候特性をＬＵＴ化した例を示す図である。具体的には、耐候特性２０８として、プリンタ信号毎の耐候性評価値が格納されたＬＵＴを示している。耐候性の評価値には、たとえば所定の時間経過後の色差ΔＥを用いることができる。具体的には、各プリンタＲＧＢに対する印刷画像を、経時前後（経時変化加速試験前後）にて公知の分光測色計により測色し、該測色値から公知の色差式を用いて色差を算出すればよい。なお、耐候性の評価値として、紫外線の照射下や高温多湿の環境下など、より変色が起こりやすい環境下での所定の時間経過後の色差ΔＥを用いてもよい。
【００８２】
画像形成装置３が、染料インクと顔料インクとを利用して画像形成を行うインクジェットプリンタである場合を考える。一般的に、染料インクよりも顔料インクのほうが耐候性に優れることが知られている。
【００８３】
この場合には、信号分解処理部２０２は、耐候特性に基づき、顔料インクを多く使用するプリンタＲＧＢ値を選択する。その後、選択したプリンタＲＧＢ値による印刷画像と重畳して入力画像を再現するプロジェクタＲＧＢ値を算出する。このようにプリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせを決定することで、入力画像を再現しつつ、耐候性が良好となる重畳画像を得ることができる。
【００８４】
なお、上述の説明では、耐候性のみに基づいてプリンタＲＧＢ値を決定した。しかしながら、耐候性と粒状性との両方に基づいてプリンタＲＧＢを決定してもよい。たとえば、各プリンタＲＧＢ値における粒状性と耐候性の重みづけ評価値を計算し、当該重みづけ評価値が最も小さくなる（良好となる）プリンタＲＧＢ値を選択すればよい。このようにプリンタＲＧＢ値を決定することで、粒状性・耐候性のバランスがとれた重畳画像を得ることができる。
【００８５】
また、上述の説明では、第１実施形態と同様に印刷画像の特性に基づいてプリンタＲＧＢ値を決定後、プロジェクタＲＧＢ値を算出した。しかしながら、重畳画像の耐候性はプリンタＲＧＢ値によって主に決定されるが、プロジェクタＲＧＢ値によっても変化しうる。なぜならば、プロジェクタＲＧＢ値によって投影画像の輝度が異なるため、印刷画像に照射される光量が異なり、退色の程度が変化するためである。
【００８６】
そこで第２実施形態と同様に、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせに対する耐候特性をＬＵＴとして保持しておくとよい。このようなＬＵＴを参照してプリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせを決定することで、経年変化の少ない安定した重畳画像を得ることが可能となる。
【００８７】
（第４実施形態）
第４実施形態では、印刷画像と投影画像との間の位置ずれによるアーティファクトの発生を抑制する形態について説明する。具体的には、入力信号を高周波成分と低周波成分とに分割し、投影画像は低周波成分に基づいて生成し、投影画像の高周波成分を印刷画像に反映させる。すなわち、高周波成分画像は印刷画像のみで再現する。
【００８８】
上述の第１〜第３実施形態においては、入力画像を画素毎にプリンタ信号とプロジェクト信号に分解しており、隣接画素間の関係は考慮していなかった。そのため、画素毎に分解された信号を重畳する場合、それらの信号の位置がずれると、入力画像に存在しないアーティファクトが発生する可能性がある。
【００８９】
＜システム構成＞
図１５は、第４実施形態における画像処理システムのブロック図である。なお、上述の第１〜第３実施形態と共通の部分については説明を簡易化または省略する。
【００９０】
信号分解処理部２０２は、信号分解ＬＵＴ２０３に基づいて、印刷画像データと投影画像データとに分解する。なお、説明を簡単にするため、信号分解処理部２０２における処理は、印刷画像データと投影画像データとして三刺激値ＸＹＺのデータを出力するものとする。また、画像形成装置３と画像投影装置４には、三刺激値ＸＹＺのデータが入力されるものとする。
【００９１】
すなわち、画像形成装置３は不図示の色変換処理部を備え、入力された三刺激値ＸＹＺをたとえばプリンタＲＧＢ信号やプリンタＣＭＹＫ信号に変換する。そして、画像形成装置３は、変換された信号値に基づき、記録部（不図示）を用紙（シート）などの記録媒体に対して相対的に移動させ、記録剤（インクやトナー等）を記録媒体上に記録することで画像を形成する。
【００９２】
同様に、画像投影装置４は不図示の色変換処理部を備え、入力された三刺激値ＸＹＺをたとえばプロジェクタＲＧＢ信号に変換する。そして、画像投影装置４は、変換された信号値に基づき、投射光学部（不図示）によって、画像形成装置３により形成された印刷画像に投影画像を投射する。
【００９３】
周波数処理部２０８は、信号分解処理部２０２にて分解された印刷画像データと投影画像データとを取得し、投影画像に対しローパスフィルタ（ＬＰＦ）処理をおこない、画像に含まれる高周波成分を除去する。さらに、重畳画像におけるＬＰＦ処理による影響を打ち消すように、印刷画像に対し、高周波成分を付与する。周波数処理の詳細については後述する。
【００９４】
上述の処理後、周波数処理部２０８は出力端子２０６を通して、高周波成分を付与した印刷画像データを画像形成装置３へと送信する。同様に、出力端子２０７を通して、ＬＰＦ処理後の投影画像データを画像投影装置４へと送信する。
【００９５】
＜周波数処理＞
周波数処理部２０８における処理をより具体的に説明する。図１６は、周波数処理部２０８におけるローパスフィルタ処理のフローチャートである。また、図１７は、ローパスフィルタ処理の各ステップにおける信号値の例を示す図である。
【００９６】
なお実際の入力信号は、位置ｘ、ｙの２次元に対する３チャンネル信号であるが、説明を簡単にするため、位置ｘに対するＹの信号を入力信号として説明および図示する。
【００９７】
Ｓ１６０１では、周波数処理部２０８は、信号処理部２０２から印刷画像データＰ（ｘ）と投影画像データＱ（ｘ）を取得する。入力画像データＩ（ｘ）、印刷画像データＰ（ｘ）、投影画像データＱ（ｘ）の例を、それぞれ図１７（ａ）、図１７（ｂ）、図１７（ｃ）に示す。
【００９８】
なお、ここでは、印刷画像データＰ（ｘ）は位置に対する反射率の値を画素値とする画像データとし、蛍光インクや金属インク等を用いない場合、０．０＜Ｐ（ｘ）＜１．０を満たす。また、投影画像データＱ（ｘ）は位置に対する輝度の値を画素値とする画像データとし、０．０＜Ｑ（ｘ）を満たすとする。
【００９９】
Ｓ１６０２では、周波数処理部２０８は、投影画像データＱ（ｘ）に対し、ＬＰＦ処理をおこなう。ＬＰＦ処理後の修正画像信号である投影画像データＬ（Ｑ（ｘ））の例を図１７（ｄ）に示す。ＬＰＦ処理には公知の手法を用いることができる。たとえばガウシアンフィルタなど公知のローパスフィルタを投影画像データＱ（ｘ）に対して畳みこみ処理し、ＬＰＦ処理後の投影画像データＬ（Ｑ（ｘ））を算出する。あるいは、投影画像データＱ（ｘ）に対してフーリエ変換をおこなって得られる周波数情報Ｆ（ｖ）に対し、所定の周波数ｖ０以上の信号値を”０”とした後、逆フーリエ変換することでＬＰＦ処理後の投影画像データＬ（Ｑ（ｘ））を算出してもよい。すなわち、ローパスフィルタ処理によって投影画像データにおいて低減された高周波画像成分を補償する信号を印刷画像データ付与する構成であれば任意の手法が利用可能である。
【０１００】
Ｓ１６０３では、周波数処理部２０８は、ＬＰＦ処理後の投影画像データＬ（Ｑ（ｘ））と重畳することで入力画像を再現する印刷画像データＰ’（ｘ）を算出し、周波数処理を終了する。具体的には、投影データの信号比Ｑ（ｘ）／（Ｌ（Ｑ（ｘ））＋ε）を用いて、Ｐ’（ｘ）＝Ｐ（ｘ）×Ｑ（ｘ）／（Ｌ（Ｑ（ｘ））＋ε）によってＰ’（ｘ）を算出する。ただし、εはゼロ除算を避けるための十分に小さな定数であり、たとえばε＝０．０００１などを用いることができる。あるいは、εを用いず、Ｌ（Ｑ（ｘ））＝０の場合には、Ｐ’（ｘ）＝Ｐ（ｘ）としてもよい。
【０１０１】
図１７（ｅ）は、上述の式によって算出される修正画像信号である印刷画像データＰ’（ｘ）を示す図である。ここでは、上述の印刷画像データＰ’（ｘ）と投影画像データＬ（Ｑ（ｘ））とをそれぞれ周波数処理後の印刷画像データと投影画像データとする。すなわち、印刷画像５０１は印刷画像データＰ’（ｘ）に基づいて画像形成装置３により形成される。また、投影画像５０２は投影画像データＬ（Ｑ（ｘ））に基づいて画像投影装置４により印刷画像５０１上に投影され、重畳画像５として入力画像１を再現する。
【０１０２】
＜周波数処理をおこなう理由＞
前述の通り、周波数処理部２０８がない場合、すなわち、印刷画像データＰ（ｘ）と投影画像データＱ（ｘ）を重畳する場合、重畳時の位置ずれによって、入力画像に存在しないアーティファクトが発生する可能性がある。
【０１０３】
一方、周波数処理部２０８がある場合、すなわち、周波数処理部２０８から出力される周波数処理後の印刷画像データＰ’（ｘ）と投影画像データＬ（Ｑ（ｘ））とを重畳する場合には、重畳時の位置ずれが生じても、アーティファクトが発生しにくい。
【０１０４】
図１８は、位置ずれが生じた場合の重畳画像の信号値の例を示す図である。特に、図１８（ａ）は、図１７（ｂ）で示される印刷画像データＰ（ｘ）と図１７（ｃ）で示される投影画像データＱ（ｘ）との間に位置ずれが生じた状態で重畳した場合の、重畳画像の輝度特性Ｒ（ｘ）を例示的に示している。また、図１８（ｂ）は、図１７（ｅ）で示される印刷画像データＰ’（ｘ）と図１７（ｄ）で示される投影画像データＬ（Ｑ（ｘ））との間に位置ずれが生じた状態で重畳した場合の、重畳画像の輝度特性Ｒ’（ｘ）を例示的に示している。
【０１０５】
図１８から理解されるように、周波数処理を行わない場合の輝度特性Ｒ（ｘ）では、入力画像に存在しない輝度ピークがアーティファクトとして発生しており、重畳画像の画質を損ねる可能性がある。一方、周波数処理部２０８から出力されるＬＰＦ処理後の印刷画像データＰ’（ｘ）と投影画像データＬ（Ｑ（ｘ））では、位置ずれが生じた状態で重畳してもアーティファクトが抑制されている。
【０１０６】
以上説明したとおり第４実施形態によれば、入力信号を高周波成分と低周波成分とに分割し、投影画像は低周波成分に基づいて生成し、投影画像の高周波成分を印刷画像に反映させる。この構成により、印刷画像と投影画像との間に位置ずれが生じても重畳画像におけるアーティファクトの発生を好適に抑制することが可能となる。
【０１０７】
＜プリンタとプロジェクタの出力解像度が異なる形態＞
上述の第４実施形態においては、入力画像、印刷画像、投影画像、そして重畳画像の解像度がいずれも同一であるとして説明をおこなった。しかしながら、画像形成装置３（以下プリンタ）もしくは投影装置４（以下プロジェクタ）にて出力できる解像度と入力画像の解像度が異なる場合、プリンタもしくはプロジェクタ内にて解像度変換をおこなう必要がある。
【０１０８】
たとえばプリンタの出力解像度に比べプロジェクタの出力解像度が低い場合に、プリンタの出力解像度と同一の解像度の入力画像が入力されたとする。このとき、プロジェクタでは信号分解処理後の投影画像データに対して解像度変換がおこなわれ、プロジェクタで出力可能な低解像度画像が生成され投影される。このとき、解像度変換によって入力画像に含まれる高周波が失われ、その結果、重畳画像の再現目標となるＸＹＺを再現できなくなりアーティファクトが生じる等、重畳画像の画質が劣化する場合がある。
【０１０９】
このような場合、上述の第４実施形態の周波数処理部２０８における処理を画像形成装置３および画像投影装置４の出力解像度に基づいて適用することで、解像度変換に起因する重畳画像の画質劣化を抑制することができる。なお、その場合、上述のＳ１７０２におけるＬＰＦ処理において、ローパスフィルタのフィルタサイズと係数、あるいは所定の周波数ｖ０は、重畳画像上での投影画像データＱ（ｘ）の解像度に基づいて決定することが望ましい。具体的には、重畳画像上での投影画像データＱ（ｘ）が再現可能な周波数よりも高周波な信号を含まないようにすることが望ましい。このようにローパスフィルタもしくは所定の周波数ｖ０を決定することで、プリンタに対し、プロジェクタの重畳画像上での解像度が著しく低い場合（特に投影による拡大率が大きい場合）に、画質劣化を抑制することができる。
【０１１０】
＜周波数処理を行わない形態＞
印刷画像と投影画像との間に位置ずれに起因するアーティファクトを低減する方法として、上述の周波数処理以外の方法も考えられる。例えば、信号分解ＬＵＴ生成部２０４によるＬＵＴ作成処理において、重畳位置ずれの影響を考慮した信号分解ＬＵＴを生成することもできる。
【０１１１】
図７の点線７ｂに示すように、入力信号に対するプロジェクタＲＧＢ値に反転が生じている場合、グラデーション領域における投影画像に、明暗の反転が生じることになる。そのため、重畳位置がずれた場合にアーティファクトが発生してしまう。
【０１１２】
一方で、入力信号に対してＲＧＢ値が単調減少もしくは単調増加であれば、グラデーション領域における印刷画像５０１と投影画像５０２の明暗は単調変化となる。そのため、印刷画像と投影画像の位置がずれたとしても、周囲に比べて極端に明るさの異なる箇所が発生しにくくなる。
【０１１３】
そこで、ＬＵＴ作成処理において、プリンタＲＧＢ値およびプロジェクタＲＧＢ値が入力信号に対して単調減少もしくは単調増加であるという制約を加えた上で、プリンタＲＧＢ値とプロジェクタＲＧＢ値との組み合わせを決定する。すなわち、当該制約の下で、もっとも粒状性が良好となるプリンタＲＧＢとプロジェクタＲＧＢの組み合わせを探索する。
【０１１４】
図１９は、信号分解処理結果の一例を示す図である。特に、プリンタＲＧＢ値およびプロジェクタＲＧＢ値が単調増加するという制約下で探索した結果の一例を示している。上述の図７と同様、図が煩雑となることを避けるため、三刺激値Ｙｔに対するプリンタＲＧＢのＲＧＢ平均値（実線１９ａ）とプロジェクタＲＧＢのＲＧＢ平均値（点線１９ｂ）のみを示している。
【０１１５】
すなわち、実線１９ａは、横軸を再現目標の三刺激値Ｙｔ、縦軸を分解後のプリンタＲＧＢ値とした場合の各三刺激値Ｙｔに対するプリンタＲＧＢの平均値を示す。ただし、Ｙ＿ｍｉｎは重畳画像５がとりうる最小のＹ値、Ｙ＿ｍａｘは最大のＹ値とする。同様に、点線１９ｂは、縦軸を分解後のプロジェクタＲＧＢ値とした場合の、各三刺激値Ｙｔに対するプロジェクタＲＧＢの平均値を示す。
【０１１６】
このようにして決定されたプリンタＲＧＢ値およびプロジェクタＲＧＢ値を格納するＬＵＴを利用することで、周波数処理を行わずにアーティファクトの発生を抑制することが可能となる。
【０１１７】
（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【０１１８】
１  入力画像；  ２  画像処理装置；  ３  画像形成装置；  ４  画像投影装置；  ５  重畳画像；  ２０２  信号分解処理部；  ２０３  信号分解ＬＵＴ；  ２０４  信号分解ＬＵＴ生成部；  ２０５  三刺激特性；  ３０６  粒状特性
【図１】
2019075659.tif 000003
【図２】
2019075659.tif 000004
【図３】
2019075659.tif 000005
【図４】
2019075659.tif 000006
【図５】
2019075659.tif 000007
【図６】
2019075659.tif 000008
【図７】
2019075659.tif 000009
【図８】
2019075659.tif 000010
【図９】
2019075659.tif 000011
【図１０】
2019075659.tif 000012
【図１１】
2019075659.tif 000013
【図１２】
2019075659.tif 000014
【図１３】
2019075659.tif 000015
【図１４】
2019075659.tif 000016
【図１５】
2019075659.tif 000017
【図１６】
2019075659.tif 000018
【図１７】
2019075659.tif 000019
【図１８】
2019075659.tif 000020
【図１９】
2019075659.tif 000021