(57)【要約】【課題】表示輝度や表示色が被写体の実際の見えに近い表示画像をより確実に得ることができる技術を提供する。【解決手段】本発明の画像処理装置は、撮影装置から撮影画像を取得する取得手段と、被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御手段と、前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正手段と、を有し、前記制御手段は、撮影範囲が前記第１撮影画像の表示領域である撮影画像が前記第２撮影画像として得られるように、前記第１撮影画像が配置され且つ前記第２撮影画像の撮影範囲とすべき領域を表す画像を前記画面に表示させる。【選択図】図１
2015171023.tif 000002
【特許請求の範囲】
【請求項１】
撮影装置から撮影画像を取得する取得手段と、
被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御手段と、
前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正手段と、
を有し、
前記制御手段は、撮影範囲が前記第１撮影画像の表示領域である撮影画像が前記第２撮影画像として得られるように、前記第１撮影画像が配置され且つ前記第２撮影画像の撮影範囲とすべき領域を表す画像を前記画面に表示させる
ことを特徴とする画像処理装置。
【請求項２】
前記制御手段は、前記第１撮影画像と、前記第２撮影画像の撮影範囲とすべき領域を表す撮影範囲画像と、が配置された画像を前記画面に表示させる
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記撮影範囲画像は、図形と文字の少なくとも一方を含む
ことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記撮影範囲画像は、前記第１撮影画像の輪郭を表す枠画像である
ことを特徴とする請求項２または３に記載の画像処理装置。
【請求項５】
前記制御手段は、前記第１撮影画像の領域以外の領域の色と輝度の少なくとも一方が変更された画像を前記画面に表示させる
ことを特徴とする請求項１〜４のいずれか１項に記載の画像処理装置。
【請求項６】
前記第２撮影画像に基づいて、前記第１撮影画像の表示領域に対する前記第２撮影画像の撮影範囲のずれ量を判断する判断手段と、
前記ずれ量が閾値より大きい場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域からずれていることをユーザに通知する通知手段と、
をさらに有する
ことを特徴とする請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
前記判断手段は、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域に一致しているか否かを判断する
ことを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記第２撮影画像は、前記第１撮影画像と前記第１撮影画像の輪郭を表す枠画像とが配置された画像が前記画面に表示された状態で前記画面を撮影して得られた撮影画像であり、
前記判断手段は、
前記第２撮影画像に前記枠画像が写っていない場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域に一致していると判断し、
前記第２撮影画像に前記枠画像が写っている場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域に一致していないと判断する
ことを特徴とする請求項７に記載の画像処理装置。
【請求項９】
撮影装置から撮影画像を取得する取得手段と、
表示装置の画面を撮影して得られた撮影画像から、前記画面を撮影する際の撮影範囲を
判断する判断手段と、
被写体を撮影して得られた第１撮影画像の表示領域が前記判断手段で判断された撮影範囲と一致するように、前記第１撮影画像を前記画面に表示させる制御手段と、
前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正手段と、
を有することを特徴とする画像処理装置。
【請求項１０】
前記制御手段は、所定の画像を前記画面に表示させる処理をさらに行い、
前記判断手段は、前記所定の画像が前記画面に表示された状態で前記画面を撮影して得られた撮影画像に基づいて、前記画面を撮影する際の撮影範囲を判断する
ことを特徴とする請求項９に記載の画像処理装置。
【請求項１１】
前記所定の画像は、表示位置毎に他の表示位置と異なる画像が配置された画像である
ことを特徴とする請求項１０に記載の画像処理装置。
【請求項１２】
撮影装置から撮影画像を取得する取得手段と、
被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御手段と、
前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像に基づいて、前記第１撮影画像の表示領域に対する前記第２撮影画像の撮影範囲のずれ量を判断する判断手段と、
前記ずれ量が閾値より大きい場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域からずれていることをユーザに通知する通知手段と、
前記第１撮影画像と前記第２撮影画像に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正手段と、
を有することを特徴とする画像処理装置。
【請求項１３】
前記判断手段は、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域に一致しているか否かを判断する
ことを特徴とする請求項１２に記載の画像処理装置。
【請求項１４】
前記第２撮影画像は、前記第１撮影画像と前記第１撮影画像の輪郭を表す枠画像とが配置された画像が前記画面に表示された状態で前記画面を撮影して得られた撮影画像であり、
前記判断手段は、
前記第２撮影画像に前記枠画像が写っていない場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域に一致していると判断し、
前記第２撮影画像に前記枠画像が写っている場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域に一致していないと判断する
ことを特徴とする請求項１３に記載の画像処理装置。
【請求項１５】
前記補正手段は、前記第２撮影画像の画素値に対する前記第１撮影画像の画素値の割合を前記第１撮影画像の画素値に乗算することにより、前記第１撮影画像を補正する
ことを特徴とする請求項１〜１４のいずれか１項に記載の画像処理装置。
【請求項１６】
撮影装置から撮影画像を取得する取得ステップと、
被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御ステップと、
前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被
写体の実際の見えに近づくように、前記第１撮影画像を補正する補正ステップと、
を有し、
前記制御ステップでは、撮影範囲が前記第１撮影画像の表示領域である撮影画像が前記第２撮影画像として得られるように、前記第１撮影画像が配置され且つ前記第２撮影画像の撮影範囲とすべき領域を表す画像を前記画面に表示させる
ことを特徴とする画像処理方法。
【請求項１７】
撮影装置から撮影画像を取得する取得ステップと、
表示装置の画面を撮影して得られた撮影画像から、前記画面を撮影する際の撮影範囲を判断する判断ステップと、
被写体を撮影して得られた第１撮影画像の表示領域が前記判断ステップで判断された撮影範囲と一致するように、前記第１撮影画像を前記画面に表示させる制御ステップと、
前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正ステップと、
を有することを特徴とする画像処理方法。
【請求項１８】
撮影装置から撮影画像を取得する取得ステップと、
被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御ステップと、
前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像に基づいて、前記第１撮影画像の表示領域に対する前記第２撮影画像の撮影範囲のずれ量を判断する判断ステップと、
前記ずれ量が閾値より大きい場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域からずれていることをユーザに通知する通知ステップと、
前記第１撮影画像と前記第２撮影画像に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正ステップと、
を有することを特徴とする画像処理方法。
【請求項１９】
請求項１６〜１８のいずれか１項に記載の画像処理方法の各ステップをコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法、及び、プログラムに関する。
【背景技術】
【０００２】
デジタルカメラ等の撮影装置で撮影を行うことにより得られた撮影画像の色や輝度は、撮影装置の特性（撮影特性）に依存する。そして、画像を表示装置の画面に表示した場合の表示色（画面上の色）や表示輝度（画面上の輝度）は、表示装置の特性（表示特性）に依存する。そのため、被写体を撮影して得られた撮影画像を表示装置の画面に表示した場合の表示色や表示輝度が、被写体の実際の見えから大きくずれてしまうことがある。
【０００３】
表示輝度や表示色が被写体の実際の見えに近い表示画像を得るための従来技術は、例えば、特許文献１に開示されている。
特許文献１に開示の技術では、撮影装置をキャリブレータとして用い、特別な測光装置を用いずに、表示装置の校正が行われる。例えば、特許文献１に開示の技術では、被写体を撮影して得られた第１撮影画像が表示装置の画面に表示された状態で、画面が撮影される。そして、第１撮影画像と、画面を撮影して得られた第２撮影画像と、に基づいて、第１撮影画像が補正される。
【０００４】
校正された撮影装置をキャリブレータとして用いた場合には、特許文献１に開示の技術を用いることによって、表示輝度や表示色が被写体の実際の見えに近い画像表示を実現する補正後画像を得ることができる。
しかしながら、校正されていない撮影装置で撮影を行うことにより得られた撮影画像には、周辺光量落ちなどによる面内ムラ（輝度ムラや色ムラ）が生じることがある。
そのため、校正されていない撮影装置をキャリブレータとして用いた場合には、特許文献１に開示の技術を用いたとしても、表示輝度や表示色が被写体の実際の見えに近い画像表示を実現する補正後画像を得ることができないことがある。具体的には、第１撮影画像の表示領域（画面に表示された第１撮影画像の領域）と第２撮影画像の撮影範囲とが異なる場合に、第２撮影画像の領域のうち第１撮影画像の領域における面内ムラが第１撮影画像の面内ムラと異なってしまうことがある。このような面内ムラの差が生じると、補正後画像として面内ムラのある画像が得られてしまうため、表示輝度や表示色が被写体の実際の見えに近い画像表示を実現する補正後画像を得ることができない。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００２−１３５７９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、表示輝度や表示色が被写体の実際の見えに近い表示画像をより確実に得ることができる技術を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の第１の態様は、
撮影装置から撮影画像を取得する取得手段と、
被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御手段と、
前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被
写体の実際の見えに近づくように、前記第１撮影画像を補正する補正手段と、
を有し、
前記制御手段は、撮影範囲が前記第１撮影画像の表示領域である撮影画像が前記第２撮影画像として得られるように、前記第１撮影画像が配置され且つ前記第２撮影画像の撮影範囲とすべき領域を表す画像を前記画面に表示させる
ことを特徴とする画像処理装置である。
【０００８】
本発明の第２の態様は、
撮影装置から撮影画像を取得する取得手段と、
表示装置の画面を撮影して得られた撮影画像から、前記画面を撮影する際の撮影範囲を判断する判断手段と、
被写体を撮影して得られた第１撮影画像の表示領域が前記判断手段で判断された撮影範囲と一致するように、前記第１撮影画像を前記画面に表示させる制御手段と、
前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正手段と、
を有することを特徴とする画像処理装置である。
【０００９】
本発明の第３の態様は、
撮影装置から撮影画像を取得する取得手段と、
被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御手段と、
前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像に基づいて、前記第１撮影画像の表示領域に対する前記第２撮影画像の撮影範囲のずれ量を判断する判断手段と、
前記ずれ量が閾値より大きい場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域からずれていることをユーザに通知する通知手段と、
前記第１撮影画像と前記第２撮影画像に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正手段と、
を有することを特徴とする画像処理装置である。
【００１０】
本発明の第４の態様は、
撮影装置から撮影画像を取得する取得ステップと、
被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御ステップと、
前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正ステップと、
を有し、
前記制御ステップでは、撮影範囲が前記第１撮影画像の表示領域である撮影画像が前記第２撮影画像として得られるように、前記第１撮影画像が配置され且つ前記第２撮影画像の撮影範囲とすべき領域を表す画像を前記画面に表示させる
ことを特徴とする画像処理方法である。
【００１１】
本発明の第５の態様は、
撮影装置から撮影画像を取得する取得ステップと、
表示装置の画面を撮影して得られた撮影画像から、前記画面を撮影する際の撮影範囲を判断する判断ステップと、
被写体を撮影して得られた第１撮影画像の表示領域が前記判断ステップで判断された撮影範囲と一致するように、前記第１撮影画像を前記画面に表示させる制御ステップと、
前記第１撮影画像と、前記画面に前記第１撮影画像が表示された状態で前記画面を撮影
して得られた第２撮影画像と、に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正ステップと、
を有することを特徴とする画像処理方法である。
【００１２】
本発明の第６の態様は、
撮影装置から撮影画像を取得する取得ステップと、
被写体を撮影して得られた第１撮影画像を表示装置の画面に表示させる制御ステップと、
前記画面に前記第１撮影画像が表示された状態で前記画面を撮影して得られた第２撮影画像に基づいて、前記第１撮影画像の表示領域に対する前記第２撮影画像の撮影範囲のずれ量を判断する判断ステップと、
前記ずれ量が閾値より大きい場合に、前記第２撮影画像の撮影範囲が前記第１撮影画像の表示領域からずれていることをユーザに通知する通知ステップと、
前記第１撮影画像と前記第２撮影画像に基づいて、表示輝度と表示色の少なくとも一方が前記被写体の実際の見えに近づくように、前記第１撮影画像を補正する補正ステップと、
を有することを特徴とする画像処理方法である。
【００１３】
本発明の第７の態様は、上述した画像処理方法の各ステップをコンピュータに実行させることを特徴とするプログラムである。
【発明の効果】
【００１４】
本発明によれば、表示輝度や表示色が被写体の実際の見えに近い表示画像をより確実に得ることができる。
【図面の簡単な説明】
【００１５】
【図１】実施例１に係る画像処理システムの構成の一例を示すブロック図
【図２】実施例１に係る画像処理システムの動作の一例を示すフローチャート
【図３】実施例１に係る被写体の一例を示す図
【図４】実施例１に係る第１撮影画像の一例を示す図
【図５】図２のＳ１４の処理後の表示画像の一例を示す図
【図６】実施例１に係る第２撮影画像の一例を示す図
【図７】図２のＳ１９の処理後の表示画像の一例を示す図
【図８】実施例２に係る画像処理システムの構成の一例を示すブロック図
【図９】実施例２に係る画像処理システムの動作の一例を示すフローチャート
【図１０】実施例２に係る座標画像の一例を示す図
【図１１】図９のＳ５２の処理後の表示画像の一例を示す図
【図１２】実施例３に係る画像処理システムの構成の一例を示すブロック図
【図１３】実施例３に係る画像処理システムの動作の一例を示すフローチャート
【図１４】図１３のＳ７８の処理後の表示画像の一例を示す図
【発明を実施するための形態】
【００１６】
＜実施例１＞
以下、本発明の実施例１に係る画像処理装置及び画像処理方法について説明する。
（構成）
本実施例に係る画像処理システムの構成について説明する。
図１は、本実施例に係る画像処理システムの構成の一例を示すブロック図である。
図１に示すように、画像処理システムは、撮影装置１００、画像処理装置２００、表示装置３００、等を有する。画像処理装置２００は、有線または無線によってデータを送受信可能に撮影装置１００及び表示装置３００に接続されている。
なお、本実施例では、画像処理装置２００が撮影装置１００及び表示装置３００とは別体の装置である場合の例を説明するが、撮影装置１００と表示装置３００の少なくとも一方が画像処理装置２００に内蔵されていてもよい。
【００１７】
撮影装置１００は、撮影を行うことによって撮影画像（撮影画像データ）を生成する装置である。撮影装置１００としては、デジタルカメラなどを用いることができる。本実施例では、撮影装置１００は、被写体を撮影することにより、第１撮影画像を生成する。また、撮影装置１００は、第１撮影画像が表示装置３００の画面に表示された状態で、表示装置３００の画面を撮影することにより、第２撮影画像を生成する。撮影装置１００は、生成した撮影画像を画像処理装置２００に出力する。
【００１８】
表示装置３００は、表示装置３００に入力された画像（画像データ）を画面に表示する装置である。表示装置３００としては、液晶表示装置、プラズマ表示装置、有機ＥＬ（Ｅｌｅｃｔｒｏ  Ｌｕｍｉｎｅｓｃｅｎｃｅ）表示装置、等を用いることができる。本実施例では、表示装置３００は、画像処理装置２００から出力された画像を画面に表示する。
【００１９】
画像処理装置２００は、画像取得部２０１、画像記憶部２０２、画像補正パラメータ決定部２０３、画像補正部２０４、画像生成部２０５、表示制御部２０６、等を有する。
【００２０】
画像取得部２０１は、撮影装置１００から撮影画像を取得し、取得した撮影画像を画像記憶部２０２に記録する。本実施例では、被写体を撮影して得られた第１撮影画像と、第１撮影画像が表示装置３００の画面に表示された状態で表示装置３００の画面を撮影して得られた第２撮影画像と、が取得される。
【００２１】
画像記憶部２０２は、撮影画像を記憶可能な記憶媒体である。画像記憶部２０２としては、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）、ＳＳＤ（Ｆｌａｓｈ  Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｉｓｋ）、メモリーカード、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、等を用いることができる。
【００２２】
画像補正パラメータ決定部２０３と画像補正部２０４により、第１撮影画像と第２撮影画像に基づいて、表示輝度（画面上の輝度）と表示色（画面上の色）の少なくとも一方が被写体の実際の見えに近づくように、第１撮影画像が補正される。換言すれば、被写体の実際の輝度と色の少なくとも一方が忠実に表示されるように、第１撮影画像が補正される。
【００２３】
画像補正パラメータ決定部２０３は、画像記憶部２０２から第１撮影画像と第２撮影画像を読み出し、第１撮影画像と第２撮影画像に基づいて画像補正パラメータの値（パラメータ値）を決定する。画像補正パラメータは、画像補正部２０４の補正処理で使用されるパラメータである。画像補正パラメータ決定部２０３は、決定したパラメータ値を画像補正部２０４に出力する。
【００２４】
画像補正部２０４は、画像記憶部２０２から第１撮影画像を読み出し、画像補正パラメータ決定部２０３から出力されたパラメータ値を用いて第１撮影画像（第１撮影画像の信号レベル）を補正する。本実施例では、表示輝度と表示色の少なくとも一方が被写体の実際の見えに近づくように、第１撮影画像の輝度、色、及び、面内ムラ（輝度ムラ及び色ムラ）が補正される。画像補正部２０４は、補正後の画像を表示制御部２０６に出力する。
なお、本実施例では、表示輝度と表示色の両方が被写体の実際の見えに近づくように、第１撮影画像の輝度、色、輝度ムラ、及び、色ムラを補正する例を説明するが、これに限らない。例えば、表示色のみが被写体の実際の見えに近づくように第１撮影画像の色と色ムラが補正されてもよいし、表示輝度のみが被写体の実際の見えに近づくように第１撮影
画像の輝度と輝度ムラが補正されてもよい。
【００２５】
画像生成部２０５は、第２撮影画像の撮影範囲とすべき領域を表す撮影範囲画像を生成し、生成した撮影範囲画像を表示制御部２０６に出力する。撮影範囲画像は、例えば、図形と文字の少なくとも一方を含む画像である。
【００２６】
表示制御部２０６は、表示装置３００に画像を表示させる制御を行う。具体的には、表示制御部２０６は、表示対象の画像（画像データ）を表示装置３００に出力する。本実施例では、第１撮影画像を表示装置３００の画面に表示させる第１制御と、補正後の画像を表示装置３００の画面に表示させる第２制御と、が行われる。第１制御では、撮影範囲が第１撮影画像の表示領域である撮影画像が第２撮影画像として得られるように、第１撮影画像が配置され且つ第２撮影画像の撮影範囲とすべき領域を表す画像が表示装置３００の画面に表示させられる。具体的には、第１制御では、第１撮影画像と撮影範囲画像が表示装置３００に出力される。それにより、第１撮影画像と撮影範囲画像が配置された画像が生成され、生成された当該画像が表示装置３００の画面に表示される。第２制御では、補正後の画像が表示装置３００に出力される。
なお、第２制御は省略されてもよい。例えば、補正後の画像は、表示装置３００とは異なる外部装置に出力されてもよい。そして、補正後の画像を取得した外部装置によって、補正後の画像を表示装置３００に表示させる第２制御が行われてもよい。
なお、表示制御部２０６は、第１制御において、第１撮影画像と撮影範囲画像が配置された画像を生成し、生成した画像を表示装置３００に出力してもよい。
【００２７】
（動作）
本実施例に係る画像処理システムの動作について説明する。
図２は、本実施例に係る画像処理システムの動作の一例を示すフローチャートである。
【００２８】
まず、撮影装置１００が、被写体を撮影することにより、第１撮影画像を生成する（Ｓ１１）。撮影は、ユーザが撮影装置１００を操作することによって行われる。撮影画像は、例えば、水平方向Ｗ画素×垂直方向Ｈ画素の２次元のカラー画像である。撮影画像の画素値は、例えば、赤色成分の値であるＲ値、緑色成分の値であるＧ値、及び、青色成分の値であるＢ値を含む。
なお、画素値は、輝度値であるＹ値、色差値であるＣｂ値とＣｒ値、等を含んでいてもよい。
【００２９】
被写体の一例を図３に示す。図３において、三角形の物体２１が主被写体であり、矩形領域２２が第１撮影画像の撮影範囲である。
第１撮影画像の一例を図４に示す。図４は、図３の主被写体２１を撮影範囲２２で撮影することにより得られた第１撮影画像である。図４に示す第１撮影画像では、周辺部２３の輝度が被写体の実際の輝度（図３）よりも低く、画像の中心から縁に向かって輝度が低下する面内ムラが生じている。このように、校正されていない撮影装置で撮影を行うことにより得られた撮影画像には、周辺光量落ちなどによる面内ムラが生じることがある。
なお、面内ムラは、画像の中心から縁に向かって輝度が低下する面内ムラに限らない。また、撮影装置１００の特性は、面内ムラを生じさせる特性に限らない。例えば、撮影装置１００の特性は、被写体全体の輝度を低下させる特性であってもよい。撮影装置の特性は、撮影装置、撮影条件、撮影装置の使用環境、撮影装置の劣化度合、等に依存する。
【００３０】
Ｓ１１の次に、画像取得部２０１が、撮影装置１００から第１撮影画像（Ｓ１１で生成された第１撮影画像）を取得し、取得した第１撮影画像を画像記憶部２０２に記録する（Ｓ１２）。
【００３１】
そして、表示制御部２０６が、画像記憶部２０２から第１撮影画像（Ｓ１１で生成された第１撮影画像）を読み出し、読み出した第１撮影画像を表示装置３００に出力する（Ｓ１３）。それにより、Ｓ１１で生成された第１撮影画像が表示装置３００の画面に表示される。
【００３２】
次に、表示制御部２０６が、画像生成部２０５から撮影範囲画像を取得し、取得した撮影範囲画像を表示装置３００に出力する（Ｓ１４）。それにより、第１撮影画像と撮影範囲画像が配置された画像が表示装置３００の画面に表示される。
【００３３】
Ｓ１４の処理後の表示画像の一例を図５に示す。図５の例では、第１撮影画像２４が画面の中央付近に表示されている。また、撮影範囲画像として、枠画像２５とテキスト画像２６が表示されている。以後、表示された第１撮影画像２４を、撮影装置１００で生成された第１撮影画像と区別するために、“第１表示画像”と記載する。
撮影範囲画像は、第２撮影画像の撮影範囲とすべき領域を表す画像である。図５の例では、枠画像２５として、第１表示画像２４の輪郭を表す画像が表示されている。各辺が第１表示画像２４の辺に隣接する枠画像２５が表示されている。そして、テキスト画像２６として、第１表示画像２４の表示領域（枠画像２５で囲まれた領域）を撮影範囲として撮影すべきことを表すメッセージが記載された画像が表示されている。
第１撮影画像は撮影画像１００が生成した画像であり、第１表示画像２４は第１撮影画像を表示装置３００が表示することで得られた画像である。従って、第１表示画像２４の輝度（表示輝度）は、撮影装置１００の特性と表示装置３００の特性の影響を受けた輝度である。そのため、第１表示画像２４の輝度は、被写体の実際の輝度（図３）と一致するとは限らないし、撮影装置１００で生成された第１撮影画像の輝度（図４）と一致するとも限らない。第１表示画像２４の色（表示色）についても同様である。図５の例では、撮影装置１００の特性により、図４と同様の面内ムラが生じている。さらに、図５の例では、表示装置３００の特性により、画像全体に渡って、第１表示画像２４の輝度が図４の第１撮影画像の輝度よりも低い値に低減されている。
【００３４】
なお、撮影範囲画像は、Ｓ１４の処理までに生成されれば、どのタイミングで生成されてもよい。撮影範囲画像は、予め用意されていてもよい。
なお、枠画像２５の線種は破線に限らない。枠画像２５の線種は、太実線、点線、一点鎖線、等であってもよい。
なお、本実施例では、撮影範囲画像が図形（枠画像２５）と文字（テキスト画像２６）の両方を含む例を説明するが、撮影範囲画像に図形と文字の一方が含まれていなくてもよい。例えば、「撮影範囲を撮影画像の領域に合わせて撮影してください」等のメッセージが記載されたテキスト画像のみが撮影範囲画像として使用されてもよい。
なお、図５には、表示装置の特性が画像全体の輝度を低下させる特性である場合の例を示したが、表示装置の特性はことに限らない。例えば、表示装置の特性によって輝度ムラや色ムラが生じることもある。表示装置の特性は、表示装置、表示装置の使用環境、表示装置の劣化度合、等に依存する。
【００３５】
Ｓ１４の次に、撮影装置１００が、表示装置３００の画面を撮影することにより、第２撮影画像を生成する（Ｓ１５）。本実施例では、撮影範囲画像が表示されているため、ユーザに第１表示画像２４の領域を撮影範囲とする撮影を促すことができ、撮影範囲が第１表示画像２４の領域である撮影画像を第２撮影画像として得ることができる。第２撮影画像のサイズ及びフォーマットは、第１撮影画像と同じである。
なお、第２撮影画像は、第１撮影画像と同じ撮影条件（絞り値、シャッタースピード、等）で撮影を行うことにより生成される。
なお、第２撮影画像のサイズやフォーマットは、第１撮影画像と異なっていてもよい。第２撮影画像のサイズやフォーマットが第１撮影画像と異なっている場合には、第２撮影
画像のサイズとフォーマットを第１撮影画像に合わせる変換を行えばよい。
【００３６】
図６に、第２撮影画像の一例を示す。上述したように、撮影画像の輝度は、撮影装置１００の特性の影響を受けた輝度である。また、第２撮影画像は、第１撮影画像を表示装置３００が表示することで得られた第１表示画像を撮影した画像である。そのため、第２撮影画像の輝度は、撮影装置１００の特性の影響を２重に受け、且つ、表示装置３００の特性の影響を受けた輝度である。第２撮影画像の色についても同様である。図６に示す第２撮影画像では、撮影装置１００の特性の影響を２重に受けたことにより、周辺部２８の輝度が第１撮影画像の輝度（図４）よりも低い値に低減されており、図４の第１撮影画像よりも大きな面内ムラが生じている。さらに、表示装置３００の特性により、画像全体に渡って、図６の第２撮影画像の輝度が図４の第１撮影画像の輝度よりも低い値に低減されている。
【００３７】
Ｓ１５の次に、画像取得部２０１が、撮影装置１００から第２撮影画像（Ｓ１５で生成された第２撮影画像）を取得し、取得した第２撮影画像を画像記憶部２０２に記録する（Ｓ１６）。
【００３８】
次に、画像補正パラメータ決定部２０３が、画像記憶部２０２から第１撮影画像（Ｓ１１で生成された第１撮影画像）と第２撮影画像（Ｓ１５で生成された第２撮影画像）とを読み出す。そして、画像補正パラメータ決定部２０３は、第１撮影画像と第２撮影画像を用いて画像補正パラメータの値（パラメータ値）を算出する（Ｓ１７）。
【００３９】
本実施例では、画素毎に、Ｒ値を補正するためのＲ補正値、Ｇ値を補正するためのＧ補正値、及び、Ｂ値を補正するためのＢ補正値が算出される。具体的には、画素毎に、以下の式１−１〜１−３を用いてパラメータ値が算出される。式１−１〜１−３において、Ｘは画素の水平位置、Ｙは画素の垂直位置である。ＰＲ（Ｘ）（Ｙ）は、座標（水平位置，垂直位置）＝（Ｘ，Ｙ）の画素のＲ補正値であり、ＰＧ（Ｘ）（Ｙ）は、座標（Ｘ，Ｙ）の画素のＧ補正値であり、ＰＢ（Ｘ）（Ｙ）は、座標（Ｘ，Ｙ）の画素のＢ補正値である。Ｒ１（Ｘ）（Ｙ）は、第１撮影画像における座標（Ｘ，Ｙ）の画素のＲ値であり、Ｇ１（Ｘ）（Ｙ）は、第１撮影画像における座標（Ｘ，Ｙ）の画素のＧ値であり、Ｂ１（Ｘ）（Ｙ）は、第１撮影画像における座標（Ｘ，Ｙ）の画素のＢ値である。Ｒ２（Ｘ）（Ｙ）は、第２撮影画像における座標（Ｘ，Ｙ）の画素のＲ値であり、Ｇ２（Ｘ）（Ｙ）は、第２撮影画像における座標（Ｘ，Ｙ）の画素のＧ値であり、Ｂ２（Ｘ）（Ｙ）は、第１撮影画像における座標（Ｘ，Ｙ）の画素のＢ値である。
ＰＲ（Ｘ）（Ｙ）＝Ｒ１（Ｘ）（Ｙ）÷Ｒ２（Ｘ）（Ｙ）  ・・・（式１−１）
ＰＧ（Ｘ）（Ｙ）＝Ｇ１（Ｘ）（Ｙ）÷Ｇ２（Ｘ）（Ｙ）  ・・・（式１−２）
ＰＢ（Ｘ）（Ｙ）＝Ｂ１（Ｘ）（Ｙ）÷Ｂ２（Ｘ）（Ｙ）  ・・・（式１−３）
なお、パラメータ値の決定方法は上記方法に限らない。例えば、パラメータ値は、第１撮影画像の画素値と第２撮影画像の画素値の組み合わせ毎にパラメータ値を表すテーブルを用いて決定されてもよい。
【００４０】
Ｓ１７の次に、画像補正部２０４が、画像記憶部２０２から第１撮影画像（Ｓ１１で生成された第１撮影画像）を読み出し、画像補正パラメータ決定部２０３からパラメータ値（Ｓ１７で決定されたパラメータ値）を取得する。そして、画像補正部２０４は、パラメータ値を用いて第１撮影画像を補正することにより、補正後画像を生成する（Ｓ１８）。
【００４１】
本実施例では、画素毎に、Ｒ補正値を用いて第１撮影画像のＲ値が補正される。画素毎に、Ｇ補正値を用いて第１撮影画像のＧ値が補正される。そして、画素毎に、Ｂ補正値を
用いて第１撮影画像のＢ値が補正される。具体的には、画素毎に、以下の式２−１〜２−３を用いて、第１撮影画像の画素値が補正される。式２−１〜２−３において、Ｒ３（Ｘ）（Ｙ）は、補正後画像における座標（Ｘ，Ｙ）の画素のＲ値である。Ｇ３（Ｘ）（Ｙ）は、補正後画像における座標（Ｘ，Ｙ）の画素のＧ値である。そして、Ｂ２（Ｘ）（Ｙ）は、補正後画像における座標（Ｘ，Ｙ）の画素のＢ値である。
Ｒ３（Ｘ）（Ｙ）＝Ｒ１（Ｘ）（Ｙ）×ＰＲ（Ｘ）（Ｙ）  ・・・（式２−１）
Ｇ３（Ｘ）（Ｙ）＝Ｇ１（Ｘ）（Ｙ）×ＰＧ（Ｘ）（Ｙ）  ・・・（式２−２）
Ｂ３（Ｘ）（Ｙ）＝Ｂ１（Ｘ）（Ｙ）×ＰＢ（Ｘ）（Ｙ）  ・・・（式２−３）
【００４２】
Ｓ１８の次に、表示制御部２０６が、画像補正部２０４から補正後画像（Ｓ１８で得られた補正後画像）を取得し、取得した補正後画像を表示装置３００に出力する（Ｓ１９）。それにより、補正後画像が表示装置３００の画面に表示される。
図７に、Ｓ１９の処理後の表示画像の一例を示す。図７において、符号２９は補正後画像を示す。図７から、表示輝度と表示色が被写体の実際の見え（図３）に近い表示画像が得られていることがわかる。換言すれば、被写体の実際の見え（被写体の実際の輝度や色）が忠実に再現された表示画像が得られていることがわかる。
【００４３】
本実施例の効果について説明する。
本実施例では、以下の式３−１に示すように、第２撮影画像の画素値に対する第１撮影画像の画素値の割合が、パラメータ値として算出される。上述したように、第１撮影画像の画素値は、撮影装置１００の影響を受けた値である。そして、第２撮影画像の画素値は、撮影装置１００の特性の影響を２重に受け、且つ、表示装置３００の特性の影響を受けた値である。そのため、第２撮影画像の画素値は、第１撮影画像の画素値に対して撮影装置１００の入出力特性（入力値と出力値の対応関係を表す特性）と表示装置３００の入出力特性とを合成した値ということができる。従って、式３−１は、以下の式３−２のように表すことができ、以下の式３−３のように表すことができる。式３−１〜３−３において、“第１撮影画素値”は第１撮影画像の画素値であり、“第２撮影画素値”は第２撮影画像の画素値であり、“撮影特性”は撮影装置１００の入出力特性であり、“表示特性”は表示装置３００の入出力特性である。
パラメータ値＝第１撮影画素値÷第２撮影画素値  ・・・（式３−１）
パラメータ値＝第１撮影画素値
÷（表示特性×撮影特性×第１撮影画素値）
・・・（式３−２）
パラメータ値＝１÷（表示特性×撮影特性）      ・・・（式３−３）
【００４４】
また、本実施例では、以下の式４−１に示すように、パラメータ値を第１撮影画像の画素値に乗算することにより、補正後画像の画素値が算出される。上述したように、第１撮影画像の画素値は、撮影装置１００の影響を受けた値である。具体的には、第１撮影画像の画素値は、被写体の実際の見えを表す値（被写体の実際の輝度や色を表す値）に撮影装置１００の入出力特性を合成した値とである。そして、式３−３に示すように、パラメータ値は、撮影装置１００の入出力特性に表示装置３００の入出力特性を乗算した値で１を除算した値である。そのため、式４−１は、以下の式４−２のように表すことができる。そして、本実施例では、第１表示画像（画面に表示された第１撮影画像）の表示領域を撮影範囲とする第２撮影画像が得られる。そのため、第２撮影画像の領域のうち、第１表示画像の領域における撮影特性の影響度合を、第１撮影画像における撮影特性の影響度合と一致させることができる。その結果、式４−２の右辺の撮影特性を除去することができ、
補正後画像の画素値を以下の式４−３で表すことができる。式４−１〜４−３において、“補正後画素値”は補正後画像の画素値であり、“被写体値”は被写体の実際の見えを表す値である。
補正後画素値＝第１撮影画素値×パラメータ値    ・・・（式４−１）
補正後画素値＝（撮影特性×被写体値）÷（表示特性×撮影特性）
・・・（式４−２）
補正後画素値＝被写体値÷表示特性              ・・・（式４−３）
【００４５】
なお、第２撮影画像の撮影範囲が第１表示画像の表示領域と異なる場合、第２撮影画像の領域のうち、第１表示画像の領域における撮影特性の影響度合が、第１撮影画像における撮影特性の影響度合と異なってしまう。このような影響度合の差は、撮影特性の影響度合が撮影範囲内の位置間で異なることにより生じるものであり、第２撮影画像から第１表示画像の領域をトリミングすることによって解消できるものではない。そのため、式４−２の右辺の撮影特性を除去することができず、補正後画像に面内ムラが生じてしまう。本実施例では、第１表示画像の表示領域を撮影範囲とする第２撮影画像が得られるため、式４−２の右辺の撮影特性を除去することができる。
【００４６】
そして、本実施例では、補正後画像が表示装置に表示される。補正後画像の値（補正後表示値）は、以下の式５−１に示すように、補正後画素値に表示特性を合成した値である。ここで、補正後画素値は、式４−３に示すように、被写体値を表示特性で除算した値である。そのため、補正後表示値（補正後画像の表示輝度や表示色）は、以下の式５−２のように表すことができる。即ち、本実施例では、式５−１の右辺の表示特性を除去することができ、補正後表示値として被写体値と同じ値を得ることができる。このように、本実施例では、撮影装置１００の特性による表示値の変化、及び、表示装置３００の特性による表示値の変化を低減することができ、表示輝度や表示色が被写体の実際の見えに近い表示画像を得ることができる。
補正後表示値＝表示特性×補正後画素値  ・・・（式５−１）
補正後表示値＝被写体値                ・・・（式５−２）
【００４７】
以上述べたように、本実施例によれば、第１撮影画像が配置され且つ第２撮影画像の撮影範囲とすべき領域を表す画像が画面に表示される。それにより、撮影範囲が第１撮影画像の表示領域である撮影画像を第２撮影画像として得ることができ、表示輝度と表示色の少なくとも一方が被写体の実際の見えに近い表示画像をより確実に得ることができる。具体的には、校正されていない撮影装置を用いた場合にも、表示輝度と表示色の少なくとも一方が被写体の実際の見えに近い表示画像を得ることができる。
【００４８】
なお、本実施例では、撮影範囲画像を表示する例を説明したが、これに限らない。例えば、第１表示画像の領域以外の領域の色と輝度の少なくとも一方が変更された画像が画面に表示されてもよい。そのような表示を行えば、第２撮影画像の撮影範囲とすべき領域をユーザに把握させることができ、撮影範囲が第１撮影画像の表示領域である撮影画像を第２撮影画像として得ることができる。
【００４９】
なお、本実施例では、画素毎にパラメータ値を決定する例を説明したが、これに限らない。例えば、第１撮影画像の領域を構成する複数のブロック（複数画素からなる領域）のそれぞれについて、パラメータ値が決定されてもよい。ブロック毎にパラメータ値を決定する場合には、面内ムラに基づいてブロックのサイズが設定されていることが好ましい。
例えば、撮影範囲内の位置間の影響度合の差が大きい領域において、影響度合の差が小さい領域よりも小さいブロックが設定されていることが好ましい。具体的には、撮影装置１００の周辺光量落ちの影響を考慮して、第１撮影部の周辺部で中央部よりも小さいブロックが設定されていることが好ましい。
【００５０】
なお、本実施例では、パラメータ値が画素値に乗算する補正係数である場合の例を説明したが、これに限らない。例えば、パラメータ値は画素値に加算する補正値であってもよい。第１撮影画素値の画素値（補正前の画素値）とパラメータ値の組み合わせと補正後画素値との対応関係を表すテーブルを用いて、第１撮影画素値とパラメータ値から補正後画素値が決定されてもよい。また、第１撮影画素値と第２撮影画素値の組み合わせと補正画素値との対応関係を表す情報（関数やテーブル）を用いて、パラメータ値を決定せずに、補正後画素値が決定されてもよい。
【００５１】
なお、図２のフローチャートに示す処理が繰り返し実行されてもよい。例えば、補正後画像が画面に表示された状態で画面が撮影され、表示された補正後画像を撮影して得られた撮影画像を用いて補正後画像が再度補正されてもよい。それにより、撮影時に生じた誤差、パラメータの決定時に生じた誤差、等の誤差を低減することができ、被写体の実際の色や輝度により近い表示を行うことができる。
【００５２】
なお、画像処理装置２００が有する各機能部は、ハードウェアであってもよいし、コンピュータで実行されるプログラムであってもよい。具体的には、画像取得部２０１、画像補正パラメータ決定部２０３、画像補正部２０４、画像生成部２０５、及び、表示制御部２０６は、ハードウェアであってもよいし、コンピュータで実行されるプログラムであってもよい。
【００５３】
＜実施例２＞
以下、本発明の実施例２に係る画像処理装置及び画像処理方法について説明する。
（構成）
本実施例に係る画像処理システムの構成について説明する。
図８は、本実施例に係る画像処理システムの構成の一例を示すブロック図である。図８に示すように、本実施例に係る画像処理システムは、撮影装置１００、画像処理装置４００、表示装置３００、等を有する。
なお、実施例１（図１）と同じ装置や機能部については、実施例１と同じ符号を付し、その説明は省略する。
【００５４】
本実施例では、第１制御の前に、撮影装置１００によって表示装置３００の画面が撮影される。撮影範囲判断部４０１は、表示装置３００の画面を撮影して得られた撮影画像から、画面を撮影する際の撮影範囲を判断する。具体的には、画面を撮影する際の撮影範囲の位置及びサイズが判断される。撮影範囲判断部４０１は、撮影範囲の判断結果を表示制御部４０２に出力する。
なお、本実施例では、画面を撮影する際の撮影範囲が一定であるものとする。
【００５５】
表示制御部４０２は、実施例１（図１）の表示制御部２０６と同様の機能を有する。但し、本実施例では、第１制御が実施例１と異なる。本実施例に係る第１制御では、第１撮影画像（第１表示画像）の表示領域が撮影範囲判断部４０１で判断された撮影範囲と一致するように、第１撮影画像が表示装置３００の画面に表示させられる。
【００５６】
（動作）
本実施例に係る画像処理システムの動作について説明する。
図９は、本実施例に係る画像処理システムの動作の一例を示すフローチャートである。
【００５７】
まず、撮影装置１００が、被写体を撮影することにより、第１撮影画像を生成する（Ｓ４１）。
次に、画像取得部２０１が、撮影装置１００から第１撮影画像（Ｓ４１で生成された第１撮影画像）を取得し、取得した第１撮影画像を画像記憶部２０２に記録する（Ｓ４２）。
【００５８】
そして、表示制御部４０２が、所定の座標画像を表示装置３００に出力する（Ｓ４３）。それにより、座標画像が表示装置３００の画面に表示される。
図１０は、座標画像の一例を示す図である。図１０に示す座標画像６０は、表示位置毎に他の表示位置と異なる画像が配置された画像である。具体的には、座標画像６０は、複数の文字が配置された画像であり、表示位置毎に他の表示位置と異なる文字が配置された画像である。
【００５９】
次に、撮影装置１００が、表示装置３００の画面を撮影することにより、第３撮影画像を生成する（Ｓ４４）。具体的には、表示装置３００の画面に図１０の座標画像６０が表示された状態で表示装置３００の画面を撮影することにより、第３撮影画像が生成される。
【００６０】
そして、画像取得部２０１が、撮影装置１００から第３撮影画像（Ｓ４４で生成された第３撮影画像）を取得し、取得した第３撮影画像を画像記憶部２０２に記録する（Ｓ４５）。
【００６１】
次に、撮影範囲判断部４０１が、画像記憶部２０２から第３撮影画像（Ｓ４４で生成された第３撮影画像）を読み出す。そして、撮影範囲判断部４０１は、読み出した第３撮影画像に基づいて、画面を撮影する際の撮影範囲（Ｓ４４で生成された第３撮影画像の撮影範囲）を判断する（Ｓ４６）。その後、撮影範囲判断部４０１は、撮影範囲の判断結果を表示制御部４０２に出力する。
【００６２】
本実施例では、図１０に示す座標画像が表示された状態で画面が撮影される。そのため、第３撮影画像に写っている文字を検出し、文字の検出結果に基づいて第３撮影画像の撮影範囲を判断することができる。
なお、撮影範囲を判断するために使用する画像は、図１０に示す座標画像に限らない。例えば、表示位置毎に他の表示位置と異なる図形が配置された画像を使用しても、図１０に示す座標画像と同様の方法で撮影範囲を判断することができる。
また、撮影範囲の判断方法は上記方法に限らない。例えば、第３撮影画像を撮影する際に画面に表示された画像（判断用画像）と第３撮影画像とを比較することにより、撮影範囲が判断されてもよい。具体的には、判断用画像と第３撮影画像のそれぞれを用いてエッジ検出処理が行われてもよい。そして、判断用画像のエッジ検出処理の結果と、第３撮影画像のエッジ検出結果と、を比較することにより、撮影範囲が判断されてもよい。判断用画像は、どのような画像であってもよい。判断用画像として、Ｓ４１で生成された第１撮影画像が使用されてもよい。
【００６３】
Ｓ４６の次に、表示制御部４０２が、画像記憶部２０２から第１撮影画像（Ｓ４１で生成された第１撮影画像）を読み出し、撮影範囲判断部４０１から撮影範囲の判断結果（Ｓ４６の判断結果）を取得する。そして、表示制御部４０２は、取得した判断結果（撮影範囲の判断結果）に従って、読み出した第１撮影画像を表示装置３００に出力する（Ｓ４７）。それにより、第１撮影画像（第１表示画像）の表示領域が撮影範囲判断部４０１で判断された撮影範囲と一致するように、第１撮影画像が表示装置３００の画面に表示される。
【００６４】
そして、撮影装置１００が、表示装置３００の画面を撮影することにより、第２撮影画像を生成する（Ｓ４８）。本処理では、撮影範囲判断部４０１で判断された撮影範囲が撮影される。そのため、第２撮影画像として、撮影範囲が第１撮影画像（第１表示画像）の表示領域である撮影画像が生成される。
なお、第２撮影画像は、第１撮影画像と同じ撮影条件（絞り値、シャッタースピード、等）で撮影を行うことにより生成される。
【００６５】
次に、画像取得部２０１が、撮影装置１００から第２撮影画像（Ｓ４８で生成された第２撮影画像）を取得し、取得した第２撮影画像を画像記憶部２０２に記録する（Ｓ４９）。
【００６６】
そして、画像補正パラメータ決定部２０３が、画像記憶部２０２から第１撮影画像（Ｓ４１で生成された第１撮影画像）と第２撮影画像（Ｓ４８で生成された第２撮影画像）とを読み出す。そして、画像補正パラメータ決定部２０３は、第１撮影画像と第２撮影画像を用いて画像補正パラメータの値（パラメータ値）を算出する（Ｓ５０）。
【００６７】
次に、画像補正部２０４が、画像記憶部２０２から第１撮影画像（Ｓ４１で生成された第１撮影画像）を読み出し、画像補正パラメータ決定部２０３からパラメータ値（Ｓ５０で決定されたパラメータ値）を取得する。そして、画像補正部２０４は、パラメータ値を用いて第１撮影画像を補正することにより、補正後画像を生成する（Ｓ５１）。
【００６８】
そして、表示制御部４０２が、画像補正部２０４から補正後画像（Ｓ５１で得られた補正後画像）を取得し、取得した補正後画像を表示装置３００に出力する（Ｓ５２）。それにより、補正後画像が表示装置３００の画面に表示される。
【００６９】
図１１に、Ｓ５２の処理後の表示画像の一例を示す。図１１において、符号６１は補正後画像を示す。図１１から、表示輝度と表示色が被写体の実際の見え（図３）に近い表示画像が得られていることがわかる。本実施例では、画面を撮影する際の撮影範囲が判断される。そして、判断された撮影範囲に対応する表示領域に第１撮影画像（第１表示画像）が表示された状態で画面を撮影することにより、第２撮影画像が生成される。それにより、撮影範囲が第１撮影画像（第１表示画像）の表示領域である撮影画像を第２撮影画像として得ることができ、表示輝度と表示色が被写体の実際の見えに近い表示画像を得ることができる。
【００７０】
以上述べたように、本実施例によれば、画面を撮影する際の撮影範囲が判断される。そして、判断された撮影範囲に対応する表示領域に第１撮影画像（第１表示画像）が表示された状態で画面を撮影することにより、第２撮影画像が生成される。それにより、実施例１よりも確実に、撮影範囲が第１撮影画像（第１表示画像）の表示領域である撮影画像を第２撮影画像として得ることができる。その結果、実施例１よりも確実に、表示輝度や表示色が被写体の実際の見えに近い表示画像を得ることができる。
なお、撮影範囲判断部４０１と表示制御部４０２は、ハードウェアであってもよいし、コンピュータで実行されるプログラムであってもよい。
【００７１】
＜実施例３＞
以下、本発明の実施例３に係る画像処理装置及び画像処理方法について説明する。
（構成）
本実施例に係る画像処理システムの構成について説明する。
図１２は、本実施例に係る画像処理システムの構成の一例を示すブロック図である。図１２に示すように、本実施例に係る画像処理システムは、撮影装置１００、画像処理装置
５００、表示装置３００、等を有する。
なお、実施例１（図１）と同じ装置や機能部については、実施例１と同じ符号を付し、その説明は省略する。
【００７２】
ずれ判断部５０１は、第２撮影画像の撮影範囲が第１撮影画像（第１表示画像）の表示領域に一致しているか否かを第２撮影画像に基づいて判断する。そして、ずれ判断部５０１は、第２撮影画像の撮影範囲が第１撮影画像（第１表示画像）の表示領域に一致しているか否かの判断結果を、画像生成部５０２に出力する。
【００７３】
画像生成部５０２は、実施例１（図１）の画像生成部２０５と同様の機能を有する。また、画像生成部５０２は、ずれ判断部５０１で第２撮影画像の撮影範囲が第１撮影画像（第１表示画像）の表示領域に一致していないと判断された場合に、ずれ通知画像を生成し、生成したずれ通知画像を表示制御部５０３に出力する。ずれ通知画像は、第２撮影画像の撮影範囲が第１撮影画像（第１表示画像）の表示領域からずれていることをさらに表す撮影範囲画像である。
【００７４】
表示制御部５０３は、実施例１（図１）の表示制御部２０６と同様の機能を有する。また、表示制御部５０３は、ずれ判断部５０１で第２撮影画像の撮影範囲が第１撮影画像（第１表示画像）の表示領域に一致していないと判断された場合に、第２撮影画像の撮影範囲が第１撮影画像の表示領域からずれていることをユーザに通知する。具体的には、表示制御部５０３は、画像生成部５０２からずれ通知画像が出力された場合に、ずれ通知画像を表示装置３００の画面に表示させる。
なお、ユーザへの通知方法は上記方法に限らない。例えば、音声を発することによりユーザへの通知が用いて行われてもよいし、表示装置の画面とは異なる発光部を点灯させることによりユーザへの通知が行われてもよい。第２撮影画像の撮影範囲が第１撮影画像の表示領域からずれていることの通知は、表示制御部５０３とは異なる機能部で行われてもよい。ユーザ通知を行う機能部が別途設けられていてもよい。
【００７５】
なお、第１撮影画像（第１表示画像）の表示領域に対する第２撮影画像の撮影範囲のずれ量が判断されてもよい。そして、ずれ量が閾値より大きい場合に、ユーザへの通知が行われてもよい。閾値は、メーカーによって予め定められた固定値であってもよいし、ユーザが変更可能な値であってもよい。
なお、ずれ判断部５０１の判断結果に基づいて画像補正部２０４の処理が制御されてもよい。例えば、第２撮影画像の撮影範囲が第１撮影画像（第１表示画像）の表示領域に一致していると判断された場合にのみ、画像補正部２０４の処理（第１撮影画像の補正）が行われてもよい。ずれ量が閾値以下の場合にのみ、画像補正部２０４の処理が行われてもよい。
なお、ずれ判断部５０１の判断結果が画像生成部５０２と表示制御部５０３に出力されてもよい。表示制御部５０３の処理は、画像生成部５０２からのずれ通知画像ではなく、ずれ判断部５０１からの判断結果に基づいて制御されてもよい。
【００７６】
（動作）
本実施例に係る画像処理システムの動作について説明する。
図１３は、本実施例に係る画像処理システムの動作の一例を示すフローチャートである。
【００７７】
まず、撮影装置１００が、被写体を撮影することにより、第１撮影画像を生成する（Ｓ７１）。
次に、画像取得部２０１が、撮影装置１００から第１撮影画像（Ｓ７１で生成された第１撮影画像）を取得し、取得した第１撮影画像を画像記憶部２０２に記録する（Ｓ７２）
。
そして、表示制御部５０３が、画像記憶部２０２から第１撮影画像（Ｓ７１で生成された第１撮影画像）を読み出し、読み出した第１撮影画像を表示装置３００に出力する（Ｓ７３）。それにより、Ｓ７１で生成された第１撮影画像が表示装置３００の画面に表示される。
次に、表示制御部５０３が、画像生成部５０２から撮影範囲画像を取得し、取得した撮影範囲画像を表示装置３００に出力する（Ｓ７４）。それにより、第１撮影画像と撮影範囲画像が配置された画像が表示装置３００の画面に表示される。ここでは、実施例１と同様の撮影範囲画像（図５の枠画像２５とテキスト画像２６）が表示される。
そして、撮影装置１００が、表示装置３００の画面を撮影することにより、第２撮影画像を生成する（Ｓ７５）。第２撮影画像は、第１撮影画像と同じ撮影条件（絞り値、シャッタースピード、等）で撮影を行うことにより生成される。
次に、画像取得部２０１が、撮影装置１００から第２撮影画像（Ｓ７５で生成された第２撮影画像）を取得し、取得した第２撮影画像を画像記憶部２０２に記録する（Ｓ７６）。
【００７８】
そして、ずれ判断部５０１が、画像記憶部２０２から第２撮影画像（Ｓ７５で生成された第１撮影画像）を読み出す。その後、ずれ判断部５０１は、読み出した第２撮影画像に基づいて、第２撮影画像の撮影範囲が第１撮影画像（第１表示画像）の表示領域に一致しているか否かを判断する（Ｓ７７）。例えば、ずれ判断部５０１は、第２撮影画像に枠画像２５が写っていない場合に、第２撮影画像の撮影範囲が第１撮影画像の表示領域に一致していると判断する。そして、ずれ判断部５０１は、第２撮影画像に枠画像２５が写っている場合に、第２撮影画像の撮影範囲が第１撮影画像の表示領域に一致していないと判断する。第２撮影画像の撮影範囲が第１撮影画像の表示領域に一致していないと判断された場合には、Ｓ７８へ処理が進められる。第２撮影画像の撮影範囲が第１撮影画像の表示領域に一致していると判断された場合には、Ｓ７９へ処理が進められる。
【００７９】
なお、上述したように、第１撮影画像（第１表示画像）の表示領域に対する第２撮影画像の撮影範囲のずれ量が判断されてもよい。そして、ずれ量が閾値より大きい場合にＳ７８へ処理が進められ、ずれ量が閾値以下の場合にＳ７９へ処理が進められてもよい。例えば、第１撮影画像と第２撮影画像の非類似度（類似度の逆数）をずれ量として用いることができる。また、第２撮影画像に写っている枠画像２５から第２撮影画像の輪郭までの距離の最小値をずれ量として用いることができる。
【００８０】
Ｓ７８では、画像生成部５０２がずれ通知画像を生成し、表示制御部５０３がずれ通知画像を表示装置３００に出力する。それにより、ずれ通知画像が表示装置３００の画面に表示される。
Ｓ７８の処理後の表示画像の一例を図１４に示す。図１４の例では、図５のテキスト画像２６の代わりに、ずれ通知画像であるテキスト画像９３が表示されている。テキスト画像９３を表示することにより、第２撮影画像の撮影範囲がずれていることをユーザに把握させることができ、画面の再撮影（第２撮影画像の再取得）をユーザに促すことができる。Ｓ７８の次にＳ７５へ処理が戻される。そして、Ｓ７７で第２撮影画像の撮影範囲が第１撮影画像（第１表示画像）の表示領域に一致していると判断されるまで、Ｓ７５〜Ｓ７８の処理が繰り返される。
なお、図１４の例では、撮影範囲のずれが生じていることと、第２撮影画像の撮影範囲とすべき領域と、を表す撮影範囲画像が表示されているが、撮影範囲がずれていることのみを表す撮影範囲画像が表示されてもよい。
【００８１】
Ｓ７９では、画像補正パラメータ決定部２０３が、画像記憶部２０２から第１撮影画像（Ｓ７１で生成された第１撮影画像）と第２撮影画像（最後にＳ７５で生成された第２撮
影画像）とを読み出す。そして、画像補正パラメータ決定部２０３は、第１撮影画像と第２撮影画像を用いて画像補正パラメータの値（パラメータ値）を算出する。
【００８２】
次に、画像補正部２０４が、画像記憶部２０２から第１撮影画像（Ｓ７１で生成された第１撮影画像）を読み出し、画像補正パラメータ決定部２０３からパラメータ値（Ｓ７９で決定されたパラメータ値）を取得する。そして、画像補正部２０４は、パラメータ値を用いて第１撮影画像を補正することにより、補正後画像を生成する（Ｓ８０）。
【００８３】
そして、表示制御部５０３が、画像補正部２０４から補正後画像（Ｓ８０で得られた補正後画像）を取得し、取得した補正後画像を表示装置３００に出力する（Ｓ８１）。それにより、補正後画像が表示装置３００の画面に表示される。
【００８４】
以上述べたように、本実施例によれば、第１撮影画像（第１表示画像）の表示領域に対する第２撮影画像の撮影範囲のずれ量が判断される。そして、ずれ量が閾値より大きい場合（第２撮影画像の撮影範囲のずれが生じている場合）に、第２撮影画像の撮影範囲が第１撮影画像の表示領域からずれていることがユーザに通知される。それにより、第２撮影画像の撮影範囲がずれていることをユーザに把握させることができ、画面の再撮影（第２撮影画像の再取得）をユーザに促すことができる。ひいては、実施例１よりも確実に、撮影範囲が第１撮影画像の表示領域である撮影画像を第２撮影画像として得ることができる。そして、実施例１よりも確実に、表示輝度や表示色が被写体の実際の見えに近い表示画像を得ることができる。
【００８５】
なお、第１制御では、第２撮影画像の撮影範囲とすべき領域を表わさない画像が表示されてもよい。例えば、第１制御では、撮影範囲画像が表示されずに、第１撮影画像と背景のみからなる画像が表示されてもよい。第２撮影画像の撮影範囲が第１撮影画像の表示領域からずれていることがユーザに通知されれば、ユーザに画面の再撮影を促すことができ、撮影範囲が第１撮影画像の表示領域である撮影画像を第２撮影画像として得ることができる。但し、第２撮影画像の撮影範囲とすべき領域を表す画像が表示されれば、第２撮影画像の撮影範囲とすべき領域を表わさない画像が表示される場合に比べて、撮影範囲が第１撮影画像の表示領域である第２撮影画像を容易に得ることができる。
なお、ずれ判断部５０１、画像生成部５０２、及び、表示制御部５０３は、ハードウェアであってもよいし、コンピュータで実行されるプログラムであってもよい。
【００８６】
＜その他の実施例＞
記憶装置に記録されたプログラムを読み込み実行することで前述した実施例の機能を実現するシステムや装置のコンピュータ（又はＣＰＵ、ＭＰＵ等のデバイス）によっても、本発明を実施することができる。また、例えば、記憶装置に記録されたプログラムを読み込み実行することで前述した実施例の機能を実現するシステムや装置のコンピュータによって実行されるステップからなる方法によっても、本発明を実施することができる。この目的のために、上記プログラムは、例えば、ネットワークを通じて、又は、上記記憶装置となり得る様々なタイプの記録媒体（つまり、非一時的にデータを保持するコンピュータ読取可能な記録媒体）から、上記コンピュータに提供される。したがって、上記コンピュータ（ＣＰＵ、ＭＰＵ等のデバイスを含む）、上記方法、上記プログラム（プログラムコード、プログラムプロダクトを含む）、上記プログラムを非一時的に保持するコンピュータ読取可能な記録媒体は、いずれも本発明の範疇に含まれる。
【符号の説明】
【００８７】
２００，４００，５００  画像処理装置
２０１  画像取得部
２０２  画像記憶部
２０３  画像補正パラメータ決定部
２０４  画像補正部
２０５，５０２  画像生成部
２０６，４０２，５０３  表示制御部
４０１  撮影範囲判断部
５０１  ずれ判断部
【図１】
2015171023.tif 000003
【図２】
2015171023.tif 000004
【図３】
2015171023.tif 000005
【図４】
2015171023.tif 000006
【図５】
2015171023.tif 000007
【図６】
2015171023.tif 000008
【図７】
2015171023.tif 000009
【図８】
2015171023.tif 000010
【図９】
2015171023.tif 000011
【図１０】
2015171023.tif 000012
【図１１】
2015171023.tif 000013
【図１２】
2015171023.tif 000014
【図１３】
2015171023.tif 000015
【図１４】
2015171023.tif 000016