(57)【特許請求の範囲】
【請求項１】
撮像素子を用いて被写体を撮像し、該撮像により取得される画像を記録媒体に記録するデジタルカメラにおいて、
前記撮像素子の撮像面全体の第１の撮像エリアよりも小さい第２の撮像エリアから前記記録媒体に記録するための第１の画像を取得する第１の画像取得手段と、
前記第２の撮像エリアよりも広い撮像エリアから第２の画像を取得する第２の画像取得手段と、
前記第２の画像に基づいて前記第１の画像のホワイトバランス調整に利用可能な情報を生成する情報生成手段と、
前記第１の画像とともに、該第１の画像に関連付けて前記ホワイトバランス調整に利用可能な情報を前記記録媒体に記録する記録手段と、
を備えたことを特徴とするデジタルカメラ。
【請求項２】
前記第１の画像取得手段は、電子ズーム手段又は前記第１の撮像エリアからパノラマのアスペクト比の画像を抽出するパノラマ切替手段である請求項１のデジタルカメラ。
【請求項３】
前記情報生成手段は、前記記録媒体に記録される第１の画像と同じ信号処理が施された前記第２の画像に基づいて前記第１の画像のホワイトバランス調整に利用可能な情報を生成することを特徴とする請求項１又は２のデジタルカメラ。
【請求項４】
前記ホワイトバランス調整に利用可能な情報は、前記第２の画像の画面全体のＲ、Ｇ、Ｂ信号のそれぞれの平均値又は各平均値の比、前記第２の画像の画面全体を複数のエリアに分割した各分割エリアごとのＲ、Ｇ、Ｂ信号のそれぞれの平均値又は各平均値の比、若しくは輝度信号及び色差信号のそれぞれの平均値、前記第２の画像の画面全体の１又は複数のハイライト点のＲ、Ｇ、Ｂ信号又はハイライト点のＲ、Ｇ、Ｂ信号の比もしくはハイライト点の輝度信号と色差信号、前記第２の画像の画面全体のなかの最大のＲ、Ｇ、Ｂ信号又は最大のＲ、Ｇ、Ｂ信号の比、及び前記第２の画像から作成したサムネイル画像のうちの１つを含むことを特徴とする請求項１、２又は３のデジタルカメラ。
【請求項５】
前記記録手段は、前記ホワイトバランス調整に利用可能な情報をタグ情報として前記第１の画像が記録される画像ファイルに記録することを特徴とする請求項１乃至４のいずれかに記載のデジタルカメラ。
【請求項６】
撮像素子を用いて被写体を撮像し、該撮像により取得される画像を記録媒体に記録するデジタルカメラにおいて、
前記撮像素子の撮像面全体の第１の撮像エリアよりも小さい第２の撮像エリアから前記記録媒体に記録するための第１の画像を取得する第１の画像取得手段と、
前記第２の撮像エリアよりも広い撮像エリアから第２の画像を取得する第２の画像取得手段と、
前記第２の画像に基づいて前記第１の画像のシーン判別に利用可能な情報を生成する情報生成手段と、
前記第１の画像とともに、該第１の画像に関連付けて前記シーン判別に利用可能な情報を前記記録媒体に記録する記録手段と、
を備えたことを特徴とするデジタルカメラ。
【請求項７】
前記第１の画像取得手段は、電子ズーム手段、又は前記第１の撮像エリアからパノラマのアスペクト比の画像を抽出するパノラマ切替手段である請求項６のデジタルカメラ。
【請求項８】
前記情報生成手段は、前記記録媒体に記録される第１の画像と同じ信号処理が施された前記第２の画像に基づいて前記第１の画像のシーン判別に利用可能な情報を生成することを特徴とする請求項６又は７のデジタルカメラ。
【請求項９】
前記シーン判別に利用可能な情報は、前記第２の画像の画面全体を複数のエリアに分割した各分割エリアごとのＲ、Ｇ、Ｂ信号のそれぞれの平均値、各分割エリアごとの輝度信号の平均値、各分割エリアごとのＧ信号の平均値、及び前記第２の画像から作成したサムネイル画像のうちの１つを含むことを特徴とする請求項６、７又は８のデジタルカメラ。
【請求項１０】
前記記録手段は、前記シーン判別に利用可能な情報をタグ情報として前記第１の画像が記録される画像ファイルに記録することを特徴とする請求項６乃至９のいずれかに記載のデジタルカメラ。
【請求項１１】
請求項１乃至５のいずれかに記載のデジタルカメラによって前記記録媒体に記録された前記第１の画像と、該第１の画像と関連付けられて前記記録媒体に記録された前記ホワイトバランス調整に利用可能な情報とを読み取る読取手段と、
前記読み取ったホワイトバランス調整に利用可能な情報、又は前記読み取った第１の画像及びホワイトバランス調整に利用可能な情報に基づいて前記第１の画像のホワイトバランス補正値を求める算出手段と、
前記算出手段によって求めたホワイトバランス補正値に基づいて前記読み取った第１の画像をホワイトバランス制御するホワイトバランス制御手段と、
前記ホワイトバランス制御手段によってホワイトバランス制御された前記第１の画像に基づいてプリント用紙に前記第１の画像を印画するプリント手段と、
を備えたことを特徴とするプリンタ。
【請求項１２】
請求項６乃至１０のいずれかに記載のデジタルカメラによって前記記録媒体に記録された前記第１の画像と、該第１の画像と関連付けられて前記記録媒体に記録された前記シーン判別に利用可能な情報とを読み取る読取手段と、
前記読み取ったシーン判別に利用可能な情報、又は前記読み取った第１の画像及びシーン判別に利用可能な情報に基づいて前記第１の画像のシーン判別を行うシーン判別手段と、
前記シーン判別手段によるシーン判別に基づいて前記読み取った第１の画像を画像処理する画像処理手段と、
前記画像処理手段によって画像処理された前記第１の画像に基づいてプリント用紙に前記第１の画像を印画するプリント手段と、
を備えたことを特徴とするプリンタ。
【請求項１３】
前記シーン判別手段によって判別されるシーンは、逆光シーン、順光シーン及びスポット光シーンのうちの１つを含むことを特徴とする請求項１２のプリンタ。
【請求項１４】
前記画像処理手段は、前記シーン判別手段によるシーン判別に基づいて前記読み取った第１の画像のシャープネス及び階調のうちの少なくとも１つを制御することを特徴とする請求項１２又は１３のプリンタ。
【請求項１５】
撮像素子を用いて被写体を撮像し、該撮像により取得される画像を記録媒体に記録するデジタルカメラにおいて、
前記撮像素子を介して取得された画像からズームエリアの画像を切り出してズーム画像を生成する電子ズーム手段と、
電子ズーム前の全体画像の画角でのサムネール画像を生成する手段と、
前記電子ズーム手段で生成されたズーム画像を前記記録媒体に記録する記録手段であって、タグ情報として前記サムネール画像及び電子ズーム情報が記録された前記ズーム画像を前記記録媒体に記録する記録手段と、
を備えたことを特徴とするデジタルカメラ。
【請求項１６】
撮像素子を用いて被写体を撮像し、該撮像により取得される画像を記録媒体に記録するデジタルカメラにおいて、
画像を表示する画像表示手段と、
前記画像表示手段に表示された画像の一部領域を指定し、当該指定された領域を切り出してトリミング画像を生成するトリミング処理手段と、
トリミング前の全体画像の画角でのサムネール画像を生成する手段と、
前記トリミング処理手段で生成されたトリミング画像を前記記録媒体に記録する記録手段であって、タグ情報として前記サムネール画像及びトリミング情報が記録された前記トリミング画像を前記記録媒体に記録する記録手段と、
を備えたことを特徴とするデジタルカメラ。
【請求項１７】
電子ズームされたズーム画像又はトリミングされたトリミング画像をプリント処理するプリンタであって、
タグ情報として電子ズーム前の全体画像の画角でのサムネール画像が記録されたズーム画像、又は、タグ情報としてトリミング前の全体画像の画角でのサムネール画像が記録されたトリミング画像の入力を受け付ける画像受付手段と、
前記サムネール画像からプリントセットアップ処理を実行する実行手段と、
からなることを特徴とするプリンタ。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明はデジタルカメラ及びプリンタに係り、特に電子ズーム撮影やパノラマ撮影、トリミング操作等により元画像から切り出した画像を記録媒体に記録するデジタルカメラ及びその記録媒体に記録された画像を印画するプリンタに関する。
【０００２】
【従来の技術】
従来、電子ズーム撮影やパノラマ撮影、トリミング操作が可能なデジタルカメラがある。この種のデジタルカメラによって電子ズーム撮影を行う場合には、撮像素子の撮像面全体の撮像エリアの画像から一部のエリアの画像を切り出し、また、電子ズームの倍率等によって記録画素数が不足する場合には、切り出した画像の画素数を補間処理により増加してメモリカードに記録する。また、パノラマ撮影を行う場合には、撮像素子の撮像面全体の撮像エリアの画像から上側及び下側の画像をカットし、中央部分の画像をメモリカードに記録する。
【０００３】
また、上記電子ズーム撮影等におけるホワイトバランス制御や露出制御は、切り出した画像に基づいて行うようにしている（特開２０００−１３６７５号公報）。
【０００４】
一方、従来のデジタルプリンタなどのプリンタは、カメラ側に自動露出（ＡＥ）制御、自動ホワイトバランス（ＡＷＢ）制御の不具合によって不適切な明るさ・ホワイトバランスで撮影された画像を、好ましい画質に自動補正するオートセットアップ機能が付いているものが多い。また、入力画像からシーンの特徴（逆光、順光など）を自動判別して階調補正するプリンタが提案されている（特開平８−６２７４１号公報）。
【０００５】
ところで、電子ズーム撮影やパノラマ撮影された画像をプリントする場合には、プリンタでのＡＷＢ制御に必要な光源情報が少なくなるという問題がある。例えば、花をズームアップした画像などを考えると、電子ズーム撮影することで、光源情報を抽出するのが困難になり、適正なＡＷＢ制御ができない場合がある。
【０００６】
また、プリント時に入力画像のシーンを自動判別して階調補正やシャープネス調整などを行う場合に、その入力画像が電子ズームされた画像の場合には、シーンの予測が難しくなるという問題がある。例えば、入力画像のコントラストが少ない場合に、逆光シーンを電子ズームしたためにコントラストが少なくなっているのか、もともとコントラストが少ない画像なのかが判別できない。
【０００７】
また、電子ズームを使用した画像の場合、ズーム後の画像はズーム前の画像に比べ、背景等がなくなっていることが多い。通常、オートホワイトバランスや自動露出は、画角内の白色や反射率を捕らえて処理するので、ズーム後の画像に基づいてオートホワイトバランス、自動露出等の処理が行われると、画角内に白色部がなくなっていることが多いためカラーフェリアなどの破綻をきたす場合があり、適正なホワイトバランス、自動露出が得られない画像になることが多い。そこで、撮像装置内では、通常、ズーム画像に対して撮影時にズーム使用前の撮影画像の画角全体からオートホワイトバランス、自動露出等の処理を実施して好適な画像を得られるようにしている。特開２０００−１３６７５は、パノラマや電子ズーム時においてズームエリアとその周辺の情報から自動露出、オートホワイトバランスを行うことを開示している。
【０００８】
また、撮影後に画像をトリミングする場合は、通常、もともとトリミング前の撮影画像の画角全体からオートホワイトバランス、自動露出等の処理を実施しているため、撮像装置内では、トリミング部分のホワイトバランス、適正露出が損なわれることはほとんどない。
【０００９】
しかし、ズーム後の画像やトリミング後の画像をプリントする場合は、電子ズームやトリミングがなされた画像は、ズームやトリミングが実行された後の画像の画角にてプリンタのセットアップが行われる。すなわち、電子ズームやトリミングがなされた画像から、ホワイトバランスの補正等を行う場合がほとんどである。したがって、もともとの撮影画像の、大きい画角における白色点等のデータがプリンタへいかないことがたびたびあり、プリント画像においてカラーフェリアが破綻したり強い補正がかかったりして好適な画像が得られないことがあった。
【００１０】
【発明が解決しようとする課題】
本発明はこのような事情に鑑みてなされたもので、電子ズーム撮影やパノラマ撮影、トリミング操作された画像を記録媒体に記録する際に、電子ズーム前の画像やパノラマ切替え前の画像、トリミング操作前の画像から得られるホワイトバランス調整に利用可能な情報及び／又はシーン判別に利用可能な情報を、電子ズーム撮影やパノラマ撮影、トリミング操作された画像の付属情報として記録媒体に記録することができるデジタルカメラ及びその付属情報を利用して電子ズーム撮影やパノラマ撮影、トリミング操作された画像のプリントを行うことができるプリンタを提供することを目的とする。
【００１１】
【課題を解決するための手段】
前記目的を達成するために本願請求項１に係る発明は、撮像素子を用いて被写体を撮像し、該撮像により取得される画像を記録媒体に記録するデジタルカメラにおいて、前記撮像素子の撮像面全体の第１の撮像エリアよりも小さい第２の撮像エリアから前記記録媒体に記録するための第１の画像を取得する第１の画像取得手段と、前記第２の撮像エリアよりも広い撮像エリアから第２の画像を取得する第２の画像取得手段と、前記第２の画像に基づいて前記第１の画像のホワイトバランス調整に利用可能な情報を生成する情報生成手段と、前記第１の画像とともに、該第１の画像に関連付けて前記ホワイトバランス調整に利用可能な情報を前記記録媒体に記録する記録手段と、を備えたことを特徴としている。
【００１２】
前記第１の画像取得手段は、本願請求項２に示すように電子ズーム手段又は前記第１の撮像エリアからパノラマのアスペクト比の画像を抽出するパノラマ切替手段であり、電子ズーム手段による電子ズームに応じて第１の画像を取得し（切り出し）、又はパノラマ切替手段によるパノラマ切替えによって上側及び下側をカットした中央部分の第１の画像を取得する。
【００１３】
前記第２の画像取得手段は、前記第２の撮像エリアよりも広い撮像エリアから第２の画像を取得するが、好ましくは前記撮像素子の撮像面全体の第１の撮像エリア全体の画像（第２の画像）を取得する。
【００１４】
前記情報生成手段は、本願請求項３に示すように前記記録媒体に記録される第１の画像（記録される最終画像）と同じ信号処理が施された前記第２の画像に基づいて前記第１の画像のホワイトバランス調整に利用可能な情報を生成することを特徴としている。
【００１５】
また、前記ホワイトバランス調整に利用可能な情報としては、本願請求項４に示すように前記第２の画像の画面全体のＲ、Ｇ、Ｂ信号のそれぞれの平均値又は各平均値の比、前記第２の画像の画面全体を複数のエリアに分割した各分割エリアごとのＲ、Ｇ、Ｂ信号のそれぞれの平均値又は各平均値の比、若しくは輝度信号及び色差信号のそれぞれの平均値、前記第２の画像の画面全体の１又は複数のハイライト点のＲ、Ｇ、Ｂ信号又はハイライト点のＲ、Ｇ、Ｂ信号の比もしくはハイライト点の輝度信号と色差信号、前記第２の画像の画面全体のなかの最大のＲ、Ｇ、Ｂ信号又は最大のＲ、Ｇ、Ｂ信号の比、及び前記第２の画像から作成したサムネイル画像のうちの１つを含むことを特徴としている。
【００１６】
前記記録手段は、本願請求項５に示すように前記ホワイトバランス調整に利用可能な情報をタグ情報として前記第１の画像が記録される画像ファイルに記録することを特徴としている。
【００１７】
本願請求項６に係る発明は、撮像素子を用いて被写体を撮像し、該撮像により取得される画像を記録媒体に記録するデジタルカメラにおいて、前記撮像素子の撮像面全体の第１の撮像エリアよりも小さい第２の撮像エリアから前記記録媒体に記録するための第１の画像を取得する第１の画像取得手段と、前記第２の撮像エリアよりも広い撮像エリアから第２の画像を取得する第２の画像取得手段と、前記第２の画像に基づいて前記第１の画像のシーン判別に利用可能な情報を生成する情報生成手段と、前記第１の画像とともに、該第１の画像に関連付けて前記シーン判別に利用可能な情報を前記記録媒体に記録する記録手段と、を備えたことを特徴としている。
【００１８】
本願請求項６に係る発明は、本願請求項１に係る発明がホワイトバランス調整に利用可能な情報を記録媒体に記録しているのに対し、シーン判別に利用可能な情報を記録媒体に記録する点で相違している。即ち、第１の画像よりも広い撮像エリアから得られる第２の画像に基づいてシーン判別に利用可能な情報を生成し、第１の画像とともにシーン判別に利用可能な情報を記録媒体に記録している。これにより、第１の画像をプリントする際にシーンに応じた画像処理を行うプリンタでは、前記シーン判別に利用可能な情報に基づいて前記第１の画像のシーンを良好に判別することができる。
【００１９】
前記第１の画像取得手段は、本願請求項７に示すように電子ズーム手段又は前記第１の撮像エリアからパノラマのアスペクト比の画像を抽出するパノラマ切替手段であり、電子ズーム手段による電子ズームに応じて第１の画像を取得し（切り出し）、又はパノラマ切替手段によるパノラマ切替えによって上側及び下側をカットした中央部分の第１の画像を取得する。
【００２０】
前記情報生成手段は、本願請求項８に示すように前記記録媒体に記録される第１の画像と同じ信号処理が施された前記第２の画像に基づいて前記第１の画像のシーン判別に利用可能な情報を生成することを特徴としている。
【００２１】
前記シーン判別に利用可能な情報は、本願請求項９に示すように前記第２の画像の画面全体を複数のエリアに分割した各分割エリアごとのＲ、Ｇ、Ｂ信号のそれぞれの平均値、各分割エリアごとの輝度信号の平均値、各分割エリアごとのＧ信号の平均値、及び前記第２の画像から作成したサムネイル画像のうちの１つを含むことを特徴としている。
【００２２】
前記記録手段は、本願請求項１０に示すように前記シーン判別に利用可能な情報をタグ情報として前記第１の画像が記録される画像ファイルに記録することを特徴としている。
【００２３】
本願請求項１１に係るプリンタは、請求項１乃至５のいずれかに記載のデジタルカメラによって前記記録媒体に記録された前記第１の画像と、該第１の画像と関連付けられて前記記録媒体に記録された前記ホワイトバランス調整に利用可能な情報とを読み取る読取手段と、前記読み取ったホワイトバランス調整に利用可能な情報、又は前記読み取った第１の画像及びホワイトバランス調整に利用可能な情報に基づいて前記第１の画像のホワイトバランス補正値を求める算出手段と、前記算出手段によって求めたホワイトバランス補正値に基づいて前記読み取った第１の画像をホワイトバランス制御するホワイトバランス制御手段と、前記ホワイトバランス制御手段によってホワイトバランス制御された前記第１の画像に基づいてプリント用紙に前記第１の画像を印画するプリント手段と、を備えたことを特徴としている。
【００２４】
即ち、このプリンタは、記録媒体からプリントすべき第１の画像とともに、該第１の画像の付属情報としてのホワイトバランス調整に利用可能な情報を読み取る。前記ホワイトバランス調整に利用可能な情報は、第２の画像（第１の画像を取得した第２の撮像エリアよりも広い撮像エリアから取得した画像）に基づいて生成されているため、前記算出手段は、前記ホワイトバランス調整に利用可能な情報に基づいてより適正なホワイトバランス補正値を求めることができる。例えば、電子ズームによって第１の画像中に光源情報が少なく、第２の画像中に光源情報が多く含まれている場合には、光源種を特定してホワイトバランス補正値を求める際に、第２の画像から生成したホワイトバランス調整に利用可能な情報を使用することが好ましい。尚、第１の画像中の光源情報と第２の画像中の光源情報とが略同じ場合（例えば、ハイライト点の輝度が同じ場合）には、第１の画像に基づいてホワイトバランス補正値を求めてもよいし、第１の画像及びホワイトバランス調整に利用可能な情報の両方を用いてホワイトバランス補正値を求めてもよい。
【００２５】
本願請求項１２に係るプリンタは、請求項６乃至１０のいずれかに記載のデジタルカメラによって前記記録媒体に記録された前記第１の画像と、該第１の画像と関連付けられて前記記録媒体に記録された前記シーン判別に利用可能な情報とを読み取る読取手段と、前記読み取ったシーン判別に利用可能な情報、又は前記読み取った第１の画像及びシーン判別に利用可能な情報に基づいて前記第１の画像のシーン判別を行うシーン判別手段と、前記シーン判別手段によるシーン判別に基づいて前記読み取った第１の画像を画像処理する画像処理手段と、前記画像処理手段によって画像処理された前記第１の画像に基づいてプリント用紙に前記第１の画像を印画するプリント手段と、を備えたことを特徴としている。
【００２６】
本願請求項１２に係るプリンタは、本願請求項１１に係るプリンタがホワイトバランス調整に利用可能な情報に基づいてより適正なホワイトバランス補正値を求めているのに対し、シーン判別に利用可能な情報に基づいて第１の画像のシーン判別を行い、その判別したシーンに基づいて第１の画像の画像処理を行う点で相違する。即ち、第１の画像よりも広い撮像エリアから得られる第２の画像に基づいて生成されたシーン判別に利用可能な情報を利用し、第１の画像の撮影シーンを判別する。プリンタは、第１の画像をプリントする際にシーンに応じた画像処理を行うが、前記シーン判別に利用可能な情報に基づいて前記第１の画像のシーン判定を良好に行うことができる。
【００２７】
前記シーン判別手段によって判別されるシーンは、本願請求項１３に示すように逆光シーン、順光シーン及びスポット光シーンのうちの１つを含むことを特徴としている。また、前記画像処理手段は、本願請求項１４に示すように前記シーン判別手段によるシーン判別に基づいて前記読み取った第１の画像のシャープネス及び階調のうちの少なくとも１つを制御することを特徴としている。
【００２８】
請求項１５の本発明は、撮像素子を用いて被写体を撮像し、該撮像により取得される画像を記録媒体に記録するデジタルカメラにおいて、前記撮像素子を介して取得された画像からズームエリアの画像を切り出してズーム画像を生成する電子ズーム手段と、電子ズーム前の全体画像の画角でのサムネール画像を生成する手段と、前記電子ズーム手段で生成されたズーム画像を前記記録媒体に記録する記録手段であって、タグ情報として前記サムネール画像及び電子ズーム情報が記録された前記ズーム画像を前記記録媒体に記録する記録手段と、を備えたことを特徴としている。
【００２９】
請求項１５の本発明によれば、保持手段が元の全体画像の画角でのサムネールをズーム画像データに保持させ、当該保持させた画像データを制御手段によって記録媒体に記録することによって、ズーム画像データをプリントするときに、前記記録媒体での前記電子ズーム手段によって電子的に処理された画像データ（ズーム画像データ）をプリンタに送信することにより、プリンタでは電子ズーム処理される前の元の画像の全体画角でのサムネールからプリントセットアップ処理を実行することができる。したがって、白色点等のデータがプリンタへ送られるため、プリント画像において適切なホワイトバランス、露出処理がされた画像が得られる。なお、元の全体画像の画角でのサムネールをズーム画像データに保持させる方法としては、ズーム画像データのタグに元の全体画像の画角でのサムネールを埋め込む方法もある。
【００３０】
請求項１６の本発明は、撮像素子を用いて被写体を撮像し、該撮像により取得される画像を記録媒体に記録するデジタルカメラにおいて、画像を表示する画像表示手段と、前記画像表示手段に表示された画像の一部領域を指定し、当該指定された領域を切り出してトリミング画像を生成するトリミング処理手段と、トリミング前の全体画像の画角でのサムネール画像を生成する手段と、前記トリミング処理手段で生成されたトリミング画像を前記記録媒体に記録する記録手段であって、タグ情報として前記サムネール画像及びトリミング情報が記録された前記トリミング画像を前記記録媒体に記録する記録手段と、を備えたことを特徴としている。
【００３１】
請求項１６の本発明によれば、保持手段が元の全体画像の画角でのサムネールをトリミング処理手段によって生成された画像データ（トリミング画像データ）に保持させ、当該保持させた画像データを制御手段によって記録媒体に記録することによって、トリミング画像データをプリントするときに、前記記録媒体でのトリミング画像データをプリンタに送信することにより、プリンタではトリミング処理される前の元の画像の全体画角でのサムネールからプリントセットアップ処理を実行することができる。したがって、白色点等のデータがプリンタへ送られるため、プリント画像において適切なホワイトバランス、露出処理がされた画像が得られる。なお、元の全体画像の画角でのサムネールをトリミング画像データに保持させる方法としては、トリミング画像データのタグに元の全体画像の画角でのサムネールを埋め込む方法もある。また、トリミング処理手段によって生成された画像データは、撮影後画像をズームした結果トリミング処理した画像データも含む。
【００３２】
請求項１７の本発明は、電子ズームされたズーム画像又はトリミングされたトリミング画像をプリント処理するプリンタであって、タグ情報として電子ズーム前の全体画像の画角でのサムネール画像が記録されたズーム画像、又は、タグ情報としてトリミング前の全体画像の画角でのサムネール画像が記録されたトリミング画像の入力を受け付ける画像受付手段と、前記サムネール画像からプリントセットアップ処理を実行する実行手段と、からなることを特徴としている。
【００３３】
【発明の実施の形態】
以下添付図面に従って本発明に係るデジタルカメラ及びプリンタの好ましい実施の形態について詳説する。
【００３４】
図１は本発明に係るデジタルカメラ１００の実施の形態を示すブロック図である。
【００３５】
同図において、撮影レンズ１１０及び絞り１１２を介して固体撮像素子（ＣＣＤ）１１４の受光面に結像された被写体像は、各センサで光の入射光量に応じた量の信号電荷に変換される。このようにして蓄積された信号電荷は、ＣＣＤ駆動回路１１６から加えられるリードゲートパルスによってシフトレジスタに読み出され、レジスタ転送パルスによって信号電荷に応じた電圧信号として順次読み出される。尚、このＣＣＤ１１４は、蓄積した信号電荷をシャッタゲートパルスによって掃き出すことができ、これにより電荷の蓄積時間（シャッタスピード）を制御する、いわゆる電子シャッタ機能を有している。
【００３６】
ＣＣＤ１１４から順次読み出された電圧信号は、相関二重サンプリング回路（ＣＤＳ回路）１１８に加えられ、ここで各画素ごとのＲ、Ｇ、Ｂ信号がサンプリングホールドされ、Ａ／Ｄ変換器１２０に加えられる。Ａ／Ｄ変換器１２０は、ＣＤＳ回路１１８から順次加えられるＲ、Ｇ、Ｂ信号をデジタルのＲ、Ｇ、Ｂ信号に変換して出力する。尚、ＣＣＤ駆動回路１１６、ＣＤＳ回路１１８及びＡ／Ｄ変換器１２０は、タイミング発生回路１２２から加えられるタイミング信号によって同期して駆動されるようになっている。
【００３７】
前記Ａ／Ｄ変換器１２０から出力されたＲ、Ｇ、Ｂ信号は、一旦メモリ１２４に格納され、その後、メモリ１２４に格納されたＲ、Ｇ、Ｂ信号は、デジタル信号処理回路１２６に加えられる。デジタル信号処理回路１２６は、同時化回路１２８、ホワイトバランス調整回路１３０、ガンマ補正回路１３２、ＹＣ信号作成回路１３４、及びメモリ１３６等から構成されている。
【００３８】
同時化回路１２８は、メモリ１２４から読み出された点順次のＲ、Ｇ、Ｂ信号を同時式に変換し、Ｒ、Ｇ、Ｂ信号を同時にホワイトバランス調整回路１３０に出力する。ホワイトバランス調整回路１３０は、Ｒ、Ｇ、Ｂ信号のデジタル値をそれぞれ増減するための乗算器１３０Ｒ、１３０Ｇ、１３０Ｂから構成されており、Ｒ、Ｇ、Ｂ信号は、それぞれ乗算器１３０Ｒ、１３０Ｇ、１３０Ｂに加えられる。乗算器１３０Ｒ、１３０Ｇ、１３０Ｂの他の入力には、中央処理装置（ＣＰＵ）１３８からホワイトバランス制御するためのホワイトバランス補正値（ゲイン値）が加えられており、乗算器１３０Ｒ、１３０Ｇ、１３０Ｂはそれぞれ２入力を乗算し、この乗算によってホワイトバランス調整されたＲ’、Ｇ’、Ｂ’信号をガンマ補正回路１３２に出力する。尚、ＣＰＵ１３８からホワイトバランス調整回路１３０に加えられるホワイトバランス補正値の詳細については後述する。
【００３９】
ガンマ補正回路１３２は、ホワイトバランス調整されたＲ’、Ｇ’、Ｂ’信号が所望のガンマ特性となるように入出力特性を変更し、ＹＣ信号作成回路１３４に出力する。ＹＣ信号作成回路１３４は、ガンマ補正されたＲ、Ｇ、Ｂ信号から輝度信号Ｙとクロマ信号Ｃｒ、Ｃｂとを作成する。これらの輝度信号Ｙとクロマ信号Ｃｒ、Ｃｂ（ＹＣ信号）は、メモリ１２４と同じメモリ空間のメモリ１３６に格納される。尚、このデジタル信号処理回路１２６には、ＹＣ信号作成回路１３４の後段に輪郭強調回路（図示せず）が設けられており、この輪郭強調回路は、入力する輝度信号Ｙに基づいて画像の輪郭を強調するための輪郭補正信号を生成し、その輪郭補正信号を輝度信号Ｙに加算することによって輝度信号Ｙの輪郭強調を行う。
【００４０】
前記メモリ１３６内に格納されたＹＣ信号は、逐次読み出されて液晶モニタ１５２に出力される。これにより、スルー画像や撮影された静止画等を液晶モニタ１５２に表示させることができる。
【００４１】
また、撮影後のＹＣ信号は、圧縮／伸長回路１５４によって所定のフォーマットに圧縮されたのち、記録部１５６にてメモリカードなどの記録媒体に記録される。更に、再生モード時にはメモリカードなどに記録されている画像データが圧縮／伸長回路１５４によって伸長処理された後、液晶モニタ１５２に出力され、液晶モニタ１５２に再生画像が表示されるようになっている。
【００４２】
ＣＰＵ１３８は、カメラ操作部１４０（シャッタボタン、モードダイヤル、十字キー等を含む）からの入力に基づいて各回路を統括制御するとともに、オートフォーカス（ＡＦ）、自動露光（ＡＥ）、オートホワイトバランス（ＡＷＢ）、電子ズーム等の制御を行う。このＡＦ制御は、例えばＧ信号の高周波成分が最大になるように撮影レンズ１１０を移動させるコントラストＡＦであり、シャッタボタンの半押し時にＧ信号の高周波成分が最大になるように駆動部１４２を介して撮影レンズ１１０を合焦位置に移動させる。
【００４３】
また、ＡＥ制御は、Ｒ、Ｇ、Ｂ信号を取り込み、これらのＲ、Ｇ、Ｂ信号を積算した積算値に基づいて被写体輝度（撮影ＥＶ値）を求め、この撮影ＥＶ値に基づいて撮影時の絞り値とシャッタスピードを決定する。そして、シャッタボタンの全押し時に前記決定した絞り値になるように絞り駆動部１４４を介して絞り１１２を駆動し、また、決定したシャッタスピードとなるように電子シャッタによって電荷の蓄積時間を制御して１コマ分の画像データを取り込み、所要の信号処理をした後、記録媒体に記録する。
【００４４】
次に、ＡＷＢ補正方法について説明する。
【００４５】
メモリ１２４に一時格納されたＲ、Ｇ、Ｂ信号から、１画面を複数のエリア（８×８、１６×１６等）に分割する各分割エリアごとにＲ、Ｇ、Ｂ信号の色別の平均積算値を求める。これらの分割エリアごとのＲ、Ｇ、Ｂ信号の平均積算値は、積算回路１４８によって算出され、ＣＰＵ１３８に加えられる。積算回路１４８とＣＰＵ１３８との間には乗算器１５０Ｒ、１５０Ｇ、１５０Ｂが設けられており、乗算器１５０Ｒ、１５０Ｇ、１５０Ｂには、機器のバラツキを調整するための調整ゲイン値が加えられるようになっている。
【００４６】
ＣＰＵ１３８は、上記分割エリアごとのＲ、Ｇ、Ｂ信号の平均積算値に基づいてデーライト（晴れ）、日陰−曇り、蛍光灯、タングステン電球等の光源種の判別を行う。この光源種の判別は、前記分割エリアごとにＲ、Ｇ、Ｂ信号の色別の平均積算値の比Ｒ／Ｇ、Ｂ／Ｇを求め、続いて横軸をＲ／Ｇ、縦軸をＢ／Ｇとするグラフ上で、各光源種に対応する色分布の範囲を示す検出枠を設定する。そして、前記求めた各エリアごとの比Ｒ／Ｇ、Ｂ／Ｇに基づいて前記検出枠に入るエリアの個数を求め、被写体の輝度レベル及び検出枠に入るエリアの個数に基づいて光源種を判別する（特開2000-224608 参照) 。尚、ＣＣＤ１１４から得られたＲ、Ｇ、Ｂ信号に基づいて自動的に光源種（被写界の色温度）を求める方法は、この実施の形態に限定されない。
【００４７】
ＣＰＵ１３８は、上記のようにして光源種（被写界の色温度）を求めると、その光源種に適したホワイトバランス補正値を決定し、その決定したホワイトバランス補正値（ゲイン値）を乗算器１３０Ｒ、１３０Ｇ、１３０Ｂに出力する。これにより、乗算器１３０Ｒ、１３０Ｇ、１３０Ｂからはホワイトバランス調整されたＲ’、Ｇ’、Ｂ’信号がガンマ補正回路１３２に出力される。
【００４８】
尚、この実施の形態では、ホワイトバランス処理をデジタル信号処理回路１２６内で行うようにしているが、ＣＤＳ回路１１８及び図示しないゲインコントロールアンプ等を含むアナログ信号処理回路内で行うようにしてもよい。また、ホワイトバランス処理は、Ｒ、Ｇ、Ｂそれぞれ独立のゲイン処理により、Ｒ／Ｇ及びＢ／Ｇの比を変化させることにより行っているが、色差信号Ｃr 、Ｃb それぞれ独立の加減算処理により、色差信号Ｃr 、Ｃb にある値を加算又は減算させることによって行う方法もある。また、ストロボ装置１４６からストロボ光を発光する場合には、ストロボ光に対して良好なホワイトバランスを行うためのホワイトバランス補正値がホワイトバランス調整回路１３０に加えられる。
【００４９】
次に、電子ズーム制御について説明する。
【００５０】
ＣＣＤ１１４の撮像面全体の撮像エリアから読み出されたＲ、Ｇ、Ｂ信号は、一旦メモリ１２４に格納されている。電子ズーム部１２５は、メモリ１２４に格納されている全撮像エリアから、カメラ操作部１４０（ズームボタンとして割り当てられた十字キーの上ボタン及び下ボタン）のズーム操作に基づいてＣＰＵ１３８から入力するズーム指令に応じたエリアのＲ、Ｇ、Ｂ信号を切り出し、この切り出したＲ、Ｇ、Ｂ信号をそのまま、又は補間演算によって画素数を増加させてメモリ１２４の元画像のＲ、Ｇ、Ｂ信号が記憶されている記憶エリアとは異なる記憶エリアに記憶させる。
【００５１】
尚、ＣＣＤ１１４の全撮像エリアの画像サイズが、例えば２４００×１８００画素で、電子ズーム倍率を１．５倍とした場合、記録する画像サイズが１６００×１２００画素のときには、電子ズームによる切り出し範囲のＲ、Ｇ、Ｂ信号をそのまま記録し、記録する画像サイズが１６００×１２００画素よりも大きくなるにしたがって補間によって画素数を増加させ、記録する画像サイズが１６００×１２００画素よりも小さくなるにしたがって補間及び間引きによって画素数を減少させる。また、電子ズーム倍率を１．８７５倍とした場合、記録する画像サイズが１２８０×９６０画素のときには、電子ズームによる切り出し範囲のＲ、Ｇ、Ｂ信号をそのまま記録し、記録する画像サイズが１２８０×９６０画素よりも大きくなるにしたがって補間によって画素数を増加させ、記録する画像サイズが１２８０×９６０画素よりも小さくなるにしたがって補間及び間引きによって画素数を減少させる。即ち、電子ズーム部１２５における補間処理等によって増減させる画素数は、ＣＣＤ１１４の画像サイズと、記録する画像サイズと、電子ズーム倍率とによって決定される。
【００５２】
図２は電子ズームによって画像が拡大される様子を示すイメージ図であり、メモリ１２４には、図２（Ａ）に示すようにＣＣＤ１１４の全撮像エリアの画像（Ｒ、Ｇ、Ｂ信号）が格納されるとともに、図２（Ｂ）に示すように電子ズームされた、ＣＣＤ１１４の全撮像エリアの一部のエリアの画像（Ｒ、Ｇ、Ｂ信号）が格納される。
【００５３】
また、電子ズームされた場合には、前述したＡＥ制御は、電子ズームによる切り出し範囲内の画像（Ｒ、Ｇ、Ｂ信号）に基づいて行われ、ＡＷＢ補正は、全撮像エリアの画像（Ｒ、Ｇ、Ｂ信号）に基づいて行われる。この電子ズームされた画像（Ｒ、Ｇ、Ｂ信号）は、デジタル信号処理回路１２６を介して所要の信号処理がされた後、圧縮／伸長回路１５４によって所定のフォーマットに圧縮されて記録媒体に記録される。
【００５４】
次に、記録媒体に記録される画像（主画像）の付属情報（タグ情報）について詳説する。
【００５５】
図３に示すように全撮像エリアＡ１から電子ズームによってズームエリアＡ２の画像を切り出して記録すると、ズームエリアＡ２の外側にハイライト部位Ｂの情報（光源の色だと判断できる情報）がある場合に、そのハイライト部位Ｂの情報がカットされて記録されることになる。この場合、電子ズームされた画像をプリントする際に、プリンタでのＡＷＢ制御に必要な情報が少なくなる。
【００５６】
また、プリント時に入力画像のシーンを自動判別して階調補正や輪郭強調などを行う場合に、その入力画像が電子ズームされた画像の場合には、電子ズーム前の画像に比べてシーンの予測が難しくなる。例えば、逆光シーンを電子ズームした場合、逆光シーンか否かの判別が難しくなる。
【００５７】
そこで、本発明では、電子ズームした画像を記録媒体に記録する場合には、その画像のタグ情報として、電子ズーム前の画像（全撮像エリアＡ１の画像）から得られるホワイトバランス調整に利用可能な情報、及びシーン判別に利用可能な情報を記録するようにしている。
【００５８】
即ち、図１に示すようにメモリ１２４に格納されている全撮像エリアＡ１の画像（Ｒ、Ｇ、Ｂ信号）は、デジタル信号処理回路１２６’に出力される。このデジタル信号処理回路１２６’は、同時化回路１２８’、ホワイトバランス調整回路１３０’、ガンマ補正回路１３２’、ＹＣ信号作成回路１３４’、及び積算回路１３５’から構成されている。尚、同時化回路１２８’、ホワイトバランス調整回路１３０’、ガンマ補正回路１３２’、及びＹＣ信号作成回路１３４’は、デジタル信号処理回路１２６の同時化回路１２８、ホワイトバランス調整回路１３０、ガンマ補正回路１３２、及びＹＣ信号作成回路１３４と同様な処理を行うため、ここでは詳細な説明は省略する。また、デジタル信号処理回路１２６’のＹＣ信号作成回路１３４’から出力されるＹＣ信号と、デジタル信号処理回路１２６のＹＣ信号作成回路１３４から出力されるＹＣ信号とは同種の信号であり、エリアのみが異なる。
【００５９】
積算回路１３５’は、図３に示したように全撮像エリアＡ１を複数のエリア（１６×１６）に分割する各分割エリアごとに輝度信号Ｙ、クロマ信号Ｃｒ、及びクロマ信号Ｃｂの各信号別の積算平均値を求める。
【００６０】
記録部１５６は、ＣＰＵ１３８からズーム指令等の電子ズームされていることを示す情報を入力すると、前記積算回路１３５’によって算出した全撮像エリアＡ１の各分割エリアごとに積算平均した輝度信号Ｙ、クロマ信号Ｃｒ、及びクロマ信号Ｃｂをタグ情報として記録する。
【００６１】
ここで、ホワイトバランス調整に利用可能な情報（以下、「ＡＷＢ情報」という）として、全撮像エリアＡ１の各分割エリアごとに積算平均した輝度信号Ｙ、クロマ信号Ｃｒ、及びクロマ信号Ｃｂをタグ情報に記録するようにしたが、以下の情報をＡＷＢ情報としてタグ情報に記録するようにしてもよい。
【００６２】
(1)   全撮像エリアＡ１におけるＲ、Ｇ、Ｂ信号のそれぞれの平均値Ｒav、Ｇav、Ｂav
(2)   上記各平均値Ｒav、Ｇav、Ｂavの比Ｒav／Ｇav、Ｂav／Ｇav
(3)   全撮像エリアＡ１の分割エリアＡi （ｉ＝１〜２５６又は１〜６４）ごとのＲ、Ｇ、Ｂ信号のそれぞれの平均値Ｒavi 、Ｇavi 、Ｂavi 
(4)   上記各平均値Ｒavi 、Ｇavi 、Ｂavi の比Ｒavi ／Ｇavi 、Ｂavi ／Ｇavi 
(5)   全撮像エリアＡ１におけるハイライト点（１画素又は上位の３画素）のＲp 、Ｇp 、Ｂp 
(6)   上記ハイライト点のＲp 、Ｇp 、Ｂp の比Ｒp ／Ｇp 、Ｂp ／Ｇp 
(7)   上記ハイライト点の輝度信号Ｙ、クロマ信号Ｃｒ、Ｃｂ
(8)   全撮像エリアＡ１における最大のＲp ’、Ｇp ’、Ｂp ’
(9)   上記最大のＲp ’、Ｇp ’、Ｂp ’の比Ｒp ’／Ｇp ’、Ｂp ’／Ｇp ’
(10)  全撮像エリアＡ１の画像を間引いて作成したサムネイル画像
また、シーン判別に利用可能な情報（以下、「ＡＥ情報」という）として、全撮像エリアＡ１の各分割エリアごとに積算平均した輝度信号Ｙを記録するようにしたが、以下の情報をＡＥ情報として記録するようにしてもよい。
【００６３】
(1)   全撮像エリアＡ１の分割エリアＡi （ｉ＝１〜２５６又は１〜６４）ごとのＲ、Ｇ、Ｂ信号のそれぞれの平均値Ｒavi 、Ｇavi 、Ｂavi 
(2)   全撮像エリアＡ１の分割エリアＡi ごとのＧ信号の平均値Ｇavi 
(3)   全撮像エリアＡ１の画像を間引いて作成したサムネイル画像
尚、この実施の形態では、デジタル信号処理回路１２６とは別系統のデジタル信号処理回路１２６’を設けるようにしたが、上記ＡＷＢ情報やＡＥ情報を算出する際に、前記デジタル信号処理回路１２６を時分割利用してもよい。
【００６４】
図４は記録媒体に記録される画像ファイルの構造例を示す。
【００６５】
同図に示すように画像ファイルには、画像に付属する各種の情報が記載されているヘッダ部と、撮像した主画像が記録されている主画像部とが設けられている。ヘッダ部には、撮影日時情報、前述したＡＷＢ情報、ＡＥ情報が記録されるが、更に電子ズーム情報（電子ズームの使用の有無、電子ズーム倍率等）、ストロボ情報（ストロボ使用の有無、ストロボ到達の有無を示すリターン情報、ストロボ光の色温度）、被写体距離情報、連写情報、ユーザ設定情報（ＷＢ、露出補正など）、レンズ特性情報（撮影レンズ１１０のディストーション、倍率色収差、シェーディングなど）、及びサムネイル画像が記録される。尚、この実施の形態のサムネイル画像は、電子ズーム前の画像から作成されたものであるが、更に電子ズーム後の画像から作成したものも同時に記録するようにしてもよい。
【００６６】
上記電子ズーム情報、ＡＷＢ情報、ＡＥ情報、ストロボ情報、被写体距離情報、連写情報、ユーザ設定情報、レンズ特性情報、及びサムネイル画像は、プリント時における補正処理に利用することができる。
【００６７】
即ち、電子ズーム情報は、プリントする画像のシャープネスの画像処理に利用され、電子ズーム倍率が大きい程、シャープネスを上げる画像処理を行う。ＡＷＢ情報及びＡＥ情報のプリント時の利用の詳細については後述する。ストロボ情報は、プリントする画像のＷＢ補正に利用され、ストロボリターンがある場合には、そのストロボ光の色温度（Ｒ、Ｇ、ＢのＬＥＤによってストロボ光の色温度が制御できる場合にはその色温度）に適したＷＢ補正を行い、ストロボリターンがない場合には、入力画像等から得たホワイトバランス補正値によってＷＢ補正を行う。被写体距離情報は、プリントする画像のシャープネスやコントラストの画像処理に利用され、遠距離程、シャープネスやコントラストを上げる画像処理を行う。
【００６８】
連写情報は、１枚目の画像と同じ設定で２枚目以降の画像処理を行うために使用する。これにより、プリント速度を向上させることができるとともに、各画像の連続性が向上する。ユーザ設定情報は、ユーザの意図をプリントに反映させるために使用する。レンズ特性情報は、撮影レンズ１１０のディストーション、倍率色収差、シェーディングなどをプリンタ側で補正するために使用される。更に、主画像よりも画角の大きなサムネイル画像は、より広い範囲からＡＷＢ情報、ＡＥ情報を抽出するために利用される。
【００６９】
次に、トリミング制御について説明する。
【００７０】
図７はトリミング制御の流れを示したフローチャートである。ユーザはデジタルカメラ１００のトリミングメニューを選択する（ステップ３００）。そして、記録部１５６に記録されている画像（主画像）を読み出し、読み出された画像は圧縮／伸長部１５４で伸長処理をされて一旦メモリ１２４に格納される。ユーザがカメラ操作部１４０の十字キーを操作してトリミング操作する（ステップ３０２）と、トリミング部４００はメモリ１２４に格納されている全撮像エリアからＣＰＵ１３８から入力するトリミング指令に応じたエリアのＲ、Ｇ、Ｂ信号を切り出し、この切り出したＲ、Ｇ、Ｂ信号をそのまま、又は補間演算によって画素数を増加させてメモリ１２４の元画像のＲ、Ｇ、Ｂ信号が記憶されている記憶エリアとは異なる記憶エリアに記憶させる。
【００７１】
したがって、メモリ１２４にはＣＣＤ１１４の全撮像エリアの画像（Ｒ、Ｇ、Ｂ信号）が格納されると共にトリミングされた、ＣＣＤ１１４の全撮像エリアの一部のエリアの画像（Ｒ、Ｇ、Ｂ信号）が格納される。トリミングされた画像（Ｒ、Ｇ、Ｂ信号）は、デジタル信号処理回路１２６を介して所要の信号処理がされた後、圧縮／伸長回路１５４によって所定のフォーマットに圧縮されて記録媒体に記録される。
【００７２】
記録媒体に記録される画像（主画像）の付属情報（タグ情報）にはトリミング情報が記録される（ステップ３０４）。
【００７３】
図３を用いて説明する。図３のうち、Ａ２をトリミングエリアとする。
【００７４】
全撮像エリアＡ１からトリミングによってトリミングエリアＡ２の画像を切り出して記録すると、トリミングエリアＡ２の外側にハイライト部位Ｂの情報（光源の色だと判断できる情報）がある場合に、そのハイライト部位Ｂの情報がカットされて記録されることになる。この場合、トリミングされた画像をプリントする際に、プリンタでのＡＷＢ制御に必要な情報が少なくなる。
【００７５】
プリント時に入力画像のシーンを自動判別して階調補正や輪郭強調などを行う場合に、その入力画像がトリミングされた画像の場合には、トリミング前の画像に比べてシーンの予測が難しくなる。例えば、逆光シーンをトリミングした場合、逆光シーンか否かの判別が難しくなる。
【００７６】
そこで、本発明では、トリミングした画像を記録媒体に記録する場合には、その画像のタグ情報として、トリミング前の画像（全撮像エリアＡ１の画像）から得られるホワイトバランス調整に利用可能な情報、及びシーン判別に利用可能な情報を記録するようにしている。
【００７７】
トリミングした画像を、トリミング前の画像から得られるホワイトバランス調整に利用可能な情報、及びシーン判別に利用可能な情報から記録媒体に記録する手順は、前述の電子ズームした画像を記録媒体に記録する場合と同様なのでここでは省略する。
【００７８】
記録部１５６は、ＣＰＵ１３８からトリミング指令等のトリミングされていることを示す情報を入力すると、積算回路１３５’によって算出した全撮像エリアＡ１の各分割エリアごとに積算平均した輝度信号Ｙ、クロマ信号Ｃｒ、及びクロマ信号Ｃｂをタグ情報として記録する。
【００７９】
ここで、ホワイトバランス調整に利用可能な情報（以下、「ＡＷＢ情報」という）として、全撮像エリアＡ１の各分割エリアごとに積算平均した輝度信号Ｙ、クロマ信号Ｃｒ、及びクロマ信号Ｃｂをタグ情報に記録するようにしたが、全撮像エリアＡ１の画像を間引いて作成したサムネイル画像をＡＷＢ情報としてタグ情報に記録するようにしてもよい。
【００８０】
また、シーン判別に利用可能な情報（以下、「ＡＥ情報」という）として、全撮像エリアＡ１の各分割エリアごとに積算平均した輝度信号Ｙを記録するようにしたが、全撮像エリアＡ１の画像を間引いて作成したサムネイル画像をＡＥ情報として記録するようにしてもよい。
【００８１】
図９はトリミングした場合の記録媒体に記録される画像ファイルの構造例を示す。
【００８２】
同図に示すように画像ファイルには、画像に付属する各種の情報が記載されているヘッダ部と、撮像した主画像が記録されている主画像部とが設けられている。ヘッダ部には、撮影日時情報、前述したＡＷＢ情報、ＡＥ情報が記録されるが、更にトリミング情報（トリミングの使用の有無、フラグ、トリミングした画素の位置等）、ストロボ情報（ストロボ使用の有無、ストロボ到達の有無を示すリターン情報、ストロボ光の色温度）、被写体距離情報、連写情報、ユーザ設定情報（ＷＢ、露出補正など）、レンズ特性情報（撮影レンズ１１０のディストーション、倍率色収差、シェーディングなど）、及びサムネイル画像が記録される。尚、この実施の形態のサムネイル画像は、トリミング前の画像から作成されたものであるが、更にトリミング後の画像から作成したものも同時に記録するようにしてもよい。
【００８３】
上記トリミング情報、ＡＷＢ情報、ＡＥ情報、ストロボ情報、被写体距離情報、連写情報、ユーザ設定情報、レンズ特性情報、及びサムネイル画像は、プリント時における補正処理に利用することができる。詳細は前述の電子ズームの場合と同様なので説明を省略する。主画像よりも画角の大きなサムネイル画像は、より広い範囲からＡＷＢ情報、ＡＥ情報を抽出するために利用される。
【００８４】
なお、トリミング操作が行われた場合、すでに電子ズームも行われている場合がある。図７のステップ３０４の後、電子ズーム情報もタグに記録されているかどうかみる（ステップ３０６）。
【００８５】
ここで、電子ズームがされた後にトリミング操作がされた場合のタグ情報の書き込みについて説明する。図１０は電子ズームがされた後にトリミング操作がされた場合の記録媒体に記録される画像ファイルの構造例を示す。電子ズームがされた場合の画像ファイル構造は図４に示すとおりであるが、この後トリミングされた場合は、図１０に示すようにトリミング情報（トリミングの使用の有無、フラグ、トリミングした画素の位置等）が追加され、トリミングされた画像のサムネイルも追加される。トリミングされた画像のサムネイルは、主画像から作成してもよいが、全撮像エリアのサムネイルから生成してもよく、後者のほうが処理は速い。主画像は電子ズームしてトリミングされたものになる。
【００８６】
なお、図４、図９の画像ファイル構造において、主画像のサムネイルも全撮像エリアのサムネイルと共にタグ情報に入れるようにしてもよい。この場合に、上記ステップ３０６において、タグ情報に電子ズーム情報があるときは、全撮像エリアのサムネイル（ステップ３１８）、ズーム及びトリミングした画像のサムネイル（ステップ３２２）、ズーム及びトリミングした主画像（ステップ３２６）がそれぞれ生成され、各々メモリ１２４に保存される（ステップ３２０、３２４、３２８）。
【００８７】
ステップ３０６において、タグ情報に電子ズーム情報がないときは、全撮像エリアのサムネイル（ステップ３０８）、トリミングした画像（ステップ３１２）がそれぞれ生成され、全撮像エリアのサムネイルはメモリ１２４に保存され（ステップ３１０）、トリミングした主画像もメモリ１２４に保存され（ステップ３１４）、トリミングした主画像のサムネイルもメモリ１２４に保存される（ステップ３１６）。なお、トリミングした画像のサムネイルは全撮像エリアのサムネイルから生成してもよい。
【００８８】
図５は本発明に係るプリンタの実施の形態を示すブロック図である。
【００８９】
同図に示すように、このプリンタ２００は、デジタルプリンタであり、主として画像解凍処理部２１０、タグ情報読取部２２０、フレームメモリ２３０、パラメータ決定部２４０、自動画像補正処理部２５０、色信号変換部２６０、及びプリントエンジン２７０から構成されている。
【００９０】
このプリンタ２００は、前述したデジタルカメラ１００と直結インターフェース１０１を介して接続され、デジタルカメラ１００が生成した画像ファイルを直接取り込むことができ、また、デジタルカメラ１００において使用されているスマートメディア等の外部記録媒体１０２が挿入されるカードスロットを有し、このカードスロットに挿入された外部記録媒体１０２から画像ファイル（図４、９、１０参照）を取り込むことができるようになっている。
【００９１】
このプリンタ２００に外部記録媒体１０２が挿入され、又はデジタルカメラ１００が接続されたのち、プリントすべきコマが指定されると、プリンタ２００の画像解凍処理部２１０は、プリント指定されたコマの画像ファイルから画像データを取り込み、圧縮されている画像データを解凍してＹＣ信号を生成し、このＹＣ信号をフレームメモリ２３０に記憶させる。
【００９２】
タグ情報読取部２２０は、上記画像ファイルからタグ情報を読み出し、これをパラメータ決定部２４０に出力する。
【００９３】
パラメータ決定部２４０は、自動画像補正処理部２５０において使用する自動画像補正処理のパラメータ（オートセットアップパラメータ）を決定し、そのパラメータを自動画像補正処理部２５０に設定するもので、電子ズームやトリミングされていない画像の場合には、フレームメモリ２３０に取り込んだＹＣ信号に基づいてプリントする入力画像ごとに決定する。
【００９４】
また、パラメータ決定部２４０は、タグ情報読取部２２０から入力するタグ情報に基づいてプリントしようとする入力画像が電子ズーム及び／又はトリミングした画像か否かを判別し、電子ズーム及び／又はトリミングした画像の場合には、タグ情報中のＡＷＢ情報、ＡＥ情報に基づいてパラメータを決定し、又はＡＷＢ情報、ＡＥ情報及びフレームメモリ２３０に取り込んだＹＣ信号に基づいてパラメータに決定する。尚、パラメータ決定部２４０における電子ズーム及び／又はトリミングされた画像か否かの判別は、タグ情報中の電子ズーム情報（電子ズーム使用の有無を含む）及び／又はトリミング情報（トリミング使用の有無を含む）に基づいて行うことができる。
【００９５】
このパラメータ決定部２４０によって電子ズーム及び／又はトリミングされた画像のホワイトバランス補正値を求める方法について説明する。
【００９６】
いま、タグ情報中のＡＷＢ情報が、ＣＣＤ１１４の全撮像エリアＡ１におけるハイライト点のＲp 、Ｇp 、Ｂp とした場合（図３参照）、このハイライト点の輝度信号ＹMAX1を求める。また、フレームメモリ２３０に取り込んだＹＣ信号に基づいて電子ズーム及び／又はトリミングされた画像中のハイライト点の輝度信号ＹMAX2を求める。そして、輝度信号ＹMAX1が輝度信号ＹMAX2よりも大きいときには、ＡＷＢ情報（Ｒp 、Ｇp 、Ｂp ）が光源の色と判断し、その光源の色に適したホワイトバランス補正値を求める。一方、輝度信号ＹMAX1と輝度信号ＹMAX2とが略等しい場合には、フレームメモリ２３０に取り込んだＹＣ信号に基づいて光源の色を判別し、その光源の色に適したホワイトバランス補正値を求める。尚、電子ズーム及び／又はトリミングされた画像のホワイトバランス補正値は、タグ情報中のＡＷＢ情報のみに基づいて求めるようにしてもよい。また、ホワイトバランス補正値の求め方は、これに限定されない。
【００９７】
次に、パラメータ決定部２４０によって電子ズーム及び／又はトリミングされた画像の他のパラメータ（階調補正値、シャープネス補正値）の求め方について説明する。
【００９８】
まず、タグ情報中のＡＥ情報が、ＣＣＤ１１４の全撮像エリアＡ１における各分割エリアＡi ごとの輝度信号Ｙi を積算平均した輝度信号Ｙavi とすると、この輝度信号Ｙavi の画面内の分布に基づいてシーンを判別する。例えば、電子ズーム及び／又はトリミングした画像からはその画面の上側が空であるかどうかが判別できない場合でも、電子ズーム及び／又はトリミング前の画像（元画像）に基づいて、電子ズーム及び／又はトリミングした画像の上側は空であることを判別することができる。
【００９９】
パラメータ決定部２４０は、フレームメモリ２３０からの入力画像の輝度信号Ｙに基づいてシーンに応じた複雑なアルゴリズムで入力画像の明るさを求める際に、上記のようにシーン（例えば、画面の上側が空であるというシーン）を判別することにより、そのシーンに適したアルゴリズムで入力画像の明るさを求めることができる。例えば、空の部分と他の部分では、輝度信号に対する重み付けを変えて明るさを求めることができる。そして、このようにして求めた明るさから電子ズーム及び／又はトリミングした画像を適正な明るさでプリントするための階調補正値を求めることができる。
【０１００】
また、輝度信号Ｙavi の画面内の分布から逆光シーン、順光シーン、スポット光シーンなどを判別することができる。尚、電子ズームされた画像は、画角が小さくなるため、逆光シーンかどうかの判別が難しくなる。
【０１０１】
上記のようにしてシーン判別することにより、例えば、入力画像のコントラストが少ない場合に、逆光シーンを電子ズーム及び／又はトリミングしたためにコントラストが少なくなっているのか、もともとコントラストが少ない画像なのかを区別することができる。そして、逆光シーンを電子ズーム及び／又はトリミングしたためにコントラストが少なくなっている場合には、フレアやゴーストが含まれている可能性があるため、コントラストやシャープネスを補正する処理を行わないか、又は弱くする。逆に、もともとコントラストが少ない画像の場合には、コントラストやシャープネスの補正処理を強くする。
【０１０２】
プリンタ２００の自動画像補正処理部２５０は、パラメータ決定部２４０によって決定されたパラメータ（ホワイトバランス補正値、階調補正値、シャープネス補正値等）が設定され、フレームメモリ２３０に格納されたＹＣ信号を、上記設定されたパラメータに基づいて補正処理を行い、プリントに適するように色・階調・シャープネス等が調整される。
【０１０３】
図６は上記自動画像補正処理部２５０の内部構成を示すブロック図である。この自動画像補正処理部２５０は、ＡＷＢ補正回路２５２と、階調補正回路２５４と、輪郭強調回路２５６とから構成されている。
【０１０４】
ＡＷＢ補正回路２５２には、フレームメモリ２３０からＹＣ信号が加えられるとともに、前述したパラメータ決定部２４０からホワイトバランス補正値（各色差信号Ｃr,Ｃb に乗算するためのゲイン値）が加えられ、ＡＷＢ補正回路２５２は、色差信号Ｃr,Ｃb にホワイトバランス補正値を乗算する。ＡＷＢ補正回路２５２によりホワイトバランス補正されたＹＣ信号は、階調補正回路２５４に加えられる。
【０１０５】
階調補正回路２５４の他の入力には、前述したパラメータ決定部２４０によって決定された入力画像の明るさに対応した階調補正値が加えられている。階調補正回路２５４は、例えば、階調補正値の大きさに応じて複数の階調補正ルックアップテーブル（ＬＵＴ）を有しており、パラメータ決定部２４０から入力する階調補正値により適宜の階調補正ＬＵＴを選択する。そして、この選択した階調補正ＬＵＴを使用してＡＷＢ補正回路２５２から入力する輝度信号Ｙを階調補正する。
【０１０６】
輪郭強調回路２５６には、前記階調補正回路２５４によって階調補正された輝度信号Ｙが加えられるとともに、前述したパラメータ決定部２４０からシャープネス補正値（例えば、ゲイン値）が加えられている。輪郭強調回路２５６は、入力する輝度信号Ｙに基づいて画像の輪郭を強調するための輪郭補正信号を生成し、その輪郭補正信号に前記シャープネス補正値を乗算する。このようにして輪郭補正信号の大きさ（輪郭強調の度合い）が補正された輪郭補正信号を輝度信号Ｙに加算することにより、該輝度信号Ｙの輪郭強調を行う。
【０１０７】
図５において、自動画像補正処理部２５０によって補正された輝度信号Ｙ、及び色差信号Ｃr 、Ｃb は、色信号変換部２６０に加えられ、ここでＲ、Ｇ、Ｂ信号に変換された後、Ｙ、Ｍ、Ｃ（イエロー、マゼンタ、シアン）信号に変換され、又は直接Ｙ、Ｍ、Ｃ信号に変換され、順次プリントエンジン２７０に送出される。
【０１０８】
プリントエンジン２７０は、例えば、印画方式としてＴＡ（サーモオートクローム）方式を採用したもので、Ｃ、Ｍ、Ｙの各発色層を有するカラー印画紙（以下、「ＴＡペーパー」という）自体が熱で発色し、所定の波長の光の照射で定着するものであり、ＴＡペーパーを搬送する手段、サーマルヘッド、定着ランプ等を有している。カラー画像をプリントする場合には、まず、ＴＡペーパーを搬送するとともにＹ信号によってサーマルヘッドを制御し、ＴＡペーパーのイエロー層を発色させ、続いて定着ランプによってイエローの発色を定着させる。ＴＡペーパーのマゼンタ層及びシアン層の発色もＭ信号、Ｃ信号に基づいて同様に行われ、このようにしてプリント用紙にカラー画像がプリントされる。尚、この実施の形態のプリンタは、ＴＡプリンタであるが、これに限らず、本発明はインクジェット方式等の他の形式のプリンタにも適用できる。
【０１０９】
一方、パラメータ決定部２４０は、タグ情報読取部２２０から入力されるタグ情報に基づいてプリントしようとする入力画像が電子ズーム及び／又はトリミングした画像か否かを判別し、電子ズーム及び／又はトリミングした画像の場合には、タグ情報中の全撮像エリアのサムネイルを読み込む方法もある。この場合、全撮像エリアのサムネイル画像を解析し、このサムネイル画像のＡＷＢ情報、ＡＥ情報に基づいてパラメータ（ホワイトバランス補正値、階調補正値、シャープネス補正値等）を決定する。尚、パラメータ決定部２４０における電子ズーム及び／又はトリミングされた画像か否かの判別は、タグ情報中の電子ズーム情報（電子ズーム使用の有無を含む）及び／又はトリミング情報（トリミング使用の有無を含む）に基づいて行うことができる。
【０１１０】
これらの一連の流れが図８に示されている。
【０１１１】
まず、画像印字の要求がある（ステップ３３０）。すなわち、プリンタ２００に外部記録媒体１０２が挿入され、又はデジタルカメラ１００が接続されたのち、プリントすべきコマが指定され、プリントの実行指令が出される。すると、プリンタ２００の画像解凍処理部２１０は、プリント指定されたコマの画像ファイルから画像データを取り込み、圧縮されている画像データを解凍してＹＣ信号を生成し、このＹＣ信号をフレームメモリ２３０に記憶させる。
【０１１２】
タグ情報読取部２２０は、画像ファイルからタグ情報を読み出し、これをパラメータ決定部２４０に出力する。タグ情報を読み出したところ、電子ズーム情報があるかどうか判断する（ステップ３３２）。電子ズーム情報がある場合は全撮像エリアのサムネイルを呼び出す（ステップ３３８）。電子ズーム情報がない場合はトリミング情報があるかどうか判断する（ステップ３３４）。トリミング情報がある場合は、やはり全撮像エリアのサムネイルを呼び出す（ステップ３３８）。ステップ３３４でトリミング情報がない場合は、表示用サムネイルを呼び出す（ステップ３３６）。
【０１１３】
ステップ３３８の場合もステップ３３６の場合も次にプリンタオートセットアップによりホワイトバランス補正値、階調補正値、シャープネス補正値等を算出する（ステップ３４０）。
【０１１４】
そして、この全撮像エリアのサムネイルを読み込む場合もプリンタ２００の自動画像補正処理部２５０は、フレームメモリ２３０に格納されたＹＣ信号を、パラメータ決定部２４０によって決定（算出）されたパラメータ（ホワイトバランス補正値、階調補正値、シャープネス補正値等）に基づいて補正処理を行い、プリントに適するように色・階調・シャープネス等を調整する（ステップ３４２）。
【０１１５】
自動画像補正処理部２５０での処理動作、並びに自動画像補正処理部２５０以降の処理動作は前述の例と同様である。したがって、最終的にはプリントエンジン２７０が起動してプリントされる（ステップ３４４）。この全撮像エリアのサムネイルを読み込む方法によれば、プリンタ２００はタグ中のＡＷＢ情報、ＡＥ情報を解析する必要がないので動作が簡略化できる。
【０１１６】
この実施の形態では、電子ズーム及び／又はトリミングした画像と同じ信号処理が施された元画像（撮像素子の全撮像エリアの画像）からＡＷＢ情報、ＡＥ情報を求めるようにしたが、これに限らず、例えばガンマ補正前の元画像からＡＷＢ情報、ＡＥ情報を求めるようにしてもよい。
【０１１７】
また、電子ズーム及び／又はトリミングした画像を記録する際に、元画像からＡＷＢ情報、ＡＥ情報を求め、これらの情報を電子ズーム及び／又はトリミングした画像に関連付けて記録するようにしたが、これに限らず、元画像の上側及び下側の所定の範囲をカットしたパノラマ撮影した画像を記録する際に、元画像からＡＷＢ情報、ＡＥ情報を求め、これらの情報をパノラマ撮影した画像に関連付けて記録するようにしてもよい。
【０１１８】
更に、この実施の形態では、全撮像エリアの画像からＡＷＢ情報、ＡＥ情報を求めるようにしたが、電子ズーム及び／又はトリミングした画像又はパノラマ撮影された画像のエリアよりも広いエリアの画像からＡＷＢ情報、ＡＥ情報を求めればよく、必ずしも全撮像エリアの画像からＡＷＢ情報、ＡＥ情報を求める場合に限らない。
【０１１９】
【発明の効果】
以上説明したように本発明によれば、電子ズーム撮影やパノラマ撮影された画像を記録媒体に記録する際に、電子ズーム前の画像やパノラマ切替え前の元画像（少なくとも電子ズーム等がされた画像よりも広いエリアの画像）からホワイトバランス調整に利用可能な情報を取得するようにしたため、電子ズーム等がされた画像のみから得られるホワイトバランス調整に利用可能な情報よりも多くの情報を得ることができる。そして、このようにして取得したホワイトバランス調整に利用可能な情報を電子ズーム撮影やパノラマ撮影された画像の付属情報として記録するようにしたため、電子ズーム撮影やパノラマ撮影された画像のプリント時に、前記付属情報を利用することができ、より適正なホワイトバランス調整を行うことができる。
【０１２０】
同様に、電子ズーム撮影やパノラマ撮影された画像を記録媒体に記録する際に、元画像からシーン判別に利用可能な情報を取得するようにしたため、電子ズーム等がされた画像のみから得られるシーン判別に利用可能な情報よりも多くの情報を得ることができる。そして、このようにして取得したシーン判別に利用可能な情報を電子ズーム撮影やパノラマ撮影された画像の付属情報として記録するようにしたため、電子ズーム撮影やパノラマ撮影された画像のプリント時に、前記付属情報を利用することができ、より適正なシーン判別ができ、そのシーンに応じた階調補正やシャープネス補正等を行うことができる。
【０１２１】
請求項１５の本発明によれば、ズーム画像データをプリンタでプリントする際に、元の画像の全体画角でのサムネールからプリントセットアップ処理を実行するので、白色点等のデータがプリンタへ送られるため、プリント画像において適切なホワイトバランス、露出処理がされた好適な画像が得られる。
【０１２２】
請求項１６の本発明によれば、トリミング画像データをプリンタでプリントする際に、元の画像の全体画角でのサムネールからプリントセットアップ処理を実行するので、白色点等のデータがプリンタへ送られるため、プリント画像において適切なホワイトバランス、露出処理がされた好適な画像が得られる。
【０１２３】
請求項１７の本発明によれば、ズーム画像データ、トリミング画像データをプリントする際に、元の画像の全体画角でのサムネールからプリントセットアップ処理を実行するので、白色点等のデータがプリンタへ到達するため、プリント画像において適切なホワイトバランス、露出処理がされた好適な画像が得られる。
【図面の簡単な説明】
【図１】本発明に係るデジタルカメラの実施の形態を示すブロック図
【図２】電子ズームによって画像が拡大される様子を示すイメージ図
【図３】光源の色を特定するのに好適なハイライト部位がＣＣＤの全撮像エリアにあるが、ズームエリアにない場合を示す図
【図４】電子ズームが使用された場合に記録媒体に記録される画像ファイルの構造例を示す図
【図５】本発明に係るプリンタの実施の形態を示すブロック図
【図６】プリンタ内の自動画像補正処理部の内部構成を示すブロック図
【図７】デジタルカメラでのトリミング制御の流れを示したフローチャート
【図８】タグ情報中の全撮像エリアのサムネイルを読み込んだ場合のプリント処理過程を示したフローチャート
【図９】トリミングが使用された場合に記録媒体に記録される画像ファイルの構造例を示す図
【図１０】電子ズーム及びトリミングが使用された場合に記録媒体に記録される画像ファイルの構造例を示す図
【符号の説明】
１００…デジタルカメラ、１０２…外部記録媒体、１１０…撮影レンズ、１１４…ＣＣＤ、１２４、１３６…メモリ、１２５…電子ズーム部、１２６、１２６’…デジタル信号処理回路、１３５、１４８…積算回路、１３８…ＣＰＵ、１４０…カメラ操作部、１５６…記録部、２００…プリンタ、２１０…画像解凍処理部、２２０…タグ情報読取部、２３０…フレームメモリ、２４０…パラメータ決定部、２５０…自動画像補正処理部、２５２…ＡＷＢ補正回路、２５４…階調補正回路、２５６…輪郭強調回路、２６０…色信号変換部、２７０…プリントエンジン、Ａ１…全撮像エリア、Ａ２…ズームエリア、Ｂ…ハイライト部位
【図１】
0004228180.tif 000002
【図２】
0004228180.tif 000003
【図３】
0004228180.tif 000004
【図４】
0004228180.tif 000005
【図５】
0004228180.tif 000006
【図６】
0004228180.tif 000007
【図７】
0004228180.tif 000008
【図８】
0004228180.tif 000009
【図９】
0004228180.tif 000010
【図１０】
0004228180.tif 000011