(57)【要約】【課題】画像データを記録するための媒体を無駄に使用することなく、撮影し、これから記録しようとする画像の各種レベル等をユーザの意図通りに調整する。【解決手段】レンズ光学系12、ＣＣＤ13を含む撮像部と、撮影で得たRAWデータを保持するRAWバッファ16と、RAWデータをRGBデータに変換する第１コンバータ18と、RGBデータを保持するRGBバッファ19と、RGBデータを表示する表示部20と、JPEGデータを記録する記録部27と、ホワイトバランス(WB)の調整を指示すると、その指示内容に従ってWB調整部17が出力する変換パラメータを用いて第１コンバータ18によりRGBデータを得てRGBバッファ19に保持させ、表示部20でWBの変更を反映した画像を表示させ、更に撮影画像の記録が指示された時点でRGBバッファ19のRGBデータからJPEGコンバータ25でJPEGデータを作成させて記録部27に記録させる制御部22とを備える。【選択図】      図１
2006186687.tif 000002
【特許請求の範囲】
【請求項１】
固体撮像素子を用いて被写体の画像を撮影する撮像手段と、
この撮像手段で得た、上記固体撮像素子の出力形式に基づく画像データを保持する第１の保持手段と、
この第１の保持手段で保持する画像データを表示形式の画像データに変換する第１の変換手段と、
この第１の変換手段で得た画像データを保持する第２の保持手段と、
この第２の保持手段で保持する画像データを表示する表示手段と、
上記第２の保持手段で保持する画像データから作成される所定形式の画像データを記録する記録手段と、
上記第１の保持手段で保持する画像データに対して撮影条件の要素の変更を指示する第１の指示手段と、
この第１の指示手段での指示内容に従った変換パラメータを用いて上記第１の変換手段により表示形式の画像データを得て上記第２の保持手段に保持させ、上記表示手段で撮影条件の１要素の変更を反映した画像を表示させる表示制御手段と、
撮影した画像の記録を指示する第２の指示手段と、
この第２の指示手段での指示がなされた時点で、上記第２の保持手段に保持されている画像データから所定形式の画像データを作成して上記記録手段に記録させる記録制御手段と
を具備したことを特徴とする撮像装置。
【請求項２】
上記撮影条件の要素は、輝度レベル、任意色成分レベル及びホワイトバランスの少なくとも１つであることを特徴とする請求項１記載の撮像装置。
【請求項３】
上記表示手段と並列して、上記第２の保持手段で保持する画像データを外部出力する外部出力手段をさらに具備したことを特徴とする請求項１記載の撮像装置。
【請求項４】
固体撮像素子を用いて被写体の画像を撮影する撮像部と、この撮像部で得た画像データから作成された、所定形式の画像データを記録する記録部を備えた撮像装置での撮像方法であって、
上記撮像部で得た、上記固体撮像素子の出力形式に基づく画像データを保持する第１の保持工程と、
この第１の保持工程で保持する画像データを表示形式の画像データに変換する第１の変換工程と、
この第１の変換工程で得た画像データを保持する第２の保持工程と、
この第２の保持工程で保持する画像データを表示する表示工程と、
上記第１の保持工程で保持する画像データに対して撮影条件の要素の変更を指示する第１の指示工程と、
この第１の指示工程での指示内容に従った変換パラメータを用いて上記第１の変換工程により表示形式の画像データを得て上記第２の保持工程で保持させ、上記表示工程で撮影条件の要素の変更を反映した画像を表示させる表示制御工程と、
撮影した画像の記録を指示する第２の指示工程と、
この第２の指示工程での指示がなされた時点で、上記第２の保持工程で保持されている画像データから所定形式の画像データを作成して上記記録部に記録させる記録制御工程と
を有したことを特徴とする撮像方法。
【請求項５】
固体撮像素子を用いて被写体の画像を撮影する撮像部と、この撮像部で得た画像データから作成された、所定形式の画像データを記録する記録部を備えた撮像装置に内蔵されたコンピュータが実行するプログラムであって、
上記撮像部で得た、上記固体撮像素子の出力形式に基づく画像データを保持する第１の保持ステップと、
この第１の保持ステップで保持する画像データを表示形式の画像データに変換する第１の変換ステップと、
この第１の変換ステップで得た画像データを保持する第２の保持ステップと、
この第２の保持ステップで保持する画像データを表示する表示ステップと、
上記第１の保持ステップで保持する画像データに対して撮影条件の要素の変更を指示する第１の指示ステップと、
この第１の指示ステップでの指示内容に従った変換パラメータを用いて上記第１の変換ステップにより表示形式の画像データを得て上記第２の保持ステップで保持させ、上記表示ステップで撮影条件の要素の変更を反映した画像を表示させる表示制御ステップと、
撮影した画像の記録を指示する第２の指示ステップと、
この第２の指示ステップでの指示がなされた時点で、上記第２の保持ステップで保持されている画像データから所定形式の画像データを作成して上記記録部に記録させる記録制御ステップと
をコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、特にデジタルスチルカメラに好適な撮像装置、撮像方法及びプログラムに関する。
【背景技術】
【０００２】
従来よりデジタルスチルカメラにおいて、１回のシャッタキー操作で撮影条件、例えば絞り値を段階的に可変して撮影を複数回連続的に行なうようにした、オートブラケティングと称される機能を搭載したものがある。（例えば、特許文献１）
この種のオートブラケティング機能は、得られる一連の複数の画像中からユーザが最も自己のイメージに高い画像を選択することを前提としている。
【特許文献１】特開平１１−２２０６３８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
上述した如くオートブラケティング機能は、一連の複数の画像の中からユーザが自己のイメージする通りの画像を選択することを前提としており、画像を記録するための媒体の容量を多く使用すると共に、該記録媒体の容量を有効に活用するためには、選択後の不要となった画像データを高い頻度で個々に消去設定しなければならず、その手間が非常に煩雑なものとなる。
【０００４】
本発明は上記のような実情に鑑みてなされたもので、その目的とするところは、画像データを記録するための媒体を無駄に使用することなく、これから記録しようとする画像の各種レベル等をユーザの意図通りに調整することが可能な撮像装置、撮像方法及びプログラムを提供することにある。
【課題を解決するための手段】
【０００５】
請求項１記載の発明は、固体撮像素子を用いて被写体の画像を撮影する撮像手段と、この撮像手段で得た、上記固体撮像素子の出力形式に基づく画像データを保持する第１の保持手段と、この第１の保持手段で保持する画像データを表示形式の画像データに変換する第１の変換手段と、この第１の変換手段で得た画像データを保持する第２の保持手段と、この第２の保持手段で保持する画像データを表示する表示手段と、上記第２の保持手段で保持する画像データから作成される所定形式の画像データを記録する記録手段と、上記第１の保持手段で保持する画像データに対して撮影条件の要素の変更を指示する第１の指示手段と、この第１の指示手段での指示内容に従った変換パラメータを用いて上記第１の変換手段により表示形式の画像データを得て上記第２の保持手段に保持させ、上記表示手段で撮影条件の要素の変更を反映した画像を表示させる表示制御手段と、撮影した画像の記録を指示する第２の指示手段と、この第２の指示手段での指示がなされた時点で、上記第２の保持手段に保持されている画像データから所定形式の画像データを作成して上記記録手段に記録させる記録制御手段とを具備したことを特徴とする。
【０００６】
請求項２記載の発明は、上記請求項１記載の発明において、上記撮影条件の要素は、輝度レベル、任意色成分レベル及びホワイトバランスの少なくとも１つであることを特徴とする。
【０００７】
露出補正及びホワイトバランスのいずれかであることを特徴とする。
【０００８】
請求項３記載の発明は、上記請求項１記載の発明の効果に加えて、上記表示手段と並列して、上記第２の保持手段で保持する画像データを外部出力する外部出力手段をさらに具備したことを特徴とする。
【０００９】
請求項４記載の発明は、固体撮像素子を用いて被写体の画像を撮影する撮像部と、この撮像部で得た画像データから作成された、所定形式の画像データを記録する記録部を備えた撮像装置での撮像方法であって、上記撮像部で得た、上記固体撮像素子の出力形式に基づく画像データを保持する第１の保持工程と、この第１の保持工程で保持する画像データを表示形式の画像データに変換する第１の変換工程と、この第１の変換工程で得た画像データを保持する第２の保持工程と、この第２の保持工程で保持する画像データを表示する表示工程と、上記第１の保持工程で保持する画像データに対して撮影条件の要素の変更を指示する第１の指示工程と、この第１の指示工程での指示内容に従った変換パラメータを用いて上記第１の変換工程により表示形式の画像データを得て上記第２の保持工程で保持させ、上記表示工程で撮影条件の要素の変更を反映した画像を表示させる表示制御工程と、撮影した画像の記録を指示する第２の指示工程と、この第２の指示工程での指示がなされた時点で、上記第２の保持工程で保持されている画像データから所定形式の画像データを作成して上記記録部に記録させる記録制御工程とを有したことを特徴とする。
【００１０】
請求項５記載の発明は、固体撮像素子を用いて被写体の画像を撮影する撮像部と、この撮像部で得た画像データから作成された、所定形式の画像データを記録する記録部を備えた撮像装置に内蔵されたコンピュータが実行するプログラムであって、上記撮像部で得た、上記固体撮像素子の出力形式に基づく画像データを保持する第１の保持ステップと、この第１の保持ステップで保持する画像データを表示形式の画像データに変換する第１の変換ステップと、この第１の変換ステップで得た画像データを保持する第２の保持ステップと、この第２の保持ステップで保持する画像データを表示する表示ステップと、上記第１の保持ステップで保持する画像データに対して撮影条件の要素の変更を指示する第１の指示ステップと、この第１の指示ステップでの指示内容に従った変換パラメータを用いて上記第１の変換ステップにより表示形式の画像データを得て上記第２の保持ステップで保持させ、上記表示ステップで撮影条件の要素の変更を反映した画像を表示させる表示制御ステップと、撮影した画像の記録を指示する第２の指示ステップと、この第２の指示ステップでの指示がなされた時点で、上記第２の保持ステップで保持されている画像データから所定形式の画像データを作成して上記記録部に記録させる記録制御ステップとをコンピュータに実行させることを特徴とする。
【発明の効果】
【００１１】
請求項１記載の発明によれば、画像データを記録するための媒体を無駄に使用することなく、これから記録しようとする画像の各種レベル等をユーザの意図通りに調整することが可能となる。
【００１２】
請求項２記載の発明によれば、上記請求項１記載の発明の効果に加えて、撮影した画像の内容に応じて意図する通りの補正を施すことができる。
【００１３】
請求項３記載の発明によれば、上記請求項１記載の発明の効果に加えて、装置が備える表示画面より大きな画面を有するビューワ装置を外部接続することで画像がより視認し易くなり、所望する画像の変更指示がより容易となる。
【００１４】
請求項４記載の発明によれば、画像データを記録するための媒体を無駄に使用することなく、これから記録しようとする画像の各種レベル等をユーザの意図通りに調整することが可能となる。
【００１５】
請求項５記載の発明によれば、画像データを記録するための媒体を無駄に使用することなく、これから記録しようとする画像の各種レベル等をユーザの意図通りに調整することが可能となる。
【発明を実施するための最良の形態】
【００１６】
以下本発明をデジタルカメラに適用した場合の実施の一形態について図面を参照して説明する。
【００１７】
図１は、このデジタルカメラ１０内の主として撮影モードに対応した電子回路の機能構成について示すものである。  
基本モードである通常の撮影モードでのモニタリング（スルー画像表示）状態においては、モータ（Ｍ）１１の駆動により撮影レンズを含むレンズ光学系１２の合焦位置や絞り位置が移動される。
【００１８】
このレンズ光学系１２の撮影光軸後方に固体撮像素子であるＣＣＤ１３が配置され、露出制御部１４によって走査駆動されて、一定周期、例えば１／３０［秒］毎に結像した光像に対応する光電変換出力を１画面分出力する。
【００１９】
この光電変換出力は、同じく露出制御部１４に駆動されるアンプ（Ａｍｐ．）１５でＩＳＯ感度設定に対応する所定の増幅率で増幅された後、デジタル値に変換されてＲＡＷバッファ１６に保持される一方で、露出制御部１４にフィードバックされて、ＣＣＤ１３とアンプ１５の制御に利用される。
【００２０】
ＲＡＷバッファ１６に保持された、ＣＣＤ１３のカラーフィルタ構成等がそのままの状態で継承されている画像データ（以下「ＲＡＷデータ」と称する）は、適宜ホワイトバランス調整部１７に読出される一方で、第１コンバータ１８に読出され、ここで画素補間を伴って原色成分であるＲ（赤）／Ｇ（緑）／Ｂ（青）が１：１：１に対応するＲＧＢデータに変換されてＲＧＢバッファ１９に保持される。
【００２１】
ここでホワイトバランス調整部１７は、ＲＡＷバッファ１６から読出したＲＡＷデータを解析して上記第１コンバータ１８での変換（マトリックス演算）の係数を調整する。
【００２２】
ＲＧＢバッファ１９に保持されたＲＧＢデータは、このデジタルカメラ１０のモニタ表示部となる、バックライト付きのカラー液晶パネルでなる表示部２０及びここでは図示しない外部出力端子に導出され、表示部２０ではこれを表示出力することで、その時点で撮像素子である上記ＣＣＤ１３が取込んでいる画像情報に基づく画像をリアルタイムに表示（スルー画像表示）することとなる。
【００２３】
このように表示部２０にその時点での撮影可能なスルー画像がリアルタイムに表示されている状態で、静止画撮影を行ないたいタイミングでキー入力部２１の一部を構成するシャッタキーを操作すると、トリガ信号を発生する。このキー入力部２１のトリガ信号は制御部２２に直接入力される。
【００２４】
制御部２２は、ＣＰＵと、このＣＰＵで実行される動作プログラムを固定的に記憶したＲＯＭ、及びワークメモリとして使用されるＲＡＭ等により構成され、このデジタルカメラ１０全体の制御動作を司る。
【００２５】
しかるに制御部２２は、キー入力部２１からシャッタキー操作に伴うトリガ信号を入力すると、その時点でＣＣＤ１３からの一定周期毎の画像の取込みを一時停止し、あらためて適正な露出条件に従った絞り値及びシャッタ速度でＣＣＤ１３を走査駆動して１画面分の画像データを順次上記と同様にＲＧＢバッファ１９まで転送し、その後に記憶保存の状態に遷移する。
【００２６】
この記憶保存の状態では、制御部２２がＲＧＢバッファ１９に書込まれている１フレーム分のＲＧＢデータを第２コンバータ２３で単純なマトリックス演算により輝度色差系のＹＵＶデータに変換させてＹＵＶバッファ２４に保持させる。
【００２７】
このＹＵＶバッファ２４に保持されたＹＵＶデータは、縦８画素×横８画素の基本ブロックと呼称される単位で順次ＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈ  ｃｏｄｉｎｇ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）コンバータ２５に読出され、このＪＰＥＧコンバータ２５でＡＤＣＴ（Ａｄａｐｔｉｖｅ  Ｄｉｓｃｒｅｔｅ  Ｃｏｓｉｎｅ  Ｔｒａｎｓｆｏｒｍ：適応離散コサイン変換）、エントロピ符号化方式であるハフマン符号化等の処理によりデータ圧縮したＪＰＥＧデータとしてＪＰＥＧバッファ２６に保持される。
【００２８】
このＪＰＥＧバッファ２６に保持されるＪＰＥＧデータが、このデジタルカメラ１０の記憶媒体として着脱自在に装着されるメモリカードで構成された記録部２７に書込まれる。
【００２９】
この記録部２７は、内部に不揮発性メモリであるフラッシュメモリを封入したカード状の媒体であり、１フレーム分のＪＰＥＧデータがファイル化されて記録された時点で、制御部２２は再びＣＣＤ１３からの一定周期毎の画像の取込み状態に復帰し、次のシャッタキー操作を待機する。
【００３０】
上記キー入力部２１は、上述したシャッタキーの他に、電源キー、撮影モードキー、再生モードキー、メニュー（ＭＥＮＵ）キー、十字キー、及びセット（ＳＥＴ）キー等から構成され、それらのキー操作に伴なう信号は直接制御部２２へ入力される。
【００３１】
次に上記実施の形態の動作について説明する。
【００３２】
図２は、通常の撮影モードではなく、撮影により得た画像データを必要に応じて露出補正／ホワイトバランス調整した後に記録部２７に記録する「補正記録モード」を指定した状態で実行される、主として制御部２２が内蔵するＲＯＭに記憶した動作プログラムに基づいて実行する。
【００３３】
その動作当初には、上述した如くモニタリング状態を設定して表示部２０でスルー画像表示を行ないながら、キー入力部２１のシャッタキーが操作されるのを待機する（ステップＳ０１）。
【００３４】
しかして、シャッタキーが操作されてトリガ信号が入力されるとステップＳ０２でこれを判断し、直ちにオートフォーカス（ＡＦ）動作と自動露光（ＡＥ）動作とにより適正な合焦位置及び露光量を得（ステップＳ０３）、得た条件でＣＣＤ１３とレンズ光学系１２中の図示しない絞り及びメカニカルシャッタを駆動して露光を行なって（ステップＳ０４）、ＲＡＷデータＲＡＷバッファ１６に保持、格納させる（ステップＳ０５）。
【００３５】
ここでホワイトバランス調整部１７は、このＲＡＷバッファ１６に格納したＲＡＷデータに基づいて自動ホワイトバランス処理によりＲＧＢ各原色成分毎の総和が等しくなるような変換パラメータを得た上で、その変換パラメータを用いてＲＡＷバッファ１６に保持されるＲＡＷデータを第１コンバータ１８でＲＧＢデータに変換してＲＧＢバッファ１９に保持、格納させる（ステップＳ０６）。
【００３６】
このＲＧＢバッファ１９に記憶させたＲＧＢデータに基づいた画像に、露出補正及びホワイトバランス調整と記録のいずれかの指示入力を促す文字ガイドメッセージを、例えば  
露出補正  「−１／２ＥＶ」／「←」  
「＋１／２ＥＶ」／「→」  
ＷＢ調整  太陽光（日向）／「↑」  
電      球    ／「↓」  
記  録              ／「ＳＥＴ」  
のように画面下部に重畳して表示部２０で表示させた上で（ステップＳ０７）、ガイドメッセージで表示したキー入力のいずれかがなされるのを待機する（ステップＳ０８）。
【００３７】
ここで、表示したキー入力のいずれかが指示されるとステップＳ０８でこれを判断し、そのキー入力が画像の記録を指示するものであるか否か、換言すればユーザがその時点で表示部２０に表示しているＲＧＢデータの変換パラメータを了承したか否かを判断する（ステップＳ０９）。
【００３８】
ここで画像の記録を指示するものではなく、露出補正またはホワイトバランス調整を指示するものであった場合には、その指示内容に従ってＲＧＢデータの変換パラメータを更に変更設定し、その変更設定した変換パラメータを一時的に保持した後に（ステップＳ１０）、再び上記ステップＳ０６からの処理に戻り、変更設定した変換パラメータを反映したＲＧＢデータを得て表示部２０に表示させる。
【００３９】
この場合、露出補正の指示に対してはその指示に応じて輝度レベルを補正する補正幅を順次累積していく一方で、ホワイトバランス調整に関しては例えば「太陽光（日向）」「太陽光（日陰）」「電球」「蛍光灯」「マニュアル」の５つの選択項目に従った色温度値を循環的に変更していく。  
このうち「マニュアル」は、前回の自動ホワイトバランス処理で得た色温度値を保持して使用するものとする。
【００４０】
しかるに、上記ステップＳ０６〜Ｓ１０の処理を繰返し実行することで、ユーザが表示部２０に表示される画像を自己の意図通りのものであると判断すると記録を指示する上記キー操作を行なう。
【００４１】
ステップＳ０９でこれを判断すると、その時点で保持している変換パラメータの値を再調整した上で（ステップＳ１１）、上記ステップＳ０６と同様にＲＡＷバッファ１６に格納したＲＡＷデータをその変換パラメータを用いて第１コンバータ１８でＲＧＢデータに変換してＲＧＢバッファ１９に保持、格納させる（ステップＳ１２）。
【００４２】
その後、このＲＧＢバッファ１９に格納したＲＧＢデータを所定の係数に従ったマトリックス演算で第２コンバータ２３によりＹＵＶデータに変換して露出制御部１４に保持、格納させ、これをさらにＪＰＥＧコンバータ２５がＪＰＥＧ処理によりデータ量を圧縮したＪＰＥＧデータに変換してＪＰＥＧバッファ２６に保持、格納させることで、最終的に作成されたＪＰＥＧデータのファイルが記録部２７内に記録される（ステップＳ１３）。
【００４３】
以上でこの図２による画像の撮影から記録までの一連の処理を一旦終了し、次の撮影に備えるべく上記ステップＳ０１からの処理に戻る。
【００４４】
このように、撮影により得た画像データを記録部２７に記録する前に、ユーザの意図に応じて補正をかけるものとしたので、画像データを記録するための記録部２７の容量を無駄に使用することがなく、記録部２７をより有効に活用して多くの画像データを記録させることができる。
【００４５】
なお、上記実施の形態では、記録すべき画像の露出補正とホワイトバランス調整とを行なうものとして説明したが、本発明はこれに限るものではなく、例えば夕焼けを撮影した場合にＲ（赤）成分のみを強調する場合、空や海などを撮影した場合にＢ（青）成分のみを強調する場合など、任意の色成分レベルを強調する色成分毎の強調を行なうものとしてもよい、さらにはシャープネス、コントラスト、彩度等を適宜補正するものとしてもよく、撮影後に補正可能な条件を補正することで、ユーザの意図通りの画像を得ることができる。
【００４６】
また、撮影後にＲＧＢバッファ１９に保持したＲＧＢデータに基づいて表示部２０で画像の表示を行ないながら補正を行なうものとして説明したが、このＲＧＢデータは図１で説明した如く同時に外部出力端子より外部出力するものとしたので、このデジタルカメラ１０の表示部２０より大きな画面、例えば対角４インチ程度のカラー液晶パネルを設けた市販のビューワ装置を外部接続することで、画像がより視認し易くなり、所望する画像の変更指示がより容易となる。
【００４７】
その他、本発明は上記実施の形態に限らず、その要旨を逸脱しない範囲内で種々変形して実施することが可能であるものとする。
【００４８】
さらに、上記実施の形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組合わせにより種々の発明が抽出され得る。例えば、実施の形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題の少なくとも１つが解決でき、発明の効果の欄で述べられている効果の少なくとも１つが得られる場合には、この構成要件が削除された構成が発明として抽出され得る。
【図面の簡単な説明】
【００４９】
【図１】本発明の実施の一形態に係るデジタルカメラの機能回路構成を示すブロック図。
【図２】同実施の形態に係る撮影モード時の制御部による処理内容を示すフローチャート。
【符号の説明】
【００５０】
１０…デジタルカメラ、１１…モータ（Ｍ）、１２…レンズ光学系、１３…ＣＣＤ、１４…露出制御部、１５…アンプ（Ａｍｐ．）、１６…ＲＡＷバッファ、１７…ホワイトバランス調整部、１８…第１コンバータ、１９…ＲＧＢバッファ、２０…表示部、２１…キー入力部、２２…制御部、２３…第２コンバータ、２４…ＹＵＶバッファ、２５…ＪＰＥＧコンバータ、２６…ＪＰＥＧバッファ、２７…記録部。
【図１】
2006186687.tif 000003
【図２】
2006186687.tif 000004