(57)【要約】      （修正有）【課題】撮影モードを変更した場合、撮影者にとって意に反する画像であったとき、再度現像をする機会を与えることが出来る撮像装置を提供する。【解決手段】所望の撮影モード情報をサーバに送信する撮影モード情報送信手段と、RAW画像データをサーバ上に送信するRAW画像データ送信手段と、サーバに保存しておいたRAW画像データを所望の撮影モード情報で現像するRAW画像データ現像手段と、RAW画像データ現像手段により所望の撮影モードで現像した画像データを撮像装置に送信する画像データ送信手段と、RAW画像データ現像手段により所望の撮影モードで現像された画像データを受信する画像データ受信手段とを備える。撮像装置の記録媒体に記録してある画像中の撮影モードが変更したフレーム位置より、画像データ受信手段により受信した所望の撮影モードで現像した画像データを置き換える。【選択図】図１
2016019253.tif 000002
【特許請求の範囲】
【請求項１】
圧縮画像を記録するとともに、ネットワーク上のサーバに接続可能な撮像装置と、画像データを受信し保存するサーバとで構成される撮像システムにおいて、
前記撮像装置で所定の撮影モード情報を前記サーバに送信する所定の撮影モード情報送信手段と、
前記撮像装置で撮像素子から得られた信号をデジタル信号に変換した信号処理前のデータであるRAW画像データを記録中にサーバ上に送信するRAW画像データ送信手段と、
前記サーバに保存しておいたRAW画像データを前記所定の撮影モード情報で現像するRAW画像データ現像手段と、
前記サーバで前記RAW画像データ現像手段により所定の撮影モードで現像した画像データを前記撮像装置に送信する画像データ送信手段と、
前記サーバより前記RAW画像データ現像手段により所定の撮影モードで現像された画像データを受信する画像データ受信手段と、
前記撮像装置で前記撮像装置の記録媒体に記録してある画像中の撮影モードが変更したフレーム位置より前記画像データ受信手段により受信した所定の撮影モードで現像した画像データを置き換えることを特徴とする撮像システム。
【請求項２】
撮像装置は認識した撮影環境毎に撮影モードを自動で変更可能な撮影モード変更手段と、
撮影中の撮影モード情報を前記サーバに送信する撮影モード情報送信手段を持ち、
サーバは前記撮像装置から送信された撮影モード情報を受信する撮影モード情報受信手段と、
撮影モードが切り替わったRAW画像データのフレーム位置を検索可能な検索手段を備えており、
前記撮影モード変更手段で撮影モードが変更された際に、撮影者から撮影モードの変更や中止の指示が入力された場合は、変更前の撮影モードに戻すための前記操作キーを操作し、変更前の撮影モードに戻すことを特徴とする請求項１に記載の撮像システム。
【請求項３】
撮像装置は認識した撮影環境毎に撮影モードを自動で変更可能な撮影モード変更手段と、
撮影中の撮影モード情報を前記サーバに送信する撮影モード情報送信手段を持ち、
サーバで前記撮像装置から送信された撮影モード情報を受信する撮影モード情報受信手段と、
撮影モードが切り替わったRAW画像データのフレーム位置を検索可能な検索手段を備えており、
最初から撮影モードが撮影者の意図と異なった際に、撮影者から撮影モードの変更や中止の指示が入力された場合は、所定の撮影モードを選択するための操作キーを操作し、所定の撮影モードを選択することを特徴とする請求項１に記載の撮像システム。
【請求項４】
撮像装置は認識した撮影環境毎に撮影モードを自動で変更可能な撮影モード変更手段と、
撮影モード変更手段により撮影モードが変更したことにより開始し、予め定めた規定時間カウントを行うタイマー機能を持ち、
上記期間内に撮影者から撮影モードの変更や中止の指示が入力された場合は、所定の撮影モードを選択するための前記操作キーを操作し、所定の撮影モードを選択可能とすることを特徴とする請求項１に記載の撮像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、圧縮画像を記録するとともに、ネットワーク上のサーバに接続可能な撮像装置と、画像データを受信し保存するサーバとで構成される撮像システムに関するものである。
【背景技術】
【０００２】
近年、急速なインターネットの普及により、ネットワーク上で様々な画像コンテンツが利用できるようになってきた。デジタルカメラやデジタルビデオカメラなど撮像装置にもネットワークを利用して様々な機能を使用できるようになってきている。
【０００３】
特許文献１には、現像処理する前の動画のRAW画像データを記録する装置が開示されている。撮影記録時にRAW画像データを記録しておき、撮影者はパーソナルコンピューター上でホワイトバランス調整や彩度調整など様々な現像処理のパラメータを撮影者独自に設定し、再生時に好みの画像を作成できる。ここで現像処理とは、CCD・CMOSイメージセンサー等の撮像素子から得られた信号をデジタル信号に変換した後、輝度信号、色信号に変換し、その信号に対してガンマ処理、ノイズリダクション処理、ホワイトバランス処理を施し、画像データを作り出す処理を呼び、また、RAW画像データとは、上記撮像素子から得られた信号をデジタル信号に変換した信号処理前のデータのことを呼んでいる。
【０００４】
一方、撮影技術が未熟な撮影者向けには、特徴のあるシーン、例えば鮮やかな花と撮影する場合、人物を中心に撮影したい場合、夕日を撮影したい場合などにおいて現像パラメータを自動設定し、画像圧縮して記録する、いわゆる「オートモード」を搭載している撮像装置がある。ただし、オートモードは撮影アシスト手法の一つであり、必ずしも撮影者の思い通りに、撮影できるとは限らない。そこで、特許文献２は失敗した画像を選択して、補正が必要な現像パラメータを抽出し、撮影者の意図や仕様条件等に応じて現像パラメータを自動的に最適化する技術が提示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００９−０５５３３５号公報
【特許文献２】特開２００４−３４３５２８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
オートモードで画像を圧縮記録する撮像装置で、例えば、人物であったり、色鮮やかな場面や物体であったりを撮影する時に、撮影環境毎に現像パラメータを自動で設定する機能がある場合に、上記機能を用いて色鮮やかな花を撮影すると「鮮やかな色がある場面」であると認識し、上記撮像装置の記録媒体に記録する。しかし、急に見知らぬ人物が撮影時に入ってくると、「人物がいる場面」であると認識し、現像パラメータを自動的に変更して上記撮像装置の記録媒体に記録してしまうこともある。撮影者は本来、花を主体に撮影したいと考えていたので、現像パラメータが「人物中心モード」に変更されてしまうと、撮影者が撮影したい場面を適切な現像パラメータで映像を記録することができなくなってしまうといった課題がある。
【０００７】
また、RAW画像データを撮像装置の画像メモリに現像し、圧縮した画像と一緒に保存しておき、後からRAW画像データを撮影者の意図した現像パラメータで再現像するといった工夫で対応しようとすると、このような方法ではRAW画像データは膨大なデータ量を持つため、一時的だとしてもメモリにバッファリングしなければならず、メモリ容量の確保が現実的ではないといった課題もある。
【０００８】
特許文献２では、RAW画像データを用いずに、もうすでに現像した画像から適した撮影モードの現像パラメータで現像をしているが、RAW画像データから現像をする場合より画質を落とす可能性がある。
【課題を解決するための手段】
【０００９】
本発明の構成は、圧縮画像を記録するとともに、ネットワーク上のサーバに接続可能な撮像装置と、画像データを受信し保存するサーバとで構成される撮像システムにおいて、前記撮像装置で所望の撮影モード情報を前記サーバに送信する所望の撮影モード情報送信手段と、前記撮像装置で撮像素子から得られた信号をデジタル信号に変換した信号処理前のデータであるRAW画像データを記録中にサーバ上に送信するRAW画像データ送信手段と、前記サーバに保存しておいたRAW画像データを前記所望の撮影モード情報で現像するRAW画像データ現像手段と、前記サーバで前記RAW画像データ現像手段により所望の撮影モードで現像した画像データを前記撮像装置に送信する画像データ送信手段と、前記サーバより前記RAW画像データ現像手段により所望の撮影モードで現像された画像データを受信する画像データ受信手段と、前記撮像装置で前記撮像装置の記録媒体に記録してある画像中の撮影モードが変更したフレーム位置より前記画像データ受信手段により受信した所望の撮影モードで現像した画像データを置き換えるようにする。
【発明の効果】
【００１０】
本発明によれば、撮影中にシーンの変化によって、現像パラメータが自動的に設定された際、撮影者にとってシーンの現像パラメータが所望ではない時は、現像サーバに送信しておいたRAW画像データから所望の現像パラメータで現像し直すことによって、遡って最適な現像パラメータで画像を記録できる。撮像装置にRAW画像データを保持しないため、メモリなどを増やす必要がなく、撮像装置に負担をかけずに処理できる。
【００１１】
また、現像する前のRAW画像データを用いて、適した撮影モードの現像パラメータで再現像を行うため、画質を落とさずに画像を作成することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施形態に係る撮像装置の構成例を示すブロック図
【図２】本発明の実施形態１に係る再現像方法を撮像装置とサーバ間のやり取りで説明するためのフローチャート
【図３】サーバから送信された再現像画像を撮像装置で置き換える際のイメージ図
【図４】撮影モードを変更する際に所望の撮影モードを選択する項目のイメージ図
【図５】撮影中の撮影モードを表示装置に表示した時のイメージ図
【発明を実施するための形態】
【００１３】
以下、図面を参照して、本発明を好適かつ例示的な実施形態に基づいて詳細に説明する。
【００１４】
［実施例１］
図１において、撮像装置は、光学系１００、撮像素子１０１、アナログフロントエンド（AFE）１０２、ゲインアンプ１０３、カメラ信号処理部１０４、表示部１０５、エンコード部１０６、記録部１０７を備える。また、撮像装置は光学系制御部１０８、センサ制御部１０９、システムコントローラ１１０、通信インターフェース１１１、操作キー１１２を備える。
【００１５】
光学系１００は撮像レンズ１０、ズーム機能、焦点調節機能、及び絞り調節機能を含み、撮像レンズ１０を介して集光された被写体を撮像素子１０１の撮像面上に結像させる。撮像素子１０１は例えば、CMOSイメージセンサやCCDイメージセンサである。
【００１６】
撮像素子１０１で結像した被写体は光電変換され、映像信号としてAFE１０２に入り、サンプリング及びA/D変換され、利得を変更するゲインアンプ１０３で適切なレベルに変換された後、カメラ信号処理部１０４へ入力される。カメラ信号処理部１０４では、RAW画像データから輝度信号、色信号に変換され、その信号に対して、ガンマ処理、ノイズリダクション処理、ホワイトバランス処理などの現像処理が行われる。カメラ信号処理部１０４から出力された信号は、エンコード部１０６で、例えばH.264やMPEG-2といった各種フォーマットに乗っ取った圧縮のエンコード処理などが施され記録用の信号に変換された後、記録部１０７で記録される。記録部１０７はフラッシュメモリやHDDに限らず、外部メモリとして、メモリーカードや光ディスクなどでも良い。
【００１７】
また、表示部１０５は液晶画面（LCD）等から構成されており、カメラ信号処理部１０４から出力された画像信号より、撮像時のスルー画像及び、再生時の再生画像、処理選択時の選択用メニューや操作指示用のメッセージ等の表示を行う。
【００１８】
光学系制御部１０８は焦点調節機能により焦点距離を調節すること、及び絞り調節機能により、入射光量を調節する。また、センサ制御部１０９は撮像素子１００の蓄積時間調節を行う。
【００１９】
システムコントローラ１１０はCPU、RAM、プログラム格納用ROM及びタイマー等を有したマイクロプロセッサ構成を有しており、CPUは、上述の各回路等にバスラインを介して接続し、プログラム格納用ROMに格納されている制御プログラムにより、撮像装置全体の制御を行う。オートモード時にはモード設定に必要な画像評価値をもらい、現像パラメータをカメラ信号処理部１０４に設定する。
【００２０】
通信インターフェース１１１によりネットワーク１１３に接続し、図示していない画像サーバに接続可能となっている。通信インターフェース１１１は撮像したRAW画像データや圧縮処理された画像データを送受信可能であり、受信した画像データは記録部１０７に送ることができる。
【００２１】
［撮像装置側処理］
上記撮像装置の動作に関し、図２のフローチャートを用いて本発明における実施例を説明する。
【００２２】
ここでは、上記撮像装置はオートモードであり撮影者が撮影環境として色鮮やかな花を撮影するものとして説明をする。
【００２３】
S２００では、上記撮像装置で撮影を開始するとS２０１に移行し、撮影を開始していなければ撮影操作を撮影者が行うまで待機モードとなる。
【００２４】
S２０１では、撮影者がS２００で記録開始操作を行った際に、記録開始コマンドを通信インターフェース１１１からネットワーク１１３を介し、サーバに送信し、撮像装置が記録を開始したことを通知する。
【００２５】
S２０２では、記録を開始すると、システムコントローラ１１０は撮像装置の撮影モードを自動で選択する。撮影モードはカメラ信号処理１０４からのAF評価値、明るさ情報、色彩判定値等の評価値に基づいて、システムコントローラ１１０で撮影環境に合った現像パラメータテーブルを検索し、カメラの設定を変更する。図３では撮影例として、花など色鮮やかな被写体を中心に撮影を行っているので、「色鮮やかな場面」として自動で判定し、撮影モードを「鮮やかモード」に決定する。
【００２６】
S２０３では、ゲインアンプ１０３から出力したRAW画像データを通信インターフェース１１１に送り、ネットワーク１１３を介し、サーバに送信する。
【００２７】
S２０４では、記録終了操作が行われた場合S２０５に移行し撮影を終了する。記録終了操作が行われなかったらS２０６に移行する。
【００２８】
S２０５で撮像装置が終了した際には、記録終了コマンドをネットワーク１１１から、サーバに送信する。
【００２９】
S２０６では、撮影モード情報をネットワーク１１３から、サーバに送信する。S２０７では、撮影中の撮影モードを表示装置１０５に表示する。例えば、色鮮やかな花を撮影していたとすると図５のように画面の左上に「鮮やかモード」と表示する。
【００３０】
S２０８では、例えば、図３のように、撮影者が「鮮やかモード」で花を撮影しているとする。「鮮やかモード」のままで撮影している時には、S２０２に移行し、撮影を続ける。ここで、人物が割り込んできた場合に、S２０２において撮影モードが「人物中心モード」に切り替わる。この時、S２０７において表示装置１０５には「人物中心モード」と表示される。表示装置１０５に表示されている撮影モードを撮影者が確認し、撮影者が撮影したい場面に適さない撮影モードであったと判断した場合は、モード変更するための操作キー１１２を押すことで、例えば図４のようなモード選択画面を表示装置１０５に表示する。上記操作キーが押された場合は、S２０９に移行し、押されなかった場合はS２０２に移行する。
【００３１】
S２０９では、撮影モードが「人物中心モード」に切り替わる前の「鮮やかモード」に戻したい時に、S２０８で表示した図４のモード選択画面で「直前のモードに戻す」という項目を操作キー１１２で選択することで撮影開始時の「鮮やかモード」に戻すことができる。所望の撮影モードが選択された場合S２１０に移行し、モード変更が選択されなかった場合はS２０２に移行して撮影を続ける。
【００３２】
S２１０ではネットワーク１１３を介し、サーバにS２０８で選択した所望の撮影モードを送信する。
【００３３】
S２１１では、S２５７でサーバ側から送信された所望の撮影モードでRAW画像データから現像した画像を受信したかどうかを判断し、受信した場合S２１２に移行し、受信しなかった場合はS２０２に移行する。
【００３４】
S２１２では、図３の３０３ようにサーバで現像されたフレーム列と記録されたフレーム列と置き換え記録する。
【００３５】
S２０８で所望の撮影モードとして「鮮やかモード」が選択されると、それ以降S２０２でシステムコントローラ１１０の自動モード判定は無効となり、「鮮やかモード」で撮影することになる。
【００３６】
また、S２０８で撮影開始時から撮影したい場面に適さない撮影モードであった場合には、図４のモード選択画面から所望の撮影モードを操作キー１１２選択することで撮影モードを変更することができる。この時、直前のモードは存在しないため、「直前のモードに戻す」という項目は選択できないようにする。
【００３７】
［サーバ側処理］
サーバ側での処理を説明する。S２５０はS２０１で撮像装置側から送信された記録コマンドが受信されたことを確認するとS２５１に移行する。S２５１では、S２０３で撮影像装置側から送信されたRAW画像データを受信し、サーバに記録しておく。
【００３８】
S２５２では、S２０７で撮像装置側から送信された記録終了コマンドが受信されたことを確認するとサーバにRAW画像データを記録することを破棄し、終了する。記録終了コマンドが受信されなければ、S２５３に移行する。
【００３９】
S２５３では、S２０６で撮像装置側からネットワーク１１３を介して送信された撮影モードを受信する。撮影モードを受信したら、S２５４に移行し、受信しなかったらそこで待機する。
【００４０】
S２５４では、S２１０で撮影装置側から送信された所望の撮影モードを受信し、S２５５に移行する。受信できなかったら、S２５１に移行する。例えば、ここでは「鮮やかモード」に変更したいことを受信した場合S２５５に移行する。
【００４１】
S２５５では、サーバ上に記録してあったRAW画像データの中から撮影モードが切り替わったRAW画像データのフレーム位置を検索する。ここでは、S２５３で受信した撮影モードから、例えば「鮮やかモード」から「人物中心モード」に切り替わったRAW画像データのフレーム位置を検索する。
【００４２】
S２５６では、S２５４で受信した所望の撮影モードにしたがって、保持したRAW画像データを現像する。例えば、「人物中心モード」に切り替わったフレーム位置をS２５６で検索し、「鮮やかモード」で対象フレームのRAW画像データを現像する。また、撮影開始時に、撮影モードが撮影者の意図と違っていた場合には、記録開始位置を変更スタートフレームとする。
【００４３】
S２５７では、再度所望の現像パラメータで現像されたフレーム列をネットワーク１１３から、撮像装置に送信する。
【００４４】
本実施例では、以上のような構成から、RAW画像データを現像パラメータが変更したところから元の現像パラメータで現像しなおすことによって、遡って最適な現像パラメータで画像を記録することができる。なお、一定時間内に操作キーを押すか、押さないかによって、サーバ上で元の撮影モードの現像パラメータから再現像するかしないかを判定できるようにしても良い。
【００４５】
また、本実施例では、記録開始から記録中にかけて、オートモードにおけるモード変更の一例を示したが、記録終了直前の画像についてはサーバに記録してあった、RAW画像データを使って、撮影モードを変えて記録することもできる。
【００４６】
（他の実施形態）
上述した実施形態の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行することでも本発明は実現可能である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。
【符号の説明】
【００４７】
１００  光学系、１０１  撮像素子、１０２  アナログフロントエンド（AFE）、
１０３  ゲインアンプ、１０４  カメラ信号処理部、１０５  表示部、
１０６  エンコード部、１０７  記録部、１０８  光学系制御部、
１０９  センサ制御部、１１０  システムコントローラ、
１１１  通信インターフェース、１１２  操作キー
【図１】
2016019253.tif 000003
【図２】
2016019253.tif 000004
【図３】
2016019253.tif 000005
【図４】
2016019253.tif 000006
【図５】
2016019253.tif 000007