(57)【要約】      （修正有）【課題】高画素数の元画像データの画像確認を可能にする撮像装置を提供する。【解決手段】撮像装置は、被写体を撮像して、所定の解像度において撮像された画像を示す元画像データ１１Ｒを生成する撮像部１２０、１３２と、元画像データに所定の変換処理を行う画像変換部１３３、１３４と、を備える。画像変換部は、元画像データ１１Ｒの解像度を低下させ、元画像データよりも低下させた解像度において元画像データが示す画像全体を示す第１の画像データ１３Ｊを生成し、元画像データ１１Ｒが示す画像の一部を切り出して、元画像データが示す画像全体から切り出した一部の画像を示す第２の画像データ１４Ｊを生成する。【選択図】図７
2020102660.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像して、所定の解像度において撮像された画像を示す元画像データを生成する撮像部と、
前記元画像データに所定の変換処理を行う画像変換部と、
を備え、
前記画像変換部は、
前記元画像データの解像度を低下させ、前記元画像データよりも低下させた解像度において前記元画像データが示す画像全体を示す第１の画像データを生成し、
前記元画像データが示す画像の一部を切り出して、前記元画像データが示す画像全体から切り出した一部の画像を示す第２の画像データを生成する、
撮像装置。
【請求項２】
少なくとも前記第１の画像データ及び前記第２の画像データを含むファイル構成で、前記第１の画像データ及び前記第２の画像データを記録媒体に記録する記録部をさらに備える、
請求項１に記載の撮像装置。
【請求項３】
前記記録部は、前記第１の画像データ及び前記第２の画像データと共に前記元画像データをさらに含むファイル構成で、前記第１の画像データ及び前記第２の画像データと共に前記元画像データを前記記録媒体に記録する、
請求項２に記載の撮像装置。
【請求項４】
前記第１の画像データ及び前記第２の画像データは、ＪＰＥＧ形式の画像データである、
請求項１に記載の撮像装置。
【請求項５】
前記撮像部は、
被写体を複数回撮像して複数の撮像データを生成する撮像素子と、
前記複数の撮像データを合成して前記撮像データよりも高画素数の前記元画像データを生成する高解像度化部と、
を含む、請求項１に記載の撮像装置。
【請求項６】
前記画像変換部は、
所定画素数以下の元画像データからＪＰＥＧ形式の画像データを生成可能な画像処理部と、
前記撮像部が生成した前記元画像データの解像度を低下させる処理により、前記所定画素数以下の低解像度データを生成する低解像度化部と、
前記所定画素数以下となるように前記撮像部が生成した前記元画像データの一部を切り出す切り出し部と、
を含み、
前記低解像度データを前記画像処理部に処理させて前記第１の画像データを生成すると共に、切り出された前記元画像データの一部を前記画像処理部に処理させて前記第２の画像データを生成する、
請求項１に記載の撮像装置。
【請求項７】
画像全体を表示させるときは前記第１の画像データを表示し、ズーム再生するときは前記第２の画像データを表示する表示部をさらに備える、
請求項１に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、高画素数のＲＡＷデータを生成する撮像装置に関する。
【背景技術】
【０００２】
特許文献１は、複数の画像を合成することにより、各画像の画素数以上の画素数を有する合成画像を生成する画像処理装置を開示している。特許文献１の画像処理装置は、拡大した基準画像に、拡大した複数の参照画像を順次追加することにより、合成画像を生成する。このとき、画像処理装置は、生成中の合成画像において画素値が決定されている画素の密度を示す被覆度を測定する。画像処理装置は、参照画像を追加した後の被覆度が、参照画像を追加する前の被覆度以上となるような位置合わせで、生成中の合成画像に対して参照画像を追加していく。これにより、高解像度の合成画像上で画素値が決定されない画素を減少させている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１７０４８８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本開示は、高画素数のＲＡＷデータなどの元画像データの画像確認を可能にする撮像装置を提供する。
【課題を解決するための手段】
【０００５】
本開示の撮像装置は、被写体を撮像して、所定の解像度において撮像された画像を示す元画像データを生成する撮像部と、元画像データに所定の変換処理を行う画像変換部と、を備え、画像変換部は、元画像データの解像度を低下させ、元画像データよりも低下させた解像度において元画像データが示す画像全体を示す第１の画像データを生成し、元画像データが示す画像の一部を切り出して、元画像データが示す画像全体から切り出した一部の画像を示す第２の画像データを生成する。
【発明の効果】
【０００６】
本開示によれば、高画素数の元画像データから低画素数の画像データを生成することにより、撮像装置において元画像データの画像確認が可能になる。
【図面の簡単な説明】
【０００７】
【図１】本開示の一実施形態であるデジタルカメラの構成を示すブロック図
【図２】コントローラの内部構成を示す図
【図３】高解像度撮影モードにおける赤データ、緑データ、及び青データの生成を説明するための図
【図４】高解像度撮影モードにおける赤データ、緑データ、及び青データの合成を説明するための図
【図５Ａ】通常撮影モードにおける画像処理を説明するための図
【図５Ｂ】高解像度撮影モードにおいて画像処理が不可である例を説明するための図
【図５Ｃ】本実施形態における高解像度撮影モードにおける画像処理を説明するための図
【図６】デジタルカメラにおける画像撮影時の処理を示すフローチャート
【図７】画像撮影時における画像データの生成を説明するための図
【図８】通常撮影モードと高解像度撮影モードで生成されたデータのファイル構成を示す図
【図９】デジタルカメラにおける画像再生時の処理を示すフローチャート
【図１０】画像再生時の画面の表示例を示す図
【図１１】図１０に対応する画像の表示範囲を示す図
【発明を実施するための形態】
【０００８】
以下、適宜図面を参照しながら、実施形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、発明者（ら）は、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって特許請求の範囲に記載の主題を限定することを意図するものではない。
【０００９】
（本開示に至った経緯）
ＲＡＷデータは、イメージセンサが捉えた光の強さを画素毎に示すデータであり、ＲＡＷデータのままでは映像として見ることができない。以下、ＲＡＷデータが示す画素毎の光の強さを含む情報を「元画像」と称する。従来、イメージセンサで生成されたＲＡＷデータからＪＰＥＧ形式の画像データが生成されている。ユーザは、例えば、撮像装置の表示モニタ上でＪＰＥＧ形式の画像データを視認することで、撮像したＲＡＷデータの構図等を確認することができる。しかし、ＲＡＷデータからＪＰＥＧ形式の画像データを生成する機能を有する画像処理エンジンは、自身の性能以上の画素数を有するＲＡＷデータを処理することができない。
【００１０】
近年の撮像装置には、高画素数の画像データを生成する方法として、イメージセンサにより生成された複数のＲＡＷデータが示す元画像を合成して、１枚の高画素数の元画像を示すＲＡＷデータを生成する機能を有するものがある。このように生成された高画素数のＲＡＷデータは、画像処理エンジンの性能以上の画素数を有するため、画像処理エンジンは、高画素数のＲＡＷデータを処理することができない。そのため、高画素数のＲＡＷデータからはＪＰＥＧ形式の画像データが生成されない。よって、ユーザは、高画素数のＲＡＷデータについては画像の確認をすることができなかった。このため、ユーザの利便性が損なわれていた。
【００１１】
本開示の撮像装置は、このような問題を解決すべく、高画素数のＲＡＷデータから低画素数の画像データを生成する。具体的には、本開示の撮像装置は、高画素数のＲＡＷデータから、画像処理エンジンが処理可能な低画素数のＲＡＷデータを生成する。画像処理エンジンは、この低画素数のＲＡＷデータからＪＰＥＧ形式等の画像データを生成する。これにより、ユーザは、高画素数のＲＡＷデータに対応する画像を撮像装置の表示モニタ上で確認することができる。よって、ユーザの不便を解消できる。以下、このような撮像装置の詳細を説明する。
【００１２】
（実施形態）
本開示に係る撮像装置の一例として、複数のＲＡＷデータがそれぞれ示す元画像（撮像画像）を合成して、１枚の高画素数の元画像（合成画像）を示すＲＡＷデータを生成する機能を有するデジタルカメラについて説明する。
【００１３】
本実施形態において、イメージセンサが生成した元画像（撮像画像）を示すＲＡＷデータ（撮像データの一例）を「撮像ＲＡＷデータ」と称する。複数の撮像ＲＡＷデータの合成により生成された、高画素数の元画像（合成画像）を示すＲＡＷデータを「合成ＲＡＷデータ」と称する。
【００１４】
〔１．構成〕
〔１−１．デジタルカメラの構成〕
本実施形態に係るデジタルカメラの構成について、図１を用いて説明する。図１は、本実施形態にかかるデジタルカメラの構成を示した図である。デジタルカメラ１００は、被写体を撮像してＲＡＷデータを生成する。本実施形態のデジタルカメラ１００は、通常撮影モードに加え、高解像度撮影モードを有する。通常撮影モードは、ユーザの１回の撮影操作により、１枚の元画像を示す撮像ＲＡＷデータを生成するモードである。高解像度撮影モードは、ユーザの１回の撮影操作により、複数の撮像ＲＡＷデータを生成して合成することにより、１枚の高画素数の元画像を示す合成ＲＡＷデータを生成するモードである。
【００１５】
本実施形態のデジタルカメラ１００は、光学系１１０、イメージセンサ１２０、コントローラ１３０、及びバッファメモリ１４０を備える。さらに、デジタルカメラ１００は、フラッシュメモリ１５０、カードスロット１６０、操作部１７０、通信モジュール１８０、及び表示モニタ１９０を備える。
【００１６】
光学系１１０は、フォーカスレンズ、ズームレンズ、光学式手ぶれ補正レンズ（ＯＩＳ）、絞り、シャッタ、等を含む。光学系１１０に含まれる各種レンズは、何枚から構成されるものであっても、何群から構成されるものであってもよい。
【００１７】
イメージセンサ１２０は、静止画像の撮像動作、スルー画像の撮像動作等を実行する。イメージセンサ１２０は、光学系１１０を介して形成された被写体像を撮像して、静止画像用として撮像ＲＡＷデータを生成する。イメージセンサ１２０は、スルー画像用として、所定のフレームレート（例えば、３０フレーム／秒）で新しいフレームの画像データを生成する。イメージセンサ１２０における、撮像ＲＡＷデータの生成タイミングおよび電子シャッタ動作は、コントローラ１３０によって制御される。イメージセンサ１２０として、ＣＭＯＳイメージセンサ、ＣＣＤイメージセンサ、またはＮＭＯＳイメージセンサなど、種々のイメージセンサを用いることができる。イメージセンサ１２０は、本実施形態における撮像素子の一例である。
【００１８】
コントローラ１３０は、デジタルカメラ１００の動作を制御する。コントローラ１３０はＣＰＵ等を含み、ＣＰＵがプログラム（ソフトウェア）を実行することで所定の機能を実現する。コントローラ１３０は、ＣＰＵに代えて、所定の機能を実現するように設計された専用の電子回路で構成されるプロセッサを含んでもよい。すなわち、コントローラ１３０は、ＣＰＵ、ＭＰＵ、ＧＰＵ、ＤＳＵ、ＦＰＧＡ、ＡＳＩＣ等の種々のプロセッサで実現できる。コントローラ１３０は１つまたは複数のプロセッサで構成してもよい。
【００１９】
コントローラ１３０は、ＲＡＷデータを画像処理してＪＰＥＧ形式の画像データを生成し、ＲＡＷデータ及び画像データをカードスロット１６０に装着されたメモリカード１６５に記録する。また、コントローラ１３０は、メモリカード１６５に記録された画像データを、使用者の操作部１７０に対する操作にしたがい、表示モニタ１９０上に表示させることができる。
【００２０】
バッファメモリ１４０は、コントローラ１３０のワークメモリとして機能する記録媒体である。本実施形態において、バッファメモリ１４０は、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）により実現される。フラッシュメモリ１５０は、不揮発性の記録媒体である。また、図示していないが、コントローラ１３０は各種の内部メモリを有してもよく、例えばＲＯＭを内蔵してもよい。ＲＯＭには、コントローラ１３０が実行する様々なプログラムが記憶されている。また、コントローラ１３０は、ＣＰＵの作業領域として機能するＲＡＭを内蔵してもよい。
【００２１】
カードスロット１６０は、着脱可能なメモリカード１６５が挿入される手段である。カードスロット１６０は、メモリカード１６５を電気的及び機械的に接続可能である。メモリカード１６５は、内部にフラッシュメモリ等の記録素子を備えた外部メモリである。メモリカード１６５は、撮像ＲＡＷデータ、合成ＲＡＷデータ、ＪＰＥＧ形式の画像データなどのデータを格納できる。メモリカード１６５は記録媒体の一例である。
【００２２】
操作部１７０は、デジタルカメラ１００の外装に設けられた操作釦や操作レバー等のハードキーの総称であり、使用者による操作を受け付ける。操作部１７０は、例えば、レリーズ釦、モードダイヤル、タッチパネルを含む。操作部１７０はユーザによる操作を受け付けると、ユーザ操作に対応した操作信号をコントローラ１３０に送信する。
【００２３】
通信モジュール１８０は、通信規格ＩＥＥＥ８０２．１１またはＷｉ−Ｆｉ規格等に準拠した通信を行う回路を含む。デジタルカメラ１００は、通信モジュール１８０を介して、他の機器と通信することができる。デジタルカメラ１００は、通信モジュール１８０を介して、他の機器と直接通信を行ってもよいし、アクセスポイント経由で通信を行ってもよい。通信モジュール１８０は、インターネット等の通信ネットワークに接続可能であってもよい。通信モジュール１８０は、通信規格８０２．１５．１すなわちＢｌｕｅｔｏｏｔｈ（登録商標）規格に準拠した通信を行うための回路を含んでもよい。デジタルカメラ１００は、通信モジュール１８０を介して他の機器とＢｌｕｅｔｏｏｔｈ規格に準拠した通信を行ってもよい。
【００２４】
表示モニタ１９０は、デジタルカメラ１００の背面に備わる。表示モニタ１９０は、種々の情報を表示する表示部の一例である。例えば、表示モニタ１９０は、イメージセンサ１２０で撮像され、コントローラ１３０で画像処理された画像データが示す画像を表示する。また、表示モニタ１９０は、ユーザがデジタルカメラ１００に対して種々の設定を行うためのメニュー画面等を表示する。表示モニタ１９０は、例えば、液晶ディスプレイデバイスまたは有機ＥＬデバイスで構成できる。
【００２５】
通常撮影モードと高解像度撮影モードの切り替えは、例えば、ユーザが、モードダイヤル、所定の操作ボタン、メニュー画面などを介して設定することができる。
【００２６】
〔１−２．コントローラの内部構成〕
本実施形態におけるコントローラ１３０の詳細を、図２を用いて説明する。
【００２７】
図２は、コントローラ１３０の内部構成を示す図である。コントローラ１３０は、主制御部１３１、前処理部１３２、解像度調整部１３３、画像処理部１３４、ＤＲＡＭ制御部１３５、及び記録処理部１３６を有する。
【００２８】
主制御部１３１は、デジタルカメラ１００全体の動作を統括制御する。主制御部１３１は、例えば、ＣＰＵを含む。主制御部１３１は、合成ＲＡＷデータの一部を切り出す処理を行う切り出し部１３１ａを備える。切り出し部１３１ａは、例えば、合成ＲＡＷデータの処理範囲を指定する。
【００２９】
前処理部１３２は、イメージセンサ１２０から出力された撮像ＲＡＷデータに対して各種の前処理を行う。各種の前処理としては、線形性補正、欠陥画素補正、ブラックレベル補正、ノイズ除去等が挙げられるが、これらに限定されない。
【００３０】
解像度調整部１３３は、高解像度化部１３３ａ及び低解像度化部１３３ｂを含む。高解像度化部１３３ａは、高解像度撮影モードにおいて、イメージセンサ１２０から出力された複数の撮像ＲＡＷデータを合成して、１つの高画素数の元画像を示す合成ＲＡＷデータを生成する。低解像度化部１３３ｂは、合成ＲＡＷデータに対し、例えば画素混合処理又は間引き処理を施すことにより、合成ＲＡＷデータよりも低解像度のＲＡＷデータを生成する。以下、低解像度化部１３３ｂで生成される低解像度のデータを「低解像度ＲＡＷデータ」と称する。解像度調整部１３３は、例えば、ＤＳＰにより実現される。
【００３１】
画像処理部１３４は、ＲＡＷデータに各種の処理を施して、画像データを生成する画像処理エンジンである。各種処理としては、ホワイトバランス補正、ガンマ補正、ＹＣ変換処理、電子ズーム処理、ＪＰＥＧ圧縮等の圧縮処理、伸張処理等が挙げられるが、これらに限定されない。例えば、画像処理部１３４は、ＲＡＷデータのＲＧＢをＹＣｂＣｒに変換してＪＰＥＧ形式の画像データを生成する。換言すると、画像処理部１３４はＲＡＷデータの現像を行う。画像処理部１３４は、ハードワイヤードな電子回路で構成してもよいし、プログラムを用いたマイクロコンピュータ、プロセッサなどで構成してもよい。
【００３２】
ＤＲＡＭ制御部１３５は、バッファメモリ１４０に対するデータの書き込み及び読み出しを制御する。
【００３３】
記録処理部１３６は、カードスロット１６０に装着されたメモリカード１６５に対するデータの書き込み及び読み出しを制御する。
【００３４】
以上のように構成されるコントローラ１３０は１つの半導体チップで構成してもよいし、コントローラ１３０を構成する幾つかの機能がＤＳＰなどで構成されてもよい。
【００３５】
〔２．動作〕
デジタルカメラ１００の動作を以下に説明する。
【００３６】
〔２−１．通常撮影モードにおける撮像ＲＡＷデータの生成〕
通常撮影モードにおける画像撮影時、デジタルカメラ１００は、光学系１１０を介して形成された被写体像をイメージセンサ１２０で撮像して、撮像ＲＡＷデータを生成する。
【００３７】
〔２−２．高解像度撮影モードにおける合成ＲＡＷデータの生成〕
図３及び図４を参照して、高解像度撮影モードについて説明する。
【００３８】
高解像度撮影モードでは、デジタルカメラ１００は、カメラボディの手ぶれ補正機能（ＢＩＳ機構）を使用し、イメージセンサ１２０を所定画素ずつ移動（移動ピッチは０．５画素）させて撮像する。これにより、８枚の元画像を示す８つの撮像ＲＡＷデータが生成される。高解像度化部１３３ａは、図３に示すように、８枚の元画像のそれぞれを、縦横の画素数を２倍にし、ＲＧＢを分離する。これにより、赤色画素の位置を示す画素データＲ１〜Ｒ８、緑色画素の位置を示す画素データＧ１〜Ｇ８、及び青色画素の位置を示す画素データＢ１〜Ｂ８が生成される。高解像度化部１３３ａは、１枚目から８枚目の元画像に対応する画素データＲ１〜Ｒ８から、８枚分の赤色画素の位置を示す赤データを生成する。同様に、高解像度化部１３３ａは、１枚目から８枚目の元画像に対応する画素データＧ１〜Ｇ８から、８枚分の緑色画素の位置を示す緑データを生成する。高解像度化部１３３ａは、１枚目から８枚目の元画像に対応する青色画素の位置を示す画素データＢ１〜Ｂ８から、８枚分の青色画素の位置を示す青データを生成する。
【００３９】
高解像度化部１３３ａは、補完アルゴリズムにより、赤データから図４に示すような赤色画素の位置を示す赤補完データを生成する。高解像度化部１３３ａは、補完アルゴリズムにより、青データから図４に示すような青色画素の位置を示す青補完データを生成する。高解像度化部１３３ａは、緑データと、赤補完データと、青補完データとを合成して、ベイヤー配列の合成ＲＡＷデータを生成する。このようにして生成された合成ＲＡＷデータは、イメージセンサ１２０が生成した撮像ＲＡＷデータよりも、縦横の画素数がそれぞれ２倍となる。例えば、イメージセンサ１２０により、４７メガピクセル（Ｍｐｉｘ）の撮像ＲＡＷデータが生成された場合、合成ＲＡＷデータは１８８ＭＰｉｘとなる。
【００４０】
〔２−３．画像処理部の性能〕
図５Ａ〜図５Ｃを参照して、画像処理部１３４の性能について説明する。上述したように画像処理部１３４の性能には限界があり、画像処理部１３４は所定画素数（例えば、８０Ｍｐｉｘ）以下のＲＡＷデータしか処理できない。
【００４１】
図５Ａに示すように、例えば、通常撮影モードにおいて、イメージセンサ１２０が４７Ｍｐｉｘの撮像ＲＡＷデータ１１Ｒを生成した場合、画像処理部１３４はその撮像ＲＡＷデータ１１Ｒに画像処理を施して、ＪＰＥＧ形式の画像データ１１Ｊを生成することができる。
【００４２】
しかし、上述のように高解像度撮影モードにおいて生成される合成ＲＡＷデータは高画素であり、例えば１８８ＭＰｉｘとなる。この場合、図５Ｂに示すように、画像処理部１３４は合成ＲＡＷデータ１２Ｒを処理できない。
【００４３】
ユーザは、撮影後に表示モニタ１９０上で、撮影した写真が意図通りの構図になっているか、高解像度撮影による効果が確認できるか、合成エラーが発生していないか、又は意図通りにピントが合っているかなどを確認したい場合がある。
【００４４】
そこで、本実施形態では、図５Ｃに示すように、高解像度撮影モードにおいて生成された合成ＲＡＷデータ１２Ｒから得られる２つの低画素数のＲＡＷデータ１３Ｒ，１４Ｒを、画像処理部１３４に処理させる。
【００４５】
２つの低画素数のＲＡＷデータのうちの１つは、画素混合を行って合成ＲＡＷデータ１２Ｒの解像度を低くすることにより生成されたＲＡＷデータ１３Ｒである。例えば、１８８ＭＰｉｘの合成ＲＡＷデータ１２Ｒから４７ＭＰｉｘの低解像度ＲＡＷデータ１３Ｒが生成され、画像処理部１３４によりこの低解像度ＲＡＷデータ１３ＲからＹＣデータ（中間データ）が生成され、そのＹＣデータがリサイズ後、ＪＰＥＧ変換処理される。これにより、低解像度ＲＡＷデータ１３Ｒに対応するＪＰＥＧ形式の画像データ１３Ｊが得られる。低解像度ＲＡＷデータ１３Ｒに対応する画像データ１３Ｊは、撮像時の画角全体に対応し、撮像範囲の全体を表すため、「全体画像データ」と称する。
【００４６】
２つの低画素数のＲＡＷデータのうちのもう一つは、合成ＲＡＷデータ１２Ｒの一部が切り出されたＲＡＷデータ１４Ｒである。例えば、合成ＲＡＷデータ１２Ｒの中央部分に相当する中央ＲＡＷデータ１４Ｒが、画像処理部１３４により処理される。例えば、１８８ＭＰｉｘの合成ＲＡＷデータ１２Ｒの中央部分である８０ＭＰｉｘ分の中央ＲＡＷデータ１４Ｒが、画像処理部１３４により処理される。これにより、中央ＲＡＷデータ１４Ｒに対応するＪＰＥＧ形式の画像データ１４Ｊが得られる。中央ＲＡＷデータ１４Ｒに対応する画像データ１４Ｊは、撮像時の画角の一部に対応し、撮像範囲の中央部分のみを表すため、「中央画像データ」と称する。中央画像データ１４Ｊは、合成ＲＡＷデータ１２Ｒの中央部のみが切り出されることにより生成されているため、全体画像データ１３Ｊと比較して、画角が狭い。
【００４７】
ＪＰＥＧ形式の全体画像データ１３Ｊ及び中央画像データ１４Ｊが示す画像は表示モニタ１９０で再生可能であるため、ユーザは高解像度撮影により生成した合成ＲＡＷデータ１２Ｒに対応する画像を確認することができる。
【００４８】
〔２−４．撮影動作〕
図６は、デジタルカメラ１００による画像撮影時の処理を示すフローチャートである。図７は、画像撮影時において生成されるデータを示している。図８は、生成されたデータがメモリカード１６５に記録されるときのファイル構成の一例を示している。図６〜図８を参照して、デジタルカメラ１００による画像撮影時の処理を説明する。
【００４９】
ユーザによりレリーズ釦の押下による画像撮影指示がなされると（Ｓ１０でＹＥＳ）、コントローラ１３０は、撮影モードが高解像度撮影モードか否かを判断する（Ｓ１１）。高解像度撮影モードである場合（Ｓ１１でＹＥＳ）、主制御部１３１は、イメージセンサ１２０を制御して、複数回撮像し、合成ＲＡＷデータ１２Ｒを生成する（Ｓ１２）。このとき、前処理部１３２は、イメージセンサ１２０が生成した複数の撮像ＲＡＷデータ１１Ｒが示す元画像のそれぞれに対して前処理を施す。複数の撮像ＲＡＷデータ１１Ｒは、ＤＲＡＭ制御部１３５により、バッファメモリ１４０に一時的に格納される。解像度調整部１３３の高解像度化部１３３ａは、前処理後の複数の撮像ＲＡＷデータ１１Ｒが示す元画像を合成して、合成ＲＡＷデータ１２Ｒを生成する。合成ＲＡＷデータ１２Ｒは、ＤＲＡＭ制御部１３５により、バッファメモリ１４０に一時的に格納される。
【００５０】
解像度調整部１３３の低解像度化部１３３ｂは、合成ＲＡＷデータ１２Ｒから、画像処理部１３４の性能限界以下となる低解像度ＲＡＷデータ１３Ｒを生成する（Ｓ１３）。低解像度ＲＡＷデータ１３Ｒは、ＤＲＡＭ制御部１３５により、バッファメモリ１４０に一時的に格納される。
【００５１】
主制御部１３１は、ＤＲＡＭ制御部１３５を介してバッファメモリ１４０に格納されている低解像度ＲＡＷデータ１３Ｒを読み出して、画像処理部１３４に処理させる。画像処理部１３４は、低解像度ＲＡＷデータ１３ＲをＪＰＥＧ形式に変換して全体画像データ１３Ｊを生成する（Ｓ１４）。
【００５２】
主制御部１３１は、ＤＲＡＭ制御部１３５を介してバッファメモリ１４０に格納されている、合成ＲＡＷデータ１２Ｒを読み出す。主制御部１３１は、合成ＲＡＷデータ１２Ｒの一部、本実施形態では、中央部の範囲を指定して画像データを生成するように画像処理部１３４を制御する。具体的には、例えば、切り出し部１３１ａが、合成ＲＡＷデータ１２Ｒの処理範囲を指定する。これにより、画像処理部１３４は、合成ＲＡＷデータ１２Ｒの指定された範囲内に相当する中央ＲＡＷデータ１４ＲをＪＰＥＧ形式に変換して中央画像データ１４Ｊを生成する（Ｓ１５）。
【００５３】
記録処理部１３６は、合成ＲＡＷデータ１２Ｒと、全体画像データ１３Ｊと、中央画像データ１４Ｊとを関連付けてメモリカード１６５に記録する（Ｓ１６）。具体的には、図８に示すように、記録処理部１３６は、ファイル形式を識別するヘッダと、合成ＲＡＷデータ１２Ｒと、全体画像データ１３Ｊと、中央画像データ１４Ｊとを含むファイル構成を有するファイル１６６を、メモリカード１６５に記録する。
【００５４】
通常撮影モードの場合（Ｓ１１でＮｏ）、主制御部１３１は、イメージセンサ１２０を制御して、１回撮像し、撮像ＲＡＷデータ１１Ｒを生成する（Ｓ１７）。
【００５５】
主制御部１３１は、撮像ＲＡＷデータ１１Ｒを画像処理部１３４に処理させる。画像処理部１３４は、撮像ＲＡＷデータ１１ＲをＪＰＥＧ形式に変換して、撮像ＲＡＷデータ１１Ｒに対応する画像データ１１Ｊを生成する（Ｓ１８）。
【００５６】
記録処理部１３６は、撮像ＲＡＷデータ１１Ｒと画像データ１１Ｊとを関連付けてメモリカード１６５に記録する（Ｓ１９）。具体的には、図８に示すように、記録処理部１３６は、ファイル形式を識別するヘッダと、撮像ＲＡＷデータ１１Ｒと、画像データ１１Ｊとを含むファイル構成を有するファイル１６７を、メモリカード１６５に記録する。
【００５７】
〔２−５．高解像度撮影モードに対応する再生動作〕
図９は、高解像度撮影モードにおいて撮像した画像の再生時の処理を示すフローチャートである。図１０は、高解像度撮影モードにおいて撮像した画像の再生時における画面の表示例を示している。図１１は、図１０に対応する画像の表示範囲を示している。例えば、図１１の（ａ），（ｂ），（ｃ）は、図１０の（ａ），（ｂ），（ｃ）にそれぞれ対応している。図９から図１１を参照して、デジタルカメラ１００による画像再生時の処理を説明する。
【００５８】
高解像度撮影モードにおいて撮像した画像に対して、ユーザにより再生指示がなされると、主制御部１３１は、メモリカード１６５から、ファイル１６６に含まれる全体画像データ１３Ｊを読み出す。主制御部１３１は、全体画像データ１３Ｊを表示モニタ１９０に表示する（Ｓ２１）。このとき、図１１（ａ）の表示範囲２４０及び図１０（ａ）に示すように、表示モニタ１９０には、全体画像データ１３Ｊが示す画像全体が表示される。
【００５９】
主制御部１３１は、操作部１７０を介してズームイン操作がなされたかどうかを判断する（Ｓ２２）。ユーザによりズームイン操作がなされると（Ｓ２２でＹｅｓ）、主制御部１３１は、メモリカード１６５から、ファイル１６６に含まれる中央画像データ１４Ｊを読み出す。主制御部１３１は、中央画像データ１４Ｊを表示モニタ１９０に表示する（Ｓ２３）。このとき、図１１（ｂ）の表示範囲２４０に示すように、表示モニタ１９０には、中央画像データ１４Ｊが示す画像のうち、中心部のみが表示される。図１０（ｂ）に示すように、表示モニタ１９０には、画像全体の大きさを表す枠２１０と、現在表示中の画像の範囲を表す枠２２０がズーム後所定時間のみ表示される。例えば、枠２１０は緑色、枠２２０は黄色、所定時間は１秒間である。表示モニタ１９０には、さらに、移動可能な方向を示す矢印２３０が表示される。
【００６０】
主制御部１３１は、ズームアウト操作がなされたかどうかを判断する（Ｓ２４）。ユーザによりズームアウト操作がなされると（Ｓ２４でＹｅｓ）、主制御部１３１は、再度、全体画像データ１３Ｊを表示モニタ１９０に表示する（Ｓ２１）。
【００６１】
主制御部１３１は、中央画像データ１４Ｊを表示中に、操作部１７０を介して移動操作がなされたかどうかを判断する（Ｓ２５）。ユーザにより移動操作がなされると（Ｓ２５でＹｅｓ）、主制御部１３１は、ユーザの移動操作に基づく表示位置の移動が可能か否かを判断する（Ｓ２６）。主制御部１３１は、図１１（ｃ）に示すように、ズーム再生ができる範囲を中央画像データ１４Ｊの範囲内に制限する。
【００６２】
表示位置の移動が可能であれば（Ｓ２６でＹｅｓ）、主制御部１３１は、ユーザの移動操作に基づいて、表示モニタ１９０に表示する画像の表示範囲を変更する（Ｓ２７）。例えば、ユーザが右への移動操作を行うと、主制御部１３１は中央画像データ１４Ｊの右寄りの範囲の画像を表示させる。このとき、例えば、中央画像データ１４Ｊの右端に達すると、図１０（ｃ）に示すように、表示モニタ１９０は、右側への移動可能を示す矢印２３０の表示を消す。
【００６３】
主制御部１３１は、ユーザにより、画像表示を終了させる操作がなされたか否かを判断する（Ｓ２８）。画像表示を終了させる操作がなされると、主制御部１３１は、図９に示す再生処理を終了する。画像表示を終了させる操作がなされていない場合は、ステップＳ２４に戻る。
【００６４】
以上のように、高解像度撮影モードにおいて生成された合成ＲＡＷデータ１２Ｒに対応する画像を表示させる場合、画像全体を表示させるときは、主制御部１３１は全体画像データ１３Ｊの全体を表示モニタ１９０に表示する。これにより、ユーザは、合成ＲＡＷデータの全体像を確認することができる。ズーム再生するときは、主制御部１３１は中央画像データ１４Ｊの一部を表示モニタ１９０に表示する。これにより、ユーザは、合成ＲＡＷデータの解像感を確認することができる。
【００６５】
〔２−６．通常撮影モードに対応する再生動作〕
通常撮影モードで撮影された撮像ＲＡＷデータ１１Ｒに対して、ユーザにより再生が指示されると、主制御部１３１は、撮像ＲＡＷデータ１１Ｒに対応する画像データ１１Ｊをメモリカード１６５から読み出して表示モニタ１９０に表示する。通常撮影モードのときは、１つの画像データ１１Ｊしか生成されないため、画像の全体を表示するときは画像データ１１Ｊの全体が表示され、ズーム再生するときは画像データ１１Ｊの一部が表示される。主制御部１３１は、通常撮影モードにおいて生成された画像データ１１Ｊのズーム再生に対しては、画像データ１１Ｊの全範囲内におけるズーム再生を許可する。よって、例えば、ズーム再生中にユーザが画像の端まで表示範囲を移動させる操作をしたときは、現在表示中の画像の位置を表す枠２２０の端が、画像全体の大きさを表す枠２１０の端に一致する。
【００６６】
〔３．効果等〕
以上のように本実施形態の撮像装置の一例であるデジタルカメラ１００は、イメージセンサ１２０とコントローラ１３０とを備える。イメージセンサ１２０とコントローラ１３０は、被写体を撮像して撮像ＲＡＷデータ及び合成ＲＡＷデータなどのＲＡＷデータ（元画像データの一例）を生成する撮像部を構成する。ＲＡＷデータが示す元画像は、所定の解像度において撮像された画像の一例である。撮像部の一部であるイメージセンサ１２０は、被写体を複数回撮像して複数の撮像ＲＡＷデータを生成する撮像素子の一例である。撮像部の一部である高解像度化部１３３ａは、複数の撮像ＲＡＷデータを合成して撮像ＲＡＷデータよりも高画素数の合成ＲＡＷデータを生成する。コントローラ１３０は、合成ＲＡＷデータに所定の変換処理を行う画像変換部の一例である。具体的には、所定の変換処理は、合成ＲＡＷデータから合成ＲＡＷデータの画素数よりも低画素数の全体画像データ（第１の画像データの一例）と中央画像データ（第２の画像データの一例）を生成する処理である。より具体的には、低解像度化部１３３ｂ及び画像処理部１３４は、合成ＲＡＷデータの解像度を合成ＲＡＷデータよりも低下させ、合成ＲＡＷデータよりも低下させた解像度において合成ＲＡＷデータが示す画像全体を示す全体画像データを生成する。切り出し部１３１ａ及び画像処理部１３４は、合成ＲＡＷデータが示す画像の一部を切り出して、合成ＲＡＷデータが示す画像全体から切り出した一部の画像を示す中央画像データを生成する。
【００６７】
これにより、高画素数のＲＡＷデータであっても、全体画像データ及び中央画像データを使用した画像確認が可能になる。例えば、表示モニタ１９０上で画像を確認することができる。また、デジタルカメラ１００とは別体の表示部において画像を確認する際であっても、デジタルカメラ１００が生成した全体画像データと中央画像データにより画像確認が可能となる。全体画像データを使用した画像確認により、合成ＲＡＷデータの全体像、例えば、構図、明るさ、色味などを確認することができる。中央画像データを使用した画像確認により、合成ＲＡＷデータの解像感、例えば高解像度撮影の効果が表れているかどうかを確認することができる。
【００６８】
画像処理部１３４は、所定画素数以下のＲＡＷデータからＪＰＥＧ形式の画像データを生成可能である。低解像度化部１３３ｂは、合成ＲＡＷデータを所定画素数以下となるように低解像度化した低解像度ＲＡＷデータを生成する。切り出し部１３１ａは、所定画素数以下となるように合成ＲＡＷデータの一部を切り出す。主制御部１３１は、低解像度ＲＡＷデータを画像処理部１３４に処理させて全体画像データを生成すると共に、切り出された合成ＲＡＷデータの一部を画像処理部１３４に処理させて中央画像データを生成する。
【００６９】
このように、画像処理部１３４の性能よりも高画素数の合成ＲＡＷデータであっても、画像処理部１３４が処理できる程度の画素数以下に低下させたＲＡＷデータを用いることにより、画像処理部１３４による処理が可能となる。
【００７０】
デジタルカメラ１００は、少なくとも全体画像データ及び中央画像データを含むファイル構成で、全体画像データ及び中央画像データをメモリカード１６５に記録する記録処理部１３６及びカードスロット１６０をさらに備える。メモリカード１６５は記録媒体の一例である。記録処理部１３６及びカードスロット１６０は、記録部の一例である。
【００７１】
本実施形態において記録処理部１３６は、全体画像データ及び中央画像データと共に合成ＲＡＷデータをさらに含むファイル構成で、全体画像データ及び中央画像データと共に合成ＲＡＷデータを記録する。
【００７２】
全体画像データ及び中央画像データは、ＪＰＥＧ形式の画像データである。デジタルカメラ１００は、画像全体を表示させるときは全体画像データを表示し、ズーム再生するときは中央画像データを表示する、表示モニタ１９０（表示部の一例）をさらに備える。
【００７３】
これにより、ユーザは、合成ＲＡＷデータの全体像と解像感の両方をデジタルカメラ１００の表示モニタ１９０上で確認することができる。よって、ユーザは、撮影後すぐに写真を確認することができる。
【００７４】
（他の実施形態）
以上のように、本出願において開示する技術の例示として、実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施形態にも適用可能である。また、上記実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。
【００７５】
上記の実施形態では、合成ＲＡＷデータ１２Ｒに対して、低画素数のＲＡＷデータ１３Ｒ，１４Ｒから、全体画像データ１３Ｊと中央画像データ１４Ｊを生成する例について説明したが、全体画像データ１３Ｊと中央画像データ１４Ｊを生成する対象は、合成ＲＡＷデータ１２Ｒに限らない。デジタルカメラ１００は、画像処理部１３４の処理性能よりも高画素数のＲＡＷデータに対して、全体画像データ１３Ｊと中央画像データ１４Ｊを生成する。よって、例えば、撮像ＲＡＷデータ１１Ｒ自体が画像処理部１３４の性能以上の高画素数である場合は、撮像ＲＡＷデータ１１Ｒに対応する全体画像データと中央画像データを生成する。
【００７６】
上記の実施形態では、切り出し部１３１ａは、合成ＲＡＷデータ１２Ｒの中央部分を切り出したが、切り出しの範囲は中央部分に限らない。切り出しは、合成ＲＡＷデータ１２Ｒが示す元画像の範囲内であればよい。例えば、切り出し部１３１ａは、合焦した位置を含む所定の範囲を切り出してもよい。
【００７７】
上記の実施形態では、図１０及び図１１を用いた画像再生時の説明において、主制御部１３１は、ユーザがズームイン操作をしなければ全体画像データ１３Ｊを表示モニタ１９０に表示し、ユーザがズームイン操作をすれば中央画像データ１４Ｊを表示モニタ１９０に表示した。これに代えて、主制御部１３１は、全画角表示時（ズーム倍率１倍）及び低倍率（例えば、１．１〜８倍）の拡大ズーム時は、全体画像データ１３Ｊを表示モニタ１９０に表示し、高倍率（例えば、８．１〜１６倍）の拡大ズーム時において、中央画像データ１４Ｊを表示モニタ１９０に表示してもよい。
【００７８】
上記の実施形態では、コントローラ１３０は、合成ＲＡＷデータ１２Ｒから、図５Ｃに示すような全体画像データ１３Ｊ（例えば、２ＭＰｉｘ）及び中央画像データ１４Ｊ（例えば、８０ＭＰｉｘ）を生成したが、さらに１つ以上の別の画像データを生成してもよい。例えば、コントローラ１３０は、画素数が全体画像データ１３Ｊよりも多く且つ中央画像データ１４Ｊよりも少ない、例えば４７Ｍｐｉｘの第３の画像データを生成してもよい。第３の画像データは、例えば、撮像範囲の中央部分を含み、画角が中央画像データ１４Ｊよりも広く且つ全体画像データ１３Ｊよりも狭い。この場合、全画角表示時（ズーム倍率１倍）において全体画像データ１３Ｊを表示し、低倍率（例えば、１．１〜８倍）の拡大ズーム時において第３の画像データを表示し、高倍率（例えば、８．１〜１６倍）の拡大ズーム時において中央画像データ１４Ｊを表示してもよい。
【００７９】
上記の実施形態では、撮像装置の例としてデジタルカメラを説明したが、これに限定されない。撮像装置は、画像撮影機能を有する電子機器（例えば、ビデオカメラ、スマートフォン、タブレット端末等）であればよい。
【００８０】
上記の実施形態で説明した画像データのフォーマットは一例であり、他のフォーマットでもよい。例えば、ＪＰＥＧ形式に代えて、ＴＩＦＦ(Tagged Image File Format)、ＰＮＧ(Portable Network Graphics)でもよい。
【００８１】
以上のように、本開示における技術の例示として、実施形態を説明した。そのために、添付図面および詳細な説明を提供した。
【００８２】
したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
【００８３】
また、上述の実施形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
【産業上の利用可能性】
【００８４】
本開示は、高画素数のＲＡＷデータを生成する機能を有する撮像装置に有用である。
【符号の説明】
【００８５】
１００    デジタルカメラ
１１０    光学系
１２０    イメージセンサ
１３０    コントローラ
１３１    主制御部
１３１ａ  切り出し部
１３２    前処理部
１３３    解像度調整部
１３３ａ  高解像度化部
１３３ｂ  低解像度化部
１３４    画像処理部
１３５    ＤＲＡＭ制御部
１３６    記録処理部
１４０    バッファメモリ
１５０    フラッシュメモリ
１６０    カードスロット
１６５    メモリカード
１７０    操作部
１８０    通信モジュール
１９０    表示モニタ
【図１】
2020102660.tif 000003
【図２】
2020102660.tif 000004
【図３】
2020102660.tif 000005
【図４】
2020102660.tif 000006
【図５Ａ】
2020102660.tif 000007
【図５Ｂ】
2020102660.tif 000008
【図５Ｃ】
2020102660.tif 000009
【図６】
2020102660.tif 000010
【図７】
2020102660.tif 000011
【図８】
2020102660.tif 000012
【図９】
2020102660.tif 000013
【図１０】
2020102660.tif 000014
【図１１】
2020102660.tif 000015