(57)【要約】【課題】ステレオ画像と共に保存する２Ｄ画像を選択することができ、さらにステレオ画像の画素数を選択することができるステレオ画像生成装置及びステレオ画像生成方法を提供する。【解決手段】第１の撮像部１０−１と、第１の撮像部と同じか低解像度の第２の撮像部１０−２と、前記第１の撮像画像と前記第２の撮像画像をリサイズする画素数を指定するステレオ画像選択部とを備える。第１の撮像画像、および第２の撮像画像を変換し、前記指定の画素数にする画像リサイズ部２４と、画像リサイズ部２４で変換された第１の撮像画像及び第２の撮像画像とをエンコードする画像エンコード部２７と、画像エンコード部２７でエンコードされた第１の撮像画像及び第２の撮像画像をステレオ画像フォーマットに変換してステレオ画像を生成するステレオ画像フォーマット変換部２８とを備える。ステレオ画像と共に保存する２Ｄ画像を選択する２Ｄ画像選択部と、を備える。【選択図】図１
2013251669.tif 000002
【特許請求の範囲】
【請求項１】
第１の画素数を備え、第１の撮像画像を撮像する第１の撮像部と、
前記第１の画素数と同じか、それよりも小さい第２の画素数を備え、第２の撮像画像を撮像する第２の撮像部と、
前記第１の撮像画像と前記第２の撮像画像をリサイズする画素数を指定するステレオ画像選択部と、
前記第１の撮像画像を変換し、指定の画素数にするとともに、前記第２の撮像画像を変換し、前記指定の画素数にする画像リサイズ部と、
前記画像リサイズ部で変換された前記第１の撮像画像及び前記第２の撮像画像をエンコードする画像エンコード部と、
前記画像エンコード部でエンコードされた前記第１の撮像画像及び前記第２の撮像画像をステレオ画像フォーマットに変換してステレオ画像を生成するステレオ画像フォーマット変換部と、
を備えたステレオ画像生成装置。
【請求項２】
請求項１に記載のステレオ画像生成装置であって、
前記画像リサイズ部が行う、前記第１の撮像画像の変換、及び前記第２の撮像画像の変換は、拡大、縮小、又は等倍の変換であるステレオ画像生成装置。
【請求項３】
請求項１に記載のステレオ画像生成装置であって、
ステレオ画像と共に保存する２Ｄ画像を選択する２Ｄ画像選択部を備え、前記ステレオ画像フォーマット変換部により生成されたステレオ画像と、２Ｄ画像選択部により選択された２Ｄ画像を保存するステレオ画像生成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ステレオ画像を撮像するステレオ画像撮像用の複眼カメラに用いて好適なステレオ画像生成装置及びステレオ画像生成方法に関する。
【背景技術】
【０００２】
近年カメラの広角化が進んでいる。またステレオ画像を撮影する機器が、既にいくつか商品化されている。富士フィルム株式会社のＦｉｎｅＰｉｘ  ＲＥＡＬ  ３Ｄ  Ｗ３や、シャープ株式会社のスマートフォンであるＳＨ−１２Ｃなどである。これらの機器では、ステレオ画像を撮影する場合に、２Ｄ画像も共に保存するのが一般的であり、複数のフォーマットの画像データが混在する。
複数のフォーマットの画像データをわかりやすく表示するために、保存したステレオ画像の表示方法として、特許文献１に記載された画像表示装置が知られている。特許文献１に記載された画像表示装置は、保存した画像のサムネイルとともに、その画像のフォーマット種別とを表示する。
【０００３】
また、ステレオ画像を撮影する際には、２つのカメラの光軸ずれによる左右のカメラの撮影画像の位置ずれを補正する必要があるが、この補正処理により、撮影画像の画角がせまくなってしまう。ステレオ画像と共に保存される２Ｄ画像は、この位置ズレ補正処理後の画角の狭い画像が保存されることが一般的である。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−１２０２１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述した従来のステレオ撮影装置では、ステレオ画像と共に保存する２Ｄ画像として、２つのカメラの撮影画像の位置ズレ補正処理後の画像を保存するため、広角のカメラモジュールを搭載していたとしても、カメラで撮影できる画角より狭い画角の２Ｄ画像を保存することになる。また、ステレオ画像と共に、２Ｄ画像を保存するため、保存に多くのメモリを必要とする。
【０００６】
本発明は、係る事情に鑑みてなされたものであり、ユーザが３Ｄ画像と共に保存する２Ｄ画像を選択でき、また保存するステレオ画像のサイズを選択可能とするステレオ画像生成装置及びステレオ画像生成方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明のステレオ画像生成装置は、第１の撮像画像を撮像する第１の撮像部と、第２の撮像画像を撮像する第２の撮像部と、前記第１の撮像画像、および前記第２の撮像画像を変換する画素数を指定するステレオ画像選択部と前記第１の撮像画像を変換し、前記ステレオ画像選択部により指定した画素数にするとともに、前記第２の撮像画像を変換し、前記指定の画素数にする画像リサイズ部と、前記画像リサイズ部で変換された前記第１の撮像画像及び前記第２の撮像画像をエンコードする画像エンコード部と、前記画像エンコード部でエンコードされた前記第１の撮像画像及び前記第２の撮像画像をステレオ画像フォーマットに変換してステレオ画像を生成するステレオ画像フォーマット変換部と、ステレオ画像と共に保存する２Ｄ画像を選択する２Ｄ画像選択部と、を備えた。
【０００８】
上記構成によれば、２Ｄ画像選択部により、ステレオ画像とともに保存する２Ｄ画像を選択できるため、ユーザが、位置ズレ補正処理後の画角の狭い画像ではなく、画角の広い２Ｄ画像を保存することができる。
さらに、第１の撮像部で撮像された第１の撮像画像と、第２の撮像部で撮像された第２の撮像画像を、前記ステレオ画像選択部にて指定した画素数にリサイズし、リサイズした第１の撮像画像及び第２の撮像画像をエンコードし、エンコードした第１の撮像画像及び第２の撮像画像をステレオ画像フォーマットに変換してステレオ画像を生成するので、ユーザが所望の画像サイズのステレオ画像を生成することができる。
【０００９】
上記構成において、前記画像リサイズ部が行う、前記第１の撮像画像の変換、及び前記第２の撮像画像の変換は、拡大、縮小、又は等倍の変換である。
【００１０】
上記構成において、前記第１の撮像画像、もしくは前記第２の撮像画像のいずれかに対して、上下ずれ、水平ずれ、回転ずれ、又は大きさずれの中で少なくとも１つを補正する位置補正部を備えている。そして、前記画像エンコード部は、前記位置補正部で補正され、前記画像リサイズ部で指定の画素数に変換された前記第１の撮像画像と、前記位置補正部で補正され、前記画像リサイズ部で前記指定の画素数に変換された前記第２の撮像画像と、をエンコードする。
【００１１】
上記構成によれば、第１の撮像画像、もしくは第２の撮像画像のいずれかに対して、上下ずれ、水平ずれ、回転ずれ、又は大きさずれの中で少なくとも１つを補正する位置補正部を備えたことで、第１の撮像画像と第２の撮像画像とから精度の高いステレオ画像を生成することが可能となる。
【００１２】
上記構成において、位置補正情報を保持する位置補正情報保持部を備え、前記位置補正部は、前記位置補正情報に基づき上下ずれ、水平ずれ、回転ずれ、又は大きさずれの中で少なくとも１つを補正する。
【００１３】
上記構成によれば、位置補正情報を保持する位置補正情報保持部を備えたことで、位置補正における処理時間の短縮化を図ることができる。
【００１４】
本発明のステレオ画像生成方法は、第１の撮像部において、第１の撮像画像を撮像する第１撮像ステップと、第２の撮像部において、第２の撮像画像を撮像する第２撮像ステップとを備える。前記第１の撮像画像を変換し、指定した画素数にするとともに、前記第２の撮像画像を変換し、前記指定の画素数にする画像リサイズステップと、前記画像リサイズステップで変換された前記第１の撮像画像及び前記第２の撮像画像をエンコードする画像エンコードステップとを備える。そして、前記画像エンコードステップでエンコードされた前記第１の撮像画像及び前記第２の撮像画像をステレオ画像フォーマットに変換してステレオ画像を生成するステレオ画像フォーマット変換ステップとを備える。そして、ステレオ画像と共に保存する２Ｄ画像を選択する２Ｄ画像選択ステップと、を備えた。
【００１５】
上記方法によれば、第１の撮像部と、第２の撮像部を使用し、第１の撮像部で撮像された第１の撮像画像を指定の画素数にするとともに、第２の撮像部で撮像された第２の撮像画像を指定の画素数にする。このようにしてリサイズした第１の撮像画像及び第２の撮像画像とをエンコードし、エンコードした第１の撮像画像及び第２の撮像画像をステレオ画像フォーマットに変換してステレオ画像を生成し、ステレオ画像と共に保存する２Ｄ画像を選択するので、ユーザの設定にあわせて、画角の広い２Ｄ画像か、ステレオ画像と同じ画角の２Ｄ画像のいずれを保存するかを選択することが可能となる。
【発明の効果】
【００１６】
本発明によれば、ステレオ画像と共に保存する２Ｄ画像をユーザが選択することができるため、ユーザが画角の広い２Ｄ画像か、ステレオ画像と同じ画角の２Ｄ画像のいずれを保存するかを選択することができる。また、保存するステレオ画像も選択可能であるため、ユーザが使用する端末のメモリの量にあわせて、各ユーザが所望の画像サイズで保存することが可能となる。
【図面の簡単な説明】
【００１７】
【図１】本発明の一実施の形態に係るステレオ画像生成装置の概略構成を示すブロック図
【図２】図１のステレオ画像生成装置のプレビュー処理を示すフローチャート
【図３】図２のプレビュー処理のステップＳ１３〜ステップＳ１５及びステップＳ１７〜ステップＳ１８の各ステップにおける処理結果を示す図
【図４】図１のステレオ画像生成装置の撮影処理を示すフローチャート
【図５】図４の撮影処理のステップＳ３０〜ステップＳ３２及びステップＳ３４の各ステップにおける処理結果を示す図
【図６】図１のステレオ画像生成装置に２つの撮像部を配置したときの光軸ずれを示す図
【発明を実施するための形態】
【００１８】
以下、本発明を実施するための好適な実施の形態について、図面を参照して詳細に説明する。
【００１９】
図１は、本発明の一実施の形態に係るステレオ画像生成装置の概略構成を示すブロック図である。図１において、本実施の形態のステレオ画像生成装置１は、高解像度の撮像部１０−１と、高解像度の撮像部１０−１より画角の狭い低解像度の撮像部１０−２と、ズーム制御部１１と、オートフォーカス制御部１２と、シャッター制御部１３と、露出制御部１４と、ホワイトバランス制御部１５と、カメラ操作部１６とを備える。そして、制御部１７と、２つのカメラ信号処理部１８−１，１８−２と、画角補正部１９と、画角情報保持部２０と、位置補正部２１と、位置補正情報保持部２２と、色補正部２３と、画像リサイズ部２４と、画像エンコード部２７とを備える。そして、ステレオ画像フォーマット変換部２８と、画像保存部２９と、フォーマット変換部３０と、表示制御部３１と、表示部３２と，２Ｄ画像選択部４０と、ステレオ画像選択部４１とを備える。
【００２０】
撮像部１０−２は、撮像部１０−１に比べ、画素数が小さく、画角が狭いとしているが、同じ画素数の同じ画角の撮像部でも構わない。
【００２１】
撮像部１０−１，１０−２は、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子を備え、撮像信号を出力する。本実施の形態では、撮像部１０−１で撮像して得られた画像を第１の撮像画像とし、撮像部１０−２で撮像して得られた画像を第２の撮像画像とする。また、本実施の形態では、撮像部１０−１は第１の画角を有しており、撮像部１０−２は、撮像部１０−１の第１の画角よりも狭い第２の画角を有している。
【００２２】
ズーム制御部１１は、撮像部１０−１，１０−２のズーム制御を行う。オートフォーカス制御部１２は、撮像部１０−１，１０−２のオートフォーカス制御を行う。シャッター制御部１３は、撮像部１０−１，１０−２のシャッター制御を行う。露出制御部１４は、撮像部１０−１，１０−２の露出制御を行う。ホワイトバランス制御部１５は、撮像部１０−１，１０−２のホワイトバランス制御を行う。
【００２３】
カメラ操作部１６は、ステレオ画像生成装置１の操作を行うものであり、操作時の信号が制御部１７に入力される。制御部１７は、カメラ操作部１６での操作に応じた操作信号を撮像部１０−１，１０−２、２Ｄ画像選択部４０、ステレオ画像選択部４１へ出力する。カメラ信号処理部１８−１は、プレビュー処理において、撮像部１０−１で撮像された第１の撮像画像を表示部３２のサイズに合わせてリサイズする。カメラ信号処理部１８−２は、プレビュー処理において、撮像部１０−２で撮像された第２の撮像画像を表示部３２のサイズに合わせてリサイズする。本実施の形態では、プレビュー処理時は、カメラ信号処理部１８−１からＶＧＡサイズ(Ｗ６４０ピクセル、Ｈ４８０ピクセル)の第１の撮像画像（Ｌ：左画像）を出力し、カメラ信号処理部１８−２からはＶＧＡサイズ(Ｗ６４０ピクセル、Ｈ４８０ピクセル)の第２の撮像画像（Ｒ：右画像）を出力する。Ｗ６４０ ピクセルとは、水平方向の画素数が６４０ピクセルであることを示しており、Ｈ４８０とは、垂直方向の画素数が４８０ピクセルであることを意味する。撮影処理時は、カメラ信号処理部１８−１からは１３メガピクセルの第１の撮像画像（Ｌ：左画像）を出力し、カメラ信号処理部１８−２からは３メガピクセルの第２の撮像画像（Ｒ：右画像）を出力するものとする。
【００２４】
画角補正部１９は、画角情報保持部２０に保持されている画角補正情報に基づき撮像部１０−１で撮像された第１の撮像画像の画角を小さくする。例えば、８メガピクセルの画角にする。なお、撮像部１０−２で撮像された第２の撮像画像については画角補正しない。撮像部１０−１と撮像部１０−２が同じ画角の撮像部である場合は、画角補正の処理は不要である。位置補正部２１は、位置補正情報保持部２２に保持されている位置補正情報に基づき、撮像部１０−１で撮像された第１の撮像画像に対して位置補正する。この場合、位置補正として、“上下ずれ”、“水平ずれ”、“回転ずれ”、又は“大きさずれ”の中で少なくとも１つを行う。なお、位置補正は、撮像部１０−２で撮像された第２の撮像画像に対して行ってもよい。即ち、位置補正部２１は、撮像部１０−１で撮像された第１の撮像画像、もしくは撮像部１０−２で撮像された第２の撮像画像のいずれかに対して位置補正を行う。
【００２５】
色補正部２３は、撮像部１０−２で撮像された第２の撮像画像と位置補正後の撮像部１０−１で撮像された第１の撮像画像との間の色の違いについて、第１の撮像画像及び第２の撮像画像（第１の撮像画像又は第２の撮像画像）に対して色の補正を行う。
画像リサイズ部２４は、撮像部１０−１で撮像された第１の撮像画像をステレオ画像選択部４１で指定した画素数に変換するとともに、撮像部１０−２で撮像された第２の撮像画像も前記指定の画素数に変換する。なお、画像リサイズ部２４が行う第１の撮像画像の変換及び第２の撮像画像の変換は、“拡大”や“縮小”の他に“等倍”も含まれる。
【００２６】
画像エンコード部２７は、画像リサイズ部２４で画素数の変換が行われた第１の撮像画像と、画像リサイズ部２４で画素数の変換が行われた第２の撮像画像とをエンコード（圧縮）する。この場合、例えばＪＰＥＧ（Joint Photographic Experts Group）形式で圧縮する。ステレオ画像フォーマット変換部２８は、画像エンコード部２７でエンコードされた第１の撮像画像及び第２の撮像画像をステレオ画像フォーマットに変換してステレオ画像を生成する。この場合、例えばＪＰＥＧ形式からＭＰＯ（Multi-Picture Format）形式に変換する。画像保存部２９は、フラッシュメモリ（ＳＤメモリなど）を有し、ステレオ画像フォーマット変換部２８で生成されたステレオ画像を保存する。
【００２７】
２Ｄ画像選択部４０は、ステレオ画像と共に保存する２Ｄ画像を選択し、画像保存部２９に保存する。
フォーマット変換部３０は、画像リサイズ部２４で表示部３２に合う画素数に変換された第１の撮像画像及び第２の撮像画像を表示部３２に表示するための形式に変換する。表示制御部３１は、フォーマット変換部３０で表示部３２に表示するための形式（例えば、ピクセルバイピクセル）に変換された第１の撮像画像及び第２の撮像画像を表示部３２に表示する制御を行う。表示部３２は、例えば液晶表示器である。
【００２８】
次に、本実施の形態のステレオ画像生成装置１の動作を説明する。
【００２９】
図２は、本実施の形態のステレオ画像生成装置１のプレビュー処理を説明するためのフローチャートである。プレビュー処理とは、ユーザ操作により、撮像部１０−１、撮像部１０−２が起動され、ユーザが撮影したい構図を決めるために、撮像部１０−１、撮像部１０−２が取り込んだ連続的な撮像画像を、表示部に順次表示する処理であり、撮像画像の保存を含む撮影自体はまだ行われていない。
【００３０】
図２において、ユーザがカメラ操作部１６により撮像部１０−１、１０−２の起動を指示する（ステップＳ１０）。このユーザ指示により、制御部１７が、撮像部１０−１、１０−２を起動する指示を出力する（ステップＳ１１）。起動指示を出力した後、ユーザがカメラ操作部１６により撮影終了を指示するまで間、ステップＳ１３〜ステップＳ２５を繰り返す。ステップＳ１３〜ステップＳ２５の処理を繰り返すための判定はステップＳ１２とステップＳ２６で行われる。
【００３１】
ユーザが撮影終了を指示しない間、まずカメラ信号処理部１８−１，１８−２が撮像部１０−１，１０−２で撮像された撮像画像を表示部３２のサイズに合わせてリサイズする（ステップＳ１３）。次いで、画角補正部１９が、画角情報保持部２０に保持されている画角補正情報を読み出し、撮像部１０−１で撮像された第１の撮像画像をトリミングする（ステップＳ１４）。
【００３２】
次いで、位置補正部２１が、位置補正情報保持部２２に保持されている位置補正情報を読み出し、その位置補正情報に基づき撮像部１０−１で撮像された第１の撮像画像に対して、上下ずれ、水平ずれ、回転ずれ、大きさずれの中の少なくとも１つを補正する（ステップＳ１５）。次いで、色補正部２３が、左右画像即ち撮像部１０−１で撮像された第１の撮像画像と撮像部１０−２で撮像された第２の撮像画像の色の違いを補正する（ステップＳ１６）。次いで、画像リサイズ部２４が、表示部３２のサイズに合わせて、左右画像即ち撮像部１０−１で撮像された第１の撮像画像と撮像部１０−２で撮像された第２の撮像画像をリサイズし、さらに水平方向に１／２に圧縮する（ステップＳ１７）。次いで、フォーマット変換部３０が、表示部３２のステレオ画像（３Ｄ）表示フォーマットに合わせてフォーマット変換を行う（ステップＳ１８）。次いで、表示制御部３１が、表示部３２のデータ受信タイミングに合わせて表示データを転送し、表示部３２にプレビュー画像をステレオ表示する（ステップＳ１９）。
【００３３】
次いで、制御部１７が、ユーザがカメラ操作部１６により保存する２Ｄ画像を選択したかどうか判定し（ステップＳ２０）、選択を指示した場合（即ち、ステップＳ２０の判定が「Ｙｅｓ」の場合）、ステップＳ２１で２Ｄ画像選択部４０にユーザが選択した２Ｄ画像の種類を設定する。これに対して２Ｄ画像の選択を指示していない場合（即ち、ステップＳ２０の判定が「Ｎｏ」の場合）、２Ｄ画像選択部には２Ｄ画像の種類が設定されず、初期設定において選択された２Ｄ画像が設定されている。例えば、初期設定では、位置ズレ補正処理済みの２Ｄ画像を保存する設定としておく。
次いで、制御部１７が、ユーザがカメラ操作部１６により保存する３Ｄ画像を選択したかどうか判定し（ステップＳ２２）、選択した場合（即ち、ステップＳ２２の判定が「Ｙｅｓ」の場合）、ステップＳ２３でステレオ画像選択部にユーザが選択したステレオ画像を設定する。これに対してステレオ画像の選択をしていない場合（即ち、ステップＳ２２の判定が「Ｎｏ」の場合）、ステレオ画像選択部にはステレオ画像の種類が設定されず、初期設定のままである。例えば、初期設定では、高解像度側の撮影画像のサイズにあわせて、低解像度側の撮影画像を拡大する設定としておく。
次いで、制御部１７が、ユーザがカメラ操作部１６により撮影を指示したかどうか判定し（ステップＳ２４）、撮影を指示した場合（即ち、ステップＳ２４の判定が「Ｙｅｓ」の場合）、ステップＳ２５で撮影処理を行う。この撮影処理の詳細については後述する。これに対して撮影を指示していない場合（即ち、ステップＳ２４の判定が「Ｎｏ」の場合）、撮影処理を行わない。以上の処理を、ユーザがカメラ操作部１６により、撮影終了を指示するまで繰り返し行う。そして、ユーザが撮影終了を指示すると、制御部１７が、撮影部１０−１、１０−２のそれぞれの動作を停止させ（ステップＳ２７）、その後、本処理を終了する。
【００３４】
図３は、撮像部１０−１，１０−２と表示部３２の仕様を以下のように決定したときのステップＳ１３〜ステップＳ１５及びステップＳ１７〜ステップＳ１８の各ステップにおける処理結果を示す図である。
【００３５】
撮像部１０−１：１３メガピクセルカメラ、焦点距離 ２７ｍｍ相当（３５ｍｍフィルム換算
撮像部１０−２：３メガピクセルカメラ、焦点距離 ３５ｍｍ相当（３５ｍｍフィルム換算
表示部３２：ＶＧＡ（Video Graphics Array）サイズ（Ｗ６４０×Ｈ４８０ピクセル）
ステップＳ１３では、第１の撮像画像は、約Ｈ（（４８０×１．３）＋β）ピクセル、約Ｗ（（６４０×１．３）＋α）ピクセルとなる。第２の撮像画像は、Ｈ４８０ピクセル、Ｗ６４０ピクセルとなる。ここで、焦点距離３５ｍｍ、２７ｍｍの画角の差により、２７ｍｍのカメラで撮影したほうが、縦横それぞれ約１．３倍広角に撮影できる。そのため、２７ｍｍｍのカメラ画像をトリミングした後に、３５ｍｍと同じ画角になるように、２７ｍｍのカメラはＶＧＡサイズより１．３倍程度大きい画像を出力するように、カメラ信号処理部１０−１に設定する。さらに、上下／左右／大きさ／回転の補正により、画像サイズが小さくなる分も見込んで、２７ｍｍのカメラはＨ（（４８０×１．３）＋β）ピクセル、Ｗ（（６４０×１．３）＋α）の画像を撮像するようにする。ここでα、βの意味は、２つのカメラをステレオ画像生成装置に配置した時の光軸のずれ、およびそれぞれのカメラ自体の画角のずれ、光軸のずれを補正することにより、画像の有効画素が減少しないように、水平方向はαピクセル、垂直方向はβピクセル分、大きい画像サイズを出力するように、カメラ信号処理部1に設定することを意味する。図６は、２つのカメラをステレオ画像生成装置に配置した時に発生する光軸のずれを示したものである。
ステップＳ１４では、第１の撮像画像は、約Ｈ（４８０＋β）ピクセル、約Ｗ（６４０＋α）ピクセルとなる。第２の撮像画像は、Ｈ４８０ピクセル、Ｗ６４０ピクセルのままである。ステップＳ１５では、第１の撮像画像は、約Ｈ４８０ピクセル、約Ｗ６４０ピクセルとなる。第２の撮像画像は、Ｈ４８０ピクセル、Ｗ６４０ピクセルのままである。ステップＳ１７では、第１の撮像画像は、Ｈ４８０ピクセル、Ｗ３２０ピクセルとなる。第２の撮像画像は、Ｈ４８０ピクセル、Ｗ３２０ピクセルとなる。ステップＳ１８では、第１の撮像画像と第２の撮像画像とが交互となり、Ｈ４８０ピクセル、Ｗ６４０ピクセルとなる。
【００３６】
（撮影処理）
次に、上記ステップＳ２５の撮影処理について説明する。
【００３７】
図４は、図２における撮影処理を説明するためのフローチャートである。ここで、撮影処理とは、プレビュー処理において、表示部３２に表示される画像を確認して、撮影したい構図を決定し、ユーザがカメラ操作部１６に対して撮影指示を行った以降の処理のことを差しており、画像リサイズから画像保存部２９にステレオ画像を保存するまでの処理である。図４において、カメラ信号処理部１８−１が、撮像部１０−１が撮像した第１の撮像画像をユーザ設定の画像サイズに合わせてリサイズする一方、カメラ信号処理部１８−２が、撮像部１０−２が撮像した第２の撮像画像をユーザ設定の画像サイズに合わせてリサイズする（ステップＳ３０）。
【００３８】
次いで、画角補正部１９が、画角情報保持部２０より画角補正情報を読み出し、撮像部１０−１が撮像した第１の撮像画像をトリミングする（ステップＳ３１）。次いで、位置補正部２１が、位置補正情報保持部２２より位置補正情報を読み出し、撮像部１０−１が撮像した第１の撮像画像に対して、“上下ずれ”、“水平ずれ”、“回転ずれ”、又は“大きさずれ”の中で少なくとも１つを補正する（ステップＳ３２）。
【００３９】
次いで、色補正部２３が、左右画像の色の違いを補正する（ステップＳ３３）。即ち、撮像部１０−２で撮像された第２の撮像画像と位置補正後の撮像部１０−１で撮像された第１の撮像画像との間の色の違いを補正する。次いで、画像リサイズ部２４が、ステレオ画像選択部４１の設定に基づき、撮像部１０−１で撮像された第１の撮像画像、および撮像部１０−２で撮像された第２の撮像画像をリサイズする。（ステップＳ３４）
次いで、画像エンコード部２７が、左右の画像をエンコードする（例えば、ＪＰＥＧ形式に圧縮する）。即ち、撮像部１０−２で撮像された第２の撮像画像と位置補正後の撮像部１０−１で撮像された第１の撮像画像をエンコードする（ステップＳ３５）。次いで、ステレオ画像フォーマット変換部２８において、画像エンコード部２７でエンコードされた左右の画像即ち第１の撮像画像と第２の撮像画像をステレオ画像フォーマットに変換する（ステップＳ３６）。
次いで、２Ｄ画像選択部４０により指定された２Ｄ画像を、画像エンコード部２７が、その画像をエンコードする（例えば、ＪＰＥＧ形式に圧縮する）。（ステップＳ３７）。左右の画像をステレオ画像フォーマットに変換し、２Ｄ画像のエンコードが完了すると本処理を終える。
【００４０】
図５は、撮像部１０−１，１０−２の仕様を以下のように決定したときのステップＳ３０〜ステップＳ３２及びステップＳ３４、ステップＳ３７の各ステップにおける処理結果を示す図である。
【００４１】
撮像部１０−１：１３メガピクセルカメラ、焦点距離 ２７ｍｍ相当（３５ｍｍフィルム換算
撮像部１０−２：３メガピクセルカメラ、焦点距離 ３５ｍｍ相当（３５ｍｍフィルム換算
ステップＳ３０では、第１の撮像画像は、Ｈ３１２０ピクセル、Ｗ４１６０ピクセルとなる。第２の撮像画像は、Ｈ１５３６ピクセル、Ｗ２０４８ピクセルとなる。ステップＳ３１では、第１の撮像画像は、約Ｈ２４００ピクセル、約Ｗ３２００ピクセルとなる。ここで、焦点距離３５ｍｍ、２７ｍｍの画角の差により、２７ｍｍのカメラで撮影したほうが、縦横それぞれ約１．３倍広角に撮影できる。そのため、２７ｍｍｍのカメラ画像を画角補正部１９によりトリミングすると、１／１．３倍程度の画素数になる。但し、同じ画素数のカメラでも、画角のばらつきがあるため、トリミング後の画像サイズはばらつく。
【００４２】
第２の撮像画像は、Ｈ１５３６ピクセル、Ｗ２０４８ピクセルのままである。ステップＳ３２では、第１の撮像画像は、Ｈ（２４００−β）ピクセル、Ｗ（３２００−α）ピクセルとなる。第２の撮像画像は、Ｈ１５３６ピクセル、Ｗ２０４８ピクセルのままである。ステップＳ３４では、ステレオ画像選択部４１の設定により、処理が異なる。ステレオ画像選択部４１により、第１の撮像画像が選択されている場合は、第１の撮像画像にあわせて、第２の撮像画像が拡大され、第１の撮像画像は、Ｈ（２４００−β）ピクセル、Ｗ（３２００−α）ピクセルとなる。第２の撮像画像は、Ｈ（２４００−β）ピクセル、Ｗ（３２００−α）ピクセルとなり、第１の撮像画像と同じ画素数になる。ここでα、βの意味は、２つのカメラをステレオ画像生成装置に配置した時の光軸のずれ、およびそれぞれのカメラ自体の画角のずれ、光軸のずれを補正することにより、減少する画素数を示している。
【００４３】
一方、ステレオ画像選択部４１により、第２の撮像画像が選択されている場合は、第２の撮像画像にあわせて、第１の撮像画像が縮小され、第１の撮像画像は、Ｈ２０４８ピクセル、Ｗ１５３６ピクセルとなる。第２の撮像画像は、Ｈ２０４８ピクセル、Ｗ１５３６ピクセルとなり、第１の撮像画像と同じ画素数になる。
ステップＳ３７では、２Ｄ画像選択部４０により指定した２Ｄ画像をエンコードし保存する。
【００４４】
このように本実施の形態に係るステレオ画像生成装置１によれば、高解像度の第１の撮像部１０−１と、この第１の撮像部１０−１よりも低解像度の第２の撮像部１０−２と、第１の撮像画像を変換し、ステレオ画像選択部４１に設定された画素数にする。そして、第２の撮像画像を変換し、前記設定された画素数にする画像リサイズ部２４と、画像リサイズ部２４で変換された第１の撮像画像及び第２の撮像画像とをエンコードする画像エンコード部２７とを備えている。そして、画像エンコード部２７でエンコードされた第１の撮像画像及び第２の撮像画像をステレオ画像フォーマットに変換してステレオ画像を生成するステレオ画像フォーマット変換部２８と、ステレオ画像と共に保存する２Ｄ画像を選択する２Ｄ画像選択部４０とを備えている。従って、ユーザの設定により、画角の狭い２Ｄ画像ではなく、画角の広い２Ｄ画像を選択して保存することができる。また、ユーザの設定により保存するステレオ画像のサイズも選択できるので、ユーザがメモリ量にあわせて、所望の画像サイズでステレオ画像を保存することが可能となる。
【産業上の利用可能性】
【００４５】
本発明は、ユーザの設定により、ステレオ画像と共に保存する２Ｄ画像を選択することができ、また保存するステレオ画像のサイズも選択することができるといった効果を有し、ステレオ画像を撮像するステレオ画像撮像用の複眼カメラなどへの適用が可能である。
【符号の説明】
【００４６】
１    ステレオ画像生成装置
１０−１，１０−２    撮像部
１１    ズーム制御部
１２    オートフォーカス制御部
１３    シャッター制御部
１４    露出制御部
１５    ホワイトバランス制御部
１６    カメラ操作部
１７    制御部
１８−１，１８−２    カメラ信号処理部
１９    画角補正部
２０    画角情報保持部
２１    位置補正部
２２    位置補正情報保持部
２３    色補正部
２４    画像リサイズ部
２７    画像エンコード部
２８    ステレオ画像フォーマット変換部
２９    画像保存部
３０    フォーマット変換部
３１    表示制御部
３２    表示部
４０    ２Ｄ画像選択部
４１    ステレオ画像選択部
【図３】
2013251669.tif 000003
【図１】
2013251669.tif 000004
【図２】
2013251669.tif 000005
【図４】
2013251669.tif 000006
【図５】
2013251669.tif 000007
【図６】
2013251669.tif 000008