(57)【要約】【課題】少ない補間処理で、画質の劣化を抑えた広角画像及び望遠画像の両方をファインダ画面上に鮮明に表示可能な画像撮影装置及び画像表示方法を提供する。【解決手段】中央部を拡大し周辺部を圧縮する歪曲収差特性を持つ光学系と、撮像素子の受光面に結像された被写体像を画像データに変換し、原画像データとして出力するイメージセンサと、同一の前記原画像データに対して設定された第１の画角と、第１の画角とは異なる第２の画角とに係る各設定画角の原画像データの歪曲収差を補正し、第１の画像及び第２の画像を生成する回路と、画像を表示するファインダと、ファインダの１画面に第１の画像及び第２の画像を同時に表示する同時表示モードを有する回路とを備える。【選択図】    図１
2007096588.tif 000002
【特許請求の範囲】
【請求項１】
中央部を拡大し周辺部を圧縮する歪曲収差特性を持つ光学系と、
撮像素子の受光面に前記光学系により結像された被写体像を画像データに変換し、原画像データとして出力するイメージセンサと、
同一の前記原画像データに対して設定された第１の画角と、該第１の画角とは異なる第２の画角とに係る各設定画角の原画像データの歪曲収差を補正し、第１の画像及び第２の画像を生成する画像処理回路と、
画像を表示するファインダと、
前記ファインダの１画面に前記第１の画像及び第２の画像を同時に表示する同時表示モードを有する表示制御回路と、を有する画像撮影装置。
【請求項２】
前記表示制御回路は、前記同時表示モードにおいて前記第１の画像の表示領域と第２の画像の表示領域とを入れ替える入替表示モードを更に有することを特徴とする請求項１に記載の画像撮影装置。
【請求項３】
前記表示制御回路は、前記ファインダの１画面に表示される画像を、前記同時表示モードにおいて表示された前記第１の画像と第２の画像の内の、何れか一方の画像のみに変更する単独表示モードを更に有することを特徴とする請求項１に記載の画像撮影装置。
【請求項４】
前記表示制御回路は、前記ファインダに表示される画像を、前記原画像データに係る画像に変更する原画像表示モードを更に有することを特徴とする請求項１に記載の画像撮影装置。
【請求項５】
前記表示制御回路は、前記ファインダの１画面内に、機能設定に係るメニューを表示させるメニュー表示モードを更に有することを特徴とする請求項１に記載の画像撮影装置。
【請求項６】
前記表示モードを設定するモード設定部を更に有し、
前記表示制御回路は、設定された前記表示モードに応じ、画像毎に前記ファインダ上の表示位置を演算する表示位置演算部と、
前記演算された位置に各画像を配置して前記ファインダに出力する表示変換部と、
を有する請求項１から５までの、何れか１項に記載の画像撮影装置。
【請求項７】
保存する前記第１及び第２の画角を設定する第１の撮影モード、及び、前記第１の画角を表示し、保存する前記第２の画角を設定する第２の撮影モードを含む複数の撮影モードの中から、実行する撮影モードを設定する撮影モード設定手段を更に有し、
前記表示制御回路は、設定された前記撮影モードに応じ、非保存対象の画角に係る画像に対し、保存対象の画像とは異なるフィルタ処理を行うフィルタ処理部を有する請求項１から６までの、何れか１項に記載の画像撮影装置。
【請求項８】
前記第１の画像又は前記第２の画像の少なくとも一方に対し、表示する前記ファインダ上の位置を指定する領域指定手段を更に有し、
前記表示制御回路は、前記指定位置に前記第１の画像又は前記第２の画像を移動させることを特徴とする請求項１に記載の画像撮影装置。
【請求項９】
前記第１の画像及び第２の画像を格納するメモリ装置を更に有することを特徴とする請求項１、請求項２または請求項６から請求項８のいずれかに記載の画像撮影装置。
【請求項１０】
前記第１の画像又は前記第２の画像の少なくとも一方に対し、その表示サイズを指定するサイズ指定手段を更に有し、
前記表示制御回路は、前記指定された表示サイズに従って前記第１の画像又は前記第２の画像の少なくとも一方の表示サイズを変更することを特徴とする請求項１に記載の画像撮影装置。
【請求項１１】
前記表示制御回路は、前記指定された表示サイズが閾値を越えたとき、その対象となっていない非対象画像の表示サイズを変更することを特徴とする請求項１０に記載の画像撮影装置。
【請求項１２】
前記表示制御回路は、前記第１の画角あるいは前記第２の画角の内、一方の画角を内包する画角に係る画像内に、前記内包される画角の大きさを示す枠を表示させることを特徴とする請求項１に記載の画像撮影装置。
【請求項１３】
前記表示制御回路は、前記内包される画角内に係る画像の表示特性を、前記内包される画角を囲む画像の表示特性とは異ならせることを特徴とする請求項１２に記載の画像撮影装置。
【請求項１４】
中央部を拡大し周辺部を圧縮する歪曲収差特性を持つ光学系により結像された被写体像を画像データに変換し、原画像データとして出力する画像生成ステップと、
同一の前記原画像データに対して設定された、第１の画角と、この第１の画角とは異なる第２の画角とに係る、各設定画角の原画像データの歪曲収差を補正し、第１の画像及び第２の画像を生成する画像処理ステップと、
ファインダの１画面に、前記第１の画像及び第２の画像を同時に表示する同時表示モードを有する表示制御ステップと、
を有する画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像撮影装置及び画像表示方法に関し、特に、広角画像と望遠画像を同時に取得し、ファインダ画面に両方の画像を表示するのに用いて好適な画像撮影装置及び画像表示方法に関する。
【背景技術】
【０００２】
従来、ビデオカメラやデジタルカメラなどの画像入力装置においては、画像の拡大縮小を行う場合に、撮影する被写体までの距離や画角に占める大きさに合わせてレンズの焦点距離を変更するズーム機能が広く利用されている。また、カメラに実装されているファインダ画面においては、所望の画角に合った映像を映し出すことで、被写体を的確に捉えながら撮影することが可能となる。これらのズーム機能は通常内部のレンズを機械的に動かす事により実現されている光学ズームと、イメージャから出力される画像の一部を利用し、画素間に新たな画素を補間することで拡大した画像を生成する電子ズームに大別される。
【０００３】
ここで、光学ズームの場合には、入力された映像がすでに所望の画角に合った画像となっていることから、画像処理を実行する必要はなく、ファインダ画面に映し出される画像も撮影される画像も劣化の度合いが少ない。しかし、レンズを機械的に動かして焦点距離を合わせているため、その操作に時間がかかり、速写性に欠けるという問題があった。
【０００４】
一方、電子ズームの場合には、入力された映像に対し、補間処理などの画像処理を施すことでズーム機能を実現している。そのため、光学ズームの場合に比べて、画角変更の際に焦点距離を合わせるといった機械的な操作を行う必要がなく、速写性が向上するという利点がある。このような電子ズームの特徴を生かし、ファインダ画面にさまざまな倍率のスルー画像を表示するマルチ画面表示撮像装置が提案されている（例えば、特許文献１参照）。この装置では、電子ズームにより、ファインダ画面に複数のズームで被写体を表示し、所望の構図を選択した上で、光学ズームによって所望の画角に焦点距離を合わせて撮影するといった制御が行われる。このような操作により、撮影前に被写体を的確に捉え、所望の構図が得られやすく、速写性が高いという利点をもたらしている。
【特許文献１】特開２００４−２００９５０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、一般に、主要被写体は、画面中央付近に捉えて撮影する場合が多い。このようなケースで電子ズームにより望遠画像をファインダ画面上に表示するには、図１６（ａ）のように、広角画像に対して、望遠対象となる部分を切り出し、中央付近に存在する画像データを用いて補間処理などを行いながらファインダ画面に画角を合わせるといった操作を行う必要がある。
【０００６】
しかしながら、望遠にすればするほど、用いられる中央部の画像データが少なくなり、限られた画像データによって画角を合わせなければならないため、画質が劣化する。すなわち、図１５に示すように、広角画像と望遠画像をファインダ画面上に表示すると、望遠画像の被写体が鮮明に表示されない。このため、電子ズームでは、複数の構図を即座に得ることはできるものの、ファインダ画面上で構図内の被写体やピントなどを正しく確認できないという問題がある。また、光学ズームでは、所望の構図を得るために焦点を合わせるため、１つのズーム画像に対する視認性は高いが、複数のズーム画像を得る際は、改めて焦点合わせなどを行う必要があって、操作に時間がかかるという問題がある。
【０００７】
そこで、本発明は、上述の問題点に鑑みてなされたものであり、少ない補間処理で、画質の劣化を抑えた広角画像及び望遠画像の両方をファインダ画面上に鮮明に表示可能な画像撮影装置及び画像表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明は、上述の課題を解決するために、以下の手段を提案している。
請求項１に係る発明は、中央部を拡大し周辺部を圧縮する歪曲収差特性を持つ光学系と、撮像素子の受光面に前記光学系により結像された被写体像を画像データに変換し、原画像データとして出力するイメージセンサと、同一の前記原画像データに対して設定された第１の画角と、該第１の画角とは異なる第２の画角とに係る各設定画角の原画像データの歪曲収差を補正し、第１の画像及び第２の画像を生成する画像処理回路と、画像を表示するファインダと、前記ファインダの１画面に前記第１の画像及び第２の画像を同時に表示する同時表示モードを有する表示制御回路と、を有する画像撮影装置を提案している。
【０００９】
請求項１４に係る発明は、中央部を拡大し周辺部を圧縮する歪曲収差特性を持つ光学系により結像された被写体像を画像データに変換し、原画像データとして出力する画像生成ステップと、同一の前記原画像データに対して設定された、第１の画角と、この第１の画角とは異なる第２の画角とに係る、各設定画角の原画像データの歪曲収差を補正し、第１の画像及び第２の画像を生成する画像処理ステップと、ファインダの１画面に、前記第１の画像及び第２の画像を同時に表示する同時表示モードを有する表示制御ステップと、を有する画像表示方法を提案している。
【００１０】
これらの発明によれば、中央部を拡大し周辺部を圧縮する歪曲収差を持つ光学系より入力された画像データは、中央付近に画像情報が密集されている。このような画像を用いるため、電子ズームに比べて画質の劣化を抑えたズーム画像、例えば、望遠画像を得ることができ、ファインダの１画面上に、第１の画像、例えば、広角画像、及び第２の画像、例えば、望遠画像を、画質良く、同時に表示させることができる。
【００１１】
請求項２に係る発明は、請求項１に記載の画像撮影装置について、前記表示制御回路は、前記同時表示モードにおいて前記第１の画像の表示領域と第２の画像の表示領域とを入れ替える入替表示モードを更に有することを特徴とする画像撮影装置を提案している。
【００１２】
この発明によれば、表示制御回路が、同時表示モードにおいて第１の画像の表示領域と第２の画像の表示領域とを入れ替える入替表示モードを有することから、注目画角に係る画像の視認位置を変更でき、確認が容易となる。
【００１３】
請求項３に係る発明は、請求項１に記載の画像撮影装置について、前記表示制御回路は、前記ファインダの１画面に表示される画像を、前記同時表示モードにおいて表示された前記第１の画像と第２の画像の内の、何れか一方の画像のみに変更する単独表示モードを更に有することを特徴とする画像撮影装置を提案している。
【００１４】
この発明によれば、表示制御回路が、ファインダの１画面に表示される画像を、同時表示モードにおいて表示された第１の画像と第２の画像の内の何れか一方の画像のみに変更する単独表示モードを有することから、注目画角に係る画像を１画面表示にでき、より詳細に画像を確認できる。
【００１５】
請求項４に係る発明は、請求項１に記載の画像撮影装置について、前記表示制御回路は、前記ファインダに表示される画像を、前記原画像データに係る画像に変更する原画像表示モードを更に有することを特徴とする画像撮影装置を提案している。
【００１６】
この発明によれば、表示制御回路が、ファインダに表示される画像を、原画像データに係る画像に変更する原画像表示モードを有することから、原画像を参照することが可能となる。
【００１７】
請求項５に係る発明は、請求項１に記載の画像撮影装置について、前記表示制御回路は、前記ファインダの１画面内に、機能設定に係るメニューを表示させるメニュー表示モードを更に有することを特徴とする画像撮影装置を提案している。
【００１８】
この発明によれば、表示制御回路は、ファインダの１画面内に、機能設定に係るメニューを表示させるメニュー表示モードを有することから、表示されている画像を対比しながら機能設定に係るメニューの確認が可能となる。
【００１９】
請求項６に係る発明は、請求項１から５までの何れか１項に記載の画像撮影装置について、前記表示モードを設定するモード設定部を更に有し、前記表示制御回路は、設定された前記表示モードに応じ、画像毎に前記ファインダ上の表示位置を演算する表示位置演算部と、前記演算された位置に各画像を配置して前記ファインダに出力する表示変換部とを有する画像撮影装置を提案している。
【００２０】
この発明によれば、表示モードを設定するモード設定部を更に有し、表示制御回路が、設定された表示モードに応じ、画像毎にファインダ上の表示位置を演算し、演算された位置に各画像を配置してファインダに出力するため、モード設定部において設定されたモードにおける１以上の画像の一画面表示が可能となる。
【００２１】
請求項７に係る発明は、請求項１から６までの何れか１項に記載の画像撮影装置について、保存する前記第１及び第２の画角を設定する第１の撮影モード、及び、前記第１の画角を表示し、保存する前記第２の画角を設定する第２の撮影モード、を含む複数の撮影モードの中から、実行する撮影モードを設定する撮影モード設定手段を更に有し、前記表示制御回路は、設定された前記撮影モードに応じ、非保存対象の画角に係る画像に対し、保存対象の画像とは異なるフィルタ処理を行うフィルタ処理部を有する画像撮影装置を提案している。
【００２２】
この発明によれば、保存する第１及び第２の画角を設定する第１の撮影モード、及び、第１の画角を表示し、保存する第２の画角を設定する第２の撮影モード、を含む複数の撮影モードの中から、実行する撮影モードを設定し、表示制御回路が、設定された撮影モードに応じ、非保存対象の画角に係る画像に対し、保存対象の画像とは異なるフィルタ処理を行うため保存、非保存の対象となる画像の視認が容易になる。
【００２３】
請求項８に係る発明は、請求項１に記載の画像撮影装置について、前記第１の画像又は前記第２の画像の、少なくとも一方に対し、表示する、前記ファインダ上の位置を指定する領域指定手段を更に有し、前記表示制御回路は、前記指定位置に前記第１の画像又は前記第２の画像を移動させることを特徴とする画像撮影装置を提案している。
【００２４】
この発明によれば、第１の画像又は第２の画像の少なくとも一方に対し、表示するファインダ上の位置を指定する領域指定手段を更に有し、表示制御回路が、指定位置に第１の画像又は第２の画像を移動させるため、注目画像をより視認しやすい位置へ移動することが可能となる。
【００２５】
請求項９に係る発明は、請求項１、請求項２または請求項６から請求項８のいずれかに記載の画像撮影装置について、前記第１の画像及び第２の画像を格納するメモリ装置を更に有することを特徴とする画像撮影装置を提案している。
【００２６】
この発明によれば、第１の画像と第２の画像とを別々のメモリ領域に格納するようにしておくことで、原画像データに戻って画像データを新たに作成する必要がない場合に演算量を削減して表示時間を短縮することができる。
【００２７】
請求項１０に係る発明は、請求項１に記載の画像撮影装置について、前記第１の画像又は前記第２の画像の、少なくとも一方に対し、その表示サイズを指定するサイズ指定手段を更に有し、前記表示制御回路は、前記指定された表示サイズに従って前記第１の画像又は前記第２の画像の、少なくとも一方の表示サイズを変更することを特徴とする画像撮影装置を提案している。
【００２８】
この発明によれば、第１の画像又は第２の画像の少なくとも一方に対し、その表示サイズを指定するサイズ指定手段を更に有し、表示制御回路が、指定された表示サイズに従って第１の画像又は第２の画像の少なくとも一方の表示サイズを変更することから、注目画像をより視認しやすい大きさに変更することが可能となる。
【００２９】
請求項１１に係る発明は、請求項１０に記載の画像撮影装置について、前記表示制御回路は、前記指定された表示サイズが閾値を越えたとき、その対象となっていない非対象画像の表示サイズを変更することを特徴とする画像撮影装置を提案している。
【００３０】
この発明によれば、表示制御回路が、指定された表示サイズが閾値を越えたとき、その対象となっていない非対象画像の表示サイズを変更することから、対象画像と、非対象画像との視認性を高めることが可能となる。
【００３１】
請求項１２に係る発明は、請求項１に記載の画像撮影装置について、前記表示制御回路は、前記第１の画角あるいは前記第２の画角の内、一方の画角を内包する画角に係る画像内に、前記内包される画角の大きさを示す枠を表示させることを特徴とする画像撮影装置を提案している。
【００３２】
この発明によれば、表示制御回路が、第１の画角あるいは第２の画角の内、一方の画角を内包する画角に係る画像内に、内包される画角の大きさを示す枠を表示させることから、内包する画像内における、内包される画像のサイズを確認しながら撮影が可能となる。
【００３３】
請求項１３に係る発明は、請求項１２に記載の画像撮影装置について、前記表示制御回路は、前記内包される画角内に係る画像の表示特性を、前記内包される画角を囲む画像の表示特性とは異ならせることを特徴とする画像撮影装置を提案している。
【００３４】
この発明によれば、表示制御回路が、内包される画角内に係る画像の表示特性を、内包される画角を囲む画像の表示特性とは異ならせることから、内包する画像内における内包される画像の視認性を高めることが可能となる。
【発明の効果】
【００３５】
本発明によれば、少ない補間処理で、画質の劣化を抑えた、広角画像及び望遠画像の両方をファインダ画面上に鮮明に表示できるという効果がある。
【発明を実施するための最良の形態】
【００３６】
以下、本発明の実施形態に係る画像撮影装置について図面を参照して詳細に説明する。
図１は、本実施形態に係る画像撮影装置（デジタルカメラシステム）の構成を示す図である。図１に示すように、本実施の形態に係る画像撮影装置は、歪曲収差を持つ光学系（中央部を拡大し周辺部を圧縮する歪曲収差特性を持つ光学系に相当）１０１と、イメージセンサ（イメージセンサに相当）１０２と、歪曲収差補正画像処理装置（画像処理回路に相当）１０３と、画像表示装置（ファインダに相当）１０４と、画像記憶装置１０５と、制御装置（表示制御回路に相当）１０６と、操作部（領域指定手段、サイズ指定手段に相当）１０７とから構成されている。
【００３７】
図２（ａ）、（ｂ）は、歪曲収差を持つ光学系１０１を用いて撮影した画像の例を示している。ここで、図２（ａ）は、縦・横独立に周辺になるほど圧縮するような歪曲収差を発生させた光学系で撮影される光学像の例であり、図２（ｂ）は、共軸系の光学系で同心円状に中心からの距離が大きくなるほど圧縮するような樽型の歪曲収差を発生させた光学系で撮影される光学像の例である。
【００３８】
イメージセンサ１０２は、歪曲収差を持つ光学系１０１を通して撮像された光学像を電気信号に変換するための光電変換素子であり、例えば、ＣＣＤやＣＭＯＳセンサーなどがこれに該当する。歪曲収差補正画像処理装置１０３は、イメージセンサ１０２から出力された画像信号を表示や圧縮に必要な形式の画像信号に変換したり、光学歪曲収差の補正、高画質化のための画像処理、あるいは記録の為に圧縮処理を実行する装置である。
【００３９】
画像表示装置１０４は、例えば、液晶ディスプレイ等の画像を表示するための装置である。画像記憶装置１０５は、撮影した画像を記録するための、例えば、半導体メモリや磁気メモリ等の記憶装置である。制御装置１０６は、歪曲収差を持つ光学系１０１やイメージセンサ１０２、歪曲収差補正画像処理装置１０３、画像表示装置１０４等を制御するための装置である。操作部１０７は、ユーザがカメラを操作するためのボタンやスイッチ類であり、情報表示部などから構成されている。
【００４０】
次に、図３を用いて、歪曲収差補正画像処理装置１０３について説明する。
なお、本実施形態に係る画像撮影装置は、歪曲収差を持つ画像に対して、これを歪みの補正したズーム画像に変換し、それらの画像の視認性を重視した画像表示装置１０４及び表示方法に特徴を有するため、記録や圧縮などの処理の詳細については説明を省略する。
【００４１】
歪曲収差補正画像処理装置１０３は、図３に示すように、プリプロセス３０１と、イメージプロセス３０２、３０４と、歪み補正処理部３０３と、バス３０５と、メモリ３０７、３０８と、入力Ｉ／Ｆ３０９とから構成されている。プリプロセス３０１は、イメージセンサ１０２から画像データを取り込み、アナログフロントエンド回路（ＣＤＳ・ＰＧＡ・Ａ／Ｄ）を通じて、画像データをデジタル信号に変換する。
【００４２】
イメージプロセス３０２は、シェーディング補正（光量の補正）、ＲＧＢ同時化処理を実施する。シェーディング補正では、図２（ａ）、（ｂ）のような画像で発生する光学系の歪曲収差により周辺部が圧縮される事による増光の影響と、鏡枠等により周辺光がけられる影響による減光との影響を補正する。そして、シェーディング補正後、得られたベイヤーデータをカラーデータに変換するＲＧＢ同時化処理を行う。ＲＧＢ同時化処理は、通常、周囲の同色フィルタの画素データから補間してカラーデータを生成する。
【００４３】
ここで、本実施形態における具体的な補間方法を、図４を用いて説明する。
いま、赤色（Ｒ）のデータに着目すると、例えば、４０２の位置のRデータは、４０１のデータと４０３のデータから補間して生成し、４０４の位置のデータは、４０１のデータと４０７のデータから補間して生成する。この際、光学系に歪曲収差が無ければ、２つの画素の平均値として補間データを生成すれば良いが、撮像されたベイヤーデータは図４（ａ）に示すように光学歪曲収差により歪んでいるものをイメージセンサにより均等にサンプリングされた画像データとなっている。
【００４４】
従って、実際の風景（補正後の画像）は図４（ｂ）のようになり、得られる画素の座標位置は均等にはならない。（図４（ａ）、（ｂ）で（１）〜（１３）は被写体の横方向に等間隔である座標位置を示しており、Ａ〜Ｏは縦方向に等間隔である座標位置を示している。従って、縦横の軸の同じ位置では、（ａ）（ｂ）双方で同じ画像が対応している。）
【００４５】
そのため、高画質に補間するためには、実際の風景（補正後の画像）における距離に応じて補正する必要があり、４０１の画素データと４０３の画素データから４０２の画素データを補間する際、補正後の４０１の画素データと４０２の画素データ間の距離がＸＡ、補正後の４０３の画素データと４０２の画素データ間の距離がＸＢである場合、４０２の位置のＲ色データは、
４０２の位置のＲデータ＝（（４０１のＲデータ×（ＸＢ／（ＸＡ＋ＸＢ）））
＋（４０３のRデータ×（ＸＡ／（ＸＡ＋ＸＢ）））
として補間して生成する。また同様に、
４０４の位置のＲデータ＝（（４０１のＲデータ×（ＹＢ／（ＹＡ＋ＹＢ）））
＋（４０７のＲデータ×（ＹＡ／（ＹＡ＋ＹＢ）））
として補間して生成する。他の座標位置のＲデータ及びＢデータ、Ｇデータも同様にして生成することができる。
【００４６】
また、上記では近傍２点から補間する例を示したが、Ｇデータなどは近傍の４点から補正する方が高画質に補正できる。この場合、歪曲収差補正後の被写体の画素間距離に反比例した重み付けを行って同様に補正すれば良く、下記の演算式にて生成する事もできる。
４０５のＧデータ＝（（（４０４のＧデータ×（ＸＢ／（ＸＡ＋ＸＢ）））
＋（４０６のＧデータ×（ＸＡ／（ＸＡ＋ＸＢ）））／２）
＋（（（４０２のＧデータ×（ＹＢ／（ＹＡ＋ＹＢ）））
＋（４０８のＧデータ×（ＹＡ／（ＹＡ＋ＹＢ）））／２）
なお、ＲデータやＢデータも上記近傍２点からの生成方法との組み合わせを行う、あるいは斜め方向の近傍画素からの補間を行う事により同様にして生成することができる。
【００４７】
上記のようにしてＲＧＢ同時化された画像データは、歪曲収差補正処理を行うに先立って、空間的なフィルタ処理を施される。これは、歪曲収差補正を行う際、画像の中央部分が縮小される際に画像の高周波成分が折り返って画質を劣化させる事を防止するために行うローパスフィルタ処理である。なお、このローパスフィルタの特性は、撮影したい画角（ズーム位置）に応じて変化させる必要がある。
【００４８】
図５は３×３サイズの空間フィルタの構成を示した例であり、係数（Ｃ１１〜Ｃ３３）の値を設定する事によってローパスフィルタとして機能させることが出来る。図５の構成例では全ての係数を歪曲収差による影響を加味して独立に設定できるように構成したが、画質を多少犠牲にして歪曲収差の影響を無視して上下・左右に対象な位置の画素データを先に加算してから共通化した係数を乗じるように構成し、必要な乗算器の数を削減して回路規模を小さく構成する事もできる。
【００４９】
また、歪曲収差が大きく中央部の縮小率が大きい場合には回路規模が大きくなってしまうが４×４や５×５のようにもっと大きなフィルタを構成する必要がある。また、フィルタは本実施例で示したようなマトリックスフィルタに限らない。なお、本実施形態におけるズーム位置によるフィルタ特性の変更については、操作部１０７の操作信号をもとに、所望のズーム画像を生成するといった動作が可能である。
【００５０】
このようにしてズーム位置に応じたフィルタ処理を施された画像信号は、歪み補正処理部３０３にＲＧＢ各色独立に入力される。また、同時に、本ブロックでの処理後の画像データは、後述する歪み補正処理部３０３及びイメージプロセス３０４の処理を行わず、メモリ３０７に格納される。
【００５１】
歪み補正処理部３０３は、イメージプロセス３０２で生成された画像データに対して歪曲収差補正処理及び拡大／縮小処理を行う。ここで、歪曲収差補正の具体的な処理方法を図７に示した座標値（Ｘｎ、Ｙｎ）の画素７０１を求める場合を例に説明する。
図７（ａ）は歪曲収差補正後の画像であり、歪曲収差補正処理では、この図の格子の交点の画素データを演算する。まず、対象座標７０１に対し、光学歪曲収差や倍率色収差を補正する前の原画における対応する座標値（Ｘｓ、Ｙｓ）を計算する。ここでは、図７（ｂ）の７０２とする。
【００５２】
図７（ｂ）に示す格子は図７（ａ）の格子に対応するように記載されており、中央部が拡大され周辺部が圧縮された光学歪曲収差を持っている事を示している。従って、７０２は目標とする座標位置から物理的な座標位置はずれているが、対応する画像が映っている座標である事が解る。しかし、イメージセンサ１０２により実際に撮像された画素の位置は図７（ｃ）に示すようにこの歪曲収差を持った画像上で均等の格子状の位置となり、求めたい画素位置のデータではない。
【００５３】
そこで、目標画素７０３の近傍の記録されている座標位置のデータ７０４〜７０７を対応座標算出部３１０より読出し、線形補間などの手段により目標画素７０３の値を算出する。
【００５４】
次に、拡大／縮小処理について、図８を用いて説明する。図で実線の格子８１８はメモリ３０７に格納されている画像データの画素が記録されている位置を示しており、破線の格子８１９は縮小処理をおこなうために求める画素の座標位置を示している。
【００５５】
ここで、破線の格子上にある８０１の画素値を求める場合、対応座標算出部３１０により、この画素の破線の格子８１９における座標位置を演算し、入力画像の実線の格子８１８における座標位置に変換される。さらに、近傍の１６点の実線格子上の座標位置を演算し、これらの画素データをメモリ３０７から読み出す。そして、次の演算式にて補間を行う。
Ｄ８０１＝Ｃ８０２×Ｄ８０２＋Ｃ８０３×Ｄ８０３＋Ｃ８０４×Ｄ８０４＋Ｃ８０５×Ｄ８０５＋Ｃ８０６×Ｄ８０６＋Ｃ８０７×Ｄ８０７＋Ｃ８０８×Ｄ８０８＋Ｃ８０９×Ｄ８０９＋Ｃ８１０×Ｄ８１０＋Ｃ８１１×Ｄ８１１＋Ｃ８１２×Ｄ８１２＋Ｃ８１３×Ｄ８１３＋Ｃ８１４×Ｄ８１４＋Ｃ８１５×Ｄ８１５＋Ｃ８１６×Ｄ８１６＋Ｃ８１７×Ｄ８１７
ただし、Ｃ８０２＋Ｃ８０３＋・・・＋Ｃ８１７=１．０である。なお、この補間演算はこの方法に限らず、最近傍の画素で代用したり、近傍４画素から線形補間により算出するなど、他の補間方法を用いてもかまわない。
【００５６】
イメージプロセス３０４は、歪み補正処理部３０３で拡大／縮小処理を行った後の画像データに対し、空間的なフィルタ処理を行う。これは、歪曲収差補正を行った結果、画像の周辺部分が拡大される事に伴って画像の解像度が低下して劣化した画質を回復するために行うエッジ強調フィルタ処理やノイズが強調されてしまう事による画質劣化を防止するためのノイズ軽減フィルタ処理である。
【００５７】
なお、フィルタの特性は、撮影したい画角に応じて変化するよう設定される。これは、画像中央部の縮小処理された領域は解像度が低下しておらずそのままでは画像周辺部だけがボケた画像になる事を防止する為である。また、画像中央部は縮小される事によりノイズの軽減効果も得られる為、画像周辺部だけにノイズが目立つ画像になる事を防止する為である。従って、画像の中央部はエッジ強調処理のノイズ軽減処理も少なくとも画像周辺部と同等には実行する必要がない。
【００５８】
このフィルタは、上述した図５のフィルタ構成で実現可能であり、係数（Ｃ１１〜Ｃ３３）の値を設定する事によってエッジ強調フィルタとして機能させることが出来る。なお、レジスタに格納されている係数（Ｃ１１〜Ｃ３３）は画素の座標位置に応じて値を変更する必要がある。図５の構成例では、全ての係数を歪曲収差による影響を加味して独立に設定できるように構成したが、画質を多少犠牲にして歪曲収差の影響を無視して上下・左右に対象な位置の画素データを先に加算してから共通化した係数を乗じるように構成し、必要な乗算器の数を削減して回路規模を小さく構成する事もできる。
【００５９】
また、歪曲収差が大きく周辺部の拡大率が大きい場合には回路規模が大きくなってしまうが４×４や５×５のようにもっと大きなフィルタとして構成した方が画質を向上できる。また、フィルタは本実施例で示したようなマトリックスフィルタに限らない。なお、本実施形態におけるズーム位置によるフィルタ特性の変更については、操作部１０７の操作信号をもとに、所望のズーム画像を生成するといった動作が可能である。本ブロック内で作成された望遠及び広角画像は、画質を回復させた後、メモリ３０８へ格納される。
【００６０】
バス３０５は、一連の動作を行うデータを転送する転送路であり、ＣＰＵ３０６は、入力Ｉ／Ｆ３０９からの操作信号を受け取り、更新が必要なフィルタ係数やパラメータ値などの演算を行い、その演算結果をイメージプロセス３０２及び歪み補正処理部３０３及びイメージプロセス３０４に与える。
【００６１】
メモリ３０７は、プリプロセス３０１からの画像データあるいはイメージプロセス３０２での処理後の画像データ（歪み補正処理を行う前の画像データ）を格納する。また、メモリ３０８は、イメージプロセス３０４で処理された画像データを格納する。なお、メモリは、図６に示すような、広角及び望遠の処理別に画像データを格納する。また、ここで一時的に記録された画像データは、表示用画像として用いられ、画像表示装置１０４へ送られる。
【００６２】
入力Ｉ／Ｆ３０９は、操作部１０７の操作信号を受け取り、バス３０５を介してＣＰＵ３０６へ信号を送る。対応座標算出部３１０は、メモリ３０７に格納されている歪曲収差のある画像データをもとに、補正後に必要な画像データの位置座標を算出し、歪み補正処理部３０３及びイメージプロセス３０４へ与える。
【００６３】
以上のように、歪曲収差補正画像処理装置１０３では、任意のズーム画像を得るために、画像全体に補間処理を行う電子ズームとは異なり、歪んでいる部分の画素位置の座標変換を行い、補正処理を行いながら広角及び望遠画像を作り出している。そのため、後述する画像表示装置１０４には、画質を抑え、解像度の高い画像が供給される。
【００６４】
次に、図９を用いて、画像表示装置１０４について説明する。画像表示装置１０４は、図９に示すように、表示モード・フレーム移動信号変換部９０１と、撮影モード信号変換部（撮影モード設定手段に相当）９０２と、表示位置演算部（表示位置演算部に相当）９０３、９０４と、フィルタ処理部（フィルタ処理部に相当）９０５、９０６と、表示変換部（表示変換部に相当）９０７と、ファインダ部（ファインダに相当）９０８とから構成されている。
【００６５】
表示モード・フレーム移動信号変換部９０１は、操作部１０７より設定された表示モード及び表示フレームに関する信号を取り込み、表示位置演算部９０３及び９０４へその信号を送出する。撮影モード信号変換部９０２は、操作部１０７より設定された撮影モードに関する信号を取り込み、これをフィルタ処理部９０５及び９０６へ送出する。ここで、撮影モードは、図１０に示すようなフローで切り替わる。つまり、同時撮影モード１００１では、広角画像及び望遠画像の両方が撮影可能であるのに対し、広角撮影モード１００２あるいは望遠撮影モード１００３の場合には、広角画像あるいは望遠画像のみが撮影される。
【００６６】
表示位置演算部９０３、９０４は、表示モード・フレーム移動信号変換部９０１からの信号を受けて、拡大画像及び縮小画像に対する表示位置（座標変換）を演算する。また、表示位置演算部９０３では、拡大画像及び縮小画像の２種類の画像データが入力されるが、これは、広角画像に対する望遠率を演算し、広角画像内に望遠部分を枠などを使って表示することを考慮している。
【００６７】
これは、歪曲収差補正画像処理装置１０３で作成された拡大及び縮小画像の画角が、液晶ファインダなどの表示画面のサイズに比べると、非常に大きなものになるためである。例えば、拡大及び縮小画像の画角は数百万画素であるものに対し、液晶ファインダ画面のサイズは数十万画素となる。そのため、画像データを液晶ファインダ画面上へ表示するには、表示位置への座標変換が必要となる。なお、この枠の表示については後述する。
【００６８】
フィルタ処理部９０５、９０６は、撮影モード信号変換部９０２からの信号を受けて、撮影が有効でないズーム画像に特殊表示を施す。本実施形態においては、撮影が有効なズーム画像は、ファインダ画面にカラー画像として映し出されるのに対し、撮影が有効でないズーム画像には、例えば、画像のエッジ部分のみを表示したり（以下、エッジ画像）、画像を透かした表示する（以下、半透明画像）といった特殊表示を行う。これにより、撮影モードがどのような状態であるかを瞬時に知ることができる。
【００６９】
なお、エッジ画像は、本ブロックに入力された画像データに対し、エッジ抽出フィルタを施すことで実現する。また、半透明画像は、本ブロックに入力された画像データに対し、画像の背景となる色を基に、以下のような演算を行う。
半透明画像  ＝  画像の背景となる色×α  ＋  入力画像データ×（１−α）
ただし、α＜１である。
【００７０】
表示変換部９０７は、表示位置演算部９０３、９０４と、フィルタ処理部９０５、９０６の結果をもとに、ファインダ部９０８の液晶ファインダ画面へ望遠画像及び広角画像を表示する。この際、液晶ファインダ画面は１つの画像しか表示できない。そのため、本ブロックでは、フィルタ処理部９０５、９０６で処理された２種類の画像を１つの画像に変換し、ファインダ部９０８へ画像データ送出する。また、メニューを表示する場合にも、本ブロックで上述の２種類の画像と、撮影モード信号変換部９０２からの信号を1つの画像に変換することで、液晶ファインダ画面上へのメニュー表示が可能となる。ファインダ部９０８は、表示変換部９０７で作成された画像を表示する。
【００７１】
次に、図１１のように液晶ファインダ画面上に広角及び望遠の２種類の画像を表示する方法について説明する。
まず、画像表示装置１０４内では、メモリ３０８に格納されている画像データを用いて表示用変換などの処理を行う。そのため、２種類の画像を表示するには、メモリ３０８に拡大及び縮小処理を完了した２種類の画像が格納されていなければならない。しかし、拡大と縮小では、歪み補正処理部３０３での座標変換時の演算やフィルタ係数などが異なるため、1つの処理系統で同時に２種類のズーム画像を得ることができない。
【００７２】
そこで、本実施形態においては、ズームごとに1フレーム分の一連の処理を行い、２種類の画像データがメモリ３０８へ格納された後、これらの画像データを画像表示装置１０４へ送出することで、１画面に２種類の画像を表示する。あるいは、上述の歪曲収差補正画像処理装置１０３を２系統（拡大用、縮小用）用意し、２種類の画像を同時に画像表示装置１０４内へ送出する構成も考えられる。後者の場合、前者に比べて２種類の画像を1画面に表示するまでの処理時間が短縮される。ただし、前者の場合でも、光学ズームで焦点を合わせる際の操作時間ほど問題にはならない。
【００７３】
以下に、1つの処理系統での構成を用いてファインダ画面へ表示するまでの動作について説明を進める。
メモリ３０８に格納されている２種類の画像はそれぞれ、広角画像は表示位置演算部９０３へ、望遠画像は表示位置演算部９０３、９０４へ送られ、上述のとおり１つの画像に変換され、液晶ファインダ画面に表示される。液晶ファインダ画面に表示された画像をさらに拡大及び縮小するには、上述のとおり、ズームごとに歪曲収差補正画像処理装置１０３内の処理が行われることで実現できる。
【００７４】
また、どちらか片方の画面のみのズーム率を変えることもできる。例えば、広角画像を望遠側にズームする際は、広角画像の座標値に対して拡大処理を行った後、メモリ３０８に格納されている広角画像データの更新を行う。さらに更新が終了した後、メモリ３０８に格納されている広角及び望遠画像データに対して上述の表示変換処理を行うことで実現できる。
【００７５】
なお、画像表示装置１０４に表示されているズーム画像は、後述する撮影モードによって、撮影時に画像記憶装置１０５へ記録される。このような処理により、広角及び望遠画像が同時に表示され、さらに、表示された２種類の画像に対するピントや被写界深度、あるいは構図について正しく認識できる。そのため、画像のボケやブレ、あるいは所望の被写体が映っていないなどといった撮影時の失敗を回避できる。
【００７６】
また、画像表示装置１０４では、広角及び望遠画像及びメニューを表示する際には、表示位置に対する座標演算は別々に行われる。これにより、液晶ファインダ画面上には、図１１のような表示だけでなく、さまざまなレイアウトの設定が可能となる。
【００７７】
次に、本実施形態の画像撮影装置を用いたファインダ画面上への表示例を述べる。
操作部１０７は、図１２のようなユーザーインターフェースを有する。図１２（ａ）は、撮影するためのシャッターボタン１２０１、ファインダ画面の表示方法を切り替えるための表示モードボタン１２０２、撮影モードを切り替える撮影モードボタン１２０３、広角ズームを行うＷｉｄｅボタン１２０６、望遠ズームを行うＴｅｌｅボタン１２０４、有効となっているズーム画面を切り替えるＴ／Ｗ切替ボタン１２０５、ファインダ画面に表示されているフレームを移動するフレーム移動用キー１２０７で構成される。
【００７８】
また、図１２（ｂ）は、広角ズーム及び望遠ズームの方法や、ズーム画面を切り替える方法が切替レバー１２０８になっているところを除くと、図１２（ａ）と同様な構成となっている。操作部１０７での操作は、制御装置１０６で操作信号となり、歪曲収差補正画像処理装置１０３内の入力Ｉ／Ｆ３０９へ入力される。さらに、これらの操作系信号は、入力Ｉ／Ｆ３０９より、バス３０５を介してＣＰＵ３０６に送られ、上述のとおり広角及び望遠画像を作り出し、一時的にメモリ３０８へ格納される。さらに、メモリ３０８に格納されている広角及び望遠画像データを、画像表示装置１０４内に取り込み、スルー画像としてファインダ画面上に表示し、ユーザに所望の構図を提供する。以下に、ファインダ画面上の表示方法についての詳細を述べる。
【００７９】
図１４は、ファインダ画面にスルー画を表示する際の表示モードフローを表している。まず、ファインダ画面の表示が表示方法１（図１４（１）参照）となっている場合について、図１２（ａ）のユーザーインターフェースの操作を交えて説明をする。なお、表示方法１（図１４（１）参照）では、広角画像と望遠画像を並べた表示となる。
【００８０】
＜左右の画面切り替え＞
Ｔ／Ｗ切替ボタン１２０５により、図１３（ａ）に示すような広角画像と望遠画像の左右が入れ替わる表示になる。このように、画像の左右が切り替えられることで、注目したいズーム画像の位置を固定できる。また、このような操作により、撮影者の視認性の向上が見込まれる。
【００８１】
＜１画面表示＞
Ｔ／Ｗ切替ボタン１２０５とＴｅｌｅボタン１２０４またはＷｉｄｅボタン１２０６を同時に押すことで、望遠画像または広角画像が1画面表示（図１４（２）参照）となる。あるいは、Ｔｅｌｅボタン１２０４とＷｉｄｅボタン１２０６を同時に押すことで1画面表示（図１４（２）参照）になるといった設定でもよい。後者の場合、1画面表示（図１４（２）参照）となるのは、例えば、左側にある画面と定義することができる。また、1画面表示（図１４（２）参照）となっているときに、Ｔｅｌｅボタン１２０４とＷｉｄｅボタン１２０６を同時に押すことで、表示方法１（図１４（１）参照）に戻る。このような１画面表示は、一般的なデジタルカメラで実現されているが、表示方法１のような２画面表示からの切替が可能なことで、構図の選択肢を広げると同時に、被写体を的確に捉えることができる。
【００８２】
＜メニュー表示＞
撮影モードボタン１２０３をダブルクリックすると、メニューが表示方法２（図１４（４）参照）のように呼び出される。このとき、もう一度撮影モードボタン１２０３をダブルクリックすると、メニューが消え、表示方法１（図１４（１）参照）に戻る。なお、このメニューでは、ホワイトバランスや露出の設定などができる。また、メニューによって、これらの値が更新された場合、設定値は操作部１０７を経て入力Ｉ／Ｆ３０９へ送られ、さらにバス３０５を介してＣＰＵ３０６に送出され、再び上述のような、一連の画像処理が行われ、メモリ３０８内の広角／望遠画像が更新される。さらに、更新された広角及び望遠画像データは、画像表示装置１０４へ送られ、ファインダ画面上に再表示される。このようなメニュー表示により、被写体を見ながらさまざまな設定が可能である。これにより、例えばホワイトバランス値を変更した後の構図や被写体のボケ具合や深度などが想定でき、撮影の失敗を回避できる。
【００８３】
＜広角画像内の、望遠部分の表示＞
表示モードボタン１２０２をダブルクリックすると、広角画像内に、望遠部分を示す枠が記される。また、このような枠が記されている場合、表示モードボタン１２０２をダブルクリックすると、枠を消すことができる。なお、枠については、拡大画像及び縮小画像データをもとに、表示位置演算部９０３でファインダ画面上の座標位置を演算し、表示されるといった動作となる。このような表示により、望遠対象となる被写体の表情やピント、あるいは被写体深度を確認することができ、同時に、被写体の周辺に撮影される物や風景など、構図を認識することができる。
【００８４】
次に、表示方法２（図１４（４）参照）について、図１２（ａ）のユーザーインターフェースの操作を交えて説明をする。なお、表示方法２では、広角画像と望遠画像に加えて、メニュー画面も表示される。
【００８５】
＜左右の画面切り替え＞
Ｔ／Ｗ切替ボタン１２０５により、図１３（ｂ）に示すような広角画像と望遠画像の左右が入れ替わる表示になる。このように、画像の左右が切り替えられることで、注目したいズーム画像を同じ位置に置くことができる。また、このような操作により、撮影者の視認性の向上が見込まれる。
【００８６】
＜メニュー表示＞
表示方法２（図１４（４）参照）は、表示方法１（図１４（１）参照）及び表示方法３（図１４（５）参照）よりメニューを呼び出すことで実現する。ゆえに、表示方法１（図１４（１）参照）の設定である場合は、撮影モードボタン１２０３をダブルクリックすると、メニューが消え、表示方法１（図１４（１）参照）の画面となる。表示方法３（図１４（５）参照）の設定である場合、撮影モードボタン１２０３をダブルクリックすると、メニューが消え、表示方法３（図１４（５）参照）の画面となる。なお、このメニューでは、ホワイトバランスや露出の設定などができる。また、メニューによって、これらの値が更新された場合、設定値は操作部１０７を経て入力Ｉ／Ｆ３０９へ送られ、さらにバス３０５を介してＣＰＵ３０６に送出され、再び上述のような、一連の画像処理が行われ、メモリ３０８内の広角及び望遠画像が更新される。さらに、更新された広角及び望遠画像データは、画像表示装置１０４へ送られ、ファインダ画面上に再表示される。このようなメニュー表示により、被写体を見ながらさまざまな設定が可能である。これにより、例えばホワイトバランス値を変更した後の構図や被写体のボケ具合や深度などが想定でき、撮影の失敗を回避できる。
【００８７】
＜広角画像内の、望遠部分の表示＞
表示モードボタン１２０２をダブルクリックすると、広角画像内に、望遠部分を示す枠が記される。また、このような枠が記されている場合、表示モードボタン１２０２をダブルクリックすると、枠を消すことができる。なお、枠については、拡大画像及び縮小画像データをもとに、表示位置演算部９０３でファインダ画面上の座標位置を演算し、表示されるといった動作となる。このような表示により、望遠対象となる被写体の表情やピント、あるいは被写体深度を確認することができ、同時に、被写体の周辺に撮影される物や風景など、構図を認識することができる。
【００８８】
次に、表示方法３（図１４（５）参照）について、図１２（ａ）のユーザーインターフェースの操作を交えて説明をする。なお、表示方法３（図１４（５）参照）では、画面いっぱいに広角画像を表示した場合、これを親画面とし、子画面として望遠画像が表示される。逆に、望遠画像を親画面とした場合は広角画像が子画面となるような表示となる。
【００８９】
＜親画面と子画面の切り替え＞
Ｔ／Ｗ切替ボタン１２０５により、広角画像と望遠画像が切り替わる。即ち、親画面と子画面が入れ替わるといった表示になる。このように、親画面及び子画面が切り替えられることで、注目したいズーム画像と、撮影情報として参照程度に見るためのズーム画像の切替が可能となる。また、このような操作により、撮影者の視認性の向上が見込まれる。
【００９０】
＜１画面表示＞
Ｔ／Ｗ切替ボタン１２０５とＴｅｌｅボタン１２０４またはＷｉｄｅボタン１２０６を同時に押すことで、望遠画像または広角画像が1画面表示となる。あるいは、Ｔｅｌｅボタン１２０４とＷｉｄｅボタン１２０６を同時に押すことで1画面表示になるといった設定でもよい。後者の場合、1画面表示となるのは、例えば、親画面と定義することができる。また、1画面表示となっているときに、Ｔｅｌｅボタン１２０４とＷｉｄｅボタン１２０６を同時に押すことで、表示方法３（図１４（５）参照）に戻る。また、1画面表示である場合、撮影モードボタン１２０３をダブルクリックすると、メニューが呼び出される。このような１画面表示は、一般的なデジタルカメラで実現されているが、表示方法３（図１４（５）参照）のような２画面表示からの切替が可能なことで、構図の選択肢を広げると同時に、被写体を的確に捉えることができる。
【００９１】
＜メニュー表示＞
撮影モードボタン１２０３をダブルクリックすると、メニューが表示方法２（図１４（４）参照）のように呼び出される。このとき、もう一度撮影モードボタン１２０３をダブルクリックすると、メニューが消え、表示方法３（図１４（５）参照）に戻る。なお、このメニューでは、ホワイトバランスや露出の設定などができる。また、メニューによって、これらの値が更新された場合、設定値は操作部１０７を経て入力Ｉ／Ｆ３０９へ送られ、さらにバス３０５を介してＣＰＵ３０６に送出され、再び上述のような、一連の画像処理が行われ、メモリ３０８内の広角及び望遠画像が更新される。さらに、更新された広角及び望遠画像データは、画像表示装置104へ送られ、ファインダ画面上に再表示される。このようなメニュー表示により、被写体を見ながらさまざまな設定が可能である。これにより、例えばホワイトバランス値を変更した後の構図や被写体のボケ具合や深度などが想定でき、撮影の失敗を回避できる。
【００９２】
＜広角画像内の、望遠部分の表示＞
表示モードボタン１２０２をダブルクリックすると、広角画像内に、望遠部分を示す枠が記される。また、このような枠が記されている場合、表示モードボタン１２０２をダブルクリックすると、枠を消すことができる。なお、枠については、拡大画像及び縮小画像データをもとに、表示位置演算部９０３でファインダ画面上の座標位置を演算し、表示されるといった動作となる。このような表示により、望遠対象となる被写体の表情やピント、あるいは被写体深度を確認することができ、同時に、被写体の周辺に撮影される物や風景など、構図を認識することができる。
【００９３】
＜派生モード１＞
表示モードボタン１２０２とフレーム移動用キー１２０７を用いて、子画面のフレームサイズを変更することができる。派生モード１（図１４（６）参照）の場合、望遠画像が親画面、広角画像が子画面となり、広角画像のフレームサイズを変更することができる。また、広角画像内の望遠部分を示す枠が表示されている場合、フレームサイズの変更に伴って、枠のサイズが連動する。なお、枠については、拡大画像及び縮小画像データをもとに、表示位置演算部９０３でファインダ画面上の座標位置を演算し、表示されるといった動作となる。さらに、子画面が親画面と同等なサイズになると、親画面と子画面が切り替わる。即ち、派生モード２（図１４（７）参照）のような、親画面が広角画像、子画面が望遠画像といった表示になる。なお、サイズ変更による表示は、表示モードボタン１２０２とフレーム移動用キー１２０７の信号をもとに、表示位置演算部９０４で、ファインダ画面上の座標を演算が行われることで実現する。このように、子画面のサイズが変更できることで、注目したいズーム画像と、撮影情報として参照程度に見るためのズーム画像が区別しやすく、撮影者の視認性の向上が見込まれる。
【００９４】
＜派生モード２＞
表示モードボタン１２０２とフレーム移動用キー１２０７を用いて、子画面のフレームサイズを変更することができる。派生２（図１４（７）参照）の場合、広角画像が親画面、望遠画像が子画面となるので、望遠画像のフレームサイズを変更することができる。また、広角画像内の望遠部分を示す枠が表示されている場合、フレームサイズの変更に伴って、枠のサイズが連動する。尚、枠については、拡大画像及び縮小画像データをもとに、表示位置演算部９０３でファインダ画面上の座標位置を演算し、表示されるといった動作となる。さらに、子画面が親画面と同等なサイズになると、親画面と子画面が切り替わる。即ち、派生モード１（図１４（６）参照）のような、親画面が望遠画像、子画面が広角画像といった表示になる。尚、サイズ変更による表示は、表示モードボタン１２０２とフレーム移動用キー１２０７の信号をもとに、表示位置演算部９０４で、ファインダ画面上の座標を演算が行われることで実現する。このように、子画面のサイズが変更できることで、注目したいズーム画像と、撮影情報として参照程度に見るためのズーム画像が区別しやすく、撮影者の視認性の向上が見込まれる。
【００９５】
また、上述した子画面については、フレーム移動キー１２０７を用いることで、親画面上を自由に移動させることが可能である。このことで、親画面上で注目している被写体が移動し、子画面の背後に隠れた場合でも、子画面が移動できるので、被写体の行動を追随することができる。なお、このような子画面の移動は、フレーム移動キー１２０７の信号をもとに、表示位置演算部９０３及び９０４で、ファインダ画面上の座標を演算が行われることで実現する。
【００９６】
次に、表示方法４について、図１２（ａ）のユーザーインターフェースの操作を交えて説明をする。
表示方法４（図１４（８）参照）では、補正処理を行わない画像を映し出す。まず、表示モードボタン１２０２が表示方法４（図１４（８）参照）に設定されると、歪曲収差補正画像処理装置１０３内の入力Ｉ／Ｆ３０９より、バス３０５を通ってＣＰＵ３０６に信号が送られ、イメージプロセス３０２処理後の画像データ（メモリ３０７に格納済み）が画像表示装置１０４へ送られる。さらに、画像表示装置１０４では、表示位置演算部９０３または９０４での表示位置変換を行い、フィルタ処理を行わず、ファインダ画面上へ表示される。人間の目に見える風景には歪みがないため、撮影される画像も、歪みをなくすように補正される。しかし、極端に歪んだ画像は、芸術のひとつとして魚眼といった観点から取り上げられることがある。本発明の装置では、一般的な撮影だけでなく、魚眼効果も容易に実現できる。
【００９７】
＜メニューの表示＞
撮影モードボタン１２０３をダブルクリックすると、メニューが呼び出される。ここで、メニューには、補正の調整量を設定することが可能である。なお、このメニューで設定された調整量は、歪曲収差補正画像処理装置１０３内の入力Ｉ／Ｆ３０９より、バス３０５を通ってＣＰＵ３０６に送られ、イメージプロセス３０２処理後の画像データ（メモリ３０７に格納済み）をもとに、歪み補正処理部３０３及びイメージプロセス３０４での処理に用いられる。このような動作により、リアルタイムに画像を調整することができる。従来は、撮影後の画像に対して歪み調整を行っていたが、このようなメニュー表示により、撮影前でも、被写体の歪みを調節することができる。そのため、撮影後に画像を加工するといった手間を省くことができる。
【００９８】
以上、図面を参照して本発明の実施形態について詳述してきたが、具体的な構成はこれらの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等も含まれる。例えば、本発明の実施形態においては、２画面での表示について説明をしたが、２画面以上の場合でも、処理系統を増やしたり、時間差処理を行うことで実現が可能である。
【図面の簡単な説明】
【００９９】
【図１】本実施形態に係る画像撮影装置の構成図である。
【図２】歪曲収差を持つ光学系を用いて撮影した画像例を示した図である。
【図３】歪曲収差補正画像処理装置の構成図である。
【図４】ＲＧＢ同時化処理における補間方法を示した図である。
【図５】空間フィルタの構成を示した図である。
【図６】画像データの格納状態を示す図である。
【図７】歪曲収差補正の処理方法を示した図である。
【図８】拡大／縮小処理について説明する図である。
【図９】画像表示装置の構成図である。
【図１０】撮影モードのフロー図である。
【図１１】液晶ファインダ画面上に広角及び望遠の２種類の画像を表示した例を示す図である。
【図１２】操作部の構成を示す図である。
【図１３】ファインダ画面上の画像の遷移状態を示す図である。
【図１４】ファインダ画面にスルー画を表示する際の表示モードフローを示す図である。
【図１５】ファインダ画面上に広角画像と望遠画像とを表示した例を示した図である。
【図１６】電子ズームにより望遠画像を表示する場合の従来例を示す図である。
【符号の説明】
【０１００】
１０１・・・歪曲収差を持つ光学系
１０２・・・イメージセンサ
１０３・・・歪曲収差補正画像処理装置
１０４・・・画像表示装置
１０５・・・画像記憶装置
１０６・・・制御装置
１０７・・・操作部
３０１・・・プリプロセス、
３０２、３０４・・・イメージプロセス、
３０３・・・歪み補正処理部、
３０５・・・バス、
３０７、３０８・・・メモリ、
３０９・・・入力Ｉ／Ｆ、
９０１・・・表示モード・フレーム移動信号変換部、
９０２・・・撮影モード信号変換部、
９０３、９０４・・・表示位置演算部、
９０５、９０６・・・フィルタ処理部、
９０７・・・表示変換部、
９０８・・・ファインダ部、
１２０１・・・シャッターボタン、
１２０２・・・表示モードボタン、
１２０３・・・撮影モードボタン、
１２０４・・・Ｔｅｌｅボタン、
１２０６・・・Ｗｉｄｅボタン、
１２０５・・・Ｔ／Ｗ切替ボタン、
１２０７・・・フレーム移動用キー、
１２０８・・・切替レバー
【図１】
2007096588.tif 000003
【図２】
2007096588.tif 000004
【図３】
2007096588.tif 000005
【図４】
2007096588.tif 000006
【図５】
2007096588.tif 000007
【図６】
2007096588.tif 000008
【図７】
2007096588.tif 000009
【図８】
2007096588.tif 000010
【図９】
2007096588.tif 000011
【図１０】
2007096588.tif 000012
【図１１】
2007096588.tif 000013
【図１２】
2007096588.tif 000014
【図１３】
2007096588.tif 000015
【図１４】
2007096588.tif 000016
【図１５】
2007096588.tif 000017
【図１６】
2007096588.tif 000018