(57)【特許請求の範囲】
【請求項１】
所望の被写界像を撮影してその画像を表わす画像データを記録する電子スチルカメラにおいて、該カメラは、
関連する被写界像を撮影した際に、一方の画像に対する他方の画像の関連位置を求める関連位置検出手段と、
該関連位置検出手段にて求めた関連位置情報を含む画像の関連情報をそれぞれの画像データとともに記録する記録手段と、
記録した画像データにて表わされる画像を表示する際に、少なくとも、一方の画像データにて表わされる画像中に関連位置情報も表示する表示手段と、
該表示手段にて表示された一方の画像の関連位置情報をその画面中にて指示する指示手段と、
該指示手段の指示に応動して、他方の画像データを読み出してその画像を前記表示手段に表示する関連画像再生手段とを含み、
該カメラは、広画角の被写界像を連続する複数枚の画像に分割して記録するパノラマ撮影機能を含み、前記関連位置検出手段は、それぞれの画像に対する隣接画像の位置関係をその隣接方向に基づいて関連付けて検出し、前記記録手段は、それぞれの位置関係を表わす関連位置情報を記録することを特徴とする電子スチルカメラ。
【請求項２】
請求項１に記載のカメラにおいて、該カメラは、所望の被写界像の一部分を光学的または電子的あるいは双方の組み合わせにて拡大して撮影するズーム撮影機能を含み、
前記関連位置検出手段は、少なくとも、ズーム画像とそのズーム画像を含む全体画像が撮影された際に、全体画像に対するズーム画像の拡大位置を関連位置情報として検出することを特徴とする電子スチルカメラ。
【請求項３】
請求項２に記載のカメラにおいて、前記関連位置検出手段は、ズーム画像を所定の割合にて縮小して、全体画像の対応部分に当て嵌めて、その相関関係を求める相関算出手段を含むことを特徴とする電子スチルカメラ。
【請求項４】
請求項２または請求項３に記載のカメラにおいて、該カメラは、前記関連位置検出手段にて求めた全体画像に対するズーム画像の関連位置を全体画像の表示画面にて表わすクリッカブルマップを生成する指示情報生成手段を含み、
各画像再生の際に、前記表示手段に表示された全体画像中からクリッピング位置を指示することによりズーム画像を再生することを特徴とする電子スチルカメラ。
【請求項５】
請求項１に記載のカメラにおいて、該カメラは、前記関連位置検出手段にて求めたそれぞれの画像に対する隣接する画像の関連位置をそれぞれの画像の表示画面にて表わすクリッカブルマップを生成する指示情報生成手段を含み、
各画像再生の際に、分割された画像のいずれかを前記表示手段に表示して、そのクリッピング位置を指示することにより隣接する画像を順次再生することを特徴とする電子スチルカメラ。
【請求項６】
電子スチルカメラにて撮影した所望の被写界像を表わす画像データを所定の記録手段に随時再生可能に記録する電子スチルカメラにおける画像データ記録再生方法において、該方法は、
電子スチルカメラにて関連する被写界像を撮影した際に、
撮影した複数の画像の中から関連する画像をそれぞれ選択する工程と、
選択した画像の一方から他方への関連位置を検出する工程と、
検出した関連位置を表わす情報をそれぞれの画像を表わす画像データとともに記録する工程とを含み、
記録した画像を再生する際に、
少なくとも、関連する画像の一方をその関連位置を表わす情報とともに表示する工程と、
表示された一方の画像の中から関連位置を指示する工程と、
その指示に応動して他方の画像を読み出して再生する工程とを含み、
関連する画像は、広画角の被写界像を連続する複数の画像に分割して撮影したパノラマ合成画像であり、該方法は、画像記録の際に、分割したそれぞれの画像に隣接する画像をその隣接方向に基づいて関連付けて記録し、画像再生の際に、いずれかの画像を表示してその画像中の隣接方向の関連情報に基づいて隣接する画像を順次再生することを特徴とする電子スチルカメラにおける画像データ記録再生方法。
【請求項７】
請求項６に記載の方法において、該方法は、撮影した複数の画像の中から、所望の被写界像の全体を表わす全体画像と、その一部分を拡大撮影したズーム画像とを選択して、全体画像に対してその画像中のズーム画像の位置を関連付けて記録し、
再生の際に、全体画像を再生してその画像中からズーム画像を再生することを特徴とする電子スチルカメラにおける画像データ記録再生方法。
【請求項８】
請求項７に記載の方法において、該方法は、複数の関連画像を記録した場合、その画像再生の際にズーム倍率の低い方から順次階層的に表示再生することを特徴とする電子スチルカメラにおける画像データ記録再生方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、電子スチルカメラおよびその画像データ記録再生方法に関し、特に、たとえば、ズーム画像などを含む複数コマの被写界像を撮影した際に用いて好適なものである。
【０００２】
【従来の技術】
周知のように、電子スチルカメラでは、所望の被写界像をCCD （Charge Coupled Device ）などの撮像素子にて撮像して、その画像を表わす画像信号をディジタルの画像データに変換して、メモリカードなどの記録媒体に蓄積する。記録された画像データは、任意に読み出して、そのデータにて表わされる画像をCRT （Cathode Ray Tube）などの表示装置への表示、または所定の印刷装置を介しての印刷を行うことができ、あるいはパーソナルコンピュータなどに取り込んで所定の処理を施すことができる。
【０００３】
従来、このような電子スチルカメラとして、レンズなどの光学系の焦点距離を自在に変化させて被写界像を拡大して撮影するもの、または撮影した被写界像の一部を電子的に拡大して記録するもの、あるいは光学的および電子的ズームを組み合せて所望のズーム画像を得る、いわゆるズーム撮影機能付きの電子スチルカメラが知られている。
【０００４】
このような電子スチルカメラにて、たとえば、風景などの被写界像を撮影する場合に、その全体画像を撮影してさらに注目する部分を拡大して撮影する際には通常画角あるいはワイド画角などで全体像を撮影して記録し、さらに所定のズーム倍率に切り替えて、その部分に焦点を合わせて拡大撮影して記録する。すなわち、撮影した画像を表わす画像データは、それぞれの画像毎に記録媒体に記録していた。
【０００５】
ところで、近年、記録媒体の記憶容量は大きくなり、一つの記録媒体に数十枚から数百枚まで記録することが可能となっている。それら記録された多数の画像の中から所望の画像を再生する場合、電子スチルカメラは、カメラの背面などに設けられた液晶ディスプレイなどのモニタ画面にて所望の画像を確認して再生を行っている。この場合、記録された画像を順次一枚づつコマ送りにて自動表示する、いわゆるスライドショー機能を有するもの、あるいは撮影した画像を縮小した複数のサムネイル画像を一つの画面に分割表示して、それらの中から所望の画像を選択して再生するものなどが知られている。
【０００６】
【発明が解決しようとする課題】
しかしながら、上述したように従来の技術においては、撮影したそれぞれの画像を記録する際に、それぞれの画像が関連するか否かにかかわらず、それぞれの画像毎に撮影した画像を表わす画像データをそれぞれ記録するので、画像を再生する際に関連した画像を捜し出すのに手間がかかるという問題があった。
【０００７】
たとえば、同じ風景にてズーム倍率などを変えて、複数枚の画像を撮影した際に、それらのうち関連する画像のみを多数の記録画像の中から再生する場合、その前後に撮影した多数の画像の中から、一つ一つの画像を順次表示して、それらの中から所望の画像を選択すると、それらの関連がわからず、選択操作に手間がかかるという問題があった。また、その際、複数のサムネイル画像をカメラのモニタ画面に表示して所望の関連する画像を選択する場合には、表示画像が縮小されてみづらいなどの問題があった。
【０００８】
本発明は、このような従来の技術の課題を解決して、再生時に関連した画像を迅速に表示して所望の関連画像を選択することができる電子スチルカメラおよびその画像データ記録再生方法を提供することを目的とする。
【０００９】
【課題を解決するための手段】
本発明による電子スチルカメラは上記課題を解決するために、所望の被写界像を撮影してその画像を表わす画像データを記録する電子スチルカメラにおいて、関連する被写界像を撮影した際に、一方の画像に対する他方の画像の関連位置を求める関連位置検出手段と、この関連位置検出手段にて求めた関連位置情報を含む画像の関連情報をそれぞれの画像データとともに記録する記録手段と、記録した画像データにて表わされる画像を表示する際に、少なくとも、一方の画像データにて表わされる画像中に関連位置情報も表示する表示手段と、この表示手段にて表示された一方の画像の関連位置情報をその画面中にて指示する指示手段と、この指示手段の指示に応動して、他方の画像データを読み出してその画像を表示手段に表示する関連画像再生手段とを含むことを特徴とする。
【００１０】
この場合、本発明による電子スチルカメラは、所望の被写界像の一部分を光学的または電子的あるいは双方の組み合わせにて拡大して撮影するズーム撮影機能を含み、関連位置検出手段は、少なくとも、全体画像とズーム画像が撮影された際に、全体画像に対するズーム画像の拡大位置を関連位置情報として検出するとよい。
【００１１】
また、その際、関連位置検出手段は、ズーム画像を所定の割合にて縮小して、全体画像の対応部分に当て嵌めて、その相関関係を求める相関算出手段を含むと有利である。
【００１２】
これらの場合、本発明による電子スチルカメラは、関連位置検出手段にて求めた全体画像に対するズーム画像の関連位置を全体画像の表示画面にて表わすクリッカブルマップを生成する指示情報生成手段を含み、各画像再生の際に、表示手段に表示された全体画像中からクリッピング位置を指示することによりズーム画像を再生するとよい。
【００１３】
一方、本発明による電子スチルカメラは、広画角の被写界像を複数枚の画像に合成して記録するパノラマ撮影機能を含み、関連位置検出手段は、それぞれの画像に対する隣接画像の位置関係を関連付けて検出し、記録手段は、それぞれの位置関係を表わす関連位置情報を記録するとよい。
【００１４】
この場合、本発明による電子スチルカメラは、関連位置検出手段にて求めたそれぞれの画像に対する隣接する画像の関連位置をそれぞれの画像の表示画面にて表わすクリッカブルマップを生成する指示情報生成手段を含み、各画像再生の際に分割された画像のいずれかを表示手段に表示して、そのクリッピング位置を指示することにより隣接する画像を順次再生するとよい。
【００１５】
他方、本発明による画像データ記録再生方法は、電子スチルカメラにて撮影した所望の被写界像を表わす画像データを所定の記録手段に随時再生可能に記録する電子スチルカメラにおける画像データ記録再生方法において、電子スチルカメラにて関連する被写界像を撮影した際に、撮影した複数の画像の中から関連する画像をそれぞれ選択する工程と、選択した画像の一方から他方への関連位置を検出する工程と、検出した関連位置を表わす情報をそれぞれの画像を表わす画像データとともに記録する工程とを含み、記録した画像を再生する際に、少なくとも、関連する画像の一方をその関連位置を表わす情報とともに表示する工程と、表示された一方の画像の中から関連位置を指示する工程と、その指示に応動して他方の画像を読み出して再生する工程とを含むことを特徴とする。
【００１６】
この場合、本発明による画像データ記録再生方法は、撮影した複数の画像の中から、所望の被写界像の全体を表わす全体画像と、その一部分を拡大撮影したズーム画像とを選択して、全体画像に対してその画像中のズーム画像の位置を関連付けて記録し、再生の際に、全体画像を再生してその画像中からズーム画像を再生するとよい。
【００１７】
その際、複数の関連画像を記録した場合、その画像再生の際に、ズーム倍率の低い方から順次階層的に表示再生すると有利である。
【００１８】
また、関連する画像は、広画角の被写界像を連続する複数の画像に分割して撮影したパノラマ合成画像であり、本発明による画像データ記録再生方法は、分割したそれぞれの画像に隣接する画像をその隣接方向に基づいてそれぞれ関連付けて記録し、いずれかの画像を表示してその画像中からその隣接方向の関連情報に基づいて隣接画像を順次再生するとよい。
【００１９】
【発明の実施の形態】
次に、添付図面を参照して本発明による電子スチルカメラおよびその画像データ記録再生方法の一実施例を詳細に説明する。図１および図２には、本発明における電子スチルカメラの一実施例が示されている。本実施例による電子スチルカメラは、所望の被写界像を撮影してその画像を表わす画像データをカメラ本体に装着されたメモリカードなどの記録媒体に記録するディジタルカメラであり、本実施例では光学式および電子式ズームにより被写界像を拡大撮影するズーム撮影機能を含むカメラが有効に適用される。
【００２０】
特に、本実施例では、所望の被写界の全体像を表わす全体画像と、その一部分をズーム倍率を上げて拡大したズーム画像とを撮影した場合に、それらの画像の再生の際に、モニタ画面に表示した全体画像の中からズーム画像の位置をクリックすることにより、その関連するズーム画像を再生するように全体画像およびズーム画像を表わす画像データを関連付けて記録するデータ管理機能を有する点が主な特徴点である。
【００２１】
詳細には本実施例による電子スチルカメラ10は、図１に示すように、レンズなどを含む光学系102 を介して被写界像を入射する。光学系102 は、たとえば、図示しない複数群のレンズを自在に移動してその焦点距離を変えて、所望の被写界像を拡大する光学式のズーム機能を含む。有利には、所定の交換レンズまたはテレコンバージョンレンズあるいはワイドコンバージョンレンズなどにより、さらに高倍率のズームあるいはワイド画角の被写界像が得られるようにしてもよい。光学系102 からの被写界像は撮像デバイス104 の露光面に投射される。
【００２２】
撮像デバイス104 は、本実施例では、 CCD（Charge Coupled Device ）などの固体撮像素子が有利に適用されて、光学系102 を介して入射される被写界像の露光に応じて光電変換する撮像素子である。露光面には、各画素毎にRGB などの色フィルタが設けられて、それぞれの画素毎に露光した被写界像を表わす、たとえば、RGB のカラー画像信号を順次出力する。撮像デバイス104 の出力は、アナログ−ディジタル (A-D)変換器106 に接続されている。
【００２３】
A-D 変換器106 は、撮像デバイス104 から供給されるアナログの画像信号を対応するディジタルデータに変換して出力する信号変換回路である。本実施例でA-D 変換器106 は、アナログのRGB カラー画像信号をそれぞれ各色毎に所定のビット数、たとえば、10ビットのディジタルデータに変換して出力する。このA-D 変換器106 の変換出力は、メモリコントローラ112 およびYC信号処理回路108 にそれぞれ接続されている。
【００２４】
YC信号処理回路108 は、本実施例では、白バランス調整および諧調補正などの前処理と、RGB にて得られた各色の画像データを輝度信号(Y) と色差信号(C) にて表わすYCデータに変換する演算処理とを含む処理回路である。YC信号処理回路108 は、メモリコントローラ112 およびデータ圧縮回路110 にそれぞれ接続されている。
【００２５】
データ圧縮回路110 は、YC信号処理回路108 からの画像データを所定の符号化方式にて圧縮処理する処理回路である。また、本実施例でデータ圧縮回路110 は、記録された画像を再生する際にその圧縮された画像データを伸張する伸張処理回路を含む。圧縮された画像データは、メモリコントローラ112 を介してメモリカードなどの記録媒体116 に記録される。
【００２６】
メモリコントローラ112 は、装着された記録媒体116 および作業用メモリ114 への画像データの書込みおよび読出しをシステムコントローラ130 の制御の下に実行するメモリ制御回路である。そして、メモリコントローラ112 は、撮影の際の表示データおよび処理データの制御ならびに記録再生の際の圧縮伸張データの制御を司るデータ制御回路でもある。特に、本実施例でのデータ制御回路としては電子ズームの際のデータ補間処理や後述する関連画像撮影における相関検出処理の際のデータ制御などを含んでいる。
【００２７】
作業用メモリ114 には、所定の容量を有するフィールドメモリまたはフレームメモリが有効に適用される。作業用メモリ114 は、メモリコントローラ112 からのRGB データまたはYCデータが一時蓄積される記憶回路である。本実施例では、メモリコントローラ112 の制御の下に信号処理または圧縮処理の際の作業用メモリあるいは再生の際の展開メモリとして動作する記憶回路である。作業用メモリ114 には、特に、関連画像記録の際の全体画像およびズーム画像を一時蓄積する記憶領域およびズーム画像を縮小して比較する際の作業領域などが含まれる。本実施例で作業用メモリ114 には、複数の画像を連続撮影可能にするため、複数のフレームメモリあるいは記憶領域が有する。
【００２８】
記録媒体116 は、電気的に消去および再書込み可能なEEPROMなどの記憶素子が薄板矩形状の基体に担持されたカード状の記憶回路である。記録媒体116 は、コネクタ118 を介してカメラ本体に着脱自在に形成された記録媒体である。有利には、パーソナルコンピュータあるいは印刷装置などに直接または所定のアダプタを介して着脱する形態のものが有効に適用される。コネクタ118 に接続された記録媒体116 には、インタフェース(I/F) 120 を介して画像データおよびその管理データがメモリコントローラ112 の制御の下に書き込みまたは読み出される。
【００２９】
一方、メモリコントローラ112 には、ビデオ再生回路122 が接続されている。ビデオ再生回路122 は、メモリコントローラ112 を介して供給される画像データを、たとえば、CRT （Cathode Ray Tube）などの外部表示装置にて表示可能な画像信号に変換して出力する出力回路である。ビデオ再生回路122 は、本実施例では出力端子OUT からRGB またはYCの画像信号として出力可能となっている。このビデオ再生回路122 には、撮影の際および再生の際の画像を表示する液晶ディスプレイ124 が接続されている。
【００３０】
液晶ディスプレイ124 は、たとえば、カメラ本体の背面などに操作ボタン類とともに配設される表示装置である。液晶ディスプレイ124 には、撮影画像および確認のために再生画像を表示させるとともに、それらの画像表示の際に行う操作の操作メニューなども表示される。操作ボタン類からの入力データは、データ入力部126 を介してシステムコントローラ130 に供給される。本実施例でシステムコントローラ130 には、撮影モードと再生モードの切り替え、あるいはそれぞれのモードでの各種条件の設定データなどが供給される。特に、本実施例では、液晶画面に画像とともに表示されるカーソルあるいはポインタを移動させ、所定の位置にてクリックしてポイント入力するポインティングデバイス128 などが接続されている。ポインティングデバイス128 は、トラックボールあるいは十字ボタンと実行ボタンの組合せなどが有利に適用されるものである。このポインティングデバイス128 、外付けのマウスなどであってもよい。
【００３１】
システムコントローラ130 は、撮影時に、上述した光学系102 、撮像デバイス104 、YC信号処理回路108 、データ圧縮回路110 、メモリコントローラ112 およびビデオ再生回路120 などをそれぞれ制御する主制御回路である。システムコントローラ130 は、特に、本実施例では撮影の際の一連の操作に基づいて関連画像の撮影を検出して本実施例の特徴とする所定の記録再生を制御する制御回路である。より具体的には、本実施例のシステムコントローラ130 は、たとえば、図２に示すように、撮像制御部500 と、関連画像検出部502 と、関連情報生成部504 と、記録制御部506 と、再生制御部508 とを含む。
【００３２】
撮像制御部500 は、撮影の際の各部の制御を司る制御部である。さらに説明すると、撮像制御部500 は、ズーム制御、焦点制御、露出制御および信号処理制御などの一連の撮影制御を実行する制御部である。撮影された画像データは、一旦フレームメモリ114 に展開されて、このとき、さらに電子ズームが設定されていれば、所望の範囲が補間拡大されて、液晶ディスプレイ124 に表示される。その際の光学ズームの倍率および電子ズームの倍率は、関連画像検出部502 に供給される。
【００３３】
関連画像検出部502 は、撮像制御部500 でのズーム撮影に応動して撮影された関連画像を検出する画像検出部である。関連画像検出部502 は、たとえば、標準画角あるいは低倍率での撮影を行なった後にズーム倍率を高めたズーム撮影を行なった場合、あるいは高倍率のズーム撮影から低倍率または標準画角の撮影を行なった場合に、メモリコントローラ112 を制御してその前後に記録された画像データを読み出して関連画像を検出する。特に、本実施例で関連画像検出部502 には、高倍率のズーム画像を縮小して、低倍率の画像に当て嵌めて、相関位置を求める相関算出機能が含まれているので、関連画像検出部502 は、その結果を基に全体画像に対するズーム画像の関連位置を検出する関連位置検出部でもある。相関算出は、本実施例では、たとえば、それぞれの輝度値の差分絶対値の合計を求めて行っている。相関または関連のある画像位置は、その相関算出で得られた結果の値が零あるいは所定の値以下となる箇所としている。関連画像検出部502 は、この位置を検出している。その結果は関連情報生成部504 に供給される。
【００３４】
また、本実施例の関連画像検出部502 は、撮影後に関連画像を手動にて選択してそれらの画像の関連位置を検出する手動選択モードを含む。たとえば、所望の全体画像を撮影した後に他の被写界を撮影してから、元の被写界のズーム画像を撮影した場合など、相関位置が得られない場合がある。その際、撮影済の画像を液晶ディスプレイ124 に表示して所望の被写界の全体画像と、そのズーム画像を選択し、それらの関連位置を求める。その結果は上記と同様に、関連情報生成部504 に供給される。
【００３５】
関連情報生成部504 は、関連画像検出部502 の検出結果に基づいて関連情報を生成するデータ生成部である。関連情報生成部504 は、特に、本実施例では、全体画像に対するズーム画像の相関位置を示すクリッカブルマップを所定のファイル形式で生成する指示情報生成部である。所定のファイル形式としては、たとえば、HTML（Hyper Text Mark-up Language ）ファイルなどがある。その結果は、記録制御部506 に供給される。
【００３６】
記録制御部506 は、撮影された画像を表わす画像データおよび関連情報生成部504 からの関連情報をメモリコントローラ112 を制御して記録媒体116 に記録する制御回路である。本実施例で記録制御部506 は、撮影後に撮影画像を液晶ディスプレイ124 に表示して、その確認の後に記録ボタンが押下されると、その画像データを圧縮して記録媒体116 に記録する一連の記録制御を司る制御部である。特に、記録制御は、関連撮影の際に関連付けた全体画像とズーム位置を示すクリッカブルマップおよびそれから再生されるズーム画像を表示して、確認後に記録するとよい。
【００３７】
再生制御部508 は、再生モードの際に、メモリコントローラ112 を制御して記録媒体116 から所望の画像データを読み出して表示再生する制御部である。再生制御部508 には、関連画像の際にその関連情報を読み出して全体画像中にズーム画像の位置を示すクリッカブルマップを表示し、このクリッカブルマップにより関連付けたクリッピング位置がクリックされると、その関連するズーム画像を再生する関連情報再生機能が含まれている。本実施例では、この他に記録画像を選択する画面として、４分割あるいは９分割の複数の縮小画像を表示するサムネイル表示機能と、画像を順次一枚づつ自動表示していくスライドショー機能などの各種機能が含まれている。さらなる機能として再生制御部508 には、これらの各種機能に対する表示順序として撮影順あるいはズーム倍率順などが切り替えできるようになっている。有利には、再生制御部508 はサムネイル表示にて、倍率の低い全体画像のみを表示させ、順次スクロールする毎に、倍率の高いズーム画像を表示させ、あるいは倍率毎に任意に選択できるようにしてもよい。
【００３８】
次に、本実施例による画像データ記録再生方法について電子スチルカメラ10の動作を用いて図３ないし図12を参照してを上記とともに説明する。たとえば、撮影者が所望の被写界を通常画角あるいはワイド画角にて撮影して、次いで、ズーム倍率を上げて複数のズーム画像を撮影する場合を例に挙げて説明すると、まず、撮影者は電源投入すべく電源スイッチをオンとして、モード選択ボタンなどにて撮影モードを選択しておく。これにより、図３に示すように、ステップS10 にて電源スイッチがオンとなると、ステップS12 に進む。
【００３９】
ステップS12 では、モードが撮影モードであるか否か検出される。撮影モードの場合（YES ）、ステップS14 に進む。また、撮影モード以外の場合（NO）、接続子A を介して図５のステップ50に進む。ステップS14 では、撮影モードでの電子スチルカメラ10の設定を行う。
【００４０】
次に、撮影者は、所望の場所にて光学系102 を所望の被写界に向けて、その画像を光学ファインダ（図示略）あるいは液晶画面にて確認して、所望の画像であれば、レリーズボタンを押下して全体画像の撮影を実施する。この場合、図３のフローチャートでは、ステップS14 からステップS16 に移ってズーム撮影か否かを判定する。ズーム制御およびズーム設定を行なわない場合（NO）、ステップS18 に進み、通常撮影が実施例される。たとえば、図９に示すように、標準画角またはワイド画角による全体画像（風景（Ａ））を撮影する。
【００４１】
全体画像の撮影が終了すると、ステップS20 に進み、関連のズーム撮影がすでに行なわれているか否か、すなわち関連画像の有無が判定される。この場合、ズーム撮影が行なわれていないので（NO）、ステップS22 に移る。ステップS22 では、撮影画像をフレームメモリ114 の所定の記憶領域に一時記録する。この際、撮影した画像のプレビュー画面がモニタに表示されるので、その画像を確認して、記録ボタンを押下し、その撮影画像を表わす画像データを圧縮して記録媒体116 に記録しておいてもよい。本実施例では、作業用メモリ114 にその記憶容量を十分にとって複数枚の画像の撮影を可能としているので、以後所定の枚数分だけステップS22 からステップS14 に戻って連続して撮影してもよい。また、撮影した画像が所望の画像でない場合は、廃棄操作などにて撮影画像のデータを廃棄して、再度、撮り直してもよい。
【００４２】
先にズーム撮影しない場合について説明したが、次にステップS14 での設定後、ステップS16 でズーム撮影する場合（YES ）について説明する。この撮影が選択されるとステップS24 に進む。ステップS24 では、図１の光学系102 のズーム操作および電子ズームの倍率などを設定して、被写界の所望のズーム位置に合わせる。このとき、そのズーム画像が上記と同様に液晶画面に表示される。その表示されたズーム画像を確認してから、所望の画像であれば、ステップS26 に進む。ステップS26 では、ズーム撮影を行う。電子スチルカメラ10のレリーズボタン（図示せず）を押下すると、ズーム画像の撮影が実施される。このとき、たとえば、図10に示すように、全体画像の一部分の拡大画像（遠くの山（Ｂ））が撮影されたとする。
【００４３】
再び図３に戻って、ズーム画像の撮影が終了すると、ステップS20 で前述したように、関連画像の撮影がすでに行なわれているかが判定される。この場合、全体画像の撮影がすでに終了しているので（YES ）、ステップS28 に進む。ステップS28 では、すでに撮影された全体画像Ａに対するズーム画像のズーム倍率に応じて撮影されたズーム画像Ｂを縮小する。この際、撮影したズーム画像を表わす画像データは、全体画像とは別の領域に一時蓄積しておく。次に、ステップS30 では、全体画像に対するズーム画像の相関位置を求めて、全体画像に対するズーム画像のズーム位置を検出する。その結果、関連位置が検出された後、ステップS32 に進む。
【００４４】
ステップS32 では、関連位置を示すクリッカブルマップを含む関連情報を生成する。次いで、ステップS34 にて、液晶画面に、たとえば、図11に示すように全体画像を表示して、その中にズーム位置を示すクリッカブルマップを表示する。そして、その位置をポインタなどにてクリックすることにより、撮影したズーム画像を表示する。それらの位置関係およびそれぞれの画像が所望のものであれば、記録ボタンを押下することにより、全体画像およびズーム画像をそれぞれ表わす画像データならびに関連位置情報を記録媒体116 に圧縮して記録する。すでに、撮影した全体画像が記録媒体116 に記録されている場合には、その画像データの記録は省略され、その記録アドレスを含む関連情報およびズーム画像を表わす画像データの圧縮処理されたデータがそれぞれ記録媒体116 に記録される。
【００４５】
この記録の後、接続子B を介してステップS36 に進む。ステップS36 では、さらに、同じ被写界にて異なるズーム画像を撮影しないか判断を行う。撮影する場合（NO）は、ステップS36 から接続子C を介してステップS12 に戻り、さらにステップS16 からステップS24 に進んで、上記と同様の手順を繰り返しズーム画像を撮影する。たとえば、図11に示す全体画像中の花を撮影する。撮影する画角は、図12(A) の破線範囲内である。これにより、上記と同様に撮影後、ステップS20 に進んで、その撮影時の倍率から図３に示す全体画像が選択されて、次にステップS28 ないしステップS34 にて関連位置が検出され、さらに関連情報が生成されて、それらのデータの記録が実行される。
【００４６】
本実施例では、さらに図12に示すように、花（Ｃ）からさらにクローズアップした花（Ｄ）にズーム倍率が高められて、そのズーム画像の撮影が実行される。この際、上記と同様に、ステップS38 からステップS12 に戻り、ステップS24 、ステップS26 に順次進んでズーム撮影が行なわれ、さらにステップS20 からステップS28 、ステップS30 に進んで、関連画像との関連位置が検出される。
【００４７】
この際、まず、ズーム倍率の近い、たとえば、遠い山（Ｂ）との相関位置が検出される。この際、相関位置が検出されないので、ステップS30 にて花（Ｃ）が選択され、その画像データとの相関位置が求められて、それらの関連位置が検出される。もし、この場合、花（Ｃ）が他の画像、たとえば、家であれば、やはり相関位置がないので、ステップS28 に戻って縮小倍率を上げて、ステップS30 にて全体画像Ａが選択されて、それらの相関位置が求められる。この場合、いずれかの画像に関連付けられる。なお、途中、他の被写界などを撮影して関連付けができなかった場合は、その画像データを一旦記録媒体116 に記録しておき、後述するように手動選択にて関連付けして記録するとよい。いずれかの画像との関連位置が検出されると、ステップS32 およびステップS34 にて上記と同様に、その関連情報が生成されて、それぞれのデータが記録媒体116 に記録される。
【００４８】
ステップS36 において、同じ被写界での関連撮影を行わない場合（YES ）、撮影を終了させてステップS38 に進む。ステップS38 では、フレームメモリ114 をクリアにして、ステップS40 に進む。ステップS40 では、その撮影場所、あるいは他の撮影場所での上記と異なる被写界の撮影を行なわないか判断する。撮影する場合（NO）は、接続子C を介してステップS12 に戻って、上記と同様に所望の被写界をズーム倍率を変えて撮影し、それぞれの関連画像を関連情報とともに記録する。以下、図時しないが同様に同じ被写界にてズーム倍率を変えて撮影した場合に、高倍率の画像を低倍率の画像に関連付けて、その関連情報とともにそれぞれの画像データを記録する。
【００４９】
なお、上記の場合、全体画像を先に撮影してからズーム画像を撮影したが、先にズーム画像を撮影してから全体画像を撮影しても上記と同様に関連画像として記録することができる。その場合、図３に示すフローチャートでは、ステップS22 にて先に撮影されたズーム画像が一時記憶されて、そのズーム画像がステップS28 にて破線矢印で示すように供給されて縮小されて、その際、撮影された全体画像との相関がステップS30 にて求められる。したがって、その撮影順番は任意である。すべての撮影が終了すると、ステップS42 にて、電源スイッチをオフとして撮影を終了する。
【００５０】
次に、図５および図６を参照して、手動選択により関連画像を記録する場合を例に上げて説明する。まず、図３のステップS12 でのモード検出で再生（記録）モードが指定されていた場合（NO）、図５に示すステップS50 に進む。ステップS50 では、再生モードにおける設定を行ってステップS52 に進む。ステップS52 では、表示をサムネイル表示またはスライドショー表示のいずれかを選択する。たとえば、サムネイル表示を選択すると、ステップS54 に移ってサムネイル表示の設定を行う。
【００５１】
次に、ステップS56 では、その画面の分割数を４分割または９分割のいずれかに切り替える。この後、ステップS58 に進む。ステップS58 では、その表示順序を撮影順または倍率順のいずれかに設定する。撮影順の場合は、古い順または新しい順のいずれかを選択することができる。また、倍率順の場合は、倍率の高い順または低い順のいずれかを選択して、あるいは任意の倍率を入力する。
【００５２】
この場合、たとえば、関連画像を撮影した後であれば、ステップS56 にて９分割を選択して、ステップS58 にて撮影順の新しい順を選択すると、ステップS60 にて最新の撮影画像のうち９個のサムネイル画像が、たとえば、図12に示すように液晶画面に表示される。この表示の後、ステップS62 に進む。その表示において撮影枚数が多い場合などのとき、その中に所望の画像がない場合には、ステップS62 にてスクロールボタンを押下すると、次の９個のサムネイル画像が表示される。この後、ステップS64 に進む。
【００５３】
ステップS64 では、所望の画像を見つけた際に、その見つけた画像にカーソルあるいはポインタを合わせてクリックすることにより、その画像を表わす画像データが選択されて、一面に拡大表示される。この際、記録媒体116 から読み出された画像データは伸張処理され、上記撮影と同様にフレームメモリ114 の所定の記憶領域に展開されて一時蓄積され、その画像が液晶画面に表示される。たとえば、図10に示すズーム画像（遠い山（Ｂ））を選択表示したとする。
【００５４】
次いで、ステップS66 に進んで、実行ボタンなどを押下すると、関連記録する際の第１の画像が選択されたことになる。次にステップS68 では、関連付ける画像または関連付けられる画像が選択されているか否かが判定される。関連付ける画像または関連付けられる画像がない場合（NO）、ステップS60 に戻り、元のサムネイル画面が表示される。その画面に関連付けるまたは関連付けられる画像がない場合は、上記と同様に、ステップS62 にてスクロールして、所望の画像を探索する。そして、所望の画像を見つけると、ステップS64 に進んで上記と同様に選択する。これにより、上記と同様に選択した画像を表わす画像データが読み出されて、伸張処理され、フレームメモリ114 に展開されて、画面に表示される。たとえば、図９に示す全体画像を選択したとする。
【００５５】
次いで、ステップS66 にて実行ボタンを押下すると、ステップS68 に進む。ステップS68 では、すでに関連付ける画像が選択されている場合（YES ）になるので、ステップS70 に進む。以降、ステップS70 ないし接続子D を介して図６のステップS76 にて上記撮影の場合と同様に、ズーム倍率の高い画像をズーム倍率の低い画像に関連付けて記録する。この場合、それぞれの画像データは、すでに記録媒体116 に記録されているので、その記録アドレスおよびクリッカブルマップを含む関連情報が管理領域などにそれぞれの画像を関連付けて記録される。
【００５６】
以下同様に、たとえば、図12に示すように、花（Ｃ）およびズームアップした花（Ｄ）を関連付けて記録する場合（NO）は、接続子E を介してステップS78 からステップS58 に戻って、再びステップS60 ないしステップS66 にて所望の画像を選択して、以下、ステップS68 からステップS70 ないしステップS76 にて関連位置を検出して、それぞれの画像データを関連情報とともに記録する。また、ステップS78 では、ズーム撮影しない場合（YES ）、すなわち同じ被写界の関連記録を終了して、ステップS80 に進む。
【００５７】
ステップS80 では、フレームメモリ114 をクリアして、ステップS82 に進む。ステップS82 では、他の被写界の関連画像を記録する場合（NO）は、接続子F を介してステップS52 に戻り、上記と同様に各ステップを実行して関連記録する。記録が終了して、撮影などを行なわない場合（YES ）はステップS84 にて電源スイッチをオフとして終了する。
【００５８】
なお、ステップS52 にてスライドショー表示を選択した場合（NO）は、ステップS90 に進む。ステップS90 では、スライドショー表示の設定を行う。この後、ステップS92 に進む。ステップS92 では、その再生順序を撮影順または倍率順を選択する。この選択に応じて再生した画像の表示を開始する（ステップS94 ）。次いで、所望の画像の目視検出を行う。ステップS96 で所望の画像は、ストップボタンを押下して、表示する。この操作により画像は表示動作が停止したように見える静止画表示が行われる。この所望の画像の目視検出の際、画像が進み過ぎた場合に対応するようにステップS98 に進む。
【００５９】
ステップS98 では、スクロールしないかどうか判断する。所望の画像が表示されている場合（YES ）、ステップS66 に進む。また、所望の画像でなければ（NO）、ステップS99 に進む。ステップS99 では、スクロールボタンにより現在の表示画像からひとつ前の画像に戻しステップS96 に進む。このようにして、所望の画像の表示が行われるまで繰り返す。図示しないが、すべて目視検査した結果、所望の画像がないときは、たとえば、ステップS84 に進んでこの一連の処理を終了させるようにしてもよい。ステップS98 で所望の画像が現在表示されている場合（YES ）、前述したようにステップS66 に進んで実行ボタンを押下して画像を選択する。選択した画像を表わす画像データは、上記と同様にフレームメモリ114 に一時蓄積される。次いで、ステップS68 からステップS94 に戻り、再び自動表示して、ステップS94 ないしステップS66 を繰り返し、関連付けるまたは関連付けられる画像を選択する。その画像が選択されると、これまで述べてきたようにステップS68 からステップS70 に進み、さらに以下の処理により、関連位置を検出して、その結果からそれぞれの画像を関連付けて記録する。また、この場合、スクロールボタンの操作のみにて所望の画像を選択してもよい。
【００６０】
次に、図７および図８を参照して、上記のように記録された撮影画像を再生して、たとえば、関連する画像のみを選択して印刷装置にてプリントする場合を例に上げて説明する。まず、出力端子out に印刷装置の入力に接続された所定の接続ケーブルを接続して、カメラと印刷装置とを接続する。次いで、カメラの電源スイッチをオンとして、モードを再生モードに切り替える。この際、印刷装置の電源もオンとしておく。
【００６１】
これにより、図３のステップS10 からステップS12 に進み、さらに図７に示すステップS100に進む。次いで、ステップS102に進み、サムネイル表示またはスライドショー表示のいずれかを選択する。たとえば、サムネイル表示を選択したとするとき（YES ）、ステップS104に進む。ステップS104では、サムネイル表示の設定を行う。次にステップS106では、その表示画面の分割数を４分割または９分割のいずれかに切替設定する。たとえば、ここでは９分割とする。次いで、ステップS108に進み、その（再生）表示順序を選択する。たとえば、ズーム倍率の低い方から再生表示する場合を選択する。
【００６２】
これにより、図12に示すように、たとえば、ズーム撮影されていない標準画角あるいはワイド画角の撮影画像が９コマ、それぞれのサムネイル画像が表示される（ステップS110を参照）。次にステップS112では、その表示している画像中に所望の画像がなければ、スクロールボタンを押下して、次の９コマの撮影画像をサムネイル表示する。そして、所望の画像があれば、ステップS114にてその画像にカーソルまたはポインタを合わせてクリックすることにより選択を行う。この選択を行うと、ステップS116では、その画像を表わす画像データが記録媒体116 から読み出されて伸張処理され、液晶画面に拡大表示される。たとえば、図12に示すように上記撮影または関連記録にて記録された風景（Ａ）を選択したとする。この際、ステップS118では、関連情報が読み出される。そして、その画像中には、関連するズーム画像のクリッピング位置が表示される。
【００６３】
次いで、それらのズーム画像を確認する場合は、ステップS120に進む。ステップS120では、所望のクリッピング位置にポインタを合わせてクリックすると、その画像が読み出されて拡大表示される。たとえば、図12に示すように、全体画像（Ａ）の中からズーム画像（Ｂ）（遠い山）とズーム画像（Ｃ）（花）を読み出すことができる。元の全体画像（Ａ）に戻る場合は、たとえばスクロールボタンを戻る方向に押下して戻る。また、ズーム画像（Ｃ）からさらにズーム画像（Ｄ）（拡大した花）を読み出すことができる。
【００６４】
これにより、関連画像の確認が終了すると、接続子G を介してステップS120に進み、印刷する画像を選択して表示する。ステップS120では、その画面にて実行ボタンを押下して、その画像を表わす画像データを印刷装置に送る。この後、ステップS124では、選択した画像を印刷する。関連する全画像を印刷する場合は、メニュー画面を表示して、全画像再生を選択して実行ボタンを押下することにより、順次それぞれの画像データが読み出されて、印刷装置に供給される。これにより、印刷装置にて関連する画像のすべてが順次、印刷される。
【００６５】
印刷が終了すると、ステップS126に進む。ステップS126では、さらに他の画像を再生しないかどうか判断している。他の画像を再生する場合（NO）は、接続子H を介して図７のステップS106に戻って、サムネイル画像の続きを表示して、以下、上記と同様に全体画像から関連画像を再生して、印刷する。また、他の画像を再生しない場合（YES ）、ステップS128に進む。ステップS128では、電源スイッチをオフにしてこの電子スチルカメラ10の処理を終了する。
【００６６】
前述したステップS102でスライドショー表示から画像を選択する場合（NO）は、ステップS200ではスライドショー表示の設定を行う。次にステップS202では、その表示順序を選択する。この選択を行って後、ステップS204では画像の表示を開始し、さらにステップS206ないしステップS210では表示される画像の中から目視により所望の画像を選択して表示させる。（ステップS206を参照）次にステップS208に進む。ステップS208では、所望の画像が行き過ぎていない、すなわちスクロールを使用しないかどうかの判断を行っている。画像表示が行き過ぎているとき（NO）ステップS210に進む。また、所望の画像が表示されているとき（YES ）、そのままスクロールしないでステップS212に進む。ステップS210では、スクロール操作を行ってステップS206に戻る。
【００６７】
ステップS212では、画像の選択が行われる。すなわち、実行ボタンが押下されて画像の選択が前述したように行われる。以後、ステップS116ないしステップS120にて関連画像の中から印刷する画像を読み出して、印刷する。
【００６８】
このように本実施例における電子スチルカメラ10およびその画像データ記録再生方法によれば、標準画角またはワイド画角の全体画像にその一部分を拡大撮影したズーム画像を関連付けて記録するので、再生の際に関連画像を簡単な操作にて選択して再生することができる。また、本実施例では、印刷などの際に、関連する複数の画像を全画像選択することにより、関連する画像のみを連続して印刷することができる。
【００６９】
なお、上記実施例では、ズーム倍率の異なる同様の被写界の撮影画像を関連付けて記録再生する場合を例に挙げて説明したが、本発明では、パノラマ画像などの位置的に関連する複数の画像を関連付けて記録再生するようにしてもよい。たとえば、図13に示すように、パノラマ撮影機能を設けると、水平方向または垂直方向あるいは図のようにその双方にて、一つの被写界を複数の撮影画像に分割して記録することができる。したがって、その隣接方向を関連付けることにより、たとえば、それぞれの画像にて左右上下の所定の範囲をクリッカブルマップとして形成することにより、その位置にてクリックあるいはポインタを合わせて、その隣接方向の撮影画像を読み出して再生するように関連情報を生成して記録するとよい。
【００７０】
また、上記実施例では、ズーム画像を縮小して全体画像の対応部分との相関を求めて、その位置をクリック範囲としたが、全体画像中にてクリック範囲を直接指定して、その範囲を関連位置として記録してもよい。たとえば、図12に示す画像にて、クローズアップした花（Ｄ）を全体画像（Ａ）に関連付ける場合、クリック範囲が狭くなるので、花全体をクリック範囲として関連付けるとよい。この場合、花（Ｃ）は撮影されていないとする。
【００７１】
さらに、上記実施例では、全体画像とズーム画像の相関位置を検出する際に、輝度の差分絶対値の合計に基づいて相関値を算出する場合を例に挙げて説明したが、相関算出に用いるデータは、RGB のいずれかまたはそれらの組合せ、あるいは色差データ(R-Y) または(B-Y) のいずれか、あるいはそれらと輝度データ(Y) の組合せ、またはエッジ情報（輪郭情報）を用いてもよい。また、それらのデータから所定の相関関数を用いて算出してもよい。これらの場合、上記実施例では縮小した画像の全画素のデータを比較したが、２画素以上の単位あるいは半画素以下の単位にて相関算出するようにしてもよい。また、その単位は、外部から指定可能とするとよい。
【００７２】
また、上記実施例では、関連情報を管理領域に記録する場合を例に挙げて説明したが、それぞれの画像データのヘッダあるいは別のファイルまたは関連する画像データをまとめて一つのファイルに記録するようにしてもよい。
【００７３】
また、上記実施例では、カメラに設けられた液晶ディスプレイ116 に表示して再生するようにしたが、本発明においては、外部表示装置にて表示再生するようにしてもよい。
【００７４】
さらに、上記実施例では、電子スチルカメラにて撮影の際または撮影後に画像を関連付けて記録する場合を例に挙げて説明したが、同様のソフトウェアをパーソナルコンピュータ等の処理装置に搭載して、記録媒体から読み出した画像データを直接あるいは一旦ファイルに落としてからそれぞれの画像を関連付けて記録するようにしてもよい。
【００７５】
【発明の効果】
以上詳細に説明したように本発明による電子スチルカメラおよびその画像データ記録再生方法によれば、撮影した関連する画像の関連位置を検出して、その関連情報を記録し、その関連情報に基づいて関連画像を再生するので、それぞれの関連画像を捜す手間を省くことができる。したがって、再生の際の操作を容易にし、かつ迅速に表示および再生することができる優れた効果を奏する。
【図面の簡単な説明】
【図１】本発明に係る電子スチルカメラの一実施例の概略的な構成を示すブロック図である。
【図２】図１のシステムコントローラにおける要部の機能ブロック図である。
【図３】図１の実施例の電子スチルカメラにおける撮影動作を説明するフローチャートである。
【図４】図３の撮影動作に継続して動作を説明するフローチャートである。
【図５】図１の実施例の電子スチルカメラにおける記録動作を説明するフローチャートである。
【図６】図５の撮影動作に継続して動作を説明するフローチャートである。
【図７】図１の実施例の電子スチルカメラにおける再生動作を説明するフローチャートである。
【図８】図７の撮影動作に継続して動作を説明するフローチャートである。
【図９】図１の実施例の電子スチルカメラにて撮影した画像の例を示す図である。
【図１０】図９の画像の一部を拡大撮影したズーム画像の例を示す図である。
【図１１】図１の実施例の電子スチルカメラにて撮影した画像の表示例を示す図である。
【図１２】図１の実施例の電子スチルカメラにて撮影した画像の再生例を示す図である。
【図１３】本発明による電子スチルカメラおよびその画像データ記録再生方法に適用されるパノラマ画像の例を示す図である。
【符号の説明】
10  電子スチルカメラ
102   光学系
104   撮像デバイス
112   メモリコントローラ
116   記録媒体
124   液晶ディスプレイ
500   撮像制御部
502   関連画像検出部
504   関連情報生成部
506   記録制御部
508   再生制御部
【図１】
0003893416.tif 000002
【図２】
0003893416.tif 000003
【図３】
0003893416.tif 000004
【図４】
0003893416.tif 000005
【図５】
0003893416.tif 000006
【図６】
0003893416.tif 000007
【図７】
0003893416.tif 000008
【図８】
0003893416.tif 000009
【図９】
0003893416.tif 000010
【図１０】
0003893416.tif 000011
【図１１】
0003893416.tif 000012
【図１２】
0003893416.tif 000013
【図１３】
0003893416.tif 000014