(57)【要約】【課題】ユーザが、焦点距離に応じた撮影画像の切り替えを違和感なく指示することのできる仕組みを提供することを目的とする。【解決手段】焦点距離を変化させて得られた複数の撮像画像の前記焦点距離の変化に応じた、前記複数の撮影画像の合焦位置の変化方向を特定する変化方向特定手段と、前記変化方向に基づいて、ユーザによる操作方向を決定する操作方向決定手段と、前記操作方向へのユーザからの入力に従い、前記複数の撮像画像を前記焦点距離の順に切り替えて、前記複数の撮像画像のうち一の撮影画像を表示画面に表示する表示制御手段とを有することによって課題を解決する。【選択図】図１
2014215693.tif 000002
【特許請求の範囲】
【請求項１】
焦点距離を変化させて得られた複数の撮像画像の前記焦点距離の変化に応じた、前記複数の撮影画像の合焦位置の変化方向を特定する変化方向特定手段と、
前記変化方向に基づいて、ユーザによる操作方向を決定する操作方向決定手段と、
前記操作方向へのユーザからの入力に従い、前記複数の撮像画像を前記焦点距離の順に切り替えて、前記複数の撮像画像のうち一の撮影画像を表示画面に表示する表示制御手段と
を有することを特徴とする表示処理装置。
【請求項２】
前記操作方向を示す入力受付画像を生成する画像生成手段をさらに有し、
前記表示制御手段は、前記入力受付画像を前記表示画面に表示し、前記入力受付画像に対するユーザからの入力に従い、前記一の撮影画像を前記表示画面に表示することを特徴とする請求項１に記載の表示処理装置。
【請求項３】
前記変化方向特定手段は、前記変化方向として前記撮影画像内の変化ベクトルを算出し、
前記操作方向決定手段は、前記変化ベクトルに基づいて、前記操作方向を決定することを特徴とする請求項１又は２に記載の表示処理装置。
【請求項４】
前記操作方向決定手段は、前記変化ベクトルのＸ成分の値がＹ成分の値に比べて小さい場合に、前記表示画面の上下方向を前記操作方向と決定することを特徴とする請求項３に記載の表示処理装置。
【請求項５】
前記操作方向決定手段は、前記Ｙ成分の値が正の値である場合に、前記表示画面の上の方向に向かう程、前記焦点距離の大きい前記撮影画像が選択される、前記表示画面の上方向を前記操作方向と決定することを特徴とする請求項４に記載の表示処理装置。
【請求項６】
前記操作方向決定手段は、前記Ｙ成分の値が負の値である場合に、前記表示画面の下の方向に向かう程、前記焦点距離の大きい前記撮影画像が選択される、前記表示画面の下方向を前記操作方向と決定することを特徴とする請求項４又は５に記載の表示処理装置。
【請求項７】
前記操作方向決定手段は、前記変化ベクトルのＹ成分の値がＸ成分の値に比べて小さい場合に、前記表示画面の左右方向を前記操作方向と決定することを特徴とする請求項３乃至６何れか１項に記載の表示処理装置。
【請求項８】
前記操作方向決定手段は、前記Ｘ成分の値が正の値である場合に、前記表示画面の右の方向に向かう程、前記焦点距離の大きい前記撮影画像が選択される、前記表示画面の右方向を前記操作方向と決定することを特徴とする請求項７に記載の表示処理装置。
【請求項９】
前記操作方向決定手段は、前記Ｘ成分の値が負の値である場合に、前記表示画面の左の方向に向かう程、前記焦点距離の大きい前記撮影画像が選択される、前記表示画面の左方向を前記操作方向と決定することを特徴とする請求項７又は８に記載の表示処理装置。
【請求項１０】
前記変化方向特定手段は、前記変化方向として前記焦点距離の変化に応じた合焦位置軌跡の方向を特定し、
前記操作方向決定手段は、前記合焦位置軌跡の方向に基づいて、前記操作方向を決定することを特徴とする請求項１又は２に記載の表示処理装置。
【請求項１１】
複数の操作方向候補を記憶する記憶手段をさらに有し、
前記操作方向決定手段は、前記変化方向に基づいて、前記複数の操作方向候補の中から、前記操作方向を決定することを特徴とする請求項１乃至１０何れか１項に記載の表示処理装置。
【請求項１２】
前記表示制御手段は、前記操作方向を前記表示画面に表示することを特徴とする請求項１乃至１１何れか１項に記載の表示処理装置。
【請求項１３】
表示処理装置が実行する表示処理方法であって、
焦点距離を変化させて得られた複数の撮像画像の前記焦点距離の変化に応じた、前記複数の撮影画像の合焦位置の変化方向を特定する変化方向特定ステップと、
前記変化方向に基づいて、ユーザによる操作方向を決定する操作方向決定ステップと、
前記操作方向へのユーザからの入力に従い、前記複数の撮像画像を前記焦点距離の順に切り替えて、前記複数の撮像画像のうち一の撮影画像を表示画面に表示する表示制御ステップと
を含むことを特徴とする表示処理方法。
【請求項１４】
コンピュータを、
焦点距離を変化させて得られた複数の撮像画像の前記焦点距離の変化に応じた、前記複数の撮影画像の合焦位置の変化方向を特定する変化方向特定手段と、
前記変化方向に基づいて、ユーザによる操作方向を決定する操作方向決定手段と、
前記操作方向へのユーザからの入力に従い、前記複数の撮像画像を前記焦点距離の順に切り替えて、前記複数の撮像画像のうち一の撮影画像を表示画面に表示する表示制御手段と
して機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示処理装置、表示処理方法及びプログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラの連続撮影速度が向上し、１秒間に数十枚の静止画を撮影することが可能になっている。また、超音波モータによりレンズのフォーカスリングの高速駆動が可能になっている。このようなことから、今後デジタルカメラのフォーカス（撮影距離）を、例えばレンズの最短撮影距離から無限遠まで連続的に変化させながら、すなわち焦点距離を変化させながら高速連続撮影する撮影方法が可能となる。なお、高速連続撮影により得られた画像群を、ＭＦＰ（マルチフォーカスフォト）と称する。
高速連続撮影の後、ユーザは、撮影距離を切り替えながら、連続撮影により得られた複数の撮影画像をビューワで確認することができる。ユーザは、スライダー操作、ダイヤル操作、ジェスチャーＵＩ等を操作することにより、撮影距離順に撮影画像を切り替えることができる。特に被写界深度の浅い画像では、ユーザは、ユーザ操作に応じて撮影距離を変更することにより、撮影画像のボケ感や奥行き感を楽しむことができる。
【０００３】
また、操作入力デバイスは多様化し、ユーザは、より直観的な操作を行うことができるようになっている。操作デバイスに関する技術としては、例えば、特許文献１には、携帯電話のジョグダイヤルの回転方向とアイコンのカーソルの移動方向を一致させる技術が開示されている。また、特許文献２には、十字キーの上下左右方向のベクトルと、メニューの選択トグルの方向を平行になるように表示させる技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−１９６８６７号公報
【特許文献２】特開２００８−７１１６６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、表示装置が撮影距離を切り替えてＭＦＰを表示する場合には、ユーザは、例えばスライダー操作により撮影距離の切り替えを指示する方法が考えられる。ユーザは、スライダーを操作することにより、撮影距離を変更しながらピントの合っている被写体を目で追いかけることによって、ボケ感や奥行き感を楽しむことができる。
例えば図１６は、ＭＦＰの一例を示す図である。図１６に示す被写体５１０〜５１４のうち被写体５１０は、撮影レンズに最も近い位置に存在する。そして、被写体５１１〜５１４は、この順に撮影レンズからの距離が大きくなる。
【０００６】
このようなＭＦＰにおいて、撮影距離を順に大きくしていくと、撮影画像内においてピントの合う位置は変化する。ユーザの視線はピントの合うところに向かうことが多いため、ピント位置の変化に応じ、ユーザの視線の方向も移動する。例えば、図１６に示す例においては、ユーザの視線は、手前の被写体５１０から奥の被写体５１４へと順に移動する。図１６に示すＭＦＰにおいては、視線移動方向５０４は、表示画面５００の左から右の方向となる。特に被写界深度の浅い画像が表示された場合には、ピント位置の変化に応じたユーザの視線方向の移動が顕著となる。
これに対し、例えば図１６に示すスライダー５０１がユーザからの撮影距離の操作入力を受け付けるグラフィカルＵＩとして表示されるとする。ここで、スライダー５０１のノブ５０２を左方向にスライドすると、表示される撮影画像の撮影距離が大きくなる。すなわち、ノブ５０２が左端に移動した場合に、被写体５１０にピントが合った、ＭＦＰのうち撮影距離最小（最短撮影距離）の撮影画像が表示される。一方で、ノブ５０２が右端に移動した場合に、被写体５１４にピントが合った、ＭＦＰのうち撮影距離最大（無限遠）の撮影画像が表示される。
【０００７】
このように、撮影距離が大きくなる方向が表示画面５００の左から右の方向となるようなスライダー操作方向５０３が設定されているとする。この場合には、ユーザの視線が移動する方向と、ユーザがスライダーを移動させる方向とが逆になってしまう。このため、ユーザにとっては、スライダー操作は、違和感のあるものとなってしまう。
【０００８】
本発明はこのような問題点に鑑みなされたもので、ユーザが、焦点距離に応じた撮影画像の切り替えを違和感なく指示することのできる仕組みを提供することを目的とする。
【課題を解決するための手段】
【０００９】
そこで、本発明は、焦点距離を変化させて得られた複数の撮像画像の前記焦点距離の変化に応じた、前記複数の撮影画像の合焦位置の変化方向を特定する変化方向特定手段と、前記変化方向に基づいて、ユーザによる操作方向を決定する操作方向決定手段と、前記操作方向へのユーザからの入力に従い、前記複数の撮像画像を前記焦点距離の順に切り替えて、前記複数の撮像画像のうち一の撮影画像を表示画面に表示する表示制御手段とを有することを特徴とする。
【発明の効果】
【００１０】
本発明によれば、ユーザが、焦点距離に応じた撮影画像の切り替えを違和感なく指示することのできる仕組みを提供することができる。
【図面の簡単な説明】
【００１１】
【図１】映像表示ユニットを示す図である。
【図２】リモコンを示す図である。
【図３】ＧＵＩの一例を示す図である。
【図４】ＭＦＰの記録フォーマットの一例を示す図である。
【図５】撮影画像の表示例を示す図である。
【図６】ＭＦＰの一例を示す図である。
【図７】操作方向処理を示すフローチャートである。
【図８】焦点距離及び合焦位置の一例を示す図である。
【図９】ベクトル算出処理を説明するための図である。
【図１０】スライダーの一例を示す図である。
【図１１】映像表示装置を示す図である。
【図１２】タッチ入力例を示す図である。
【図１３】操作パターン候補の一例を示す図である。
【図１４】操作方向決定処理を示すフローチャートである。
【図１５】合焦位置算出処理を示すフローチャートである。
【図１６】従来例を説明するための図である。
【発明を実施するための形態】
【００１２】
以下、本発明の実施形態について図面に基づいて説明する。
【００１３】
（第１の実施形態）
図１は、映像表示ユニットを示す図である。表示処理システムとしての映像表示ユニットは、映像表示装置１００及びリモコン１３０を有している。映像表示ユニットは、焦点距離を変えることにより撮影距離を変えながら撮影された画像群であるＭＦＰ（マルチフォーカスフォト）を格納している。そして、映像表示ユニットは、ＭＦＰとしての複数の撮影画像を撮影距離に応じて連続的に切り替えて、複数の撮影画像のうち一の撮影画像を表示する。さらに、本実施形態にかかる映像表示ユニットは、撮影距離に応じた撮影画像の切り替えを行うためのユーザによる操作方向をＭＦＰに基づいて決定する。ここで、撮影距離は、デジタルカメラの撮像素子から焦点位置までの距離であり、焦点距離に応じて定まる値である。
映像表示装置１００は、ＣＰＵ１０１と、ＲＡＭ１０２と、ＲＯＭ１０３と、記録媒体１０４と、デコーダ１０５と、グラフィックス制御部１０６と、ビデオメモリ１０７と、表示制御部１０８と、ディスプレイ１０９と、通信Ｉ／Ｆ１２０とを有している。
【００１４】
記録媒体１０４は、マルチメディアコンテンツ等を記録する。記録媒体１０４は、例えばＨＤＤ（ハードディスクドライブ）やフラッシュメモリである。記録媒体１０４は、具体的には、デジタルカメラにより撮影された撮影画像を記録することができ、ＭＦＰとしての複数の撮影画像を記録している。なお、ＭＦＰの記録フォーマットについては後述する。
ＣＰＵ１０１は、映像表示装置１００全体を制御する。ＲＯＭ１０３は、プログラムコードを格納する。ＣＰＵ１０１は、映像表示装置１００の電源投入時にＲＯＭ１０３からプログラムコードを読み込み、ＲＡＭ１０２に展開する。ＣＰＵ１０１は、ＲＡＭ１０２に展開されたプログラムコードを実行することで、後述する映像表示装置１００の機能及び処理を実現する。
【００１５】
デコーダ１０５は、ＣＰＵ１０１の命令により記録媒体１０４から符号化されたＪＰＥＧ画像データを読み込み、復号化する。ビデオメモリ１０７は、赤色、緑色及び青色の３つの色成分から構成されるＲＧＢフォーマットのビットマップデータを読み書きできるメモリである。デコーダ１０５により復号化されたデータは、ＲＧＢフォーマットのビットマップデータとしてビデオメモリ１０７に展開される。
グラフィックス制御部１０６は、ＣＰＵ１０１の命令により文字や図形等のグラフィックスを描画してＲＧＢフォーマットのビットマップデータを生成する。このグラフィック描画によりメニュー画面や操作ガイド、スライダー等のＧＵＩ（グラフィカルユーザインタフェース）をディスプレイ１０９に表示することができる。グラフィックス制御部１０６は、生成したビットマップデータを表示制御部１０８に出力する。
【００１６】
表示制御部１０８は、ビデオメモリ１０７に展開されたＪＰＥＧ画像データを読み込み、グラフィックス制御部１０６から出力されたＧＵＩのビットマップデータを合成する。表示制御部１０８は、ＪＰＥＧ画像データを背景、ＧＵＩを前景となるように合成して、ディスプレイ１０９に出力する。
通信Ｉ／Ｆ１２０は、リモコン１３０からユーザの操作入力を受信する為の通信インタフェースである。通信Ｉ／Ｆ１２０は、赤外線送信部１３１と赤外線で通信して受信した赤外線のアナログデータをデジタルデータに変換し、ＣＰＵ１０１に割り込み信号として通知する。
【００１７】
リモコン１３０は、ユーザが映像表示装置１００を操作するための入力デバイスである。リモコン１３０は、赤外線送信部１３１、タッチセンサ１３２及び操作ボタン１３３を有している。赤外線送信部１３１は、赤外線で通信し、映像表示装置１００に情報を送信する。タッチセンサ１３２は、静電容量方式でユーザからパネルへの入力を検知する。ユーザが指でタッチセンサ１３２に触れると指と誘電膜との間で静電容量が変化し、その変化した位置を入力位置として検出する。操作ボタン１３３は、ハードキーであり、ユーザからの入力を受け付ける。なお、タッチセンサのセンシング方式は、静電容量方式に限るものではなく、抵抗膜方式や赤外線方式、電磁誘導方式等でもよい。また接触検知に限るものではなく、赤外光や画像認識技術により使用者の動作を認識して、この認識した動作に基づき操作を受けつけるようにしても良い。
図２は、リモコン１３０の外観図である。図２に示すように、リモコン１３０の筐体に赤外線送信部１３１、タッチセンサ１３２及び操作ボタンが設けられている。操作ボタン１３３は、図２に示すように、十字操作ボタンであり、後述するスライダーを操作することができる。
【００１８】
図３は、ＧＵＩの一例を示す図である。本実施形態にかかる映像表示装置１００の表示制御部１０８は、図３に示すようなスライダー形式のＧＵＩを撮影画像上に重畳して表示する。なお、図３に示すスライダー２０１において、ユーザは、操作ボタン１３３等を操作することにより、ノブ２０２を左右に動かすことができる。具体的には、ユーザは、十字型の操作ボタン１３３の左右ボタンを押下することにより、ノブ２０２を左右に動かすことができる。また、ユーザは、タッチセンサ１３２を指で右から左になぞることにより、ノブ２０２を左に動かすことができる。
さらに、ノブ２０２が操作されると、映像表示装置１００において、ＭＦＰからノブ２０２の位置に応じた焦点距離の撮影画像が選択され、ディスプレイ１０９に表示される。さらに、ユーザはリモコン１３０の操作ボタン１３３の左方向を連続的に押下することによって、スライダー２０１のノブ２０２を左方向に連続的に動かすことができる。
このようなユーザ操作に対応し、映像表示装置１００は、ディスプレイ１０９に表示される撮影画像の焦点距離が連続的に変化するように撮影画像を切り替えて表示することができる。
【００１９】
図４は、記録媒体１０４に記録されているＭＦＰのフォーマットの一例を示す図である。ＭＦＰには１つのファイル中に複数枚の撮影画像が含まれており、記録媒体１０４には、撮影画像の他、各撮影画像に付随する付属情報が格納されている。
フォーマットの先頭には、ＭＦＰヘッダ３０１が定義されている。ＭＦＰヘッダ３０１には、ＭＦＰに含まれる撮影画像の枚数情報やＭＦＰの代表的なサムネイルの画像情報等ＭＦＰ全体に関する情報が格納されている。
先頭の次に、ＭＦＰインデックス３０２が定義されている。ＭＦＰインデックス３０２の領域にはＭＦＰに含まれる各撮影画像への先頭アドレスのインデックスが記述されている。ＣＰＵ１０１は、ＭＦＰインデックス３０２に記述されているアドレスからデータを読み込むことで、各撮影画像のデータを読み込むことができる。さらに各撮影画像の情報は、ヘッダ領域３０３とデータ領域３０４に分かれている。
【００２０】
図４に示す例においては、３０３、３０５、３０７が各ヘッダ領域、３０４、３０６、３０８が各データ領域を示している。データ領域３０４には、撮影画像本体の情報として例えば静止画符号化フォーマットであるＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）画像が格納されている。
ヘッダ領域３０３には、付属情報としてＥＸＩＦ（Ｅｘｃｈａｎｇｅａｂｌｅ  ｉｍａｇｅ  ｆｉｌｅ  ｆｏｒｍａｔ）情報が格納されている。不図示のデジタルカメラは、撮影した画像にＥＸＩＦというコンテンツ情報を撮影時に自動的に記録する。ＥＸＩＦには、撮影時のカメラ機種名、シャッタースピードや絞り値、焦点距離等の撮影条件、ＡＦセンサでピントを合わせたときの画像における合焦位置等の撮影情報が記述されている。
【００２１】
次に、デジタルカメラにおいて、ＭＦＰを撮影する処理について説明する。ユーザがデジタルカメラのシャッターボタンを押下すると、デジタルカメラはレンズの撮影距離を最短撮影距離から無限遠まで連続的に変化させるように焦点距離を変化させながら、数十枚の静止画を連続撮影する。なお、焦点距離の連続的な変化のさせ方は、ここでは、レンズの機械的な可動範囲を等間隔に区切ったものとする。
なお、本実施形態においては、ＭＦＰ画像は、撮影距離を最短撮影距離から無限遠までを撮影距離の範囲としたが、これに限るものではない。例えば、最短撮影距離から無限遠までの一部分で有っても良い。また、使用者により指定した任意の距離範囲内を連続的に変化させても良い。また、焦点距離の連続的な変化のさせ方としては、焦点距離を等間隔にしても良いし、焦点調整の為の制御パラメータを一定の間隔で指定したものでも良い。例えばパルスモータのパルス数を一定に駆動しながら撮影しても良い。
または、近距離側ほど焦点間隔を狭くし、無限遠側ほど、焦点間隔を広くするようにしても良い。
また撮影枚数を設定し、この枚数に基づいて撮影間隔を決定するようにしても良い。
【００２２】
図５は、数十枚の静止画のうちの1枚を撮影したときのデジタルカメラのライブビュー映像を示す図である。ライブビューとは、撮像素子からの映像出力をリアルタイムでディスプレイに表示する機能である。破線で示す各枠はＡＦ（オートフォーカス）のセンサ領域６０１である。デジタルカメラは、分割された各領域においてコントラスト値を検出する。そして、コントラスト値がピークを示す領域において、合焦したと判定する。なお、図５に示す例においては、枠６０２の位置が合焦位置と判定されている。
なお、デジタルカメラは、コントラスト値を比較するときに各領域のコントラスト値が総じて低い場合には、どこにもピントがあっていないと判定する。デジタルカメラは、このようにして検出した合焦位置を撮影条件としてＭＦＰフォーマットの各撮影画像のヘッダのＥＸＩＦ情報に書き込む。
【００２３】
図６は、ＭＦＰの一例を示す図である。ＭＦＰは、撮影距離を最短撮影距離から無限遠まで連続的に変化させて撮影された複数の撮影画像を含んでいる。図６に示す例においては、最短撮影距離に相当する焦点距離において得られた撮影画像Ａにおいては、撮影レンズに最も近い被写体４２１である向日葵にピントが合っている。すなわち、撮影画像Ａの焦点位置、すなわち合焦位置４１１は、被写体４２１上の位置となる。
撮影画像Ｂにおいては、被写体４２１に比べて撮影レンズから距離が大きい被写体４２２である２つめの向日葵にピントが合っている。すなわち、撮影画像Ｂの合焦位置４１２は、被写体４２２上の位置である。撮影画像Ｃにおいては、被写体４２２に比べて撮影レンズからの距離が大きい被写体４２３である３つめの向日葵にピントが合っている。すなわち、撮影画像Ｃの合焦位置４１３は、被写体４２３上の位置である。
同様に、撮影画像Ｄの合焦位置４１４は、被写体４２４上の位置であり、撮影画像Ｅの合焦位置４１５は、被写体４２５上の位置である。ここで、撮影レンズからの距離は、被写体４２３、被写体４２４、被写体４２５の順に大きくなる。なお、撮影画像によっては、どこにもピントが合っていない画像、すなわち合焦位置の存在しない画像も含まれる。
【００２４】
図７は、映像表示装置１００による、操作方向決定処理を示すフローチャートである。映像表示装置１００は、操作方向決定処理において、ＭＦＰの撮影画像を焦点距離に応じて切り替えるための、ユーザによる操作方向を決定する。なお、本実施形態にかかる映像表示装置１００は、スライダー５０１における焦点距離が大きくなる方向を、操作方向として決定する。
まず、Ｓ２０１において、ＣＰＵ１０１は、記録媒体１０４からＭＦＰのデータを読み込む。そして、ＣＰＵ１０１は、各撮影画像のＥＸＩＦを解析して、ＥＸＩＦから各撮像画像の焦点距離情報を取得する。ここで、焦点距離は、ｍｍ（ミリメートル）単位で表現され、撮影距離無限遠に対応する焦点距離には、最大値ＦＦＦＦＦＦＦＦが書き込まれる。
【００２５】
Ｓ２０１において、ＣＰＵ１０１は、ＭＦＰから予め定められた枚数の撮影画像を処理対象として取得する。なお、ＣＰＵ１０１が、操作方向決定処理において、処理対象とする撮影画像の枚数及びいずれの撮影画像を処理対象とするかについては、予め設定されているものとする。なお、処理対象とする撮影画像の枚数及びいずれの撮影画像を処理対象とするかは任意であり、設計者等が任意に設定可能である。他の例としては、ＣＰＵ１０１は、ＭＦＰに含まれるすべての撮影画像を処理対象としてもよい。
本実施形態においては、ＣＰＵ１０１は、図６に示す５枚の撮影画像Ａ〜Ｅを処理対象とすることとする。すなわち、ＣＰＵ１０１は、５枚の撮影画像Ａ〜Ｅのデータを読み込み、各撮影画像Ａ〜Ｅの焦点距離情報を取得する。
【００２６】
次に、Ｓ２０２において、ＣＰＵ１０１は、さらに記録媒体１０４からＭＦＰのデータを読み込み、処理対象の撮像画像のＥＸＩＦを解析し、ＥＸＩＦから各撮像画像の合焦位置を取得する。なお、撮像画像Ａ〜Ｅの撮像距離及び合焦位置は、図８に示す通りとする。
次に、Ｓ２０３において、ＣＰＵ１０１は、処理対象の撮影画像の合焦位置を撮影画像の焦点距離の昇順にソートする。なお、図８に示す表には、焦点距離の昇順にソートされた結果を示している。
【００２７】
次に、Ｓ２０４において、ＣＰＵ１０１は、Ｓ２０３におけるソート結果に基づいて、焦点距離の変化に伴う合焦位置の変化量及び方向を示すベクトルを算出する。具体的には、ＣＰＵ１０１はまず、処理対象となる撮影画像のうちソート後に連続する２つの撮影画像における合焦位置の変化量及び方向を示す変化ベクトルを算出する。この処理を連続する２つの撮影画像のすべての組み合わせに対して行う。
すなわち、撮影画像Ａ〜Ｅを対象とする場合、ＣＰＵ１０１は、図９（ａ）に示すＡＢベクトル、ＢＣベクトル、ＣＤベクトル及びＤＥベクトルの４つのベクトルを算出する。ここで、ＡＢベクトルは、撮影画像Ａの合焦位置４１１を始点とし、撮影画像Ｂの合焦位置４１２を終点とするベクトルである。ＢＣベクトルは、撮影画像Ｂの合焦位置４１２を始点とし、撮影画像Ｃの合焦位置４１３を終点とするベクトルである。
同様に、ＣＤベクトルは、撮影画像Ｃと撮影画像Ｄとにおける合焦位置４１３，４１４の変化を示すベクトルである。ＤＥベクトルは、撮影画像Ｄと撮影画像Ｅとにおける合焦位置４１４，４１５の変化を示すベクトルである。
【００２８】
次に、ＣＰＵ１０１は、図９（ｂ）に示すように、４つのベクトルから、平均ベクトルを算出する。図８に示す撮影画像Ａ〜Ｅに対しては、平均ベクトル（Ｘ，Ｙ）＝（１．７５，０．７５）が得られる。この平均ベクトルが合焦位置の変化を示す変化ベクトルとして利用される。ここで、Ｓ２０４は、ＭＦＰにおける撮影画像内、すなわち２次元面内における合焦位置の変化方向を特定する変化方向特定処理の一例である。
次に、Ｓ２０５以降の処理において、ＣＰＵ１０１は、Ｓ２０４において、算出した変化ベクトルに基づいて、操作方向を決定する。映像表示装置１００は、例えばＲＯＭ１０３等の記憶部に予め複数の操作方向候補を格納している。なお、実施形態においては、ＲＯＭ１０３は、表示画面としてのディスプレイ１０９の上方向、下方向、右方向及び左方向の４つを操作方向候補として格納しているものとする。そして、Ｓ２０５以降の処理において、ＣＰＵ１０１は、変化ベクトルに基づいて、上記４つの操作方向候補の中から操作方向を決定する。
【００２９】
具体的には、変化ベクトルのＹ成分の値が０より大きく、かつＸ成分の値がＹ成分の値に比べて小さい場合には（Ｓ２０５，ＹＥＳ）、ＣＰＵ１０１は、処理をＳ２０８へ進める。変化ベクトルのＹ成分の値が０より小さく、かつＸ成分の値がＹ成分の値に比べて小さい場合には（Ｓ２０５，ＮＯ、Ｓ２０６、ＹＥＳ）、ＣＰＵ１０１は、処理をＳ２０９へ進める。
変化ベクトルのＸ成分が０より大きく、かつＸ成分がＹ成分に比べて大きい場合には（Ｓ２０５，ＮＯ、Ｓ２０６，ＮＯ、Ｓ２０７，ＹＥＳ）、ＣＰＵ１０１は、処理をＳ２１０へ進める。変化ベクトルのＸ成分が０より小さく、かつＸ成分がＹ成分に比べて大きい場合には（Ｓ２０５，ＮＯ、Ｓ２０６，ＮＯ、Ｓ２０７，ＮＯ）、ＣＰＵ１０１は、処理をＳ２１１へ進める。
【００３０】
Ｓ２０８において、ＣＰＵ１０１は、表示画面、すなわちディスプレイ１０９の上方向を操作方向と決定する。ここで、上方向とは、上に向かう程焦点距離が大きくなるような方向である。次に、Ｓ２１２において、ＣＰＵ１０１は、グラフィックス制御部１０６に対し、上方向の操作方向に基づいて、スライダーのＧＵＩを描画するように命令する。
グラフィックス制御部１０６は、上方向を操作方向として、表示画面の上下方向（縦方向）に延びるスライダーを描画することを決定する。グラフィックス制御部１０６はさらに、スライダーの下端を撮影距離の最小値である最短撮影距離に相当する焦点距離の最大値に設定する。グラフィックス制御部１０６は、またスライダーの上端を撮影距離の最大値である無限遠に相当する焦点距離の最大値に設定する。グラフィックス制御部１０６は、ＣＰＵ１０１の命令に基づき、スライダーのビットマップデータを生成して表示制御部１０８に出力する。表示制御部１０８は、ビットマップデータに基づいて、スライダーを表示する。
【００３１】
Ｓ２０９において、ＣＰＵ１０１は、表示画面、すなわちディスプレイ１０９の下方向を操作方向と決定する。ここで、下方向とは、下に向かう程焦点距離が大きくなるような方向である。次に、Ｓ２１３において、ＣＰＵ１０１は、グラフィックス制御部１０６に対し、下方向の操作方向に基づいて、スライダーのＧＵＩを描画するように命令する。
グラフィックス制御部１０６は、下方向を操作方向として、上下方向に延びるスライダーを描画することを決定する。グラフィックス制御部１０６はさらに、スライダーの上端を撮影距離の最小値である最短撮影距離に相当する焦点距離の最小値に設定する。グラフィックス制御部１０６はまた、スライダーの下端を撮影距離の最大値である無限遠に相当する焦点距離の最大値に設定する。グラフィックス制御部１０６は、ＣＰＵ１０１の命令に基づき、スライダーのビットマップデータを生成して表示制御部１０８に出力する。表示制御部１０８は、ビットマップデータに基づいて、スライダーを表示する。
【００３２】
Ｓ２１０において、ＣＰＵ１０１は、表示画面、すなわちディスプレイ１０９の右方向を操作方向と決定する。ここで、右方向とは、右に向かう程焦点距離が大きくなるような方向である。次に、Ｓ２１４において、ＣＰＵ１０１は、グラフィックス制御部１０６に対し、右方向の操作方向に基づいて、スライダーのＧＵＩを描画するように命令する。
グラフィックス制御部１０６は、下方向を操作方向として、表示画面の左右方向（横方向）に延びるスライダーを描画することを決定する。グラフィックス制御部１０６はさらに、スライダーの左端を撮影距離の最小値である最短撮影距離に相当する焦点距離の最小値に設定する。グラフィックス制御部１０６はまた、スライダーの右端を撮影距離の最大値である無限遠に相当する焦点距離の最大値に設定する。グラフィックス制御部１０６は、ＣＰＵ１０１の命令に基づき、スライダーのビットマップデータを生成して表示制御部１０８に出力する。表示制御部１０８は、ビットマップデータに基づいて、スライダーを表示する。
【００３３】
Ｓ２１１において、ＣＰＵ１０１は、表示画面、すなわちディスプレイ１０９の左方向を操作方向と決定する。ここで、左方向とは、左に向かう程焦点距離が大きくなるような方向である。次に、Ｓ２１５において、ＣＰＵ１０１は、グラフィックス制御部１０６に対し、左方向の操作方向に基づいて、スライダーのＧＵＩを描画するように命令する。
グラフィックス制御部１０６は、左方向を操作方向として、表示画面の左右方向に延びるスライダーを描画することを決定する。グラフィックス制御部１０６はさらに、スライダーの右端を撮影距離の最小値である最短撮影距離に相当する焦点距離の最小値に設定する。グラフィックス制御部１０６はまた、スライダーの左端を撮影距離の最大値である無限遠に相当する焦点距離の最大値に設定する。グラフィックス制御部１０６は、ＣＰＵ１０１の命令に基づき、スライダーのビットマップデータを生成して表示制御部１０８に出力する。表示制御部１０８は、ビットマップデータに基づいて、スライダーを表示する。
なお、Ｓ２０５〜Ｓ２１１の処理は、操作方向特定処理の一例である。また、スライダーのＧＵＩは、入力受付画面の一例であり、Ｓ２１２〜Ｓ２１５の処理は、画像生成処理及び表示制御処理の一例である。
【００３４】
図１０は、操作方向決定処理により表示画面に表示されたスライダーの一例を示す図である。図１０には、ステップＳ２１０において表示された右方向を操作方向とするスライダー９１２を示している。
なお、図１０（ａ）に示すように、スライダー９１２のノブ９１１が左端に設定されている場合には、ディスプレイ１０９には、ＭＦＰのうち最短撮影距離に相当する焦点距離において得られた撮影画像Ａが表示される。ユーザは、リモコン１３０の操作ボタン１３３の右方向を連続的に押下することにより、スライダー９１２のノブ９１１を右方向にスライドさせることができる。スライダー９１２のノブ９１１が右方向にスライドすると、表示制御部１０８は、ユーザ入力により指定された撮影画像をディスプレイ１０９に表示する（表示制御処理）。ノブ９１１が右にスライドした場合には、図１０（ｂ）〜（ｅ）に示すように、ノブ９１１の位置に応じた焦点距離において撮影された撮影画像Ｂ〜Ｅが焦点距離の順番に沿って切り替わり、順にディスプレイ１０９に表示される。
また、ユーザは、リモコン１３０のタッチセンサ１３２において、指で左側から右側になぞることにより、操作ボタン１３３と同様にスライダー９１２のノブ９１１を右方向にスライドさせることができる。
【００３５】
図１０（ａ）〜（ｅ）に示すように、スライダー９１２を操作方向９２１〜９２５に移動させた場合に、ユーザの注意は、ディスプレイ１０９に表示される各撮影画像中においてピントの合った領域に向くことが多い。このため、ノブ９１１を操作して撮影画像を変化させた際のユーザの視線移動方向９３１〜９３５は、操作方向９２１〜９２５に沿ったものとなる。
このように、本実施形態にかかる映像表示ユニットにおいて、ＭＦＰの撮影画像を切り替えて閲覧する際に、ユーザは、操作方向に合わせて視線を移動させることとなるため、違和感を抱くことなく、操作を行うことができる。すなわち、本実施形態の映像表示ユニットにおいて、ユーザは、焦点距離に応じた撮影画像の切り替え操作を、違和感なく、より直観的に行うことができる。
【００３６】
なお、Ｓ２０４において算出された平均ベクトルがほぼ０である場合には、合焦位置の変化が少ない、変化の方向が拡散しているといった場合が考えられる。この場合には、ＣＰＵ１０１は、スライダーの操作方向としてデフォルトとして設定されている操作方向を設定することとする。
【００３７】
また、ユーザからの入力を受け付ける入力装置は、タッチセンサ１３２及び操作ボタン１３３に限定されるものではない。他の例としては、入力装置は、ダイヤルであってもよい。なお、この場合には、デフォルトのダイヤルの回転方向が予め設定されているものとする。
また、入力装置は、映像表示装置１００と一体に設けられていてもよい。例えば、映像表示装置１００がＰＣ等である場合には、入力装置は、ＰＣに接続されたキーボードやマウス等であってもよい。
【００３８】
（第２の実施形態）
次に、第２の実施形態にかかる映像表示装置について説明する。第２の実施形態にかかる映像表示装置２００は、タッチパネル１８０を備えている。そして、映像表示装置２００は、予め記憶しておいた複数の操作パターンの中から、焦点距離に応じた合焦位置の軌跡の変化方向に近似する操作パターンを判定する。ユーザが、タッチパネル１８０上において、指等で操作パターンをなぞると、ディスプレイ１０９に表示される撮影画像がユーザ入力に応じた焦点距離の撮影画像に切り替えられる。
【００３９】
図１１は、映像表示装置２００を示す図である。映像表示装置２００は、第１の実施形態にかかる映像表示装置１００と同様の構成である。すなわち、映像表示装置２００は、ＣＰＵ１０１と、ＲＡＭ１０２と、ＲＯＭ１０３と、記録媒体１０４と、デコーダ１０５と、グラフィックス制御部１０６と、ビデオメモリ１０７と、表示制御部１０８とを有している。映像表示装置２００はさらに、タッチパネル１８０と、操作制御部１７０と、操作パターン候補記憶部１６０とを有している。
タッチパネル１８０は、座標検出可能な入力装置であるタッチパッド１５０とディスプレイ１０９を組み合わせた装置である。ユーザがタッチパネル１８０上を指で触れることにより、タッチパッド１５０は、タッチパネル１８０への入力を検知する。すなわち、ユーザは、タッチパネル１８０を指でタッチすることにより、焦点距離の切り替え等の指示を入力することができる。
【００４０】
図１２は、タッチ入力例を示す図である。例えば、映像表示装置２００は、タッチパネル１８０において、ユーザにより操作パターン１０１０が指でなぞられた場合に、入力に応じた撮影画像の切替指示を受け付け、焦点距離を連続的に切り替えることができる。より具体的には、操作パターン１０１０の矢印方向に沿った移動距離が大きくなる程、焦点距離の大きい撮影画像がディスプレイ１０９に表示される。
操作制御部１７０は、タッチパッド１５０から入力された座標情報の信号をＣＰＵ１０１が解釈できる通信コマンドに変換し、ＣＰＵ１０１に通知する。操作パターン候補記憶部１６０は、指定した焦点距離に応じた画像切換時のタッチパネル１８０操作の軌跡のパターンを記憶している。
【００４１】
図１３は、操作パターン候補記憶部１６０が記憶する操作パターン候補の一例を示す図である。本実施形態にかかる操作パターン候補記憶部１６０は、４つの操作パターン候補Ａ〜Ｄを記憶している。なお、操作パターン候補Ａは、ディスプレイ１０９の右下から左上方向に向けて曲線を描くパターンである。同様に、操作パターン候補Ｂ〜Ｄは、それぞれ異なる方向に向けて曲線を描くパターンである。操作パターン候補Ａ〜Ｄは、操作方向候補の一例である。
なお、操作パターン候補の方向及び操作パターン候補の軌跡の形状は、実施の形態に限定されるものではない。操作パターン候補は、例えば、図１０に示すようなディスプレイ１０９の左右方向に直線状に延びるパターンであってもよい。また、操作パターン候補記憶部１６０が格納する操作パターンの数は、実施の形態に限定されるものではない。
【００４２】
図１４は、第２の実施形態にかかる映像表示装置２００による、操作方向決定処理を示すフローチャートである。映像表示装置２００は、操作方向決定処理において、操作パターン候補の中から、ユーザがタッチパネル１８０において描画すべき操作パターンを決定する。なお、Ｓ２０１〜Ｓ２０３の処理は、図７を参照しつつ説明したＳ２０１〜Ｓ２０３の処理と同様である。
次に、Ｓ２２０において、ＣＰＵ１０１は、Ｓ２０３におけるソート結果に基づいて、合焦位置軌跡を算出する。具体的には、ＣＰＵ１０１はまず、ソートされた各撮影画像の合焦位置をソート順に結ぶことにより得られた線を合焦位置軌跡として算出する。これにより、例えば、図８に示す４つのベクトルを結ぶ線が合焦位置軌跡として得られる。なお、ＣＰＵ１０１は、さらに合焦位置軌跡において合焦位置のソート順に応じた方向も特定する。合焦位置軌跡の方向は、例えば図８に示す４つのベクトルそれぞれの方向である。ここで、Ｓ２２０は、撮影画像内、すなわち２次元面内における合焦位置軌跡の方向を特定する変化方向特定処理の一例である。
【００４３】
次に、Ｓ２２１において、ＣＰＵ１０１は、合焦位置軌跡及び合焦位置軌跡の方向を、操作パターン候補記憶部１６０に記憶されている操作パターン候補と比較する。そして、ＣＰＵ１０１は、操作パターン候補の中から、合焦位置軌跡及びその方向に最も類似する操作パターン候補を選択する。
具体的には、合焦位置軌跡を構成する各点の座標値の相対的な関係と、各操作パターンに含まれる各点の座標値の相対的な関係とが類似するか否かに基づいて、操作パターン候補と合焦位置軌跡とが類似するか否かを判定する。なお、本実施形態においては、ＣＰＵ１０１は、合焦位置軌跡に最も類似する操作パターン候補を特定することとする。
【００４４】
合焦位置軌跡が操作パターン候補Ａに最も類似する場合には（Ｓ２２２，ＹＥＳ）、ＣＰＵ１０１は、処理をＳ２２５へ進める。合焦位置軌跡が操作パターン候補Ｂに最も類似する場合には、（Ｓ２２２，ＮＯ、Ｓ２２３，ＹＥＳ）、ＣＰＵ１０１は、処理をＳ２２６へ進める。合焦位置軌跡が操作パターン候補Ｃに最も類似する場合には（Ｓ２２２，ＮＯ、Ｓ２２３，ＮＯ、Ｓ２２４，ＹＥＳ）、ＣＰＵ１０１は、処理をＳ２２７へ進める。
【００４５】
合焦位置軌跡が操作パターン候補Ｄに最も類似する場合には（Ｓ２２２，ＮＯ、Ｓ２２３，ＮＯ、Ｓ２２４，ＮＯ）、ＣＰＵ１０１は、処理をＳ２２８へ進める。なお、Ｓ２２１〜Ｓ２２４は、合焦位置軌跡に基づいて操作方向を決定する操作方向決定処理の一例である。
Ｓ２２５において、ＣＰＵ１０１は、合焦位置軌跡に最も類似する操作パターン候補Ａを操作パターンとして設定する。そして、ＣＰＵ１０１は、グラフィックス制御部１０６に対し、操作パターン候補Ａを操作パターンとしてタッチパネル１８０のディスプレイ１０９に描画するように命令する。そして、グラフィックス制御部１０６は、ＣＰＵ１０１の命令に基づき、操作パターン候補Ａのビットマップデータを生成して表示制御部１０８に出力する。表示制御部１０８は、ビットマップデータに基づいて、操作パターン候補Ａを操作パターンとして表示する。
【００４６】
Ｓ２２６〜Ｓ２２８において、ＣＰＵ１０１は、それぞれ合焦位置に最も類似する操作パターンＢ〜Ｄを操作パターンとして設定する。そして、Ｓ２２６〜Ｓ２２８において、それぞれディスプレイ１０９に操作パターン候補Ｂ〜Ｄが操作パターンとして表示される。なお、操作パターン候補は、入力受付画像の一例であり、Ｓ２２５〜Ｓ２２８は、画像生成処理の一例である。
例えば、Ｓ２２７において操作パターン候補Ｃが操作パターンとして表示された場合には、図１２に示すような操作パターン１０１０が表示される。操作パターン１０１０の矢印と逆方向が最短撮影距離、矢印方向が撮影距離無限遠に対応している。ユーザは、タッチパネル１８０に表示された操作パターンを指でなぞることによって、ディスプレイ１０９に表示される撮影画像を焦点距離に応じて切り替えて表示することができる。
【００４７】
なお、この場合、ユーザがなぞった指の座標情報は、タッチパッド１５０により検出され、操作制御部１７０に通知される。そして、ＣＰＵ１０１は、設定した操作パターンに沿って指がなぞられた場合に、タッチパネル１８０の座標に応じて、操作パターン１０１０に対応した焦点距離の撮影画像を表示する。すなわち、図１２示す操作パターン１０１０においては、ユーザは、左側から右側に時計周り方向にタッチパネル１８０をなぞることによって、撮影画像の焦点距離が大きくなるように、撮影画像を順次切り替えて表示することができる。合焦位置軌跡が操作パターン候補のいずれとも類似しない場合には、ＣＰＵ１０１は、最も近い操作パターン候補又はデフォルトの操作パターン候補を選択することとしてもよい。
なお、第２の実施形態にかかる映像表示装置２００のこれ以外の構成及び処理は、第１の実施形態にかかる映像表示ユニットの構成及び処理と同様である。
【００４８】
第２の実施形態においては、タッチパッド１５０へ操作パターンの入力を例に説明したが、他の例としては、映像表示装置２００は、タッチパッド１５０への入力に替えて、ユーザはジェスチャーにより操作パターンの入力を行ってもよい。この場合には、映像表示装置２００は、ユーザによる手の動きを検出する赤外線センサを備えることとする。
また、他の例としては、映像表示装置２００は、ダイヤル式のハードキーを備えることとしてもよい。この場合には、ユーザは、ハードキーを操作パターンに沿って操作すればよい。
【００４９】
このように、第２の実施形態にかかる映像表示装置２００は、タッチパッド１５０のような座標入力系において、視線移動方向に沿った操作方向を有する操作パターンを表示することができる。これにより、ユーザは、違和感を抱くことなく操作を行うことができる。すなわち、本実施形態の映像表示装置において、ユーザは、焦点位置に応じた撮影画像の切り替え操作を、違和感なく、より直観的に行うことができる。
【００５０】
（第３の実施形態）
次に、第３の実施形態にかかる映像表示ユニットについて説明する。第３の実施形態にかかる映像表示ユニットは、撮影画像の合焦位置が格納されていない場合、すなわち、撮影画像のＥＸＩＦに合焦位置の情報が記述されていない場合に、各撮影画像の合焦位置を特定する。すなわち、第３の実施形態にかかる映像表示装置１００は、図７に示すＳ２０２に替えて、以下に示す合焦位置算出処理を実行する。
図１５は、第３の実施形態にかかる映像表示装置１００による合焦位置算出処理を示すフローチャートである。Ｓ１３０１において、ＣＰＵ１０１は、図５に示すセンサ領域６０１に対応するブロック単位の評価領域を取得する。そして、ＣＰＵ１０１は、左上角の評価領域を合焦位置の初期値に設定し、撮影画像中のすべての評価領域を対象として、以下に示すＳ１３０２〜Ｓ１３０７の処理を繰り返す。
【００５１】
次に、Ｓ１３０２において、ＣＰＵ１０１は、対象とする評価領域においてＭＦＰの撮影画像の中で最もコントラスト値が高い画像を判定する。つまり、ＭＦＰの画像数分だけＳ１３０３〜Ｓ１３０４のコントラストの判定処理を繰り返す。ここで、ＣＰＵ１０１は、評価領域の最大コントラスト値の初期値として、ＭＦＰの先頭の撮影画像、すなわち最短撮影距離に対応する撮影画像のコントラスト値を設定する。例えば、図６に示すＭＦＰを処理対象とする場合には、撮影画像Ａが最短撮影距離に対応する撮影画像である。
次に、Ｓ１３０３において、ＣＰＵ１０１は、撮影画像Ａの次の撮影画像のコントラスト値を取得する。ＣＰＵ１０１は、取得した、次の撮影画像のコントラスト値と最大コントラスト値とを比較して、いずれの値が大きいかを判定する。Ｓ１３０３において、次の撮影画像のコントラスト値が最大コントラスト値に比べて大きい場合には（Ｓ１３０３，ＹＥＳ）、ＣＰＵ１０１は、処理をＳ１３０４へ進める。
例えば、図５の枠６０２に対応する評価領域に対し、撮影画像Ａのコントラスト値が最大値として設定されていた場合に、撮影画像Ａの次の撮影画像の枠６０２に対応する評価領域のコントラスト値が、最大コントラスト値と比較される。
【００５２】
次に、Ｓ１３０４において、ＣＰＵ１０１は、最大コントラスト値と比較された、対象コントラスト値を最大コントラスト値として設定する。このように、各撮影画像のコントラスト値を順次最大コントラスト値と比較し、最大コントラスト値を更新することにより、評価領域においてＭＦＰの中で最も高いコントラスト値を示す撮影画像が特定される。
次に、Ｓ１３０５において、ＣＰＵ１０１は、最大コントラスト値が予め定めた閾値よりも高いか否かを判定する。この閾値判定により、ＣＰＵ１０１は、評価領域が、被写体にピントがあっている注目領域であるか、ピントが合っていない領域であるかを判定する。最大コントラスト値が閾値よりも高いと判定した場合には、ＣＰＵ１０１は、処理をＳ１３０６へ進める。最大コントラスト値が閾値以下であると判定した場合には、ＣＰＵ１０１は、処理をＳ１３０７へ進める。
【００５３】
Ｓ１３０６において、ＣＰＵ１０１は、処理対象の評価領域を最大コントラスト値として設定されている撮影画像の合焦位置として設定する。設定された合焦位置は、第１の実施形態において、撮影画像のＥＸＩＦから取得される合焦位置と同様に扱うことができる。１つの撮影画像中に、コントラスト値が高い評価領域が複数存在する場合には、ＣＰＵ１０１は、その評価領域の中で最もコントラスト値が高い評価領域を合焦位置として設定する。
また、他の例としては、ＣＰＵ１０１は、コントラスト値が高い評価領域が複数存在する場合には、複数の評価領域の重心を合焦位置として設定してもよい。
Ｓ１３０７において、ＣＰＵ１０１は、処理対象の評価領域をピントの合っていない領域として設定する。例えば、図５に示すセンサ領域６０１に対応する評価領域がピントの合っていない領域として設定される。
【００５４】
このように、第３の実施形態にかかる映像表示装置１００は、評価領域ごとにＭＦＰの中で最もコントラスト値が高い画像を判定する画像解析により合焦位置を特定する。したがって、映像表示装置１００は、画像のＥＸＩＦに合焦位置の情報が存在しない場合においても、操作方向を特定することができる。
なお、第３の実施形態にかかる映像表示システムのこれ以外の構成及び処理は、第１の実施形態にかかる映像表示システムの構成及び処理、又は第２の実施形態にかかる映像表示装置の構成及び処理と同様である。
【００５５】
＜その他の実施形態＞
上記の実施例においては、１つのファイル内に焦点距離を変えた複数の画像データを含んでいたが、このようなファイル形式に限るものではなく、焦点距離の異なる複数の画像を扱うものであればファイル形式は問わない。
また、１画像毎に別のファイルとして記録されていても良い。
【００５６】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【００５７】
以上、上述した各実施形態によれば、ユーザは、焦点距離に応じた撮影画像の切り替えを違和感なく指示することができる。
【００５８】
以上、本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
【符号の説明】
【００５９】
１００  映像表示装置、１０１  ＣＰＵ、１０２  ＲＡＭ、１０３  ＲＯＭ、１０４  記録媒体、１０５  デコーダ、１０６  グラフィックス制御部、１０７  ビデオメモリ、１０８  表示制御部、１０９  ディスプレイ、１３０  リモコン、１３２  タッチセンサ、１３３  操作ボタン
【図１】
2014215693.tif 000003
【図２】
2014215693.tif 000004
【図３】
2014215693.tif 000005
【図４】
2014215693.tif 000006
【図５】
2014215693.tif 000007
【図６】
2014215693.tif 000008
【図７】
2014215693.tif 000009
【図８】
2014215693.tif 000010
【図９】
2014215693.tif 000011
【図１０】
2014215693.tif 000012
【図１１】
2014215693.tif 000013
【図１２】
2014215693.tif 000014
【図１３】
2014215693.tif 000015
【図１４】
2014215693.tif 000016
【図１５】
2014215693.tif 000017
【図１６】
2014215693.tif 000018