(57)【要約】【課題】立体表示の際に使用する２枚の画像を選ぶ際に参考となる座標情報を記録しておき、立体表示に適した画像を自動的に選択可能にすることを目的とする。【解決手段】ＣＰＵ１９は、画素数に換算された視差Ｐ’が、立体表示装置２００での立体画像の鑑賞に適した目標の画素範囲内（Ｍ≦Ｐ’≦Ｎ）となる単視点画像の組合せを決定する。そして、視差Ｐ’が目標の画素範囲内となる単視点画像の組合せを示す情報を、立体表示情報として記録メディア３８に記録する。【選択図】  図１
2008172342.tif 000002
【特許請求の範囲】
【請求項１】
複数の立体表示用画像の記録および読み出しが可能な記録読出部と、
前記記録読出部により読み出された複数の立体表示用画像中の各々から、特定パターンを検出する検出部と、
前記検出部の検出した特定パターンの座標を検出する座標検出部と、
前記複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々から検出された特定パターンの座標ならびに前記第１の画像および前記第２の画像の各々の画素数に基づき、前記第１の画像および前記第２の画像の視差量を算出する視差量算出部と、
前記視差量算出部で算出した視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別する立体表示用画像判別部と、を備え、
前記記録読出部は、前記立体表示用画像判別部により、前記立体視に適した視差量に相当する画像の組合せが存在する場合、前記立体視に適した視差量を前記画像の組合せに対応づけて記録することを特徴とする立体画像記録装置。
【請求項２】
複数の立体表示用画像の記録および読み出しが可能な記録読出部と、
前記記録読出部により読み出された複数の立体表示用画像に対応づけて記録されている、特定パターンの座標の情報を抽出する特定パターン情報抽出部と、
前記複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々に対応する特定パターンの座標の情報ならびに前記第１の画像および前記第２の画像の各々の画素数に基づき、前記第１の画像および前記第２の画像の視差量を算出する視差量算出部と、
前記視差量算出部で算出した視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別する立体表示用画像判別部と、を備え、
前記記録読出部は、前記立体表示用画像判別部により、前記立体視に適した視差量に相当する画像の組合せが存在する場合、前記立体視に適した視差量を前記画像の組合せに対応づけて記録することを特徴とする立体画像記録装置。
【請求項３】
撮影レンズを介して受光した被写体光を立体表示用画像に変換して出力する撮影部と、
前記撮影部から出力された複数の立体表示用画像の記録および読み出しが可能である記録読出部と、
前記記録読出部により読み出された前記複数の立体表示用画像中の各々から、特定パターンを検出する検出部と、
前記検出部の検出した特定パターンの座標を検出する座標検出部と、
前記複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々から検出された特定パターンの座標ならびに前記第１の画像および前記第２の画像の各々の画素数に基づき、前記第１の画像および前記第２の画像の視差量を算出する視差量算出部と、
前記視差量算出部で算出した視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別する立体表示用画像判別部と、を備え、
前記記録読出部は、前記立体表示用画像判別部により、前記立体視に適した視差量に相当する画像の組合せが存在する場合、前記立体視に適した視差量を前記画像の組合せに対応づけて記録することを特徴とする立体画像記録装置。
【請求項４】
前記特定パターンは、人間の顔もしくは前記顔の構成部分を含む請求項１から３のいずれかに記載の立体画像記録装置。
【請求項５】
あらかじめ用意された所定の複数のパターンの中から、前記特定パターンとして所望のパターンを選択可能なパターン選択部をさらに備え、
前記検出部は、前記パターン選択部の選択したパターンを前記特定パターンとして検出する請求項１から３のいずれかに記載の立体画像記録装置。
【請求項６】
前記検出部は、あらかじめ用意された所定の複数のパターンの全てを、前記特定パターンとして検出する請求項１から３のいずれかに記載の立体画像記録装置。
【請求項７】
複数の立体表示用画像の記録および読み出しを行うステップと、
読み出された複数の立体表示用画像中の各々から、特定パターンを検出するステップと、
検出された特定パターンの座標を検出するステップと、
前記複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々から検出された特定パターンの座標ならびに前記第１の画像および前記第２の画像の各々の画素数に基づき、前記第１の画像および前記第２の画像の視差量を算出するステップと、
算出された視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別するステップと、
前記立体視に適した視差量に相当する画像の組合せが存在する場合、前記立体視に適した視差量を前記画像の組合せに対応づけて記録するステップと、
を含むことを特徴とする立体画像記録方法。
【請求項８】
複数の立体表示用画像の記録および読み出しを行うステップと、
読み出された複数の立体表示用画像に対応づけて記録されている、特定パターンの座標の情報を抽出するステップと、
前記複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々に対応する特定パターンの座標の情報ならびに前記第１の画像および前記第２の画像の各々の画素数に基づき、前記第１の画像および前記第２の画像の視差量を算出するステップと、
算出された視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別するステップと、
前記立体視に適した視差量に相当する画像の組合せが存在する場合、前記立体視に適した視差量を前記画像の組合せに対応づけて記録するステップと、
を含むことを特徴とする立体画像記録方法。
【請求項９】
撮影レンズを介して受光した被写体光を立体表示用画像に変換して出力するステップと、
出力された複数の立体表示用画像の記録および読み出しを行うステップと、
読み出された前記複数の立体表示用画像中の各々から、特定パターンを検出するステップと、
検出された特定パターンの座標を検出するステップと、
前記複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々から検出された特定パターンの座標ならびに前記第１の画像および前記第２の画像の各々の画素数に基づき、前記第１の画像および前記第２の画像の視差量を算出するステップと、
算出された視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別するステップと、
前記立体視に適した視差量に相当する画像の組合せが存在する場合、前記立体視に適した視差量を前記画像の組合せに対応づけて記録するステップと、
を含むことを特徴とする立体画像記録方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は立体画像の撮影ないし表示に関する。
【背景技術】
【０００２】
特許文献１によると、ステレオ撮影方式を用いて、三次元運動情報を検出する際に、一方の画像を指定して、他方の画像から、同一個所と推定される点を検出し、その後、指定した部位の動きを両方の画像内で追跡する。どの点の動きを検出するかを指定する方法の一態様として、撮影者の視線を検出し、視線の先にある点を指定している。
【０００３】
また、特許文献２に示すように、従来、立体表示に使用する画像を撮影する方法として、被写体の周囲に複数のカメラを設置して、同時に撮影する方法（複眼ステレオ法）がある。
【０００４】
あるいは、図６に示すように、立体表示に使用する画像を撮影する方法として、被写体の周囲を移動しながら、１台のカメラで撮影する方法（モーションステレオ法）がある。
【０００５】
このようにして撮影した多数の画像の利用法として、３Ｄモデルの作成やレンチキュラー印刷がある。他方、視点の異なる２枚の画像を使用して、立体表示が可能である。つまり、多視点で撮影された画像群から、適切な２枚の画像を選び出すことで、立体表示が可能になる。
【特許文献１】特開２０００−１８２０５８号公報
【特許文献２】特許２６１１１７３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上述のような、立体表示に使用する２枚の画像を選択する際に、多数の画像の中から、どの画像が最適であるのか、人間が選び出すと、大変な手間がかかる。つまり、立体表示の適否を判断する場合でも、どの画素の視差を重視すべきか、人間が指定する必要がある。
【０００７】
そこで本発明は、立体表示の際に使用する２枚の画像を選ぶ際に参考となる座標情報を記録しておき、立体表示に適した画像を自動的に選択可能にすることを目的とする。
【課題を解決するための手段】
【０００８】
本発明に係る立体画像記録装置は、複数の立体表示用画像の記録および読み出しが可能な記録読出部と、記録読出部により読み出された複数の立体表示用画像中の各々から、特定パターンを検出する検出部と、検出部の検出した特定パターンの座標を検出する座標検出部と、複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々から検出された特定パターンの座標ならびに第１の画像および第２の画像の各々の画素数に基づき、第１の画像および第２の画像の視差量を算出する視差量算出部と、視差量算出部で算出した視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別する立体表示用画像判別部と、を備え、記録読出部は、立体表示用画像判別部により、立体視に適した視差量に相当する画像の組合せが存在する場合、立体視に適した視差量を画像の組合せに対応づけて記録する。
【０００９】
この発明によると、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せが自動的に判別され、その組合せと視差量とが対応づけて記録される。このため、所望の立体表示用装置において、記録された組合せと視差量に基づき、立体表示に適した２枚の画像の選択を自動的に行うことができる。
【００１０】
また、本発明に係る立体画像記録装置は、複数の立体表示用画像の記録および読み出しが可能な記録読出部と、記録読出部により読み出された複数の立体表示用画像に対応づけて記録されている、特定パターンの座標の情報を抽出する特定パターン情報抽出部と、複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々に対応する特定パターンの座標の情報ならびに第１の画像および第２の画像の各々の画素数に基づき、第１の画像および第２の画像の視差量を算出する視差量算出部と、視差量算出部で算出した視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別する立体表示用画像判別部と、を備え、記録読出部は、立体表示用画像判別部により、立体視に適した視差量に相当する画像の組合せが存在する場合、立体視に適した視差量を画像の組合せに対応づけて記録する。
【００１１】
また、本発明に係る立体画像記録装置は、撮影レンズを介して受光した被写体光を立体表示用画像に変換して出力する撮影部と、撮影部から出力された複数の立体表示用画像の記録および読み出しが可能である記録読出部と、記録読出部により読み出された複数の立体表示用画像中の各々から、特定パターンを検出する検出部と、検出部の検出した特定パターンの座標を検出する座標検出部と、複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々から検出された特定パターンの座標ならびに第１の画像および第２の画像の各々の画素数に基づき、第１の画像および第２の画像の視差量を算出する視差量算出部と、視差量算出部で算出した視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別する立体表示用画像判別部と、を備え、記録読出部は、立体表示用画像判別部により、立体視に適した視差量に相当する画像の組合せが存在する場合、立体視に適した視差量を画像の組合せに対応づけて記録する。
【００１２】
特定パターンは、人間の顔もしくは顔の構成部分を含むことが好ましい。
【００１３】
あらかじめ用意された所定の複数のパターンの中から、特定パターンとして所望のパターンを選択可能なパターン選択部をさらに備え、検出部は、パターン選択部の選択したパターンを特定パターンとして検出してもよい。
【００１４】
検出部は、あらかじめ用意された所定の複数のパターンの全てを、特定パターンとして検出することが好ましい。
【００１５】
本発明に係る立体画像記録方法は、複数の立体表示用画像の記録および読み出しを行うステップと、読み出された複数の立体表示用画像中の各々から、特定パターンを検出するステップと、検出された特定パターンの座標を検出するステップと、複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々から検出された特定パターンの座標ならびに第１の画像および第２の画像の各々の画素数に基づき、第１の画像および第２の画像の視差量を算出するステップと、算出された視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別するステップと、立体視に適した視差量に相当する画像の組合せが存在する場合、立体視に適した視差量を画像の組合せに対応づけて記録するステップとを含む。
【００１６】
本発明に係る立体画像記録方法は、複数の立体表示用画像の記録および読み出しを行うステップと、読み出された複数の立体表示用画像に対応づけて記録されている、特定パターンの座標の情報を抽出するステップと、複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々に対応する特定パターンの座標の情報ならびに第１の画像および第２の画像の各々の画素数に基づき、第１の画像および第２の画像の視差量を算出するステップと、算出された視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別するステップと、立体視に適した視差量に相当する画像の組合せが存在する場合、立体視に適した視差量を画像の組合せに対応づけて記録するステップと、を含む。
【００１７】
本発明に係る立体画像記録方法は、撮影レンズを介して受光した被写体光を立体表示用画像に変換して出力するステップと、出力された複数の立体表示用画像の記録および読み出しを行うステップと、読み出された複数の立体表示用画像中の各々から、特定パターンを検出するステップと、検出された特定パターンの座標を検出するステップと、複数の立体表示用画像に含まれる異なる２つの立体表示用画像である第１の画像および第２の画像の各々から検出された特定パターンの座標ならびに第１の画像および第２の画像の各々の画素数に基づき、第１の画像および第２の画像の視差量を算出するステップと、算出された視差量に基づき、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せを判別するステップと、立体視に適した視差量に相当する画像の組合せが存在する場合、立体視に適した視差量を画像の組合せに対応づけて記録するステップと、を含む。
【発明の効果】
【００１８】
この発明によると、所望の立体表示用装置による立体視に適した視差量に相当する第１の画像および第２の画像の組合せが自動的に判別され、その組合せと視差量とが対応づけて記録される。このため、所望の立体表示用装置において、記録された組合せと視差量に基づき、立体表示に適した２枚の画像の選択を自動的に行うことができる。
【発明を実施するための最良の形態】
【００１９】
＜第１実施形態＞
図１は、本発明に係るカメラ１を用いて多視点画像を記録する様子を例示している。この図に示す撮影方式は、いわゆるモーションステレオ法であり、カメラ１を、ある被写体ＯＢの周囲に設けられた異なる視点位置に順次移動させつつ、異なる視点位置での撮影を繰り返すことで、各視点で得られた画像（単視点画像）からなる画像群である多視点画像ＩＭを得るものである。モーションステレオ法は、２台以上のカメラを用いる複眼ステレオ法による撮影より、装置が簡単で小さく、経済的であり、またカメラ１のピント等撮影条件の調整が容易である。
【００２０】
カメラ１は、各単視点画像を記録する画像ファイルのタグ情報として、カメラ１の識別情報（カメラＩＤ）、多視点画像ＩＭの識別情報である画像ＩＤ、各単視点画像の連続番号である画像番号、単視点画像から得られた特定パターン（ここでは顔）の位置座標などを含む。
【００２１】
単視点画像は、各々独立したファイルに記録されるが、モーションステレオ法による連続撮影で得られた一連の画像であることは、共通の画像ＩＤで識別できる。
【００２２】
特定パターンの位置座標は、カメラ１のパターン検出回路４０によって算出される。特定パターンの位置座標を格納するタグ情報格納部分は、Ｅｘｉｆ方式等で通常設けられているものとは異なる独自のものであってもよい。なお、第１画像ファイルおよび第２画像ファイルには、特定パターンとして顔が選択されたことを示す情報をさらに格納してもよい。
【００２３】
カメラ１は、立体表示に適した単視点画像の組合せの情報を、立体表示情報として記録する。
【００２４】
図２は、本発明に係るカメラ１のブロック図である。カメラ１の撮像装置２は、フォーカスレンズおよびズームレンズを含む撮影レンズ、絞り、イメージセンサ、レンズモータ、アイリスモータ、タイミングジェネレータ（ＴＧ）等を備えており、シャッターボタン５の押下に応じ、撮影レンズを介して受光した被写体光をイメージセンサにて光電変換して、記録用の画像信号を出力する。各種モータやＴＧの動作は制御装置１８によって制御される。
【００２５】
撮像装置２は、画像信号処理回路とＡ／Ｄ変換器を備え、イメージセンサからの画像信号に対し、階調変換、ホワイトバランス補正、γ補正処理などの各種画像処理を施し、デジタル画像データに変換する。このデジタル画像データは、一時記憶装置（フレームメモリ）３２にて一時的に格納される。
【００２６】
記録装置３６は、一時記憶装置３２に記憶された画像データに対して、ＪＰＥＧ方式等の所定の圧縮形式に従って圧縮処理を施し、圧縮処理された各画像データをメモリカード等の記録メディア３８に記録する。
【００２７】
なお、上記の動作は、モードスイッチ９により撮影モードが選択された場合に実行される。
【００２８】
パターン検出回路４０は、フレームメモリ３２に格納された画像データから被写体中の特定パターンの検出を試みる。そして、特定パターンの検出をすることができた場合、画像データから検出された、被写体の特定パターンの位置座標（ｘ，ｙ）を算出する。特定パターンの位置座標（ｘ，ｙ）は、演算装置（ＣＰＵ）１９へ送信される。
【００２９】
ここで、被写体の特定パターンとは、顔や目その他の人体の構成部位、ビルその他の建物、犬その他の動物、車、花などのうち少なくとも１つを含む。これらのパターンのうち、任意の１または複数のパターンを特定パターンとして検出するかを、入力操作を介してユーザが選択できるようにしてもよい。
【００３０】
また、ユーザが特定パターンを選択しない場合は、予めＥＥＰＲＯＭ３９に用意された、顔、物体、動物、車、花などの異なる複数パターンの全てについて、検出を試みてもよい。
【００３１】
以下、説明の便宜上、パターン検出回路４０で検出される被写体の特定パターンは、人間の顔もしくは顔の構成部分（目、鼻、口など）であるとする。ただし、その他の特定パターンが検出されてもよい。
【００３２】
図３は、本発明に係る立体画像表示装置２００のブロック図である。立体画像表示装置２００は、ＣＰＵ２１９、入力操作部２０９、記録メディア３８、メディアコントローラ２３７、フレームメモリ２３２、立体画像処理回路２３４、ＬＣＤドライバ２３５、ＬＣＤ２１０を備えている。
【００３３】
入力操作部２０９は、メニューボタンやカーソルボタンなどからなり、適宜操作により、電源のオン／オフ、各種モードや表示画像の切り替えが行われる。
【００３４】
立体画像処理回路２３４は、記録メディア３８に格納されている画像データを、ＬＣＤ２１０が立体表示を行うための立体画像データに合成する。
【００３５】
ＬＣＤ２１０は、パララックスバリア式、あるいはレンチキュラーレンズ式の３Ｄモニタであり、記録メディア３８から読み出した２枚の画像データに基づいて立体表示を行う。
【００３６】
ＣＰＵ２１９は、立体画像表示装置２００の全体の動作を統括的に制御する。ＣＰＵ２１９には、前述のシャッターボタン５、入力操作部９のほか、不揮発性メモリであるＥＥＰＲＯＭ２３９が接続されている。ＥＥＰＲＯＭ２３９は、各種制御用のプログラムや設定情報などを格納している。ＣＰＵ２１９は、このプログラムや設定情報に基づいて各種処理を実行する。
【００３７】
記録メディア３８に記録された画像データをＬＣＤ２１０に再生表示する場合、記録メディア３８の各画像データは、メディアコントローラ２３７によって読み出され、立体画像処理回路２３４によって立体画像データに変換された後、ＬＣＤドライバ２３５を介してＬＣＤ２１０に再生画像として表示される。
【００３８】
ＬＣＤ２１０の詳細な構造は図示しないが、ＬＣＤ２１０は、その表面にパララックスバリア表示層を備えている。ＬＣＤ２１０は、立体表示を行う際に、パララックスバリア表示層に光透過部と光遮蔽部とが交互に所定のピッチで並んだパターンからなるパララックスバリアを発生させるとともに、その下層の画像表示面に左右の像を示す短冊状の画像断片を交互に配列して表示することで立体視を可能にする。
【００３９】
なお、立体視を可能にする表示装置の構成は、スリットアレイシートを用いるパララックス方式に限られる必然性はなく、レンチキュラーレンズシートを用いるレンチキュラー方式、マイクロレンズアレイシートを用いるインテグラルフォトグラフィ方式、干渉現象を用いるホログラフィー方式などが採用されてもよい。
【００４０】
また、ＬＣＤ２１０は、必ずしも立体画像表示装置２００に内蔵されている必然性はなく、外部の表示装置を用いてもよい。
【００４１】
以下、図４のフローチャートを参照し、カメラ１の実行する立体表示情報作成処理の流れを説明する。この処理は、モードスイッチ９から「連続撮影モード」が選択された場合に開始する。
【００４２】
Ｓ１では、ＣＰＵ１９は、モードスイッチ９により「連続撮影モード」の選択が解除されたか否かを判断する。「連続撮影モード」の選択が解除されていない場合はＳ２、「連続撮影モード」の選択が解除された場合はＳ５に移行する。
【００４３】
Ｓ２では、モーションステレオ法により、同一被写体ＯＢを各視点から所定枚数（例えば２４枚）だけ連続撮影（いわゆる連写）し、各視点画像を格納した画像ファイルを作成する。  
【００４４】
Ｓ３では、パターン検出回路４０は、各視点画像から特定パターンを検出し、検出された特定パターンの位置座標（ｘ，ｙ）を算出する。特定パターンの位置座標（ｘ，ｙ）は、ＣＰＵ１９へ送信される。
【００４５】
例えば、図５に示すような２つの視点画像である左目画像ＩＬおよび右目画像ＩＲが一時記憶装置３２に格納された場合、パターン検出回路４０は、この左目画像ＩＬおよび右目画像ＩＲから、それぞれ顔ＦＬおよび顔ＦＲを検出し、さらに顔ＦＬの代表点の座標Ｘ２および顔ＦＲの代表点Ｘ１を算出する。顔の代表点は、顔を被覆する最小面積の矩形領域の中心であってもよいし、顔に含まれる目や鼻などの代表的な顔の構成部分の存在位置などでもよい。
【００４６】
Ｓ４では、ＣＰＵ１９は、パターン検出回路４０から受信した視点画像ごとの代表点の座標を、各視点画像の画像ファイルのタグ情報格納部分に記録するよう、記録装置３６を制御する。これにより、図１に示したように、単視点画像中の特定パターンの存在位置が、単視点画像データとともに画像ファイルに格納される。
【００４７】
Ｓ５では、ＣＰＵ１９は、単視点画像が２枚以上撮影されたか否かを判断する。撮影された場合はＳ６に進む。なお、撮影されていない場合は、所定枚数に達するまで、連写を続行する。
【００４８】
Ｓ６では、ＣＰＵ１９は、記録装置３６に記録された単視点画像について、重複しない２枚の単視点画像の全ての組合せを決定する。つまり、ｎ枚の単視点画像から、Ｃ（ｎ，２）個の組合せが決定される。ＣＰＵ１９は、決定した組合せに従い、各組合せに該当する単視点画像を順次読み出し、読み出された単視点画像の組合せにおける特定パターンの位置座標の差異に基づいて特定パターンの視差Ｐを算出する。
【００４９】
例えば、図５に示すような左目画像ＩＬおよび右目画像ＩＲの画像ファイルの組合せに従い、顔ＦＬの位置座標Ｘ１および顔ＦＲの位置座標Ｘ２がタグ情報から読み出された場合は、ＣＰＵ１９は、この顔ＦＬの座標Ｘ１から顔ＦＲの座標Ｘ２を減じることで、両画像の視差Ｐ＝Ｘ１−Ｘ２を算出する。なお、視差の単位は、メートル、インチ、ヤード等の標準的な測長単位であるとする。
【００５０】
Ｓ７では、ＣＰＵ１９は、各組の視差Ｐを、立体表示装置２００のＬＣＤ２１０での画素数Ｐ’に換算する。例えば、
ピクセル単位の視差量Ｐ’＝メートル単位の視差量Ｐ×ＬＣＤ２１０の水平方向の全ピクセル数／メートル単位のＬＣＤ２１０の水平方向の画像呈示面サイズ
という換算式をＥＥＰＲＯＭ３９に記録しておき、これを用いて、メートル単位の視差Ｐを、ピクセル単位のＰ’に換算する。なお、立体表示装置２００の種類は単一である必要はなく、複数であってもよい。この場合、各種類ごとの換算式を用意すればよい。
【００５１】
そして、ＣＰＵ１９は、画素数に換算された視差Ｐ’が、立体表示装置２００での立体画像の鑑賞に適した目標の画素範囲内（Ｍ≦Ｐ’≦Ｎ）となる単視点画像の組合せを決定する。
【００５２】
ここで、Ｍは視差の範囲の下限閾値、Ｎは視差の範囲の上限閾値である。ＭおよびＮは、立体表示装置２００の特性、例えばＬＣＤ２１０の画素ピッチ、ＬＣＤ２１０の大きさ、視点から画面までの距離などの諸条件とも相関があり、立体表示装置２００に関わるこれらの諸条件に応じて予め経験的に求められ、予めＥＥＰＲＯＭ３９に記録されている。
【００５３】
ＣＰＵ１９は、視差Ｐ’が目標の画素範囲内（Ｍ≦Ｐ’≦Ｎ）となるような単視点画像の組合せが１つでもあるか否かを判断する。１つもない場合はＳ８、１つでもあった場合はＳ９に進む。
【００５４】
なお、立体表示装置２００の種類が複数ある場合、各種類ごとに目標の画素範囲内の視差となる組合せを決定する。
【００５５】
Ｓ８では、視差が適切になる組合せが存在しないことを示す情報を、立体表示情報として記録メディア３８に記録する。
【００５６】
Ｓ９では、視差Ｐ’が目標の画素範囲内となる単視点画像の組合せを示す情報を、立体表示情報として記録メディア３８に記録する。例えば、図１に示す立体表示情報ででは、「ＦＦ３Ｄｘｘ１」という種類の立体表示装置２００については、１２枚目および１３枚目の単視点画像の組合せならびに１４枚目および１５枚目の単視点画像の組合せが、適切な単視点画像の組合せに決定されている。また、「ＦＦ３Ｄｘ１５」という種類の立体表示装置２００については、１３枚目および１４枚目の単視点画像の組合せが、適切な単視点画像の組合せに決定されている。
【００５７】
一方、立体画像表示装置２００のＣＰＵ２１９は、メディアコントローラ２３７を制御し、記録メディア３８から、一連の単視点画像（多視点画像）をフレームメモリ２３２に展開する。同時に、多視点画像に対応する立体表示情報を読み出す。
【００５８】
立体画像処理回路２３４は、立体表示情報に基づき、立体表示に適した単視点画像の組合せを特定する。この組合せが立体画像表示装置２００の種類ごとに定められている場合は、自身の種類に対応する組合せを特定する。
【００５９】
立体画像処理回路２３４は、特定された画像の組に基づき、立体画像データを合成する。そして、立体画像処理回路２３４は、合成された立体画像データをＬＣＤドライバ２３５に出力し、ＬＣＤ２１０に立体画像を表示させる。
【００６０】
このように、観察者が合焦しようとする重要な被写体部分である特定パターンの視差Ｐが立体表示に適した状態で表示されるから、観察者にとって重要な部分に適切な視差の設定された立体画像を自動で生成して、鑑賞させることができる。
【００６１】
＜その他の実施形態＞
カメラ１と立体画像表示装置２００とを一体化して立体画像記録再生装置に構成することもできる。あるいは、カメラ１と立体画像表示装置２００とを備えた立体画像記録再生システムを構成することもできる。
【図面の簡単な説明】
【００６２】
【図１】各視点で得られた一連の視点画像が立体表示情報とともに記録される様子を示す図
【図２】カメラのブロック図
【図３】立体表示装置のブロック図
【図４】立体表示情報作成処理の流れを示すフローチャート
【図５】左右の視点画像から特定パターンとして顔が検出された様子を示す図
【図６】従来の立体表示用画像の撮影方法および利用方法を例示した図
【符号の説明】
【００６３】
１：カメラ、１９：演算装置（ＣＰＵ）、３２：一時記憶装置（フレームメモリ）、３８：記録メディア、４０：パターン検出回路、２００：立体表示装置、２３４：立体画像処理回路
【図１】
2008172342.tif 000003
【図２】
2008172342.tif 000004
【図３】
2008172342.tif 000005
【図４】
2008172342.tif 000006
【図５】
2008172342.tif 000007
【図６】
2008172342.tif 000008