(57)【要約】【課題】３次元表示器で表示した３次元画像の情報を２次元画像としてプリントする際に情報の欠落が発生する。【解決手段】本発明の画像処理装置は、多視点３次元画像情報から少なくとも多視点のうち一部の視点に対応する複数の２次元画像情報を取得する２次元画像情報取得手段と、其々の前記２次元画像情報から、其々の２次元画像をプリントするために使用可能な其々の２次元プリント画像信号を生成する２次元プリント画像信号生成手段と、前記其々の２次元画像を各視点の相対位置に従ったレイアウトで１ページ内に集約プリントするように、前記其々の２次元プリント画像信号を集約して２次元集約プリント画像信号を生成する２次元集約プリント画像信号生成手段とを備える。【選択図】図８
2013255098.tif 000002
【特許請求の範囲】
【請求項１】
多視点３次元画像情報から少なくとも多視点のうち一部の視点に対応する複数の２次元画像情報を取得する２次元画像情報取得手段と、
其々の前記２次元画像情報から、其々の２次元画像をプリントするために用いられる其々の２次元プリント画像信号を生成する２次元プリント画像信号生成手段と、
前記其々の２次元画像を各視点の相対位置に従ったレイアウトで１ページ内に集約プリントするように、前記其々の２次元プリント画像信号を集約して２次元集約プリント画像信号を生成する２次元集約プリント画像信号生成手段と
を備える事を特徴とする画像処理装置。
【請求項２】
前記２次元集約プリント画像信号生成手段で生成された２次元集約プリント画像信号に従ってプリントするプリント手段を更に備える事を特徴とする請求項１に記載の画像処理装置。 
【請求項３】
前記多視点３次元画像情報から３次元画像を表示する３次元表示手段と、
前記２次元画像情報取得手段で取得した複数の２次元画像情報の其々の２次元画像を、各視点の相対位置に従ったレイアウトで１枚のプリントプレビュー画像として集約編集し、前記３次元表示手段に表示させるプリントプレビュー作成手段と
を更に備え事を特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記３次元表示手段は視差分割方式で有る事を特徴とする請求項３に記載の画像処理装置。
【請求項５】
前記各視点の相対位置に従ったレイアウトのレイアウト情報をユーザーが設定するレイアウト設定手段を更に備え、前記レイアウト情報は、プリントされるべき２次元画像を指定する情報と、１ページ内の前記プリントされるべき２次元画像の相対位置を指定する情報とを含み
前記２次元画像情報取得手段は、前記プリントされるべき２次元画像を指定する情報に基づいて必要な２次元画像情報を前記３次元画像情報から取得し、
前記２次元集約プリント画像信号生成手段は、前記１ページ内の前記プリントされるべき２次元画像の相対位置を指定する情報に基づいて前記２次元集約プリント画像信号を生成する事を特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記レイアウト設定手段は、複数のレイアウトの中から使用されるべきレイアウトをユーザーが選択するレイアウト選択手段を含む事を特徴とする請求項５に記載の画像処理装置。
【請求項７】
前記レイアウト設定手段は、所定の位置にレイアウトされる２次元画像をユーザーが選択する画像選択手段を含む事を特徴とする請求項５に記載の画像処理装置。
【請求項８】
多視点３次元画像情報から少なくとも多視点のうち一部の視点に対応する複数の２次元画像情報を取得する２次元画像情報取得ステップと、
其々の前記２次元画像情報から、其々の２次元画像をプリントするために用いられる其々の２次元プリント画像信号を生成する２次元プリント画像信号生成ステップと、
前記其々の２次元画像を各視点の相対位置に従ったレイアウトで１ページ内に集約プリントするように、前記其々の２次元プリント画像信号を集約して２次元集約プリント画像信号を生成する２次元集約プリント画像信号生成ステップと
を備える事を特徴とする画像処理方法。
【請求項９】
画像処理装置に画像処理方法を実行させるためのプログラムであって、前記画像処理方法は、
多視点３次元画像情報から少なくとも多視点のうち一部の視点に対応する複数の２次元画像情報を取得する２次元画像情報取得ステップと、
其々の前記２次元画像情報から、其々の２次元画像をプリントするために用いられる其々の２次元プリント画像信号を生成する２次元プリント画像信号生成ステップと、
前記其々の２次元画像を各視点の相対位置に従ったレイアウトで１ページ内に集約プリントするように、前記其々の２次元プリント画像信号を集約して２次元集約プリント画像信号を生成する２次元集約プリント画像信号生成ステップと
を備える事を特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、その処理方法及びプログラムに関し、詳細には、３次元画像を２次元画像としてプリントする事を可能にする画像処理装置、その処理方法及びプログラムに関する。
【背景技術】
【０００２】
従来、３次元画像のプリントに関する様々な技術がある。例えば、３次元画像情報から、任意の視点から見た２次元画像を得る画像処理システムが知られている。即ち、３次元画像情報は、被写体を複数の位置から撮影して得られる複数の２次元画像情報に基づいて作成される。そして作成された３次元画像情報に基づいて上記被写体を所定の視点位置から見たときの２次元画像情報を作成し、作成された２次元画像情報を用いて２次元画像を表示し、表示された２次元画像をプリントするシステムである（特許文献１参照）。
【０００３】
又、プリントスキャナーで読み取られた２次元画像情報を各種方式の３次元表示に対応する３次元画像情報に変換し、変換された３次元画像情報をプリンターに送信し直接２次元画像としてプリントする技術が知られている（特許文献２参照）。該技術により、変換前の２次元画像に記載の内容を一般の監視下で見えないように隠すことができる。
【０００４】
又、３次元画像を表示し、３次元画像情報をそのまま記録するように、２次元画像をプリントする技術が知られている。即ち、プリントされた２次元画像はレンチキュラーレンズ等の光学部材を用いて３次元画像として見る為の物であり、光学部材を用いなければ可視化出来なく、光学部材が同じなら表示される技術である（特許文献３参照）。
【０００５】
一方、３次元画像を表示する表示器を有する画像処理装置にレーザプリンター等の記録装置を接続し、表示された３次元画像を２次元画像として紙媒体に記録する潜在ニーズが有る。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平９−１８７０３７号公報
【特許文献２】特開２００８−２４４８６４号公報
【特許文献３】特開２００６−１０７２１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、上記ニーズに対処する技術については提案されていない。尚、一般に３次元表示用の３次元画像情報は少なくとも左目および右目から見た２枚以上の視差を有する２次元画像の情報からなっている。すなわち３次元画像情報は視差を有するような相対関係を満たす複数の２次元画像からなる。従って、その３次元画像情報から１つの２次元画像を得て一般の２次元プリンターで記録する場合、複数の２次元画像情報を記録出来なく、情報の欠落が発生するという問題がある。
【０００８】
本発明は、３次元表示器で表示した３次元画像の情報の欠落を減らして２次元画像として記録装置で記録出来る画像処理装置を提供する事を目的とする。
【課題を解決するための手段】
【０００９】
本発明の画像処理装置は、多視点３次元画像情報から少なくとも多視点のうち一部の視点に対応する複数の２次元画像情報を取得する２次元画像情報取得手段と、其々の前記２次元画像情報から、其々の２次元画像をプリントするために使用可能な其々の２次元プリント画像信号を生成する２次元プリント画像信号生成手段と、前記其々の２次元画像を各視点の相対位置に従ったレイアウトで１ページ内に集約プリントするように、前記其々の２次元プリント画像信号を集約して２次元集約プリント画像信号を生成する２次元集約プリント画像信号生成手段とを備える事を特徴とする。
【発明の効果】
【００１０】
３次元表示された３次元画像の情報を欠落を減らして２次元記録装置で２次元画像として記録する事が出来る。
【図面の簡単な説明】
【００１１】
【図１】本発明の画像処理装置の例の概略図である。
【図２】図１の画像処理装置における表示器をより詳細に説明する図である。
【図３】図１の画像処理装置における表示器をより詳細に説明する図である。
【図４】多視点と撮影した２次元画像の関係を示す図である。
【図５】図４の多視点から撮影した２次元画像を示す図である。
【図６】視点とその視点から見える画素との関係を示す図である。
【図７】視点とその視点から見える画素との関係を示す図である。
【図８】多視点３次元画像から２次元画像をプリントするフロー図である。
【図９】多視点３次元画像から２次元画像のプリントを行うよう要求する画面を示す図である。
【図１０】実施例１における集約プリント時のレイアウト設定画面を示す図である。
【図１１】実施例１における３方向の集約プリントの例を示す図である。
【図１２】実施例１における集約プリント時のプレビュー表示例を示す図である。
【図１３】３次元画像情報から２次元プリント画像信号を生成する過程を示す図である。
【図１４】実施例２における集約プリント時のレイアウト設定画面を示す図である。
【図１５】実施例３における３方向の集約レイアウトの例を示す図である。
【図１６】実施例４における集約プリント時のレイアウト設定画面を示す図である。
【図１７】自動でユーザーの視点を検出する技術を説明する図である。
【発明を実施するための形態】
【００１２】
以下、本発明を実施するための形態について図面を参照して説明する。本実施形態では、画像処理装置を例に説明するが、本発明はこれに限定されるものではない。
【００１３】
＜実施例１＞
図１は、本発明の画像処理装置例の概略図である。図１に示すように、本発明の画像処理装置は、中央処理装置（ＣＰＵ）１０、読み出し専用メモリ（ＲＯＭ）６０、ランダムアクセスメモリ（ＲＡＭ）７０、記憶装置８０及びネットワーク制御部９０を含むパーソナルコンピュータ（ＰＣ）１を備える。また、本発明の画像処理装置は、ＰＣ１に接続した表示器２、キーボード５０及びプリンター１００を備える。
【００１４】
ＰＣ１の記憶装置８０は、本実施例における画像処理方法を実施するためのプログラム及びデータを保持する。ＰＣ１は、ＣＰＵ１０で制御され、画像処理プログラムを記憶装置８０から取り出し実行する。又、ＰＣ１は、３次元画像情報を、ネットワーク制御部９０に接続したネット回線１１０から受信する事ができる。表示器２は、３次元画像を表示する３次元表示器３０を含み、３次元表示器３０は、視差分割方式とすることができる。又、３次元表示器３０の表示面にタッチパネル４０を更に有する事もでき、キーボード５０と共にユーザーのＰＣ１への入力を可能にする。タッチパネル４０又はキーボード５０等を用いて、３次元表示器３０で表示された３次元画像からユーザーが所望する視点からの２次元画像を選択し、選択された２次元画像をプリンター１００で印刷する。
【００１５】
図２は、図１で示す表示器２の構造をより詳細に説明する図である。図２に於いて、３次元表示器３０として本実施例で用いたレンチキュラー方式の多視点３次元表示器は、液晶表示器３１とその前面に配置されたレンチキュラーレンズ３２とを含む。３次元表示器３０の表示面にはタッチパネル４０を更に有する。
【００１６】
図３は多視点の画像を表示する為の各レンチキュラーレンズ３２と相対位置を保った各表示画素位置との関係を示す図である。図３に示す３次元表示器３０は、其々１つのレンチキュラーレンズ内に画素３１１から画素３１７まで７つの表示画素を有し、それによって、６つの視点から見た３次元画像の表示を可能にする。尚、表示器は公知の技術で一般的に実現される物で、カラー表示可能であるが、説明を簡略化する為、単色でかつ図も１次元的に表現する。
【００１７】
図４及び図５は、上記６つの視点とその３次元画像を表示する為に撮影した２次元画像の関係を示す図である。図４に示すように、被写体３００に対して、其々の視点で左右の眼で見た画像に相当する２次元画像を撮影し、被写体３００を視点１から視点６まで連続的に３次元表示する為に、視点Ｎの左目対応の２次元画像Ｎは視点Ｎ−１の右目対応の２次元画像に対応させる。図５において、被写体３００を７方向から撮影された２次元画像を其々３０１から３０７に示す。各視点で撮影された７種の２次元画像は短冊状に分割され、図３に示すように、レンチキュラーレンズ３２と相対位置を保った其々の表示画素位置で表示する。それによって、図４で示す各視点から被写体を見た際と略同じ立体像を見る事が出来る。このとき各視点において立体像を表示するための各２次元画像情報の集合を多視点３次元画像情報と呼ぶ。この多視点３次元画像情報は、単に３次元画像情報ともよばれる。
【００１８】
図６及び図７は、其々視点１と視点４から人が見た場合に見える画素を示す図である。図５で示す各視点に対応すると、図６及び図７で示す画素１は、視点１の左側で撮影した２次元画像の一部である。画素２は視点１の右側で撮影した２次元画像の一部である。画素４は視点４の左側で撮影した２次元画像の一部である。画素５は視点４の右側で撮影した２次元画像の一部である。又、図６及び図７に示すように、視点１の右目では画素２のみが、視点１の左目では画素１のみが、視点４の右目では画素５のみが、視点４の左目では画素４のみが見える。
【００１９】
図８は、本発明による画像処理装置が多視点３次元画像を表示している状態で、ユーザーがこの３次元画像を２次元画像としてプリントする際のＣＰＵ１０が実行するプログラムの処理フローを示すフローチャートである。このプログラムはＲＯＭ６０あるいは記憶部８０に記憶されており、ＣＰＵ１０による実行のためにＲＡＭ７０にロードされる。図８を参照して本発明の画像処理の流れを詳説する。
【００２０】
ステップ４００において、３次元表示器３０で３次元画像を３次元表示する。例えば、撮影した３次元画像をアルバムとして閲覧できるアプリケーションプログラム等を実行中で３次元画像を３次元表示する事ができる。図９は、この際のアプリケーションプログラムの画面の例を示す図である。多視点３次元画像５００を表示している為、各レンチキュラーレンズ内の７つの液晶表示画素では６視点からの３次元画像表示を行う為に図４に示す７方向から撮影された２次元画像を其々ストライプ状に分割して表示している。この状態で２次元画像としてプリントするように要求する場合、ユーザーはアプリケーションプログラムの画面中に有るプリントキー５０１を押下する。
【００２１】
ステップ４０１において、ユーザーから２次元画像プリント要求があったかどうかを決定する。例えば、タッチパネル４０でプリントキー５０１に対する押下操作を検知する事ができる。プリントキー５０１に対する押下操作を検知すれば、２次元画像プリント要求があったと決定し、ステップ４０２に分岐する。
【００２２】
ステップ４０２において、２次元画像をプリントする際のレイアウトのレイアウト情報を設定する（レイアウト設定ステップ）。例えば、複数のレイアウトの中から、所望するプリントレイアウトを選択する為のレイアウト設定画面をユーザーに提示する。
【００２３】
図１０は、レイアウト設定画面を示す図である。図１０に示すように、画面６１０において、レイアウト６００と、レイアウト６０１と、レイアウト６０２と、レイアウト６０３のいずれかを選択する事が出来る。レイアウト６００は１枚の記録紙上に１方向の２次元画像を１枚のみプリントする。レイアウト６０１は１枚の記録紙上に３方向の２次元画像３枚を集約してプリントする。レイアウト６０２は１枚の記録紙上に５方向の２次元画像５枚を集約してプリントする。レイアウト６０３は１枚の記録紙上に７方向の２次元画像７枚を集約してプリントする。
【００２４】
３方向の２次元画像３枚の集約プリント６０１が選択された場合、プリントされる２次元画像はレイアウト６０６で示す様に２次元画像１と２次元画像４と２次元画像７に予め既定する。つまり、正面方向の２次元画像４を中央にして２次元画像７は被写体に対して視点が右側に有る為、中央にレイアウトした２次元画像４の右側にレイアウトしてプリントする。同様に正面方向の２次元画像４を中央にして２次元画像１は被写体に対して視点が左側に有る為、中央にレイアウトした２次元画像４の左側にレイアウトしてプリントする。この様に本発明に依れば、各視点における２次元画像を、各２次元画像を見ることができるそれぞれの視点位置の位置関係を維持して集約プリントする事で、より３次元画像を正確に表現する事が出来る。すなわち本実施例のレイアウトは、各視点の相対位置に従ったレイアウトである。
【００２５】
同様に、５方向の２次元画像５枚の集約プリント６０２が選択された場合、プリントされる２次元画像はレイアウト６０７で示す様になる。７方向の２次元画像７枚の集約プリント６０３が選択された場合、プリントされる２次元画像はレイアウト６０８で示す様になる。
【００２６】
ここで、１枚の記録紙上に１方向の２次元画像１枚、３方向の２次元画像３枚、５方向の２次元画像５枚、７方向の２次元画像７枚をプリントするためのレイアウトを提供している。しかし、これに限らず、１枚の記録紙上に２次元画像を偶数枚プリントするためのレイアウトを提供してもよい。
【００２７】
尚、１枚プリント６００が選択された場合、ユーザーは設定キー６０５を操作して所望する２次元画像の視点を其の番号で指定する事ができる。指定する視点番号は表示位置６０４において表示される。指定した視点の両目で見た２枚の２次元画像の内、左右どちらかの目用の２次元画像が記録に使用されるかを左右目設定部６０９で設定する事できる。視点Ｎの場合、左目用が設定されば、画像Ｎを記録に使用する事になり、右目用が設定されば、画像Ｎ＋１を記録に使用する事になる。
【００２８】
ステップ４０３において、ステップ４０２で選択されたレイアウトに基づいて必要な複数の２次元画像情報を３次元画像情報から取得する（２次元画像情報取得ステップ）。
【００２９】
ステップ４０４において、ステップ４０２で選択されたレイアウトに従ってステップ４０３で取得された必要な複数の２次元画像情報を１枚のプリントプレビュー画像として集約編集処理する（プリントプレビュー作成ステップ）。図１１は図４及び図５に示す被写体を３方向の集約プリントする場合の集約プリント画像の例を示す。この集約プリント画像の場合、プリントプリビューのために、其々画像１、画像４及び画像７の２次元画像情報を其々記録紙面上の決められた位置に編集する。
【００３０】
次に、ステップ４０５において、プリントプレビュー画像を３次元表示器３０で表示する。３次元表示器で２次元画像をプリントプレビュー画像として表示するには、プリントプレビュー画像が正面で見えるようにする場合、各レンチキュラーレンズの略中央部に位置する液晶表示画素にのみ２次元画像情報を表示する。
【００３１】
図１２は、図１１で示す集約プリントを行う場合の集約プリント時のプリントプレビュー画面を示す図である。プリントプレビュー画面８００において、２次元画像１のレイアウト領域では２次元画像１を、２次元画像４のレイアウト領域では２次元画像４を、２次元画像７のレイアウト領域では２次元画像７を其々原画像を縮小して表示する。尚、各レンチキュラーレンズ内の他の表示画素は画像に拘わらず白又は黒データに固定表示し、集約プリントされる３画像領域以外の表示領域は各レンチキュラーレンズ内の７画素は全て白データで固定表示して正面以外から見ても白色に見せることができる。尚、ここでプリントプレビュー画像が正面で見えるようにする場合の表示方法を説明したが、プリントプレビュー画像が別の方向で見えるようにするために、各レンチキュラーレンズの別の位置に於ける液晶表示画素にのみ２次元画像情報を表示してもよい。
【００３２】
又、ユーザーがプリントプレビュー画面８００を確認し、表示されたプリントプレビュー画像で集約プリントを実行する場合は、画面右下のプリント実行キー８０１を押下する。
【００３３】
ステップ４０６において、ユーザーからプリント実行要求があったかどうかを決定する。例えば、タッチパネル４０でプリント実行キー８０１に対する押下操作を検知する事ができる。プリント実行キー８０１に対する押下操作を検知すれば、プリント実行要求があったと決定し、ステップ４０６に分岐する。
【００３４】
ステップ４０７において、ステップ４０３で取得した必要な複数の２次元画像情報の其々からプリントに用いられる２次元プリント画像信号を生成する（２次元プリント画像信号生成ステップ）。以下、図１３を参照して多視点３次元画像情報から２次元画像情報を取得し、更に２次元プリント画像信号を生成する実施例を詳説する。
【００３５】
図１３は例として２次元画像３の２次元画像情報から２次元プリント画像信号を生成する過程を説明する図である。２次元画像３は図４に示す様に視点３の左目用に撮影され、短冊状に分割された後、レンチキュラーレンズｎ、ｎ＋１及びｎ＋２とその相対位置が既定された液晶表示画素位置９０１、９０２及び９０３において表示される。レンチキュラーレンズｎ、ｎ＋１及びｎ＋２が十分小さい場合、２次元画像３の２次元画像情報をそのままプリントに用いても、プリント画像の品質が良い。しかし、其々レンチキュラーレンズのサイズ分、画像が粗く紙等に高密度でプリントする場合、２次元画像情報をそのままプリントに用いると、プリント画像の品質が低下する。そこで、本発明では、隣接する各レンチキュラーレンズｎ、ｎ＋１、ｎ＋２の２次元画像３の２次元画像情報Ｄ３（ｎ）、Ｄ３（ｎ＋１）、Ｄ３（ｎ＋２）を用いてその間に補間した値を加え、高品位な２次元プリント画像信号を生成する。
【００３６】
図１３は、線形補間処理を実施する例を示している。表示画素９０１と９０２の間に補間画素９０３、９０４、９０５、９０６、９０７、及び９０８の２次元プリント画像信号を其々表示位置９０１及び９０２からの距離に応じて記載する式に従って２次元画像情報Ｄ３（ｎ）とＤ３（ｎ＋１）を用いて生成する。即ち、生成した補間画素９０３の２次元プリント画像信号は、｛Ｄ３（ｎ）×６＋Ｄ３（ｎ＋１）×１｝／７となる。生成した補間画素９０４の２次元プリント画像信号は、｛Ｄ３（ｎ）×５＋Ｄ３（ｎ＋１）×２｝／７となる。生成した補間画素９０５の２次元プリント画像信号は、｛Ｄ３（ｎ）×４＋Ｄ３（ｎ＋１）×３｝／７となる。生成した補間画素９０６の２次元プリント画像信号は、｛Ｄ３（ｎ）×３＋Ｄ３（ｎ＋１）×４｝／７となる。生成した補間画素９０７の２次元プリント画像信号は、｛Ｄ３（ｎ）×２＋Ｄ３（ｎ＋１）×５｝／７となる。生成した補間画素９０８の２次元プリント画像信号は、｛Ｄ３（ｎ）×１＋Ｄ３（ｎ＋１）×６｝／７となる。
【００３７】
ここで、２次元画像３の２次元画像情報から２次元プリント画像信号を生成する過程を説明したが、図１１で示す集約プリントする画像１、画像４、画像７は図１３で詳説した同様の処理で其々の２次元プリント画像信号を生成出来る。
【００３８】
次に、ステップ４０８において、ステップ４０２で選択されたレイアウトに基づき、ステップ４０７で生成された其々の２次元プリント画像信号に対して集約処理を行う（２次元集約プリント画像信号生成ステップ）。即ち、図１１で示した集約プリントを実際にプリンター１００でプリントする為に用いられる２次元集約プリント画像信号を生成する。又、集約処理は、１ページ内に集約してプリントする為にレイアウトの画像数に応じて縮小処理を施すことを含む。
【００３９】
例えば、１枚の記録紙上に１方向の２次元画像を１枚のみプリントするレイアウト６００の場合は、図１３で得られる２次元プリント画像信号に対して縮小処理を施さない。１枚の記録紙上に３方向の２次元画像３枚を集約してプリントするレイアウト６０１の場合は、３３％に該２次元プリント画像信号を間引いて縮小する。１枚の記録紙上に５方向の２次元画像５枚を集約してプリントするレイアウト６０２の場合は、２５％に該２次元プリント画像信号を間引いて縮小する。１枚の記録紙上に７方向の２次元画像７枚を集約してプリントするレイアウト６０３の場合は、１６％に該２次元プリント画像信号を間引いて縮小する。
【００４０】
尚、レンチキュラーレンズの大きさや記録装置の記録密度に応じて補間して生成する記録画素数は、本実施例の６画素に限定されるものでも無く、補間方式も線形補間に限定されない事は述べるまでも無い。
【００４１】
ステップ４０９において、ステップ４０８で得られた２次元プリント画像信号をプリンター１００に出力して、図１１で示す集約プリント画像をプリントする。以上によって、表示器２で、表示された多視点３次元画像を異なる角度で表示される複数の２次元画像のセットとしてその視点に応じた位置にレイアウトして集約プリントする事が出来る。
【００４２】
＜実施例２＞
実施例１では、図１０に示すレイアウト設定画面ではレイアウト枚数に依ってプリントされる２次元画像と該２次元画像の記録紙面上の位置は固定であったが、本実施例では、各レイアウト上の所定の画像位置にプリントする画像を選ぶ事が出来る。
【００４３】
図１４は、実施例２における集約プリント時のレイアウト設定画面を示す図である。図１４に於いて、図１０と同じ処理部分は図１０と同じ参照符号を記載した。図１４に示すように、図１０と同様に１枚の記録紙上に３方向の２次元画像３枚、５方向の２次元画像５枚または７方向の２次元画像７枚を集約してプリントするレイアウトのいずれかを選択することができる。図１０では、各レイアウト上の各画像位置に対応する２次元画像が固定であるが、図１４では、各レイアウト上の画像位置Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ及びＧの位置にプリントする２次元画像を６視点に応じた７種の２次元画像情報の中から選ぶ事が出来る。
【００４４】
即ち、３枚の２次元画像をレイアウト１００４に集約してプリントする場合、画像位置Ａにプリントしたい２次元画像は画像選択キー１００１の操作で任意の２次元画像が選べる。図１４では、２次元画像４が選択され表示部１０００に表示されている。同様に画像位置Ｂは２次元画像２が、画像位置Ｃは２次元画像６が設定されている。尚、１枚の記録紙上に５方向の２次元画像５枚を集約してプリントするレイアウト１００３が選ばれた場合、更に画像位置Ｄ及び画像位置Ｅを設定する。１枚の記録紙上に７方向の２次元画像７枚を集約してプリントするレイアウト１００２が選ばれた場合、更に画像位置Ｆ及び画像位置Ｇを設定する。
【００４５】
本実施例では、各レイアウト上の各画像位置にプリントする２次元画像を任意に選ぶ事が出来るので、被写体に応じて所望するレイアウトが固定では無い方が好ましい場合に便利である。尚、本実施例における集約レイアウト設定には、実施例１の固定レイアウトも選ぶ事が出来る実施例も容易に実施可能である。
【００４６】
＜実施例３＞
実施例１では、図１１に示すように集約プリントされる全ての２次元画像のサイズを同じにしたが、本実施例では、集約プリントされる各２次元画像を異なるサイズに設定する事ができる。
【００４７】
図１５は、実施例３における集約プリント画像の例を示す図である。図１５に示す様に、図８のレイアウト選択ステップ４０２によって、正面から見た２次元画像４を他の２次元画像１及び２次元画像７に対して十分大きなサイズに設定する事が出来る。つまり、表示された３次元画像の情報は欠落させない様に集約プリントしたいが、正面以外から見た２次元画像は正面から見た２次元画像を補佐する目的なら、２次元画像４をより大きく記録した方が良い。
【００４８】
同様に、７種の２次元画像の位置や大きさ及び方向を変えた３次元表示情報を２次元画像として集約プリントする際のレイアウトは、ここで開示した物に限らず如何なるレイアウトでも容易に実施できる。本実施例に限らずＣＰＵ１０がユーザーの指示に応じて、記録すべき２次元画像情報を選び、其の位置と大きさに応じて２次元プリント画像信号を生成すれば、他のどんな実施例も容易に実施出来る事は述べるまでも無い。
【００４９】
本実施例では、集約プリントされる各画像をその重要度に応じて其々のサイズに設定する事ができ、又、サイズ設定によって空白領域を最小に出来る利点が有る。
【００５０】
＜実施例４＞
実施例１では、ユーザーが３次元表示器３０の正面から表示された３次元画像を見ている事を前提にした為、集約プリント画像の中央部には３次元画像を正面方向から見た２次元画像４をレイアウトした。しかしながら、表示されている３次元画像に依っては、ユーザーが所望する方向からの２次元画像を集約プリント画像の中心にレイアウトする事が好ましい場合がある。実施例２では、各レイアウト上の画像位置にプリントする画像を任意に選ぶ事が出来るので、ユーザーが所望する方向からの２次元画像を集約プリント画像の中心にレイアウトする事ができる。しかしながら、ユーザーが、各レイアウト上の画像位置にプリントする画像を選ぶ際に、各視点間の相対位置を維持するよう注意しなければならない。本実施例では、レイアウト上の画像位置に対応する２次元画像は各視点間の相対位置を保って設定されるように、各設定時の画面及び各画像設定部の表示を制御する。
【００５１】
図１６は、実施例４における集約プリント時のレイアウト設定画面を示す図である。図１６のレイアウト設定画面６１２に於いて、ユーザーが視点設定部１２００の設定キー６０５を操作して表示部１２０３に視点３を設定した。ユーザーが視点３を設定した事を検知した場合、ＣＰＵ１０は、一意に集約レイアウト中央部Ａの位置には視点３の左目用２次元画像、即ち２次元画像３を設定する。
【００５２】
また、図１６に示すように３方向の集約プリント６０１が選択されている。この場合、ユーザーが設定出来る２次元画像はレイアウト１００４の画像位置Ｂ及びＣに限定され、他の画像位置Ｄ、Ｅ、Ｆ、Ｇへの２次元画像の設定を禁止する。又、ＣＰＵ１０は、画像位置Ａの左側に位置する画像位置Ｂには実際に立体物を左側から見た２次元画像をプリントする。その為に、設定キー１２０２の操作で表示部１２０１に設定出来る２次元画像は、２次元画像２または２次元画像１であり、他の２次元画像は設定出来なく制御する。
【００５３】
同様に、画像位置Ａの右側に位置する画像位置Ｃには実際に立体物を右側から見た２次元画像をプリントする為に、設定出来る２次元画像は２次元画像４、２次元画像５、２次元画像６、或いは２次元画像７であり、他の画像は設定出来なく制御する。
【００５４】
尚、図１６に於いてレイアウト１００２又はレイアウト１００３が選択された場合にも、同様である。すなわち、画像位置Ｃの２次元画像に対する画像位置Ｅの２次元画像、画像位置Ｅに対する画像位置Ｇの２次元画像は其々各視点間の相対位置を保って設定されるようにＣＰＵ１０は各設定時の画面６１２及び各画像設定部の表示を制御する。
【００５５】
以上のように、本実施例では、ユーザーが３次元表示器３０で実際に見た所望の視点の２次元画像を紙面の中央部にレイアウトして集約プリントする事が可能に成る。
【００５６】
尚、本実施例では、図１６のレイアウト設定画面を用いて、ユーザーが手動操作で視点画像を設定したが、自動でユーザーの視点を検出する技術を用いることもできる。
【００５７】
図１７は、自動でユーザーの視点を検出する技術を説明する図である。ユーザーが２次元プリントの意思表示を行った時点のユーザーを撮像装置２０で撮影する。その後、撮影した画像からユーザーの３次元表示器３０に対する位置を認識して、ユーザーの３次元表示器３０に対する視点を確定する。この確定したユーザーの視点から３次元表示器３０を見た場合に表示される３次元画像をユーザーが所望する視点の３次元画像として決定する。
【００５８】
撮像装置２０を制御して表示器３０の中央に設置された撮像装置２０で正面を撮影し、図１７の画像１７００を示す画像データを得る。この撮影画像１７００を示す画像データを記憶装置に一時記憶しておき、また、公知のパターンマッチング顔認識技術でユーザーの顔の位置を特定することができる。一般に人の顔認識は横に並ぶ１対の目の存在に着目して容易にその重心位置を認識出来る。
【００５９】
図１７を用いて認識したユーザーの顔の位置からユーザーの視点を特定する原理を詳説する。一般に両目の視差を利用した３次元表示器は観察者が表示器から所定の距離Ｌｍ離れた位置で最も立体画像を良好に見る事が出来る。即ち、撮影されたユーザーは表示器３０から略この距離Ｌｍ離れた位置で撮影されたと推定することが出来る。従って、得られた撮影画像のユーザーの両目の間隔Ｌｉが標準的に８ｃｍだと想定して、ユーザーの位置の表示器中央からのズレＬｏを求める事が出来る。又図１７に於いて表示器３０の前Ｌｍの位置に示す仮想のライン１７０１上のユーザーの位置、即ち点Ｐから表示器３０の中央を目指す方向がユーザーの視点と言える。
【００６０】
多視点３次元表示器３０を点Ｐの位置から見た場合、予め撮影され、表示されたどの視点の３次元画像が最も良好に見えるかを判定することでユーザーが所望する視点の画像を決定することができる。
【００６１】
即ち表示器中央からのズレＬｏが正の値なら、視点１か、視点２か、視点３のいずれかであり、表示器中央からのズレＬｏが負の値なら、視点６か、視点５か、視点４のいずれかである。
【００６２】
図１７で図示するように、推定されたユーザーの位置Ｐと各表示されている３次元画像の視線が仮想のライン１７０１と交わる位置を比較して、ユーザーの位置Ｐに近い視線を求めれば、その視点に対応する画像がユーザーが所望する３次元画像と判定できる。
【００６３】
本実施例に上述した自動でユーザーの視点を検出する技術を用いれば、図１６の設定キー６０５を操作する事無く自動で画像の設定が出来る。
【００６４】
（その他の実施例）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【図１】
2013255098.tif 000003
【図２】
2013255098.tif 000004
【図３】
2013255098.tif 000005
【図４】
2013255098.tif 000006
【図５】
2013255098.tif 000007
【図６】
2013255098.tif 000008
【図７】
2013255098.tif 000009
【図８】
2013255098.tif 000010
【図９】
2013255098.tif 000011
【図１０】
2013255098.tif 000012
【図１１】
2013255098.tif 000013
【図１２】
2013255098.tif 000014
【図１３】
2013255098.tif 000015
【図１４】
2013255098.tif 000016
【図１５】
2013255098.tif 000017
【図１６】
2013255098.tif 000018
【図１７】
2013255098.tif 000019