(57)【要約】【課題】３次元画像として視聴可能な左眼用画像および右眼用画像を、多視差画像に変換する際、立体感を低減しないようにする。【解決手段】左眼用画像Ｐ１および右眼用画像Ｐ５の視差量が視差量Ｄである場合、視聴者が正面から視聴することが多い場合、正面方向左側および右側の多視差画像Ｐ２’，Ｐ３およびＰ３，Ｐ４’の視差量を視差量２Ｄ／６とし、端部方向左側および右側の多視差画像Ｐ１，Ｐ２’およびＰ４’，Ｐ５の視差量を視差量Ｄ／６とするようにして、視聴する可能性の高い方向の視差量を多くして、視聴する可能性の低い方向の視差量を小さくするように、多視差画像を内挿補間により生成する。本技術は、３次元画像の表示が可能な表示機能を備えた電子機器に適用することができる。【選択図】図４
2013183391.tif 000002
【特許請求の範囲】
【請求項１】
３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換部と、
前記多視差画像変換部により変換された多視差画像を合成して表示する表示部と
を含む画像処理装置。
【請求項２】
前記多視差画像変換部は、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部の正面方向に対して視差量が大きくなるように不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する
請求項１に記載の画像処理装置。
【請求項３】
前記多視差画像変換部は、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部を視聴する視聴者の存在する方向に対して視差量が大きくなるように不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する
請求項１に記載の画像処理装置。
【請求項４】
前記表示部を視聴する視聴者の、前記表示部に対する位置を検出する視聴者位置検出部をさらに含み、
前記多視差画像変換部は、前記視聴者位置検出部により検出された視聴者の位置の情報に基づいて、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部を視聴する視聴者の存在する方向に対して視差量が大きくなるように不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する
請求項３に記載の画像処理装置。
【請求項５】
前記視聴者位置検出部は、画像を撮像し、前記視聴者の顔画像を検出して、前記顔画像を検出した位置を、前記表示部を視聴する視聴者の、前記表示部に対する位置として検出する、または、サーモグラフィにより検出された熱分布の画像に基づいて、前記表示部を視聴する視聴者の、前記表示部に対する位置として検出する
請求項４に記載の画像処理装置。
【請求項６】
３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換処理と、
前記多視差画像変換処理により変換された多視差画像を合成して表示する表示処理と
を含む画像処理方法。
【請求項７】
３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換ステップと、
前記多視差画像変換ステップの処理により変換された多視差画像を合成して表示する表示ステップと
を含む処理をコンピュータに実行させるためのプログラム。
【請求項８】
３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換部と、
前記多視差画像変換部により変換された多視差画像を合成して表示する表示部と
を含む電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、画像処理装置および画像処理方法、電子機器、並びにプログラムに関し、特に、左眼用画像および右眼用画像より構成される１組の視差画像からなる３次元画像を多視差画像に変換しても、所定の方向からの視聴では立体感の低減を抑制できるようにした画像処理装置および画像処理方法、電子機器、並びにプログラムに関する。
【背景技術】
【０００２】
裸眼により３次元画像を視聴できるようにする技術が一般に普及しつつある。一般的な、裸眼による３次元画像の表示技術は、左眼用画像および右眼用画像を所定の画素列毎に水平方向に交互の配置して、パララックスバリアやレンチキュラレンズにより、左眼用画像および右眼用画像を、それぞれ左眼および右眼で視聴できるようにするものである。
【０００３】
左眼用画像および右眼用画像は、表示画像に対して所定の角度となる特定の視点において３次元画像が視聴できるものであるため、表示画面に対して所定の角度ではない視点からでは３次元画像として視聴することができなかった。
【０００４】
そこで、左眼用画像および右眼用画像から内挿補間により、多視差画像を生成し、多視点でも３次元画像を視聴できるようにする技術が提案されている。例えば、左眼用画像および右眼用画像の視差量を半分にした画像が左眼用画像および右眼用画像より内挿補間により生成されるものとする。この場合、オリジナルの左眼用画像および新たに生成された画像を、それぞれ左眼および右眼で視聴すると、３次元画像として視聴することが可能となる。同様に、新たに生成された画像およびオリジナルの右眼用画像を、それぞれ左眼および右眼で視聴すると、３次元画像として視聴することが可能となる。すなわち、新たに内挿補間により生成された画像を含めた３画像により、２方向からの多視差画像による３次元画像を新たに創出することが可能となる。
【０００５】
しかしながら、このように左眼用画像および右眼用画像から多視差画像を生成する場合、左眼用画像および右眼用画像の相互の視差量を分割して、分割された視差量に応じた、内挿補間により新たな画像が生成されて、多視差画像が生成される。このため、生成される多視差画像においては、視点数が多くなるほど、個々の視差量が小さくなるため、３次元画像として視聴することにより得られる、立体感が低減してしまう恐れがあった。
【０００６】
そこで、３次元画像として表示する左眼用画像および右眼用画像からなるコンテンツに対して処理を施すことで、多視点でも高画質な３次元画像を視聴できるようにする技術が提案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００８−２４９８０９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、特許文献１に記載の技術では、多視差画像のうちのいくつかについては、同一の視差量からなる多視差画像を生成することにより、画質の向上を目指したものであるため、立体感を向上させることができない恐れがあった。
【０００９】
本技術はこのような状況に鑑みてなされたものであり、特に、表示画面に対して所定の方向から３次元画像として視聴可能な左眼用画像および右眼用画像より、視差量を不均等に分割して、多視差画像を内挿により生成することで、特定の方向からの視点に対しては立体感の低減を抑制させつつも、多視点で３次元画像を視聴できるようにするものである。
【課題を解決するための手段】
【００１０】
本技術の第１の側面の画像処理装置は、３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換部と、前記多視差画像変換部により変換された多視差画像を合成して表示する表示部とを含む。
【００１１】
前記多視差画像変換部には、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部の正面方向に対して視差量が大きくなるように不均等に分割させて、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成させることで、前記１組の視差画像を多視差画像に変換させるようにすることができる。
【００１２】
前記多視差画像変換部には、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部を視聴する視聴者の存在する方向に対して視差量が大きくなるように不均等に分割させて、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成させることで、前記１組の視差画像を多視差画像に変換させるようにすることができる。
【００１３】
前記表示部を視聴する視聴者の、前記表示部に対する位置を検出する視聴者位置検出部をさらに含ませるようにすることができ、前記多視差画像変換部には、前記視聴者位置検出部により検出された視聴者の位置の情報に基づいて、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部を視聴する視聴者の存在する方向に対して視差量が大きくなるように不均等に分割させて、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成させることで、前記１組の視差画像を多視差画像に変換させるようにすることができる。
【００１４】
前記視聴者位置検出部には、画像を撮像させ、前記視聴者の顔画像を検出させて、前記顔画像を検出した位置を、前記表示部を視聴する視聴者の、前記表示部に対する位置として検出させる、または、サーモグラフィにより検出された熱分布の画像に基づいて、前記表示部を視聴する視聴者の、前記表示部に対する位置として検出させるようにすることができる。
【００１５】
本技術の第１の側面の画像処理方法は、３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換処理と、前記多視差画像変換処理により変換された多視差画像を合成して表示する表示処理とを含む。
【００１６】
本技術の第１の側面のプログラムは、３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換ステップと、前記多視差画像変換ステップの処理により変換された多視差画像を合成して表示する表示ステップとを含む処理をコンピュータに実行させる。
【００１７】
本技術の第２の側面の電子機器は、３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換部と、前記多視差画像変換部により変換された多視差画像を合成して表示する表示部とを含む。
【００１８】
本技術の第１または第２の側面においては、３次元画像を視聴するための１組の視差画像の視差量が不均等に分割されて、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像が生成されることで、前記１組の視差画像が多視差画像に変換され、変換された多視差画像が合成されて表示される。
【００１９】
本技術の画像処理装置は、独立した装置であっても良いし、画像処理を行うブロックであっても良い。
【発明の効果】
【００２０】
本技術の一側面によれば、１組の視差画像を多視差画像に変換して、多視点による３次元画像の視聴を表示できるようにすると共に、特定の方向からの視聴については、立体感の低減を抑制することが可能となる。
【図面の簡単な説明】
【００２１】
【図１】本技術を適用した携帯端末の一実施の形態の構成例を示す図である。
【図２】図１の携帯端末による多視差画像表示処理を説明するフローチャートである。
【図３】視差量と従来の視差量の分割方法を説明する図である。
【図４】図１の携帯端末による視差量の分割方法を説明する図である。
【図５】多視差画像の合成方法と、合成された合成画像により視聴できる３次元画像が視聴可能となる原理を説明する図である。
【図６】携帯端末の変形例となる実施の形態の構成例を示す図である。
【図７】本技術を適用したテレビジョン受像機の実施の形態の構成例を示す図である。
【図８】図７のテレビジョン受像機による多視差画像表示処理を説明するフローチャートである。
【図９】図７のテレビジョン受像機による多視差画像表示処理により視聴可能となる多視差画像を説明する図である。
【図１０】図７のテレビジョン受像機による多視差画像表示処理により視聴可能となる多視差画像を説明する図である。
【図１１】汎用のパーソナルコンピュータの構成例を説明する図である。
【発明を実施するための最良の形態】
【００２２】
以下、本開示における実施の形態（以下、本実施の形態という）について説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態（撮像部により撮像された３次元画像を多視差画像に変換する携帯端末の例）
２．変形例（ＣＧ（Computer Graphics）からなる３次元画像を多視差画像に変換する携帯端末の例）
３．第２の実施の形態（視聴者の位置を特定して、放送波より受信された３次元画像を視聴者の位置に対応して多視差画像に変換するテレビジョン受像機の例）
【００２３】
＜１．第１の実施の形態＞
［携帯端末の構成例］
図１は、本技術を適用した携帯端末の一実施の形態の構成例を示している。図１の携帯端末１１は、例えば、携帯電話機やPDA（Personal Digital Assistant）などであり、３次元画像を撮像し、記憶すると共に、記憶されている３次元画像を裸眼により視聴可能な状態で表示する。
【００２４】
携帯端末１１は、制御部２１、入力部２２、撮像部２３、表示制御部２４、および表示部２５を備えている。
【００２５】
制御部２１は、図示せぬCPU(Central Processing Unit)、RAM(Random Access Memory)、およびROM(Read Only Memory)を備えており、CPUがROMに記憶されているプログラムやデータをRAMに展開して、各種の処理を実行し、携帯端末１１の動作の全体を制御する。制御部２１は、キーボードやタッチパネルなどからなる入力部２２が使用者により操作されることで、入力部２２より供給されてくる操作信号に基づいて、撮像部２３を制御して３次元画像を撮像させると共に、撮像された３次元画像のデータを表示制御部２４に供給する。
【００２６】
撮像部２３は、例えば、左眼用画像および右眼用画像を撮像するための、複眼のCCD（Charge Coupled Device）やCMOS（Complementary Metal Oxide Semiconductor）などから構成される。撮像部２３は、制御部２１からの指示に基づいて、３次元画像として視聴可能な左眼用画像および右眼用画像を、それぞれに対して視差が生じるように撮像し、制御部２１に供給する。ここで、視差とは、左眼用画像および右眼用画像のそれぞれの画像内における同一の被写体の表示領域における画素のずれを示すものである。また、左眼用画像および右眼用画像の視差により、被写体の表示領域のずれ量を示す画素数を、視差量と称する。
【００２７】
表示制御部２４は、制御部２１を介して撮像部２３により撮像された３次元画像、すなわち、左眼用画像および右眼用画像からなる２視差画像を取得して記憶する。また、表示制御部２４は、記憶した３次元画像を読み出し、多視差の３次元画像として視聴可能な画像に変換して、LCD（Liquid Crystal Display）または有機EL（Electro Luminescence）などからなる表示部２５に表示する。
【００２８】
より詳細には、表示制御部２４は、３次元画像記憶部３１、多視差画像変換部３２、および多視差画像合成部３３より構成される。３次元画像記憶部３１は、HDD（Hard disk drive）やSSD（Solid State Drive）などの記憶装置からなり、所定の画像圧縮形式で３次元画像を構成する左眼用画像および右眼用画像を記憶する。また、３次元画像記憶部３１は、記憶している３次元画像を読み出し、多視差画像変換部３２に供給する。
【００２９】
多視差画像変換部３２は、３次元画像記憶部３１に記憶されている３次元画像を順次読み出し、３次元画像を構成する左眼用画像および右眼用画像を、多視点での３次元画像の視聴を可能とする多視差画像に変換し、多視差画像合成部３３に供給する。この際、多視差画像変換部３２は、左眼用画像および右眼用画像の視差量を正面方向に近い領域のみを大きくするように分割して、分割した視差量に対応する多視差画像を生成する。このように多視差画像を生成することにより、携帯端末１１を使用する使用者が通常視聴する携帯端末１１の表示部２５の正面方向に対しては立体感を低減させることなく３次元画像を視聴できるようにすると共に、多視点でも３次元画像の視聴を実現させることが可能となる。
【００３０】
多視差画像合成部３３は、多視差画像変換部３２により多視差画像の情報に基づいて、所定の画素幅毎に水平方向に多視差画像を表示できるように画像を合成し、表示部２５に供給し、表示させる。
【００３１】
表示部２５は、パララックスバリアやレンチキュラレンズなどからなる分離フィルタ２５ａが設けられている。この分離フィルタ２５ａは、３次元画像を構成する左眼用画像および右眼用画像を、内挿補間により変換した多視差画像を、それぞれの視点で、それぞれの視差量を持った画像として視聴できるように分離して透過させる。このような表示処理により、多視点での３次元画像の視聴を実現させると共に、携帯端末１１の主たる使用者である視聴者の視線方向となる表示部２５の正面方向に対しては、視差量が大きく割り振られた状態となるので、使用者には３次元画像による立体感を損ねることなく、多視点での視聴が可能となる。
【００３２】
［携帯端末による多視差画像表示処理］
次に、図２のフローチャートを参照して、図１の携帯端末１１による多視差画像表示処理について説明する。
【００３３】
ステップＳ１において、制御部２１からの指示に基づいて、撮像部２３は、画像を撮像し、３次元画像を構成する左眼用画像および右眼用画像を撮像し、制御部２１に供給する。制御部２１は、撮像部２３より供給されてくる３次元画像を構成する左眼用画像および右眼用画像を表示制御部２４に供給する。
【００３４】
ステップＳ２において、表示制御部２４の３次元画像記憶部３１は、制御部２１を介して撮像部２３より供給されてくる３次元画像を構成する左眼用画像および右眼用画像を、それぞれ対応付けて記憶する。
【００３５】
ステップＳ３において、多視差画像変換部３２は、３次元画像記憶部３１に記憶されている３次元画像である左眼用画像および右眼用画像を読み出し、これらを利用して多視差画像に変換する。より詳細には、多視差画像変換部３２は、左眼用画像および右眼用画像の視差量を、表示部２５の正面方向の視点の画像に対しては大きく、また、表示部２５の端部方向からの視点の画像に対しては小さくなるように分割し、分割した視差量に応じて、左眼用画像および右眼用画像を、内挿補間により多視差画像に変換する。多視差画像変換部３２は、変換した多視差画像を多視差画像合成部３３に供給する。
【００３６】
すなわち、図３の左部で示されるように、左眼用画像ＰＬおよび右眼用画像ＰＲは、視差量Ｄが存在することにより、左眼用画像ＰＬが視聴者Ｈの左眼ＥＬで視聴され、右眼用画像ＰＲが右眼ＥＲで視聴されることで、３次元画像としての立体感を感じさせることができる。
【００３７】
従来においては、このような視差量Ｄの左眼用画像ＰＬおよび右眼用画像ＰＲから５視点からなる多視差画像を生成する場合、図３の右部で示されるように、左眼用画像ＰＬおよび右眼用画像ＰＲの視差量Ｄに対して、視差量Ｄ／４となるように均等に分割し、視差量Ｄ／４に対応するように、左眼用画像ＰＬおよび右眼用画像ＰＲから内挿補間により５視点の多視差画像として画像Ｐ１乃至Ｐ５が生成されていた。ここで、画像Ｐ１，Ｐ５は、それぞれ左眼用画像ＰＬおよび右眼用画像ＰＲそのものである。
【００３８】
このように生成された多視差画像Ｐ１乃至Ｐ５は、対応する視点に応じた３次元画像として視聴することができる。すなわち、図３で示されるように、例えば、視聴者Ｈの左眼ＥＬおよび右眼ＥＲにより、それぞれ画像Ｐ１，Ｐ２が視聴されると、その視聴方向において、視差量Ｄ／４の３次元画像として視聴される。また、視聴者Ｈの左眼ＥＬおよび右眼ＥＲにより、それぞれ画像Ｐ２，Ｐ３が視聴されると、その視聴方向において、視差量Ｄ／４の３次元画像として視聴される。さらに、視聴者Ｈの左眼ＥＬおよび右眼ＥＲにより、それぞれ画像Ｐ３，Ｐ４が視聴されると、その視聴方向において、視差量Ｄ／４の３次元画像として視聴される。また、視聴者Ｈの左眼ＥＬおよび右眼ＥＲにより、それぞれ画像Ｐ４，Ｐ５が視聴されると、その視聴方向において、視差量Ｄ／４の３次元画像として視聴される。
【００３９】
このように多視差画像が生成されると、携帯端末１１の表示部２５を見る際に、視聴者の視線方向に対する表示部２５の角度が変化すると、その変化に応じた３次元画像を視聴することが可能となる。しかしながら、視聴者の視聴方向に対する表示部２５の角度が変化しても３次元画像を視聴できるようにすると、元々の左眼用画像ＰＬおよび右眼用画像ＰＲにおける視差量が視差量Ｄであったのに対して、表示部２５に対する各角度毎に視聴可能な３次元画像においては、視差量Ｄ／４となる。視差量は、一般に、大きいほど奥行感などの立体感を意識させることが可能なものである。従って、従来の手法により左眼用画像および右眼用画像が、多視差画像に変換されることにより立体感が大きく低減してしまう恐れがあった。
【００４０】
これに対して、本願開示の技術を適用した携帯端末１１においては、表示制御部２４における多視差画像変換部３２が、携帯端末１１の視聴者である使用者に対しての表示部２５の正面方向に近い視聴方向からの画像については、視差量を大きくとり、端部に近い視聴方向からの画像については、視差量を小さくするようにして、視差量を不均等に分割する。そして、多視差画像変換部３２は、この不均等に分割された視差量に基づいて、左眼用画像ＰＬおよび右眼用画像ＰＲを用いて内挿補間により多視差画像に変換する。
【００４１】
すなわち、左眼用画像ＰＬおよび右眼用画像ＰＲの視差量が視差量Ｄである場合、５視点の多視差画像に変換するとき、多視差画像変換部３２は、まず、図４で示されるように、正面方向に近い範囲については、視差量を、例えば、２Ｄ／６とし、端部方向に近い範囲については視差量をＤ／６として、視差量を分割する。そして、多視差画像変換部３２は、この分割した視差量に応じて、左眼用画像ＰＬおよび右眼用画像ＰＲを内挿補間することにより、多視差画像Ｐ１，Ｐ２’，Ｐ３，Ｐ４’，Ｐ５に変換する。尚、画像Ｐ１，Ｐ３，Ｐ５は、図３における画像Ｐ１，Ｐ３，Ｐ５と同様である。
【００４２】
このように生成された多視差画像Ｐ１，Ｐ２’，Ｐ３，Ｐ４’，Ｐ５は、対応する視聴方向に応じた３次元画像として視聴することができる。すなわち、図４で示されるように、例えば、視聴者Ｈの左眼ＥＬおよび右眼ＥＲにより、それぞれ画像Ｐ１，Ｐ２’が視聴されると、画像Ｐ１，Ｐ２’は、その視点方向において、視差量Ｄ／６の３次元画像として視聴される。また、視聴者Ｈの左眼ＥＬおよび右眼ＥＲにより、それぞれ画像Ｐ２’，Ｐ３が視聴されると、画像Ｐ２’，Ｐ３は、その視点方向において、視差量２Ｄ／６の３次元画像として視聴される。さらに、視聴者Ｈの左眼ＥＬおよび右眼ＥＲにより、それぞれ画像Ｐ３，Ｐ４’が視聴されると、画像Ｐ３，Ｐ４’は、その視点方向において、視差量２Ｄ／６の３次元画像として視聴される。また、視聴者Ｈの左眼ＥＬおよび右眼ＥＲにより、それぞれ画像Ｐ４’，Ｐ５が視聴されると、画像Ｐ４’，Ｐ５は、その視点方向において、視差量Ｄ／６の３次元画像として視聴される。
【００４３】
このように多視差画像が生成されると、携帯端末１１の表示部２５を見る際に、視聴者の視線方向に対する表示部２５の角度が変化すると、その変化に応じた３次元画像を視聴することが可能となる。さらに、視聴者が、携帯端末１１を通常使用する際の視線方向である、表示部２５に対して正面方向である９０度に近い範囲については、視点数が増えても、視差量２Ｄ／６となるため、図３で示されるように従来のように視差量を均等に分割した場合のような、立体感の低減を抑制し、より立体的に３次元画像を表示することが可能となる。また、端部については、視差量を均等に分割した従来の場合よりも視差量が小さくなるため、端部付近からの視点では立体感を感じられる程度は低減するが、現実の使用において、その視点から視聴する可能性は低く、敢えて表示部２５の向きを変えて視聴するようなことをしても、違和感のない程度には３次元画像を視聴することができる。
【００４４】
ステップＳ４において、多視差画像合成部３３は、表示部２５において、多視差の３次元画像として表示可能となるように、多視差画像を合成して合成画像を生成し、表示部２５に供給する。
【００４５】
ステップＳ５において、表示部２５は、多視差画像が合成された合成画像を表示する。
【００４６】
ステップＳ６において、制御部２１は、入力部２２が操作されて、表示の終了が指示されたか否かを判定し、終了が指示されていない場合、処理は、ステップＳ１に戻る。すなわち、終了が指示されるまで、ステップＳ１乃至Ｓ６の処理が繰り返される。そして、ステップＳ６において、終了が指示されたとみなされた場合、処理は、終了する。
【００４７】
すなわち、通常、左眼用画像ＰＬおよび右眼用画像ＰＲのみからなる２視点の３次元画像は、図５の右部で示されるように、左眼用画像ＰＬおよび右眼用画像ＰＲのそれぞれの所定幅の画素列が、水平方向に交互に配置されて合成画像が生成される。このような合成画像により、表示部２５の表面に設けられた分離フィルタ２５ａを透過することで、視聴者の左眼が左眼用画像ＰＬからなる視聴画像ＶＬを視聴し、右眼が右眼用画像ＰＲからなる視聴画像ＶＲを視聴することにより、視聴者は３次元画像として認識し、立体感のある画像として視聴する。尚、図５における分離フィルタ２５ａは、パララックスバリアをイメージした図となっているが、左眼用画像ＰＬおよび右眼用画像ＰＲをそれぞれ所定の方向に分離して透過することができればよいものであるので、例えば、レンチキュラレンズなどであってもよい。
【００４８】
一方、多視差画像合成部３３は、例えば、左眼用画像および右眼用画像が内挿補間により変換された多視差画像Ｐ１，Ｐ２’，Ｐ３，Ｐ４’，Ｐ５を、図５の左部で示されるように配置して合成画像を生成する。すなわち、多視差画像合成部３３は、図５の左部で示されるように、多視差画像Ｐ５，Ｐ４’，Ｐ３，Ｐ２’，Ｐ１の所定幅の画素列が、図５の左部の順序で水平方向に繰り返し配置するように合成する。
【００４９】
このような合成画像が生成されることにより、視聴者が、図５中の左端部に近い方向から表示部２５を視聴すると、左眼で、画像Ｐ１からなる視聴画像Ｖ１を視聴し、右眼で、画像Ｐ２’からなる視聴画像Ｖ２を視聴することにより、視差量Ｄ／６となる３次元画像を視聴することができる。また、視聴者が、図５中の正面に近い左側方向から表示部２５を視聴すると、左眼で、画像Ｐ２’からなる視聴画像Ｖ２を視聴し、右眼で、画像Ｐ３からなる視聴画像Ｖ３を視聴することにより、視差量２Ｄ／６となる３次元画像を視聴することができる。さらに、視聴者が、図５中の正面に近い右側方向から表示部２５を視聴すると、左眼で、画像Ｐ３からなる視聴画像Ｖ３を視聴し、右眼で、画像Ｐ４’からなる視聴画像Ｖ４を視聴することにより、視差量２Ｄ／６となる３次元画像を視聴することができる。そして、視聴者が、図５中の右端部に近い方向から表示部２５を視聴すると、左眼で、画像Ｐ４’からなる視聴画像Ｖ４を視聴し、右眼で、画像Ｐ５からなる視聴画像Ｖ５を視聴することにより、視差量Ｄ／６となる３次元画像を視聴することができる。
【００５０】
結果として、携帯端末１１を使用するに当り、一般的に使用頻度の高い表示部２５に対する正面方向から視聴する場合には、視差量を均等に分割することで多視差画像が構成されるときよりも、視差量を大きくとることができるので、３次元画像を視聴する際の立体感の低減を抑制し、より立体感を高めることが可能となる。また、正面方向以外の、例えば、表示部２５の端部方向から視聴する場合においても、視差量は小さいものの、３次元画像として視聴することは可能であるので、表示部２５を傾けて視聴するようなことがあっても立体感のある画像を視聴することが可能となる。
【００５１】
尚、以上においては、左眼用画像および右眼用画像の視差量Ｄに対して、正面付近の視差量が２Ｄ／６となり、端部付近の視差量がＤ／６となる例について説明してきたが、正面方向付近の視差量が他の方向の視差量よりも大きく設定できる限り、その他の視差量に不均等に分割するようにしても良い。また、左眼用画像および右眼用画像を、視差量を不均等に分割して５視点の画像を内挿補間により生成する例について説明してきたが、５視点以外の視点数の画像を生成するようにしてもよいし、内挿補間のみならず、外挿補間により生成するようにしてもよい。さらに、以上においては、３次元画像を撮像しながら表示する例について説明してきたが、撮像した３次元画像を一旦記憶した後、記憶した３次元画像を用いて多視差画像に変換して表示するようにしてもよい。
【００５２】
＜２．変形例＞
［供給されてくる画像が予め３次元画像として視聴可能なＣＣ画像などのような場合］
以上においては、３次元画像を撮像する撮像部２３により撮像される３次元画像を多視差画像に変換する例について説明してきたが、予め３次元画像として視聴できるように左眼用画像および右眼用画像が生成されているような場合については、それを利用するようにしても良い。
【００５３】
すなわち、ＣＧ（Computer Graphics）画像などのように、予め３次元画像として視聴可能な左眼用画像および右眼用画像が生成されている場合については、３次元画像を取得して、視差量を不均等に分割して、不均等に分割された視差量に基づいて、内挿補間により多視差画像に変換するようにしても良い。
【００５４】
図６は、ＣＧ（Computer Graphics）画像などのように、予め３次元画像として視聴可能な画像として、生成されている左眼用画像および右眼用画像を、視差量を不均等に分割して多視差画像に変換するようにした携帯端末１１の構成例を示している。尚、図６において、図１と同様の機能を備えた構成については、同一の名称、および同一の符号を付しており、その説明は、適宜省略するものとする。すなわち、図６の携帯端末１１において、図１の携帯端末１１と異なる構成は、撮像部２３に代えて、通信部４１を設け、３次元画像記憶部３１を削除した点である。
【００５５】
すなわち、図６の携帯端末１１においては、無線LAN（Local Area Network）カードなどからなる通信部４１により、図示せぬネットワークを介して図示せぬ外部のサーバなどから、ＣＧ画像などからなる３次元画像が取得されて、制御部２１に供給される。
【００５６】
制御部２１は、供給されてきたＣＧ画像などからなる予め３次元画像として視聴可能な左眼用画像および右眼用画像を多視差画像変換部３２に直接供給する。この処理により、多視差画像変換部３２は、供給されてきたＣＧ画像などからなる予め生成されている３次元画像として視聴可能な左眼用画像および右眼用画像を、上述した手法により多視差画像に変換する。
【００５７】
尚、図６の携帯端末１１における多視差画像表示処理については、図２のフローチャートを参照して説明した、ステップＳ１における撮像部２３による３次元画像の撮像処理に代えて、通信部４１が３次元画像を取得する処理とし、ステップＳ２における３次元画像記憶部３１により３次元画像が記憶される処理がスキップされるのみであるので、その説明は、省略する。
【００５８】
＜３．第２の実施の形態＞
［テレビジョン受像機の構成例］
以上においては、携帯端末１１に設けられた表示部２５により３次元画像を表示する場合の例について説明してきたが、LCDや有機ELなどからなる表示部を備えた電子機器であれば、適用することができ、例えば、テレビジョン受像機に適用するようにしても良い。テレビジョン受像機に本開示の技術を適用する場合、携帯端末１１のように視聴者は表示画面に対して一人ではないことも考慮する必要があるため、例えば、視聴者の位置を特定し、特定した視聴者の存在する方向に対して視差量を大きく設定し、それ以外の方向に対して視差量を小さく設定し、３次元画像を構成する左眼用画像および右眼用画像を多視差画像に変換するようにしても良い。
【００５９】
図７は、視聴者の位置を特定し、特定した視聴者の存在する方向に対して視差量を大きくするように分割し、それ以外の方向に対して視差量を小さく分割し、３次元画像を構成する左眼用画像および右眼用画像を多視差画像に変換し、表示するようにしたテレビジョン受像機の構成例を示す図である。
【００６０】
テレビジョン受像機１０１は、制御部１２１、入力部１２２、チューナ１２３、表示制御部１２４、および表示部１２５を備えている。制御部１２１、入力部１２２、表示制御部１２４、および表示部１２５は、それぞれ図１の制御部２１、入力部２２、表示制御部２４、および表示部２５に対応しており、略同様の機能を備えているが、さらに、テレビジョン受像機１０１に特有の機能を備えている。
【００６１】
すなわち、制御部１２１は、図示せぬCPU、RAM、およびROMを備えており、CPUがROMに記憶されているプログラムやデータをRAMに展開して、各種の処理を実行し、テレビジョン受像機１０１の動作の全体を制御する。制御部１２１は、操作パネルやリモートコントローラが使用者により操作される発生される入力部１２２からの操作信号に基づいて、チューナ１２３を制御して、所定の周波数の放送波により送信されてくる３次元画像の番組を受信させる。さらに、制御部１２１は、チューナ１２３により受信された番組の３次元画像のデータを表示制御部１２４に供給する。
【００６２】
カメラ１０２は、テレビジョン受像機１０１の表示部１２５により表示された画像を視聴する視聴者である使用者の存在する方向を撮像し、撮像した画像をテレビジョン受像機１０１に供給する。
【００６３】
表示制御部１２４は、制御部１２１を介してチューナ１２３により撮像された３次元画像、すなわち、左眼用画像および右眼用画像を取得して記憶する。また、表示制御部１２４は、記憶した３次元画像を読み出し、多視差の３次元画像として視聴可能な画像に変換して、LCD（Liquid Crystal Display）または有機EL（Electro Luminescence）などからなる表示部１２５に表示する。
【００６４】
より詳細には、表示制御部１２４は、３次元画像記憶部１３１、多視差画像変換部１３２、および多視差画像合成部１３３より構成される。３次元画像記憶部１３１は、HDD（Hard disk drive）やSSD（Solid State Drive）などの記憶装置からなり、所定の画像圧縮形式で３次元画像を構成する左眼用画像および右眼用画像を記憶するまたは読み出し、多視差画像変換部１３２に供給する。
【００６５】
位置特定部１３４は、カメラ１０２により撮像された画像より、顔画像を検出し、検出した顔画像を、視聴者である使用者とみなして、使用者の存在する位置を、検出した顔画像の位置情報、すなわち、表示部１２５に対する視聴者の方向を特定する情報を生成し、多視差画像変換部１３２に供給する。カメラ１０２は、使用者の位置が特定できるものであればよく、例えば、カメラ１０２に代えて撮像される画像内の温度分布を計測するサーモグラフィなどを利用するようにし、位置特定部１３４が、撮像された画像内における温度分布から人間の体温が分布する範囲を使用者の位置として特定するようにしてもよい。
【００６６】
多視差画像変換部１３２は、３次元画像記憶部１３１に記憶されている３次元画像を順次読み出し、３次元画像を構成する左眼用画像および右眼用画像を、多視点での３次元画像の視聴を可能とする多視差画像に変換し、多視差画像合成部１３３に供給する。この際、多視差画像変換部１３２は、位置特定部１３４により視聴者である使用者の表示部１２５に対する方向を特定する情報に基づいて、左眼用画像および右眼用画像の視差量を視聴者である使用者の存在する方向における視差量が大きくなるように視差量を分割して、分割した視差量に対応する多視差画像を生成する。このようにすることにより、テレビジョン受像機１０１を視聴する視聴者の存在する方向に対しては立体感の低減を抑制しつつ、多視点での３次元画像の視聴を実現させることが可能となる。
【００６７】
多視差画像合成部１３３は、多視差画像変換部１３２により多視差画像の情報に基づいて、所定の画素幅毎に水平方向に多視差画像を表示できるように画像を合成し、表示部１２５に供給し、表示させる。
【００６８】
表示部１２５は、パララックスバリアやレンチキュラレンズなどからなる分離フィルタ１２５ａが設けられている。この分離フィルタ１２５ａは、３次元画像を構成する左眼用画像および右眼用画像を、内挿補間により変換した多視差画像を、それぞれの視差量を維持するようにそれぞれの方向に分離して透過させる。このような表示処理により、多視点での３次元画像の視聴を実現させると共に、携帯端末１１の主たる使用者の視線方向となる表示部１２５の視聴者の存在する方向に対しては、視差量が大きく割り振られた状態で分割される。結果として、使用者には３次元画像による立体感の低減を抑制しつつ、多視点での視聴が可能となる。
【００６９】
［テレビジョン受像機による多視差画像表示処理］
次に、図８のフローチャートを参照して、図７のテレビジョン受像機１０１による多視差画像表示処理について説明する。
【００７０】
ステップＳ３１において、制御部１２１からの指示に基づいて、チューナ１２３は、３次元画像からなる放送波の番組を受信し、３次元画像を構成する左眼用画像および右眼用画像を、制御部１２１に供給する。制御部１２１は、チューナ１２３より供給されてくる３次元画像を構成する左眼用画像および右眼用画像を表示制御部１２４に供給する。
【００７１】
ステップＳ３２において、表示制御部１２４の３次元画像記憶部１３１は、制御部１２１を介してチューナ１２３より供給されてくる３次元画像を構成する左眼用画像および右眼用画像を、それぞれ対応付けて記憶する。
【００７２】
ステップＳ３３において、カメラ１０２は、表示部１２５を視聴する視聴者である使用者の存在する方向を撮像し、撮像した画像をテレビジョン受像機１０１に供給する。
【００７３】
ステップＳ３４において、位置特定部１３４は、カメラ１０２より供給されてきた画像における顔画像を検出し、表示部１２５の表示方向に対して、視聴者である使用者の存在する方向を特定し、特定した方向の情報を多視差画像変換部１３２に供給する。
【００７４】
ステップＳ３５において、多視差画像変換部１３２は、３次元画像記憶部１３１に記憶されている３次元画像である左眼用画像および右眼用画像を読み出し、これらを利用して多視差画像に変換する。より詳細には、多視差画像変換部１３２は、左眼用画像および右眼用画像の視差量を、表示部１２５に対する視聴者の存在する方向の視点の画像に対しては大きく、また、それ以外の方向からの視点の画像に対しては小さくなるように分割し、分割した視差量に応じて、左眼用画像および右眼用画像を、内挿補間により多視差画像に変換する。多視差画像変換部１３２は、変換した多視差画像を多視差画像合成部１３３に供給する。
【００７５】
ステップＳ３６において、多視差画像合成部１３３は、表示部１２５において、多視差の３次元画像として表示可能となるように、多視差画像を合成して合成画像を生成し、表示部１２５に供給する。
【００７６】
ステップＳ３７において、表示部１２５は、多視差画像が合成された合成画像を表示する。
【００７７】
ステップＳ３８において、制御部１２１は、入力部１２２が操作されて、表示の終了が指示されたか否かを判定し、終了が指示されていない場合、処理は、ステップＳ３１に戻る。すなわち、終了が指示されるまで、ステップＳ３１乃至Ｓ３８の処理が繰り返される。そして、ステップＳ３８において、終了が指示されたとみなされた場合、処理は、終了する。
【００７８】
すなわち、ステップＳ３５では、多視差画像変換部１３２は、基本的に、図３乃至図５を参照して説明した多視差画像変換部３２による手法と同様の手法により、左眼用画像および右眼用画像を多視差画像に変換する。ここで、図３乃至図５を参照して説明した場合と同様に、左眼用画像および右眼用画像を５視点の多視差画像に変換することを考えるものとする。また、図９で示されるように、表示部１２５に対して視聴画像Ｖ１１乃至Ｖ１５の５視点による多視差画像が視聴できるものとする。
【００７９】
さらに、位置特定部１３４により、視聴画像Ｖ１１乃至Ｖ１５の視線方向の角度に対して、視聴者である使用者Ｈ１１が、左眼および右眼により、それぞれ視聴画像Ｖ１２，Ｖ１１を視聴可能であり、使用者Ｈ１２が、左眼および右眼により、それぞれ視聴画像Ｖ１５，Ｖ１４を視聴可能である方向であるものとする。このとき、多視差画像変換部１３２は、視聴画像Ｖ１２，Ｖ１１、および視聴画像Ｖ１５，Ｖ１４で視聴可能な多視差画像の視差量を大きく設定し、その他の視差量を小さくするように視差量を分割して、内挿補間により多視差画像に変換する。
【００８０】
また、位置特定部１３４により、図１０で示されるように、視聴画像Ｖ１１乃至Ｖ１５の視線方向の角度に対して、視聴者である使用者Ｈ１１が、左眼および右眼により、それぞれ視聴画像Ｖ１４，Ｖ１３の多視差画像を視聴可能であり、使用者Ｈ１２が、左眼および右眼により、それぞれ視聴画像Ｖ１５，Ｖ１４の多視差画像を視聴可能である方向であるものとする。このとき、多視差画像変換部１３２は、視聴画像Ｖ１４，Ｖ１３、および視聴画像Ｖ１５，Ｖ１４を視聴可能な多視差画像の視差量を大きく設定し、その他の視差量を小さくするように視差量を分割して、内挿補間により多視差画像に変換する。
【００８１】
このように、カメラ１０２により撮像される画像に基づいて、視聴者である使用者の存在する表示部１２５に対する方向の２視差画像については、視差量を大きくするように設定し、その他の視差画像については、視差量が小さくなるように、視差量を分割し、分割した視差量に応じて、多視差画像が生成される。これにより、テレビジョン受像機１０１を視聴する視聴者である使用者は、常に、ある程度の視差量が保証された状態で多視差画像を様々な方向から視聴することが可能となる。
【００８２】
尚、図９，図１０においては、テレビジョン受像機１０１と視聴画像Ｖ１１乃至１５とそれぞれ結ぶ直線の成す角が、それぞれの視聴画像間の視差量を表現しており、図９においては、視聴画像Ｖ１２，Ｖ１１、および視聴画像Ｖ１５，Ｖ１４のそれぞれの成す角が、その他の成す角よりも大きく構成されることにより、他の視差量よりも大きいことが表現されている。同様に、図１０においては、視聴画像Ｖ１４，Ｖ１３、および視聴画像Ｖ１５，Ｖ１４のそれぞれの成す角が、その他の成す角よりも大きく構成されることにより、他の視差量よりも大きいことが表現されている。
【００８３】
また、以上においては、左眼用画像および右眼用画像からなる１組の視差画像を、内挿補間により多視差画像に変換する例について説明してきたが、上述したように視聴者が存在する方向の視差量を大きくするように視差量を分割するようにする限り、外挿補間により多視差画像を生成するようにしても良い。
【００８４】
以上の処理により、左眼用画像および右眼用画像からなる１組の２視点の画像を、視差量を分割して内挿補間により多視差画像に変換する際、視聴者が視聴する方向における視差量を大きくし、それ以外の方向の視差量を小さくするように視差量を不均等に分割することにより、従来の均等に視差量を分割した状態よりも、３次元画像を視聴する際の立体感の低減を抑制することが可能となる。また、視聴者の方向を検出しながら、リアルタイムで方向に応じて視差量を変化させながら多視差画像に変換することにより、視聴者は、視聴する位置を意識することなく、ある程度の視差量が保証された状態で３次元画像における立体感を感じ取ることが可能となる。
【００８５】
ところで、上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【００８６】
図１１は、汎用のパーソナルコンピュータの構成例を示している。このパーソナルコンピュータは、CPU(Central Processing Unit)１００１を内蔵している。CPU１００１にはバス１００４を介して、入出力インタ-フェイス１００５が接続されている。バス１００４には、ROM(Read Only Memory)１００２およびRAM(Random Access Memory)１００３が接続されている。
【００８７】
入出力インタフェイス１００５には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部１００６、処理操作画面や処理結果の画像を表示デバイスに出力する出力部１００７、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部１００８、LAN（Local Area Network）アダプタなどよりなり、インターネットに代表されるネットワークを介した通信処理を実行する通信部１００９が接続されている。また、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは半導体メモリなどのリムーバブルメディア１０１１に対してデータを読み書きするドライブ１０１０が接続されている。
【００８８】
CPU１００１は、ROM１００２に記憶されているプログラム、または磁気ディスク、光ディスク、光磁気ディスク、もしくは半導体メモリ等のリムーバブルメディア１０１１から読み出されて記憶部１００８にインストールされ、記憶部１００８からRAM１００３にロードされたプログラムに従って各種の処理を実行する。RAM１００３にはまた、CPU１００１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【００８９】
以上のように構成されるコンピュータでは、CPU１００１が、例えば、記憶部１００８に記憶されているプログラムを、入出力インタフェース１００５及びバス１００４を介して、RAM１００３にロードして実行することにより、上述した一連の処理が行われる。
【００９０】
コンピュータ（CPU１００１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア１０１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
【００９１】
コンピュータでは、プログラムは、リムーバブルメディア１０１１をドライブ１０１０に装着することにより、入出力インタフェース１００５を介して、記憶部１００８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部１００９で受信し、記憶部１００８にインストールすることができる。その他、プログラムは、ROM１００２や記憶部１００８に、あらかじめインストールしておくことができる。
【００９２】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【００９３】
また、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。
【００９４】
なお、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
【００９５】
例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
【００９６】
また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。
【００９７】
さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
【００９８】
尚、本技術は、以下のような構成も取ることができる。
（１）  ３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換部と、
前記多視差画像変換部により変換された多視差画像を合成して表示する表示部と
を含む画像処理装置。
（２）  前記多視差画像変換部は、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部の正面方向に対して視差量が大きくなるように不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する
（１）に記載の画像処理装置。
（３）  前記多視差画像変換部は、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部を視聴する視聴者の存在する方向に対して視差量が大きくなるように不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する
（１）または（２）に記載の画像処理装置。
（４）  前記表示部を視聴する視聴者の、前記表示部に対する位置を検出する視聴者位置検出部をさらに含み、
前記多視差画像変換部は、前記視聴者位置検出部により検出された視聴者の位置の情報に基づいて、前記３次元画像を視聴するための１組の視差画像の視差量を、前記表示部を視聴する視聴者の存在する方向に対して視差量が大きくなるように不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する
（１）乃至（３）のいずれかに記載の画像処理装置。
（５）  前記視聴者位置検出部は、画像を撮像し、前記視聴者の顔画像を検出して、前記顔画像を検出した位置を、前記表示部を視聴する視聴者の、前記表示部に対する位置として検出する、または、サーモグラフィにより検出された熱分布の画像に基づいて、前記表示部を視聴する視聴者の、前記表示部に対する位置として検出する
（１）乃至（４）のいずれかに記載の画像処理装置。
（６）  ３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換処理と、
前記多視差画像変換処理により変換された多視差画像を合成して表示する表示処理と
を含む画像処理方法。
（７）  ３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換ステップと、
前記多視差画像変換ステップの処理により変換された多視差画像を合成して表示する表示ステップと
を含む処理をコンピュータに実行させるためのプログラム。
（８）  ３次元画像を視聴するための１組の視差画像の視差量を不均等に分割して、不均等に分割された視差量毎に１組の視差画像が構成されるように、多視点の画像を生成することで、前記１組の視差画像を多視差画像に変換する多視差画像変換部と、
前記多視差画像変換部により変換された多視差画像を合成して表示する表示部と
を含む電子機器。
【符号の説明】
【００９９】
１１  携帯端末，  ２１  制御部，  ２２  入力部，  ２３  撮像部，  ２４  表示制御部，  ２５  表示部，  ３１  ３次元画像記憶部，  ３２  他視差画像変換部，  ３３  多視差画像合成部，  ４１  通信部，  １０１  テレビジョン受像機，  １０２  カメラ，  １２１  制御部，  １２２  入力部，  １２３  チューナ，  １２４  表示制御部，  １２５  表示部，  １３１  ３次元画像記憶部，  １３２  他視差画像変換部，  １３３  多視差画像合成部
【図１】
2013183391.tif 000003
【図２】
2013183391.tif 000004
【図３】
2013183391.tif 000005
【図４】
2013183391.tif 000006
【図５】
2013183391.tif 000007
【図６】
2013183391.tif 000008
【図７】
2013183391.tif 000009
【図８】
2013183391.tif 000010
【図９】
2013183391.tif 000011
【図１０】
2013183391.tif 000012
【図１１】
2013183391.tif 000013