(57)【要約】【課題】視差の大きさが制限された状態で立体感を強調することが可能な画像処理方法、画像処理装置、及び電子機器を提案する。【解決手段】原画像と、当該原画像中の視差の分布を示す視差マップとを取得することと、取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割することと、前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整することと、を含む、画像処理方法。【選択図】図１
2015149547.tif 000002
【特許請求の範囲】
【請求項１】
原画像と、当該原画像中の視差の分布を示す視差マップとを取得することと、
取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割することと、
前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整することと、
を含む、画像処理方法。
【請求項２】
前記一の領域または前記他の領域に関連付けられた情報は前記視差であり、
前記一の領域の視差は、前記他の領域の視差を基準として相対的に調整される、請求項１に記載の画像処理方法。
【請求項３】
前記一の領域の視差は、前記一の領域と前記他の領域との間の視差の差が大きくなるように調整される、請求項２に記載の画像処理方法。
【請求項４】
前記一の領域に対応付けられた前記視差は、当該一の領域及び前記他の領域のいずれかの領域に表示されたオブジェクトの属性に基づき調整される、請求項１に記載の画像処理方法。
【請求項５】
前記オブジェクトの属性は、当該オブジェクトの種別を示し、
当該オブジェクトの種別が人間を示す前記領域と、当該領域とは異なる領域との間の視差の差が大きくなるように、前記一の領域の視差が調整される、請求項４に記載の画像処理方法。
【請求項６】
前記オブジェクトの属性は、当該オブジェクトに対する注目度の高さを示し、
当該オブジェクトに対する注目度が高い領域ほど、当該領域とは異なる領域との間の視差の差が大きくなるように、前記一の領域の視差が調整される、請求項４に記載の画像処理方法。
【請求項７】
前記一の領域に対応付けられた前記視差は、前記原画像が撮像されたシーンに応じて調整される、請求項１に記載の画像処理方法。
【請求項８】
前記一の領域に対応付けられた前記視差は、前記当該一の領域及び前記他の領域のうちのいずれかの領域の面積に基づき調整される、請求項１に記載の画像処理方法。
【請求項９】
前記面積の小さい領域ほど、当該領域とは異なる領域との間の視差の差が大きくなるように、前記一の領域の視差が調整される、請求項８に記載の画像処理方法。
【請求項１０】
前記一の領域に対応付けられた前記視差は、前記当該一の領域及び前記他の領域のうちのいずれかの領域の奥行き方向の位置に基づき調整される、請求項１に記載の画像処理方法。
【請求項１１】
前記奥行き方向に沿ってより手前側に位置する領域ほど、当該領域とは異なる領域との間の視差の差が大きくなるように、前記一の領域の視差が調整される、請求項１０に記載の画像処理方法。
【請求項１２】
前記原画像は、前記視差マップに示された前記視差の分布に基づき、オブジェクトごとに前記複数の領域に分割される、請求項１に記載の画像処理方法。
【請求項１３】
前記一の領域と前記他の領域とは、奥行き方向に沿って互いに隣接する領域である、請求項１に記載の画像処理方法。
【請求項１４】
前記一の領域に対応付けられた視差は、前記原画像中における当該一の領域中の各画素に対応付けられた視差に基づき決定される、請求項１に記載の画像処理方法。
【請求項１５】
前記一の領域に対応付けられた視差は、前記原画像中における当該一の領域中の各画素に対応付けられた視差の中央値に基づき決定される、請求項１４に記載の画像処理方法。
【請求項１６】
前記一の領域に対応付けられた視差が調整された後の、当該一の領域中の各画素に対応する視差は、当該一の領域中に対応付けられた視差に基づき調整される、請求項１に記載の画像処理方法。
【請求項１７】
原画像と、当該原画像中の視差の分布を示す視差マップとを取得する取得部と、
取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割する領域分割部と、
前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整する視差調整部と、
を備える、画像処理装置。
【請求項１８】
原画像と、当該原画像中の視差の分布を示す視差マップとを取得する取得部と、
取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割する領域分割部と、
前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整する視差調整部と、
を備える、電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、画像処理方法、画像処理装置、及び電子機器に関する。
【背景技術】
【０００２】
左右の目に異なる視差のついた映像をみせることで、視聴者に対して映像を立体的に感じさせる三次元（３Ｄ）映像技術が開発されている。左右の目に異なる映像を見せる方法としては、専用の眼鏡を用いた方式が古くから提案されてきたが、近年では、専用の眼鏡を用いずに３Ｄ映像を見せることが可能な裸眼３Ｄ映像技術が提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−１１５１９８公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
一方で、３Ｄ映像を長時間視聴し続けると眼精疲労を引き起こすことが知られており、特に、大きく視差のついた映像を視聴したときに疲労が顕著に表れる傾向にある。また、裸眼３Ｄ映像技術においては、視差が大きくなると、左右の目のうち一方の目に対して他方の目に対応した映像が漏れ込み、映像のボケや二重像として顕在化する、クロストークと呼ばれる現象が発生する場合がある。
【０００５】
これに対して、特許文献１には、視差の大きさを抑制する技術が提案されている。このような視差の大きさを抑制する技術は、眼精疲労の予防やクロストークの抑止として効果的に作用しているが、視差の抑制に伴い、立体感が制限される場合がある。
【０００６】
そこで、本開示では、視差の大きさが制限された状態で立体感を強調することが可能な、新規かつ改良された画像処理方法、画像処理装置、及び電子機器を提案する。
【課題を解決するための手段】
【０００７】
本開示によれば、原画像と、当該原画像中の視差の分布を示す視差マップとを取得することと、取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割することと、前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整することと、を含む、画像処理方法が提供される。
【０００８】
また、本開示によれば、原画像と、当該原画像中の視差の分布を示す視差マップとを取得する取得部と、取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割する領域分割部と、前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整する視差調整部と、を備える、画像処理装置が提供される。
【０００９】
また、本開示によれば、原画像と、当該原画像中の視差の分布を示す視差マップとを取得する取得部と、取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割する領域分割部と、前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整する視差調整部と、を備える、電子機器が提供される。
【発明の効果】
【００１０】
以上説明したように本開示によれば、視差の大きさが制限された状態で立体感を強調することが可能な、新規かつ改良された画像処理方法、画像処理装置、及び電子機器が提供される。
【００１１】
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
【図面の簡単な説明】
【００１２】
【図１】本開示の実施形態に係る画像処理装置を含むシステムの概略的な構成の一例を示した説明図である。
【図２】同実施形態に係る表示装置の概略的な構成の一例を示した説明図である。
【図３】同実施形態に係る画像処理装置の機能構成の一例を示したブロック図である。
【図４】原画像の一例を示した図である。
【図５】視差マップの一例を示した図である。
【図６】原画像の領域分割について説明するための図である。
【図７】視差値の調整に係る処理について説明するための説明図である。
【図８】調整後の視差マップの一例を示した図である。
【図９】同実施形態に係る画像処理装置の一連の処理の流れを示したフローチャートである。
【図１０】変形例に係る画像処理装置の機能構成の一例を示したブロック図である。
【図１１】ハードウェア構成の一例を示した図である。
【図１２】同実施形態に係る画像処理装置の適用例１（テレビジョン装置）の外観を表す斜視図である。
【図１３】同実施形態に係る画像処理装置の適用例２（スマートフォン）の外観を表す斜視図である。
【発明を実施するための形態】
【００１３】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１４】
なお、説明は以下の順序で行うものとする。
１．構成
１．１．概要
１．２．表示装置の構成
１．３．画像処理装置の構成
２．処理の流れ
３．変形例
４．ハードウェア構成
５．適用例
６．まとめ
【００１５】
＜１．構成＞
［１．１．概要］
まず、図１を参照しながら、本実施形態に係る画像処理装置の概要について説明する。図１は、本実施形態に係る画像処理装置を含むシステムの概略的な構成の一例を示した説明図である。
【００１６】
図１に示すように、本実施形態に係る画像処理装置１０は、表示装置２０に接続される。なお、画像処理装置１０は、表示装置２０に内蔵されてもよい。以降では、画像処理装置１０が、表示装置２０とは別筐体として設けられているものとして説明する。
【００１７】
本実施形態に係る表示装置２０は、表示装置２０の表示面の前方において互いに異なる所定の位置に複数（少なくとも２以上）の仮想視点をあらかじめ設定し、当該仮想視点のそれぞれで異なる視点映像を視聴可能に構成されている。このような構成により、例えば、視聴者の左右の目がそれぞれ異なる仮想視点となるように、各仮想視点の位置をあらかじめ調整し、各仮想視点に対して異なる視差が設定された視差画像を表示させることで、視聴者は、立体感を持った画像を視聴することが可能となる。表示装置２０の具体的な一例として、裸眼３Ｄディスプレイが挙げられる。以降では、表示装置２０が、立体視を可能とする裸眼３Ｄディスプレイとして構成されるものとして説明する。
【００１８】
画像処理装置１０は、表示対象となる原画像を外部から取得し、取得した原画像に基づき各仮想視点に対応する視点画像を生成して表示装置２０に出力する。例えば、画像処理装置１０は、静止画像や動画像などの画像を含む放送を受信するためのアンテナ３０に接続されていてもよい。
【００１９】
なお、本説明において原画像とは、各仮想視点に対応する視点画像の生成元となる画像を示すものであり、当該視点画像を生成可能であれば、その態様は特に限定されない。例えば、原画像は、静止画像であってもよいし、動画像であってもよい。また、原画像は、立体視を実現するための、所謂、ステレオ画像であってもよいし、立体視を考慮していない画像（換言すると、１視点分の画像）であってもよい。なお、立体視を考慮していない画像を原画像として取得した場合には、画像処理装置１０が、当該原画像に対して画像解析を施すことで、当該解析結果に基づき各視点画像を生成すればよい。また、ステレオ画像を原画像とする場合においても、当該ステレオ画像よりも多くの視点を考慮した視点画像を必要とする場合には、画像処理装置１０が、当該原画像に対して画像解析を施すことで、必要とされる視点分の視点画像を生成すればよい。
【００２０】
また、画像処理装置１０が原画像を取得する取得元は特に限定されない。例えば、図１に示すように、画像処理装置１０は、放送として配信された原画像を、アンテナ３０を介して受信してもよい。また、他の一例として、画像処理装置１０は、外部メディアに記録された原画像を当該外部メディアから読み出してもよい。また、他の一例として、画像処理装置１０内に原画像を記憶するための記憶部を設け、画像処理装置１０は、当該記憶部に記憶された原画像を読み出す構成としてもよい。
【００２１】
一方で、３Ｄ映像を長時間視聴し続けると眼精疲労を引き起こすことが知られており、特に、大きく視差のついた映像を視聴したときに疲労が顕著に表れる傾向にある。また、裸眼３Ｄ映像技術においては、視差が大きくなると、左右の目のうち一方の目に対して他方の目に対応した映像が漏れ込み、映像のボケや二重像として顕在化する、クロストークと呼ばれる現象が発生する場合がある。
【００２２】
これに対して、本実施形態に係る画像処理装置１０は、原画像に基づく視差のダイナミックレンジ（以降では、「視差レンジ」と呼ぶ場合がある）を維持しつつ、立体感が強調されるように、各仮想視点に対応する視差画像の視差を調整可能に構成されている。このような構成により、本実施形態に係る画像処理装置１０は、クロストークの発生を抑止しつつ、立体感が強調された画像を提供することが可能となる。
【００２３】
そこで、以降では、まず前提として、表示装置２０の構成について説明し、次いで、本実施形態に係る画像処理装置１０の詳細について、特に上記に示した視差の調整に係る処理に着目して説明する。
【００２４】
［１．２．表示装置の構成］
まず、図２を参照しながら、本実施形態に係る表示装置２０の構成の一例について説明する。図２は、本実施形態に係る表示装置の概略的な構成の一例を示した説明図である。なお、図２において、横方向で示されたｘ方向は、表示装置２０の表示面に対する水平方向を示しており、図面に対して垂直な方向で示されたｙ方向は、表示装置２０の表示面に対する垂直方向を示している。また、縦方向で示されたｚ方向は、表示装置２０の表示面に対する奥行き方向を示している。
【００２５】
図２に示すように、表示装置２０は、バックライト２１と、バリア２３と、表示パネル２５とを含む。図２に示す構成は、例えば、表示パネル２５として液晶パネルを使用した表示装置（ディスプレイ）を示しており、バックライト２１から照射され表示パネル２５を透過した光が像として視聴者に到達する。図２に示す構成では、バックライト２１の前方にバリア２３が設けられている。また、バリア２３の前方には、当該バリア２３と所定の距離だけ離間した位置に表示パネル２５が設けられている。
【００２６】
バリア２３は、例えば、レンチキュラ板やパララクスバリア等の光学部材からなる。バリア２３には、ｘ方向に沿って開口部が所定の周期で設けられており、バックライト２１から照射された光のうち、バリア２３の開口部を通過した光のみが表示パネル２５に到達する。
【００２７】
表示パネル２５は、複数の画素を含む。また、表示パネル２５の各画素は、あらかじめ設定された複数の仮想視点のいずれかを示す制御情報（以降では「インデックス」と呼ぶ場合がある）が関連付けられており、当該インデックスに対応した視差画像の画素を表示するように構成されている。なお、各画素と各インデックスとの間の関連付けは、バリア２３、表示パネル２５、及び各仮想視点の間の位置関係に応じて、あらかじめ設計されている。
【００２８】
具体的な一例として、図２に示す例では、表示パネル２５は、それぞれ異なる仮想視点に対応したインデックスが関連付けられた画素２５ａ〜２５ｄを含む。例えば、図２に示された仮想視点ＭＬには、バリア２３の開口部を透過した光Ｌａが、画素２５ａを透過して収束し、仮想視点ＭＲには、バリア２３の開口部を透過した光Ｌｂが、画素２５ｂを透過して収束するように設計されている。このとき、例えば、仮想視点ＭＬに視聴者の左目が位置し、仮想視点ＭＲに視聴者の左目が位置する場合に、画素２５ａに左目用の視差画像を表示させ、画素２５ｂに右目用の視差画像を表示させることで、視聴者は、立体感を持った画像を視聴することが可能となる。
【００２９】
［１．３．画像処理装置の構成］
次に、本実施形態に係る画像処理装置１０について、図３を参照しながら説明する。図３は、本実施形態に係る画像処理装置１０の機能構成の一例を示したブロック図である。図３に示すように、画像処理装置１０は、画像取得部１１と、画像処理部１３とを含む。また、画像処理部１３は、領域分割部１３１と、視差調整部１３３とを含む。
【００３０】
画像取得部１１は、表示装置２０に表示させる各視点画像の生成元である原画像を外部から取得する。なお、前述したとおり、画像取得部１１は、放送として配信された原画像を、アンテナ３０を介して受信してもよいし、外部メディアに記録された原画像を当該外部メディアから読み出してもよい。例えば、図４には、原画像の一例が示されている。なお、以降では、図４に示された原画像を特に示す場合には、「原画像Ｖ１０」と記載する場合がある。
【００３１】
また、画像取得部１１は、原画像中の各画素に対して設定された、異なる視点画像間（例えば、左目用画像と右目用画像との間）の視差の分布を示す視差マップを取得する。このとき、画像取得部１１は、原画像と同様に、視差マップを外部から取得してもよい。また、他の一例として、画像取得部１１は、取得した原画像を解析することで、当該解析結果に基づき視差マップを生成してもよい。例えば、図５には、視差マップの一例が示されている。図５に示された視差マップＶ２０は、図４に示した原画像Ｖ１０に対応した視差マップである。なお、図５に示す視差マップＶ２０では、奥行き方向の手前側に位置する被写体ほど、より明るく（白く）表示され、奥側に位置する被写体ほど、より暗く（黒く）表示されている。
【００３２】
画像取得部１１は、取得した原画像及び視差マップを領域分割部１３１に出力する。
【００３３】
領域分割部１３１は、画像取得部１１から原画像及び視差マップを取得する。領域分割部１３１は、取得した原画像を、当該原画像中の被写体（即ち、当該原画像中に撮像されたオブジェクト）に基づき複数の領域に分割する。
【００３４】
具体的な一例として、領域分割部１３１は、原画像に対して画像処理を施すことで、当該原画像中のオブジェクトのエッジを抽出し、抽出したエッジに基づき、原画像を複数の領域に分割してもよい。
【００３５】
また、他の一例として、領域分割部１３１は、視差マップを基に、原画像を複数の領域に分割してもよい。この場合には、例えば、領域分割部１３１は、視差値が急激に変化している部分（即ち、視差値の変化量が閾値を超える部分）を境界として検出し、検出した境界に基づき、原画像をオブジェクトごとに複数の領域に分割してもよい。もちろん、領域分割部１３１は、原画像と視差マップの双方を利用して、当該原画像を複数の領域に分割してもよい。
【００３６】
例えば、図６には、原画像中のオブジェクトに基づき分割された各領域が模式的に示されている。図６に示す例では、図４に示した原画像Ｖ１０が、当該原画像Ｖ１０中のオブジェクトに基づき、領域Ｖ３１〜Ｖ３７に分割されている。以降では、図６に示した各領域Ｖ３１〜Ｖ３７を示す情報を、「領域情報Ｖ３０」と記載する場合がある。なお、原画像中の各領域を示す領域情報の態様は、当該各領域を特定可能な情報であれば特に限定されない。具体的な一例として、領域情報は、各領域を示す座標の情報であってもよいし、各領域を示したベクトルの情報であってもよい。また、領域情報は、図６に模式的に示すような画像情報であってもよい。
【００３７】
領域分割部１３１は、取得した原画像及び視差マップと、当該原画像中の各領域を示す領域情報とを視差調整部１３３に出力する。
【００３８】
視差調整部１３３は、原画像及び視差マップと、当該原画像中の各領域を示す領域情報とを領域分割部１３１から取得する。
【００３９】
視差調整部１３３は、取得した領域情報に示された各領域について、当該領域に含まれる各画素に設定された視差値を、取得した視差マップに基づき特定する。そして、視差調整部１３３は、領域情報に示された領域ごとに、領域中に含まれる各画素の視差値に基づき、当該領域に対応する視差の代表値を算出し、算出した視差の代表値を当該領域に関連付ける。
【００４０】
なお、領域ごとの視差の代表値は、当該領域中の各画素に対応する視差値に基づく値であれば、その算出方法は特に限定されない。具体的な一例として、視差調整部１３３は、領域中に含まれる各画素に対応する視差値の中間値を、当該領域のおける視差の代表値として算出してもよい。また、他の一例として、視差調整部１３３は、領域中に含まれる各画素に対応する視差値の平均値を、当該領域のおける視差の代表値として算出してもよい。なお、以降では、領域ごとに関連付けられた視差の代表値を、単に「領域に対応する視差値」と記載する場合がある。
【００４１】
以上のようにして、領域情報が示す各領域に対して、当該領域に対応する視差値が関連付けられる。図７は、視差調整部１３３による、視差値の調整に係る処理について説明するための説明図である。
【００４２】
図７において、参照符号Ｖ３１ａ〜Ｖ３７ａは、それぞれ、図６に示した領域Ｖ３１〜Ｖ３７に対応する視差値が示す、各領域の奥行き方向の位置を模式的に示している。即ち、図６に示す例の場合には、領域Ｖ３１が、他の領域に比べて最も手前側に位置するように視差値が関連付けられており、次いで、領域Ｖ３３、Ｖ３５、Ｖ３７の順に、より手前側に位置するように各視差値が関連付けられていることとなる。
【００４３】
次に、視差調整部１３３は、領域情報が示す各領域の属性に基づき、各領域に対応する視差値を調整する。なお、各領域の属性とは、その領域の特性を示す情報（パラメタ）であり、例えば、領域の面積や、領域の位置（例えば、奥行き方向の位置）等が挙げられる。
【００４４】
具体的な一例として、視差調整部１３３は、各領域の奥行き方向における位置に基づき、より手前側に位置する領域ほど、他の領域（例えば、奥行き方向に隣接する領域や、原画像中で近傍に位置する領域）との間の視差値の差が大きくなるように、各領域の視差値を調整する。
【００４５】
例えば、図７に示す例の場合には、参照符号Ｖ３１ａ〜Ｖ３７ａに示すように、図６における領域Ｖ３１が、他の領域Ｖ３３〜Ｖ３７に比べて最も手前側に位置する。そのため、視差調整部１３３は、参照符号Ｖ３１ｂ〜Ｖ３７ｂに示すように、領域Ｖ３１と、領域Ｖ３３（領域Ｖ３１と奥行き方向に隣接する領域）との間の視差値の差がより大きくなるように、領域Ｖ３３に対応する視差値を調整している。
【００４６】
なお、このとき、視差調整部１３３は、領域Ｖ３３に対応する視差値に替えて、領域Ｖ３１に対応する視差値を調整してもよい。即ち、視差調整部１３３は、領域Ｖ３１とＶ３３との間の視差値の差がより大きくなるように、領域Ｖ３１及びＶ３３のうち少なくともいずれか一方の視差値を、他方の視差値を基準として相対的に調整する。
【００４７】
また、他の一例として、視差調整部１３３は、より面積の小さい領域ほど、他の領域との間の視差の差が大きくなるように、各領域の視差値を調整してもよい。
【００４８】
また、視差調整部１３３は、領域の属性に限らず、当該領域中のオブジェクト（被写体）の属性に基づき、各領域に対応する視差値を調整してもよい。なお、領域中のオブジェクトの属性に基づき、各領域に対応する視差値を調整する態様については、変形例として別途後述する。
【００４９】
また、視差調整部１３３は、上記に示したいずれかの属性のみに限らず、複数の属性を組み合わせて各領域の視差値を調整してもよい。具体的な一例として、視差調整部１３３は、より面積が小さく、かつ、より手前側に位置する領域ほど、他の領域との間の視差の差が大きくなるように、各領域の視差値を調整してもよい。
【００５０】
なお、このとき視差調整部１３３は、眼精疲労の予防やクロストーク（ボケや二重像の発生）の抑止の観点から、視差値の調整前後において、視差レンジ、即ち、異なる領域間における視差値の差の最大が変化しないように、各領域の視差値を調整することがより望ましい。
【００５１】
しかしながら、本実施形態に係る視差調整部１３３による本動作は、各領域の視差値の調整時に、視差レンジを変化させない態様に限定されるものではない。例えば、視差調整部１３３は、視差値の調整前後において、各領域の視差値の変化量（例えば、当該変化量の最大値、平均値、または総和）よりも小さい範囲で、視差レンジを変化させてもよい。なお、「視差レンジを維持する」と記載した場合には、上記に示すように各領域の視差値の変化量よりも小さい範囲で視差レンジを変化させる場合と、視差レンジを変化させない場合との双方を包含するものとする。
【００５２】
ここで、視差調整部１３３による領域ごとの視差値の調整に係る処理について、以下に、より詳細に説明する。
【００５３】
まず、領域分割部１３１により原画像がＮ個の領域に分割されたものとし、ｉ番目の領域（０≦ｉ≦Ｎ−１）に対応する調整前の視差値をＤｉとし、調整後の視差値をＤ’ｉとする。なお、ここでは、説明を簡単にするために、０．０＝Ｄ０≦Ｄ１≦…≦ＤＮ−１＝１．０、０．０＝Ｄ’０≦Ｄ’１≦…≦Ｄ’Ｎ−１＝１．０とする。このとき、エネルギー関数Ｅを、以下に示す（式１）で表し、最適な視差調整Ｄ’ｏｐｔを、以下に示す（式２）で表すことで、エネルギー最大化問題に帰着することが可能である。
【００５４】
【数１】
2015149547.tif 000003
【００５５】
【数２】
2015149547.tif 000004
【００５６】
なお、上記（式１）において、Ｐは、奥行き方向に隣接する領域のペアの集合を示す。また、Ｗ（Ｄ’ｕ，Ｄ’ｖ）（＞０）は、領域ｕ、ｖのペアに対する重みを示している。
【００５７】
例えば、Ｗ（Ｄ’ｕ，Ｄ’ｖ）が、領域ｕ、ｖの平均視差が奥行き方向の手前側に位置するほど大きく、奥側に位置するほど小さくなるように定義された場合には、手前側の領域間の視差が強調され、領域間の前後関係が全体最適的に強調される性質をもつ。
【００５８】
また、他の一例として、視差調整部１３３は、各領域中のオブジェクトの顕著性（もしくは、誘目性、目立ちやすさ、注目度の高さ）を算出し、算出された顕著性の高さに応じて重みが大きくなるようにＷ（Ｄ’ｕ，Ｄ’ｖ）を定義してもよい。この場合には、例えば、視聴者がより注目しやすい箇所の立体感を強調する（増大させる）ことが可能となる。また、ユーザの視線を検出する構成（例えば、センサやカメラ）を設けることで、視差調整部１３３は、当該構成により検出されたユーザの視線に基づき当該ユーザが注目している領域を特定し、特定した領域の重みが大きくなるようにＷ（Ｄ’ｕ，Ｄ’ｖ）を定義してもよい。
【００５９】
また、前述したように、視差調整部１３３は、領域の大きさ（即ち、当該領域中のオブジェクトの大きさ）が小さいものほど注目すべき物体とみなし、重みが大きくなるようにＷ（Ｄ’ｕ，Ｄ’ｖ）を定義してもよい。もちろん、上記に示したＷ（Ｄ’ｕ，Ｄ’ｖ）の設定方法はあくまで一例であり、上述した設定基準に限定されるものではなく、また、複数の設定基準を組み合わせてもよいことは言うまでもない。
【００６０】
さらに、上記に示した（式１）に対して、調整前の視差を保つための拘束条件を加えたエネルギー最大化問題とすることも可能である。この場合のエネルギー関数Ｅ、即ち、調整前の視差を保つための拘束条件を加味したエネルギー関数Ｅは、以下に示す（式３）で表される。
【００６１】
【数３】
2015149547.tif 000005
【００６２】
なお、上記に示した（式３）において、λは非負の定数であり、λが大きいほど元の視差の値を保とうとする制約が強くなる。
【００６３】
各領域に対応する視差値を調整した後、視差調整部１３３は、調整後の領域に対応する視差値に基づき、当該領域中の各画素の視差値を調整する。例えば、領域に対応する調整前の視差値をＤ、調整後の視差値をＤ’とし、当該領域中の各画素に対応する調整前の視差値をｄ、調整後の視差値をｄ’とした場合には、各画素に対応する調整後の視差値ｄ’は、以下に示す（式４）に基づき算出することが可能である。
【００６４】
【数４】
2015149547.tif 000006
【００６５】
なお、上記に示した（式４）において、係数αは、０≦α≦１の条件を満たす実数値である。係数α＝０の場合には、領域中の画素の視差値に対して、当該領域に対応する視差値と同量のオフセットを与えた場合と等価となる。また、係数α＝１の場合には、領域中の画素の視差値は、当該領域に対応する視差値と等しくなる。
【００６６】
なお、係数αは、所定の定数としてあらかじめ設定しておいてもよいし、動的に算出されるように構成してもよい。なお、係数αを動的に算出する場合には、例えば、視差調整部１３３は、視差値の調整後において、隣接する領域間の視差値の差が大きい領域ほど、係数αの値が小さくなるように設定してもよい。また、他の一例として、視差調整部１３３は、領域に対応する視差値の調整前後間における変化量の大きさに応じて、係数αを調整してもよい。
【００６７】
以上のようにして、視差調整部１３３は、領域ごとに視差値を調整することで、視差マップを補正する。例えば、図８には、調整後の視差マップの一例が示されている。なお、図８に示す視差マップＶ４０は、図５に示した視差マップＶ２０中の各視差値が、図６に示した領域情報Ｖ３０が示す領域ごとに調整されることで補正された視差マップを示している。なお、図８に示す視差マップＶ４０は、図５に示す視差マップＶ２０と比較するとわかるように、最も手前側に位置する領域（オブジェクト）がより強調されるように、各視差値が調整されている。
【００６８】
視差マップを補正したら、視差調整部１３３は、原画像と、補正後（調整後）の視差マップとを、視点画像を生成するための構成（例えば、他の画像処理部や、表示装置２０）に出力する。なお、以降は、原画像と補正後の視差マップとに基づき、あらかじめ設定された各仮想視点に対応する視点画像が生成され、生成された各視点画像が表示装置２０の表示パネル２５に表示される。
【００６９】
なお、上記に示す例では、原画像中の各画素に関連付けられた視差値が、分割された領域ごとに調整される例について説明したが、各画素に関連付けられたパラメタであれば、調整対象は必ずしも視差値には限定されない。具体的な一例として、画像処理装置１０は、分割された領域ごとに、明度、コントラスト、彩度、色度、または空間周波数等が調整されるように、当該領域中の画素に関連付けられたパラメタ（例えば、画素値）が調整されるように構成してもよい。
【００７０】
＜２．処理の流れ＞
次に、本実施形態に係る画像処理装置１０の一連の動作の流れについて、図９を参照しながら説明する。図９は、本実施形態に係る画像処理装置１０の一連の処理の流れを示したフローチャートである。
【００７１】
（ステップＳ１０１）
まず、画像取得部１１は、表示装置２０に表示させる各視点画像の生成元である原画像を外部から取得する。なお、画像取得部１１は、放送として配信された原画像を、アンテナ３０を介して受信してもよいし、外部メディアに記録された原画像を当該外部メディアから読み出してもよい。
【００７２】
（ステップＳ１０３）
また、画像取得部１１は、原画像中の各画素に対して設定された、異なる視点画像間（例えば、左目用画像と右目用画像との間）の視差の分布を示す視差マップを取得する。このとき、画像取得部１１は、原画像と同様に、視差マップを外部から取得してもよい。また、他の一例として、画像取得部１１は、取得した原画像を解析することで、当該解析結果に基づき視差マップを生成してもよい。
【００７３】
画像取得部１１は、取得した原画像及び視差マップを領域分割部１３１に出力する。
【００７４】
（ステップＳ１０５）
領域分割部１３１は、画像取得部１１からが原画像及び視差マップを取得する。領域分割部１３１は、取得した原画像を、当該原画像中の被写体（即ち、当該原画像中に撮像されたオブジェクト）に基づき複数の領域に分割する。
【００７５】
領域分割部１３１は、取得した原画像及び視差マップと、当該原画像中の各領域を示す領域情報とを視差調整部１３３に出力する。
【００７６】
（ステップＳ１０７）
視差調整部１３３は、原画像及び視差マップと、当該原画像中の各領域を示す領域情報とを領域分割部１３１から取得する。
【００７７】
視差調整部１３３は、取得した領域情報に示された各領域について、当該領域に含まれる各画素に設定された視差値を、取得した視差マップに基づき特定する。そして、視差調整部１３３は、領域情報に示された領域ごとに、領域中に含まれる各画素の視差値に基づき、当該領域に対応する視差の代表値（即ち、領域に対応する視差値）を算出し、算出した視差値を当該領域に関連付ける。
【００７８】
（ステップＳ１０９）
次に、視差調整部１３３は、領域情報が示す各領域の属性に基づき、各領域に対応する視差値を調整する。なお、各領域の属性とは、その領域の特性を示す情報（パラメタ）であり、例えば、領域の面積や、領域の位置（例えば、奥行き方向の位置）等が挙げられる。
【００７９】
具体的な一例として、視差調整部１３３は、各領域の奥行き方向における位置に基づき、より手前側に位置する領域ほど、他の領域（例えば、奥行き方向に隣接する領域や、原画像中で近傍に位置する領域）との間の視差値の差が大きくなるように、各領域の視差値を調整する。
【００８０】
また、他の一例として、視差調整部１３３は、より面積の小さい領域ほど、他の領域との間の視差の差が大きくなるように、各領域の視差値を調整してもよい。
【００８１】
また、視差調整部１３３は、領域の属性に限らず、当該領域中のオブジェクト（被写体）の属性に基づき、各領域に対応する視差値を調整してもよい。
【００８２】
また、視差調整部１３３は、上記に示したいずれかの属性のみに限らず、複数の属性を組み合わせて各領域の視差値を調整してもよい。具体的な一例として、視差調整部１３３は、より面積が小さく、かつ、より手前側に位置する領域ほど、他の領域との間の視差の差が大きくなるように、各領域の視差値を調整してもよい。
【００８３】
なお、このとき視差調整部１３３は、視差レンジ、即ち、異なる領域間における視差値の差の最大が、視差値の調整前後において維持されるように、各領域の視差値を調整する。
【００８４】
（ステップＳ１１１）
各領域に対応する視差値を調整した後、視差調整部１３３は、調整後の領域に対応する視差値に基づき、当該領域中の各画素の視差値を調整する。
【００８５】
以上のようにして、視差調整部１３３は、領域ごとに視差値を調整することで、視差マップを補正する。
【００８６】
視差マップを補正したら、視差調整部１３３は、原画像と、補正後（調整後）の視差マップとを、視点画像を生成するための構成（例えば、他の画像処理部や、表示装置２０）に出力する。なお、以降は、原画像と補正後の視差マップとに基づき、あらかじめ設定された各仮想視点に対応する視点画像が生成され、生成された各視点画像が表示装置２０の表示パネル２５に表示される。
【００８７】
以上説明したように、本実施形態に係る画像処理装置１０は、各領域の属性（例えば、面積や奥行き方向の位置）に応じて、各領域の視差値を、視差レンジが維持されるように調整する。このような構成により、例えば、所定の条件を満たす領域（例えば、面積が小さい領域や、より手前側の領域）をより強調することが可能となる。また、このとき、調整前後において視差レンジが維持されるため、クロストークの発生を抑止することが可能となり、眼精疲労の予防にも繋がる。
【００８８】
＜３．変形例＞
次に、変形例に係る画像処理装置１０ａについて説明する。前述の実施形態に係る画像処理装置１０では、主に領域情報が示す各領域の属性（例えば、各領域の面積や奥行き方向の位置）に基づき、各領域に対応する視差値を調整していた。一方で、視差値を調整するための基準は各領域の属性に限定されない。例えば、変形例に係る画像処理装置１０ａは、各領域中のオブジェクト（被写体）の属性に基づき、各領域に対応する視差値を調整する。そこで、以降では、図１０を参照して、変形例に係る画像処理装置１０ａの詳細について説明する。図１０は、変形例に係る画像処理装置１０ａの機能構成の一例を示したブロック図である。
【００８９】
図１０に示すように、変形例に係る画像処理装置１０ａは、画像取得部１１と、画像処理部１３ａとを含む。なお、画像取得部１１の構成は、前述した実施形態に係る画像処理装置１０と同様のため詳細な説明は省略する。
【００９０】
画像処理部１３ａは、領域分割部１３１と、視差調整部１３３と、属性情報取得部１３５とを含む。即ち、変形例に係る画像処理部１３ａは、属性情報取得部１３５を含む点で、前述した画像処理装置１０（図３参照）における画像処理部１３とは異なる。
【００９１】
領域分割部１３１は、画像取得部１１からが原画像及び視差マップを取得する。領域分割部１３１は、取得した原画像を、当該原画像中の被写体（即ち、当該原画像中に撮像されたオブジェクト）に基づき複数の領域に分割する。なお、領域分割部１３１による、領域の分割に係る動作は、前述した実施形態に係る画像処理装置１０と同様である。
【００９２】
領域分割部１３１は、取得した原画像及び視差マップと、当該原画像中の各領域を示す領域情報とを視差調整部１３３に出力する。また、領域分割部１３１は、取得した原画像と、当該原画像中の各領域を示す領域情報とを属性情報取得部１３５に出力する。
【００９３】
属性情報取得部１３５は、原画像と、当該原画像中の各領域を示す領域情報とを領域分割部１３１から取得する。
【００９４】
属性情報取得部１３５は、取得した領域情報に基づき、原画像中の各領域を抽出する。そして、属性情報取得部１３５は、抽出した各領域に対して、例えば、画像解析処理を施すことで、当該各領域中に撮像されたオブジェクトの属性を特定する。なお、オブジェクトの属性としては、例えば、当該オブジェクトの種別（即ち、当該オブジェクトが何（例えば人）を示すか）が挙げられる。
【００９５】
また、各領域に撮像されたオブジェクトを所定の基準に基づき分類可能であれば、オブジェクトの属性は、当該オブジェクトの種別に限定されないことは言うまでもない。例えば、属性情報取得部１３５は、各領域に撮像されたオブジェクトの明度、コントラスト、彩度、色度、または空間周波数を属性として特定してもよい。また、属性情報取得部１３５は、オブジェクトの明度、コントラスト、彩度、色度、及び空間周波数等の情報のうち一部または全部を組み合わせて属性としてもよい。具体的な一例として、属性情報取得部１３５は、オブジェクトのコントラスト、彩度、色度、及び空間周波数のうち、少なくとも一部に基づき誘目性等のような顕著性に関する値を定量的に算出し、算出した顕著性に関する値を属性としてもよい。
【００９６】
属性情報取得部１３５は、各領域を示す領域情報と、当該領域から特定したオブジェクトの属性を示す属性情報とを関連付ける。そして、属性情報取得部１３５は、各領域情報に関連付けられた属性情報を、視差調整部１３３に出力する。
【００９７】
視差調整部１３３は、原画像及び視差マップと、当該原画像中の各領域を示す領域情報とを領域分割部１３１から取得する。また、視差調整部１３３は、各領域情報に関連付けられた属性情報を、属性情報取得部１３５から取得する。
【００９８】
視差調整部１３３は、取得した領域情報に示された各領域について、当該領域に含まれる各画素に設定された視差値を、取得した視差マップに基づき特定する。そして、視差調整部１３３は、領域情報に示された領域ごとに、領域中に含まれる各画素の視差値に基づき、当該領域に対応する視差の代表値を算出し、算出した視差の代表値を当該領域に関連付ける。なお、視差調整部１３３が、領域情報が示す各領域に対して、当該領域に対応する視差値を関連付ける処理は、前述した実施形態に係る画像処理装置１０と同様である。
【００９９】
次に、視差調整部１３３は、領域情報が示す各領域に関連付けられた属性（情報）に基づき、各領域に対応する視差値を調整する。前述の実施形態に係る画像処理装置１０（図３参照）では、視差調整部１３３が、各領域の属性（例えば、領域の面積や奥行き方向の位置）に基づき、各領域に対して重み付けを行い、当該重みに基づき各領域に対応する視差値を調整する例について説明した。これに対して、変形例に係る視差調整部１３３は、例えば、属性情報取得部１３５から取得した属性情報が示す、各領域中のオブジェクトの属性に基づき、各領域に対して重み付けを行い、当該重みに基づき各領域に対応する視差値を調整してもよい。
【０１００】
例えば、視差調整部１３３は、各領域に関連付けられた属性情報に基づき、各領域中のオブジェクトの種別を特定し、特定した当該オブジェクトの種別に応じて、各領域に対して重み付けを行ってもよい。具体的な一例として、視差調整部１３３は、オブジェクトの種別が人間を示す領域がより強調されるように（領域間の視差の差が大きくなるように）、各領域に対して重み付けを行ってもよい。
【０１０１】
また、視差調整部１３３は、前述した各領域の属性と、各領域中のオブジェクトの属性とを組み合わせることで、各領域に対して重み付けを行ってもよいことは言うまでもない。
【０１０２】
なお、視差調整部１３３による視差値の調整に係る動作は、前述した実施形態に係る画像処理装置１０と同様である。即ち、視差調整部１３３は、視差レンジ、即ち、異なる領域間における視差値の差の最大が、視差値の調整前後において維持されるように、各領域の視差値を調整する。
【０１０３】
以上のようにして、視差調整部１３３は、領域ごとに視差値を調整することで、視差マップを補正する。視差マップを補正したら、視差調整部１３３は、原画像と、補正後（調整後）の視差マップとを、視点画像を生成するための構成（例えば、他の画像処理部や、表示装置２０）に出力する。なお、以降は、原画像と補正後の視差マップとに基づき、あらかじめ設定された各仮想視点に対応する視点画像が生成され、生成された各視点画像が表示装置２０の表示パネル２５に表示される。
【０１０４】
以上説明したように、変形例に係る画像処理装置１０ａは、各領域中のオブジェクトの属性に応じて、各領域の視差値を、視差レンジが維持されるように調整する。このような構成により、例えば、所定のオブジェクト（例えば、人間）が撮像された領域がより強調することが可能となる。また、このとき、調整前後において視差レンジが維持されるため、クロストークの発生を抑止することが可能となり、眼精疲労の予防にも繋がる。
【０１０５】
なお、上記に示す例では、あらかじめ決められた基準に基づき各領域に対して重み付けを行う例について説明したが、当該重み付けの基準を動的に切り替えられるようにしてもよい。例えば、画像処理装置１０ａは、原画像に対して画像解析を施すことで、当該原画像が撮像されたシーンを特定し、特定したシーンに応じて、各領域に対する重み付けの基準を変更してもよい。具体的な一例として、特定したシーンがポートレートの場合には、画像処理装置１０ａは、オブジェクトの種別が人間を示す領域がより強調されるように、各領域の視差値を調整してもよい。また、特定したシーンが風景の場合には、画像処理装置１０ａは、近景（奥行き方向の手前側）がより強調されるように、各領域の視差値を調整してもよい。
【０１０６】
＜４．ハードウェア構成＞
次に、図１１を参照して、本実施形態に係る画像処理装置１０のハードウェア構成の一例について説明する。図１１は、本実施形態に係る画像処理装置１０のハードウェア構成の一例を示した図である。
【０１０７】
図１１に示すように、本実施形態に係る画像処理装置１０は、プロセッサ９０１と、メモリ９０３と、ストレージ９０５と、操作デバイス９０７と、表示デバイス９０９と、通信デバイス９１１と、バス９１３とを含む。
【０１０８】
プロセッサ９０１は、例えばＣＰＵ（Central  Processing  Unit）、ＧＰＵ（Graphics  Processing  Unit）、ＤＳＰ（Digital  Signal  Processor）又はＳｏＣ（System  on  Chip）であってよく、画像処理装置１０の様々な処理を実行する。プロセッサ９０１は、例えば、各種演算処理を実行するための電子回路により構成することが可能である。なお、前述した画像取得部１１及び画像処理部１３は、プロセッサ９０１により構成され得る。
【０１０９】
メモリ９０３は、ＲＡＭ（Random  Access  Memory）及びＲＯＭ（Read  Only  Memory）を含み、プロセッサ９０１により実行されるプログラム及びデータを記憶する。ストレージ９０５は、半導体メモリ又はハードディスクなどの記憶媒体を含み得る。
【０１１０】
操作デバイス９０７は、ユーザが所望の操作を行うための入力信号を生成する機能を有する。操作デバイス９０７は、例えばボタン及びスイッチなどユーザが情報を入力するための入力部と、ユーザによる入力に基づいて入力信号を生成し、プロセッサ９０１に供給する入力制御回路などから構成されてよい。
【０１１１】
表示デバイス９０９は、出力装置の一例であり、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）装置、有機ＥＬ（ＯＬＥＤ：Ｏｒｇａｎｉｃ  Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）ディスプレイ装置などの表示装置であってよい。表示デバイス９０９は、ユーザに対して画面を表示することにより情報を提供することができる。なお、前述した表示装置２０を、当該表示デバイス９０９として構成してもよいし、表示装置２０とは別に表示デバイス９０９を設けてもよい。
【０１１２】
通信デバイス９１１は、画像処理装置１０が備える通信手段であり、ネットワークを介して外部装置と通信する。通信デバイス９１１は、無線通信用のインタフェースであり、通信アンテナ、ＲＦ（Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ）回路、ベースバンドプロセッサなどを含んでもよい。
【０１１３】
通信デバイス９１１は、外部装置から受信した信号に各種の信号処理を行う機能を有し、受信したアナログ信号から生成したデジタル信号をプロセッサ９０１に供給することが可能である。
【０１１４】
バス９１３は、プロセッサ９０１、メモリ９０３、ストレージ９０５、操作デバイス９０７、表示デバイス９０９、及び通信デバイス９１１を相互に接続する。バス９１３は、複数の種類のバスを含んでもよい。
【０１１５】
また、コンピュータに内蔵されるＣＰＵ、ＲＯＭ及びＲＡＭなどのハードウェアを、上記した画像処理装置１０が有する構成と同等の機能を発揮させるためのプログラムも作成可能である。また、当該プログラムを記録した、コンピュータに読み取り可能な記憶媒体も提供され得る。
【０１１６】
＜５．適用例＞
上記に示した実施形態に係る画像処理装置の適用例について、以下に具体的な例を挙げて説明する。
【０１１７】
［５．１．適用例１：テレビジョン装置］
図１２はテレビジョン装置の外観構成を表している。このテレビジョン装置は、例えば、フロントパネル４１１およびフィルターガラス４１２を含む映像表示画面部４１０（表示装置２０）を備えている。なお、テレビジョン装置の筐体内に設けられた、映像表示画面部４１０への画像の表示に係るデバイス（例えば、ＣＰＵやＧＰＵのようなプロセッサ）が、上述した実施形態に係る画像処理装置１０に相当する。テレビジョン装置に上述した実施形態を適用することで、所定のオブジェクトの視差をより効果的に表現することが可能となり、また、クロストークの抑制も可能となる。そのため、長時間の鑑賞が想定されるテレビジョン装置においても観察者の疲労感を軽減することが可能になり、商品性の向上に貢献できる。
【０１１８】
［５．２．適用例２：スマートフォン］
図１３は、スマートフォンの外観を表している。このスマートフォンは、例えば、表示部４２１（表示装置２０）および非表示部（筐体）４２２と、操作部４２３とを備えている。操作部４２３は、（Ａ）に示したように非表示部４２２の前面に設けられていてもよいし、（Ｂ）に示したように上面に設けられていてもよい。なお、非表示部（筐体）４２２内に設けられた、表示部４３１への画像の表示に係るデバイス（例えば、ＣＰＵやＧＰＵのようなプロセッサ）が、上述した実施形態に係る画像処理装置１０に相当する。スマートフォンに上述した実施形態を適用することで、テレビジョン装置のような大型表示装置に比べて表現できる視差が小さいスマートフォンにおいても立体感を強調することが可能になり、商品性の向上に貢献できる。
【０１１９】
なお、上記に示した各適用例はあくまで一例であり、本実施形態に係る画像処理装置を適用可能な構成を限定するものではないことは、言うまでもない。
【０１２０】
＜６．まとめ＞
以上説明したように、本実施形態に係る画像処理装置１０は、各領域の属性（例えば、面積や奥行き方向の位置）や、各領域中のオブジェクトの属性等のように、各領域に関連付けられた情報に応じて、各領域の視差値を、視差レンジが維持されるように調整する。このような構成により、例えば、所定の条件を満たす領域をより強調することが可能となる。また、このとき、調整前後において視差レンジが維持されるため、クロストークの発生を抑止することが可能となり、眼精疲労の予防にも繋がる。即ち、本実施形態に係る画像処理装置１０に依れば、視差の大きさが制限された状態で立体感を強調することが可能となる。
【０１２１】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１２２】
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
【０１２３】
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
原画像と、当該原画像中の視差の分布を示す視差マップとを取得することと、
取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割することと、
前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整することと、
を含む、画像処理方法。
（２）
前記一の領域または前記他の領域に関連付けられた情報は前記視差であり、
前記一の領域の視差は、前記他の領域の視差を基準として相対的に調整される、前記（１）に記載の画像処理方法。
（３）
前記一の領域の視差は、前記一の領域と前記他の領域との間の視差の差が大きくなるように調整される、前記（２）に記載の画像処理方法。
（４）
前記一の領域に対応付けられた前記視差は、当該一の領域及び前記他の領域のいずれかの領域に表示されたオブジェクトの属性に基づき調整される、前記（１）〜（３）のいずれか一項に記載の画像処理方法。
（５）
前記オブジェクトの属性は、当該オブジェクトの種別を示し、
当該オブジェクトの種別が人間を示す前記領域と、当該領域とは異なる領域との間の視差の差が大きくなるように、前記一の領域の視差が調整される、前記（４）に記載の画像処理方法。
（６）
前記オブジェクトの属性は、当該オブジェクトに対する注目度の高さを示し、
当該オブジェクトに対する注目度が高い領域ほど、当該領域とは異なる領域との間の視差の差が大きくなるように、前記一の領域の視差が調整される、前記（４）に記載の画像処理方法。
（７）
前記一の領域に対応付けられた前記視差は、前記原画像が撮像されたシーンに応じて調整される、前記（１）〜（３）のいずれか一項に記載の画像処理方法。
（８）
前記一の領域に対応付けられた前記視差は、前記当該一の領域及び前記他の領域のうちのいずれかの領域の面積に基づき調整される、前記（１）〜（３）のいずれか一項に記載の画像処理方法。
（９）
前記面積の小さい領域ほど、当該領域とは異なる領域との間の視差の差が大きくなるように、前記一の領域の視差が調整される、前記（８）に記載の画像処理方法。
（１０）
前記一の領域に対応付けられた前記視差は、前記当該一の領域及び前記他の領域のうちのいずれかの領域の奥行き方向の位置に基づき調整される、前記（１）〜（３）のいずれか一項に記載の画像処理方法。
（１１）
前記奥行き方向に沿ってより手前側に位置する領域ほど、当該領域とは異なる領域との間の視差の差が大きくなるように、前記一の領域の視差が調整される、前記（１０）に記載の画像処理方法。
（１２）
前記原画像は、前記視差マップに示された前記視差の分布に基づき、オブジェクトごとに前記複数の領域に分割される、前記（１）〜（１１）のいずれか一項に記載の画像処理方法。
（１３）
前記一の領域と前記他の領域とは、奥行き方向に沿って互いに隣接する領域である、前記（１）〜（１２）のいずれか一項に記載の画像処理方法。
（１４）
前記一の領域に対応付けられた視差は、前記原画像中における当該一の領域中の各画素に対応付けられた視差に基づき決定される、前記（１）〜（１３）のいずれか一項に記載の画像処理方法。
（１５）
前記一の領域に対応付けられた視差は、前記原画像中における当該一の領域中の各画素に対応付けられた視差の中央値に基づき決定される、前記（１４）に記載の画像処理方法。
（１６）
前記一の領域に対応付けられた視差が調整された後の、当該一の領域中の各画素に対応する視差は、当該一の領域中に対応付けられた視差に基づき調整される、前記（１）〜（１５）のいずれか一項に記載の画像処理方法。
（１７）
原画像と、当該原画像中の視差の分布を示す視差マップとを取得する取得部と、
取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割する領域分割部と、
前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整する視差調整部と、
を備える、画像処理装置。
（１８）
原画像と、当該原画像中の視差の分布を示す視差マップとを取得する取得部と、
取得された前記原画像を、当該原画像中のオブジェクトに基づいて複数の領域に分割する領域分割部と、
前記複数の領域中の、少なくとも一の領域とは異なる他の領域に対する当該一の領域の視差を、前記視差マップにおける前記視差のダイナミックレンジが維持される範囲内において、当該一の領域または当該他の領域に関連付けられた情報に基づき調整する視差調整部と、
を備える、電子機器。
【符号の説明】
【０１２４】
１０、１０ａ  画像処理装置
１１    画像取得部
１３、１３ａ  画像処理部
１３１  領域分割部
１３３  視差調整部
１３５  属性情報取得部
２０    表示装置
２１    バックライト
２３    バリア
２５    表示パネル
【図１】
2015149547.tif 000007
【図２】
2015149547.tif 000008
【図３】
2015149547.tif 000009
【図７】
2015149547.tif 000010
【図９】
2015149547.tif 000011
【図１０】
2015149547.tif 000012
【図１１】
2015149547.tif 000013
【図１２】
2015149547.tif 000014
【図１３】
2015149547.tif 000015
【図４】
2015149547.tif 000016
【図５】
2015149547.tif 000017
【図６】
2015149547.tif 000018
【図８】
2015149547.tif 000019