(57)【要約】【課題】表示画像の投影像が所望する形式で表示された画像として観察できるように元の画像を処理する。【解決手段】例えば、入力画像をプロジェクターの投影中心から曲面スクリーンに投影したときの各点の画像情報が、これをユーザーの左目で観察する視線が仮想表示パネルに到達する点で表示されるように、入力画像を画像変換して、曲面スクリーンにプロジェクターで投影した画像をユーザーが観察している状態を模擬する。画素の変換ベクトルをテーブル化することで、メモリー量を削減する。また、垂直と水平方向に分離して画像変換を行なうことで処理負荷を軽減する。【選択図】  図４
2015041936.tif 000002
【特許請求の範囲】
【請求項１】
画像を入力する画像入力部と、
画像を表示する表示部と、
前記表示部の表示画像が所定の形式で表示された画像として観察されるように、前記入力画像を変換する画像変換部と、
を具備する画像表示装置。
【請求項２】
前記画像変換部は、曲面スクリーンにプロジェクターで投影した画像として観察されるように、前記入力画像を変換する、
請求項１に記載の画像表示装置。
【請求項３】
前記画像変換部は、前記入力画像を前記プロジェクターの投影中心から前記曲面スクリーンに投影したときの各点の画像情報が、これを観察するユーザーの視線が前記表示部の表示画像に到達する点で表示されるように、前記入力画像を画像変換する、
請求項２に記載の画像表示装置。
【請求項４】
前記画像変換部は、曲面パネルに提示した画像として観察されるように、前記入力画像を変換する、
請求項１に記載の画像表示装置。
【請求項５】
前記画像変換部は、前記入力画像を前記曲面パネルに提示したときの各点の画像情報が、これを観察するユーザーの視線が前記表示部の表示画像に到達する点で表示されるように、前記入力画像を画像変換する、
請求項４に記載の画像表示装置。
【請求項６】
前記画像変換部は、前記入力画像上の画素位置と前記表示部から出力される提示画像上の画素位置との対応関係を記述した変換ベクトルを代表点の画素についてのみ保持する変換テーブルと、前記変換テーブルから前記代表点以外の画素についての変換ベクトルを補間するテーブル補間部を備え、補間された変換ベクトルを用いて前記入力画像の変換を行なう、
請求項１に記載の画像表示装置。
【請求項７】
前記画像変換部は、垂直方向と水平方向に分離して前記入力画像の変換を行なう、
請求項１に記載の画像表示装置。
【請求項８】
前記画像変換部は、代表点についての垂直方向のＶ変換ベクトルと水平方向のＨ変換ベクトルをそれぞれ保持するＶ変換テーブル及びＨ変換テーブルと、前記Ｖ変換テーブルから前記代表点以外の画素についてのＶ変換ベクトルを補間するＶテーブル補間部と、前記Ｈ変換テーブルから前記代表点以外の画素についてのＨ変換ベクトルを補間するＨテーブル補間部を備える、
請求項６に記載の画像表示装置。
【請求項９】
前記Ｖテーブル補間部並びに前記Ｈテーブル補間部は、前記変換テーブルに保持された代表点の変換ベクトルの１次元重み付け和に基づいて垂直方向の画素についてテーブル補間を行なった後、垂直方向に補間済みの画素の変換ベクトルの１次元重み付け和に基づいて水平方向の画素についてテーブル補間を行なう、
請求項８に記載の画像表示装置。
【請求項１０】
前記Ｖテーブル補間部並びに前記Ｈテーブル補間部は、水平方向の画素についてテーブル補間を行なう際に、２のべき乗個の画素間隔で配置した代表位置の画素については隣接する代表点の重みを計算して重み付け和により変換ベクトルを補間し、前記代表位置間の画素については等間隔に２タップ重み付け和で変換ベクトルを補間する、
請求項８に記載の画像表示装置。
【請求項１１】
前記画像変換部は、前記Ｖテーブル補間部が補間したＶ変換ベクトルを用いて前記入力画像に対して垂直方向の変換を行なう画素値Ｖ変換部と、前記Ｈテーブル補間部が補間したＨ変換ベクトルを用いて前記画素値Ｖ変換部による変換済み画像に対して水平方向の変換を行なう画素値Ｈ変換部をさらに備える、
請求項８に記載の画像表示装置。
【請求項１２】
前記表示部はユーザーの左右の目毎に画像を表示し、
前記画像変換部は、左右いずれか一方の目用の画像用の変換テーブルのみを備え、前記テーブル補間部が補間した一方の目用の変換ベクトルを左右反転させて、他方の目用の変換ベクトルを得る、
請求項６に記載の画像表示装置。
【請求項１３】
前記画像入力部は、左目用画像と右目用画像を入力し、
前記画像変換部は、前記入力した左目用画像と右目用画像を１ライン毎に交互に挿入した形式にフォーマットと変換した後に、前記変換を行なう、
請求項１に記載の画像表示装置。
【請求項１４】
前記画像変換部は、前記入力画像をデガンマー処理した後に前記変換を行なう、
請求項１に記載の画像表示装置。
【請求項１５】
表示部で表示する画像が所定の形式で表示された画像として観察されるように変換する画像変換部を具備する画像処理装置。
【請求項１６】
表示部で表示する画像が所定の形式で表示された画像として観察されるように変換する画像変換ステップを有する画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本明細書で開示する技術は、表示画像の投影像を観察者に観察させる画像表示装置、並びに、投影される元の表示画像を処理する画像処理装置及び画像処理方法に関する。
【背景技術】
【０００２】
頭部に装着して画像の視聴に利用される頭部装着型の画像表示装置、すなわち、ヘッド・マウント・ディスプレイが知られている。一般に、頭部装着型画像表示装置は、左右の眼毎の画像表示部を持ち、また、ヘッドフォンと併用することで、視覚及び聴覚を制御できるように構成されている。また、頭部装着型画像表示装置は、左右の眼に違う画像を映し出すことも可能であり、左右の眼に視差のある画像を表示すれば３次元画像を提示することができる。
【０００３】
頭部装着型画像表示装置は、左右の眼の表示部として表示パネルとその表示画像を投影する光学系を装備して、ユーザーに虚像を提供する（すなわち、虚像を眼の網膜上に結像させる）。ここで、虚像は、物体が、焦点距離よりレンズに近い位置にある場合に、その物体側にできるものである。また、表示パネルには、例えば液晶や有機ＥＬ（Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）素子などの高解像度の表示素子が用いられる。
【０００４】
ユーザーに虚像を観察させる場合、虚像が形成されるユーザーからの距離などは、映像によって変化させるのが好ましい。例えば、映像に適した形で虚像を提供する表示装置について提案がなされている（例えば、特許文献１を参照のこと）。この表示装置は、ユーザーの左眼と右眼とで観察される同一の虚像を、同一平面上に配置する拡大光学系を備え、映像のアスペクト比に応じて、虚像のユーザーからの距離及び虚像の大きさを制御するようになっている。
【０００５】
また、表示画面を投影する光学レンズで適当な画角を設定するとともに、ヘッドフォンで多チャンネルを再現して、映画館で視聴しているような臨場感のある状態を模擬するヘッド・マウント・ディスプレイについて提案がなされている（例えば、特許文献２を参照のこと）。このヘッド・マウント・ディスプレイは、ユーザーの瞳孔の前方に２５ミリメートルだけ離間して配置した広角光学系と、さらにその前方に約０．７インチの有効画素範囲の大きさを持つ表示パネルを備え、広角光学系はユーザーの瞳から２０メートル先に、約７５０インチの虚像を網膜に結像する。これは映画館内でスクリーンの映像を鑑賞し易い画角である約４５を再現したことに相当する。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本明細書で開示する技術の目的は、ユーザーが所望する状態で画像を提示することができる、優れた画像表示装置を提供することにある。
【０００７】
本明細書で開示する技術のさらなる目的は、ユーザーが所望する状態で提示できるように画像を処理することができる、優れた画像処理装置及び画像処理方法を提供することにある。
【課題を解決するための手段】
【０００８】
本願は、上記課題を参酌してなされたものであり、請求項１に記載の技術は、
画像を入力する画像入力部と、
画像を表示する表示部と、
前記表示部の表示画像が所定の形式で表示された画像として観察されるように、前記入力画像を変換する画像変換部と、
を具備する画像表示装置である。
【０００９】
本願の請求項２に記載の技術によれば、請求項１に記載の画像表示装置の前記画像変換部は、曲面スクリーンにプロジェクターで投影した画像として観察されるように、前記入力画像を変換するように構成されている。
【００１０】
本願の請求項３に記載の技術によれば、請求項２に記載の画像表示装置の前記画像変換部は、前記入力画像を前記プロジェクターの投影中心から前記曲面スクリーンに投影したときの各点の画像情報が、これを観察するユーザーの視線が前記表示部の表示画像に到達する点で表示されるように、前記入力画像を画像変換するように構成されている。
【００１１】
本願の請求項４に記載の技術によれば、請求項１に記載の画像表示装置の前記画像変換部は、曲面パネルに提示した画像として観察されるように、前記入力画像を変換するように構成されている。
【００１２】
本願の請求項５に記載の技術によれば、請求項４に記載の画像表示装置の前記画像変換部は、前記入力画像を前記曲面パネルに提示したときの各点の画像情報が、これを観察するユーザーの視線が前記表示部の表示画像に到達する点で表示されるように、前記入力画像を画像変換するように構成されている。
【００１３】
本願の請求項６に記載の技術によれば、請求項１に記載の画像表示装置の前記画像変換部は、前記入力画像上の画素位置と前記表示部から出力される提示画像上の画素位置との対応関係を記述した変換ベクトルを代表点の画素についてのみ保持する変換テーブルと、前記変換テーブルから前記代表点以外の画素についての変換ベクトルを補間するテーブル補間部を備え、補間された変換ベクトルを用いて前記入力画像の変換を行なうように構成されている。
【００１４】
本願の請求項７に記載の技術によれば、請求項１に記載の画像表示装置の前記画像変換部は、垂直方向と水平方向に分離して前記入力画像の変換を行なうように構成されている。
【００１５】
本願の請求項８に記載の技術によれば、請求項６に記載の画像表示装置の前記画像変換部は、代表点についての垂直方向のＶ変換ベクトルと水平方向のＨ変換ベクトルをそれぞれ保持するＶ変換テーブル及びＨ変換テーブルと、前記Ｖ変換テーブルから前記代表点以外の画素についてのＶ変換ベクトルを補間するＶテーブル補間部と、前記Ｈ変換テーブルから前記代表点以外の画素についてのＨ変換ベクトルを補間するＨテーブル補間部を備えている。
【００１６】
本願の請求項９に記載の技術によれば、請求項８に記載の画像表示装置の前記Ｖテーブル補間部並びに前記Ｈテーブル補間部は、前記変換テーブルに保持された代表点の変換ベクトルの１次元重み付け和に基づいて垂直方向の画素についてテーブル補間を行なった後、垂直方向に補間済みの画素の変換ベクトルの１次元重み付け和に基づいて水平方向の画素についてテーブル補間を行なうように構成されている。
【００１７】
本願の請求項１０に記載の技術によれば、請求項８に記載の画像表示装置の前記Ｖテーブル補間部並びに前記Ｈテーブル補間部は、水平方向の画素についてテーブル補間を行なう際に、２のべき乗個の画素間隔で配置した代表位置の画素については隣接する代表点の重みを計算して重み付け和により変換ベクトルを補間し、前記代表位置間の画素については等間隔に２タップ重み付け和で変換ベクトルを補間するように構成されている。
【００１８】
本願の請求項１１に記載の技術によれば、請求項８に記載の画像表示装置前記画像変換部は、前記Ｖテーブル補間部が補間したＶ変換ベクトルを用いて前記入力画像に対して垂直方向の変換を行なう画素値Ｖ変換部と、前記Ｈテーブル補間部が補間したＨ変換ベクトルを用いて前記画素値Ｖ変換部による変換済み画像に対して水平方向の変換を行なう画素値Ｈ変換部をさらに備えている。
【００１９】
本願の請求項１２に記載の技術によれば、請求項６に記載の画像表示装置の前記表示部はユーザーの左右の目毎に画像を表示するように構成されている。そして、前記画像変換部は、左右いずれか一方の目用の画像用の変換テーブルのみを備え、前記テーブル補間部が補間した一方の目用の変換ベクトルを左右反転させて、他方の目用の変換ベクトルを得るように構成されている。
【００２０】
本願の請求項１３に記載の技術によれば、請求項１に記載の画像表示装置の前記画像入力部は、左目用画像と右目用画像を入力し、前記画像変換部は、前記入力した左目用画像と右目用画像を１ライン毎に交互に挿入した形式にフォーマットと変換した後に、前記変換を行なうように構成されている。
【００２１】
本願の請求項１４に記載の技術によれば、請求項１に記載の画像表示装置の前記画像変換部は、前記入力画像をデガンマー処理した後に前記変換を行なうように構成されている。
【００２２】
また、本願の請求項１５に記載の技術は、表示部で表示する画像が所定の形式で表示された画像として観察されるように変換する画像変換部を具備する画像処理装置である。
【００２３】
また、本願の請求項１６に記載の技術は、表示部で表示する画像が所定の形式で表示された画像として観察されるように変換する画像変換ステップを有する画像処理方法である。
【発明の効果】
【００２４】
本明細書で開示する技術によれば、所望する形式で表示された画像を観察している状態を模擬することができる、優れた画像表示装置を提供することができる。
【００２５】
また、本明細書で開示する技術によれば、表示画像の投影像が所望する形式で表示された画像として観察できるように元の画像を処理することができる、優れた画像処理装置及び画像処理方法を提供することができる。
【００２６】
なお、本明細書に記載された効果は、あくまでも例示であり、本発明の効果はこれに限定されるものではない。また、本発明が、上記の効果以外に、さらに付加的な効果を奏する場合もある。
【００２７】
本明細書で開示する技術のさらに他の目的、特徴や利点は、後述する実施形態や添付する図面に基づくより詳細な説明によって明らかになるであろう。
【図面の簡単な説明】
【００２８】
【図１】図１は、ヘッド・マウント・ディスプレイを装着したユーザーを正面から眺めた様子を示した図である。を示した図である。
【図２】図２は、ヘッド・マウント・ディスプレイを装着したユーザーを上方から眺めた様子を示した図である。
【図３】図３は、ヘッド・マウント・ディスプレイの内部構成例を示した図である。
【図４】図４は、曲面スクリーンにプロジェクターで投影しているように模擬された画像をユーザーが観察している様子を斜視した図である。
【図５】図５は、図４を上から見た様子を示した図である。
【図６】図６は、図４を横から見た様子を示した図である。
【図７】図７は、曲面パネルに提示しているように模擬された画像をユーザーが観察している様子を斜視した図である
【図８】図８は、図７を上から見た様子を示した図である。
【図９】図９は、図７を横から見た様子を示した図である。
【図１０】図１０は、入力画像と曲面パネルが提示する画像との関係を示した図である。
【図１１】図１１は、入力画像の一例を示した図である。
【図１２】図１２は、図１１に示した入力画像をプロジェクターで曲面スクリーンに投影した画像をユーザーの左目で観察している状態を模擬するように変換した画像を示した図である。
【図１３】図１３は、図１１に示した入力画像をプロジェクターで曲面スクリーンに投影した画像をユーザーの右目で観察している状態を模擬するように変換した画像を示した図である。
【図１４】図１４は、図１１に示した入力画像を曲面パネル上に提示した画像をユーザーの左目で観察している状態を模擬するように変換した画像を示した図である。
【図１５】図１５は、図１１に示した入力画像を曲面パネル上に提示した画像をユーザーの右目で観察している状態を模擬するように変換した画像を示した図である。
【図１６】図１６は、入力画像を他の形式で表示されている画像として観察されるように画像変換するための機能ブロック図である。
【図１７】図１７は、変換テーブル記憶部１６３０が代表点のみ変換ベクトルを保持している様子を模式的に示した図である。
【図１８】図１８は、代表点以外の表示画素についての変換ベクトルが補間処理により得た様子を模式的に示した図である。
【図１９】図１９は、水平及び垂直方向に分離しない場合の変換テーブルの補間処理方法を例示した図である。
【図２０】図２０は、水平及び垂直方向に分離する場合の変換テーブルの補間方法を説明するための図である。
【図２１】図２１は、水平及び垂直方向に分離する場合の変換テーブルの補間方法を説明するための図である。
【図２２Ａ】図２２Ａは、変換ベクトルの水平方向の補間（Ｈ補間）の処理を削減するハイブリッド補間方法を説明するための図である。
【図２２Ｂ】図２２Ｂは、変換ベクトルの水平方向の補間（Ｈ補間）の処理を削減するハイブリッド補間方法を説明するための図である。
【図２３】図２３は、図２２に示した方法を採用しない場合のＨ補間の方法を説明するための図である。
【図２４】図２４は、垂直方向の変換処理と水平方向の変換処理に分離して画像処理を行なう処理手順を模式的に示した図である。
【図２５】図２５は、２次元の画像変換処理を行なう例を示した図である。
【図２６Ａ】図２６Ａは、垂直方向の変換処理と水平方向の変換処理に分離して画像処理を行なう例を示した図である。
【図２６Ｂ】図２６Ｂは、垂直方向の変換処理と水平方向の変換処理に分離して画像処理を行なう例を示した図である。
【図２７】図２７は、画像変換機能部１６２０内部の回路ブロック図である。
【図２８】図２８は、フォーマット変換部２７０１により入力画像をフォーマット変換する仕組みを示した図である。
【図２９】図２９は、ガンマー補正がかけられた画像信号の信号値と輝度の関係を例示した図である。
【発明を実施するための形態】
【００２９】
以下、図面を参照しながら本明細書で開示する技術の実施形態について詳細に説明する。
【００３０】
図１には、ヘッド・マウント・ディスプレイを装着したユーザーを正面から眺めた様子を示している。
【００３１】
ヘッド・マウント・ディスプレイは、ユーザーが頭部又は顔部に装着した際にユーザーの眼を直接覆い、画像視聴中のユーザーに没入感を与えることができる。また、ユーザーの視線方向の風景を撮影する外側カメラ６１２を装備し、その撮像画像を表示することにより、ユーザーは間接的に現実世界の風景を眺める（すなわち、ビデオ・シースルーで風景を表示する）ことができる。さらに、ビデオ・シースルー画像に対し、ＡＲ（Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ）画像などの仮想的な表示画像を重ね合わせて見せることができる。また、表示画像は、外側（すなわち他人）からは見えないので、情報表示に際してプライバシーが守られ易い。
【００３２】
図示のヘッド・マウント・ディスプレイは、帽子形状に類似した構造体であり、装着したユーザーの左右の眼を直接覆うように構成されている。ヘッド・マウント・ディスプレイ本体の内側の左右の眼に対向する位置には、ユーザーが観察する表示パネル（図１では図示しない）が配設されている。表示パネルは、例えば有機ＥＬ素子や液晶ディスプレイなどの、基本的には２次元画面からなるマイクロ・ディスプレイで構成される。
【００３３】
図示のように、本体前面のほぼ中央には、周囲画像（ユーザーの視界）入力用の外側カメラ６１２が設置されている。また、ヘッド・マウント・ディスプレイ本体の左右の両端付近にそれぞれマイクロフォン４０３Ｌ、４０３Ｒが設置されている。左右ほぼ対称的にマイクロフォン４０３Ｌ、４０３Ｒを持つことで、中央に定位した音声（ユーザーの声）だけを認識することで、周囲の雑音や他人の話声と分離することができ、例えば音声入力による操作時の誤動作を防止することができる。但し、外側カメラやマイクロフォンなどの入力装置は、本明細書で開示する技術の必須の構成要素ではない。
【００３４】
図２には、図１に示したヘッド・マウント・ディスプレイを装着したユーザーを上方から眺めた様子を示している。図示のヘッド・マウント・ディスプレイは、ユーザーの顔面と対向する側面に、左眼用及び右眼用の表示パネル４０４Ｌ、４０４Ｒを持つ。表示パネル４０４Ｌ、４０４Ｒは、例えば有機ＥＬ素子や液晶ディスプレイなどのマイクロ・ディスプレイで構成される。虚像光学部４０１Ｌ、４０１Ｒはそれぞれ、表示パネル４０４Ｌ、４０４Ｒの表示画像を拡大投影して、ユーザーの左右の眼の網膜上に結像させる。したがって、表示パネル４０４Ｌ、４０４Ｒの表示画像は、虚像光学部４０１Ｌ、４０１Ｒを通過して、拡大虚像としてユーザーに観察される。また、眼の高さや眼幅にはユーザー毎に個人差があるため、左右の各表示系と装着したユーザーの眼とを位置合わせする必要がある。図２に示す例では、右眼用の表示パネルと左眼用の表示パネルの間に眼幅調整機構４０５を装備している。
【００３５】
また、ヘッド・マウント・ディスプレイ本体の外側には、外部の者が観察できる外側画像を外側表示部６１５が配設されている。図示の例では、左右一対の外側表示部６１５を備えているが、単一又は３以上の外側表示部６１５を備えていてもよい。外側画像は、表示部６０９と同じ画像、又は異なる画像のいずれであってもよい。但し、外側表示部６１５のような外側に情報を出力する手段は、本明細書で開示する技術の必須の構成要素ではない。
【００３６】
図３には、ヘッド・マウント・ディスプレイの内部構成例を示している。
【００３７】
制御部６０１は、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）６０１ＡやＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）６０１Ｂを備えている。ＲＯＭ６０１Ａ内には、制御部６０１で実行するプログラム・コードや各種データを格納している。制御部６０１は、ＲＡＭ６０１Ｂへロードしたプログラムを実行することで、画像の表示制御を始め、ヘッド・マウント・ディスプレイ全体の動作を統括的にコントロールする。ＲＯＭ６０１Ａに格納するプログラムやデータとして、画像の表示制御プログラムや、後述する画像変換を行なうための画像変換処理プログラムやその画像変換処理に使用する変換テーブルなどを挙げることができる。
【００３８】
入力操作部６０２は、キーやボタン、スイッチなど、ユーザーが入力操作を行なう１以上の操作子を備え、操作子を介したユーザーの指示を受け付けて、制御部６０１に出力する。また、入力操作部６０２は、リモコン受信部６０３で受信したリモコン・コマンドからなるユーザーの指示を受け付けて、制御部６０１に出力する。
【００３９】
状態情報取得部６０４は、当該ヘッド・マウント・ディスプレイ本体、又は当ヘッド・マウント・ディスプレイを装着したユーザーの状態情報を取得する機能モジュールである。状態情報取得部６０４は、例えばユーザーの頭部の位置や姿勢や姿勢の情報を取得する。位置姿勢情報の取得のため、状態情報取得部６０４は、ジャイロ・センサー、加速度センサー、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）センサー、地磁気センサー、ドップラー・センサー、赤外線センサー、電波強度センサーなどを備えている。また、状態情報取得部６０４は、ユーザーの状態を取得するために、圧力センサー、体温又は気温を検知する温度センサー、発汗センサー、脈拍センサー、筋電位センサー、眼電位センサー、脳波センサー、呼気センサーなどを備えている。
【００４０】
環境情報取得部６１６は、ヘッド・マウント・ディスプレイ本体又はこれを装着したユーザーを取り巻く環境に関する情報を取得する機能モジュールである。環境情報取得部６１６は、環境情報を検出するために、音センサーや風量センサーを始めとして各種環境センサーを装備していてもよい。前述したマイクロフォンや外側カメラ６１２を環境センサーに含めることもできる。
【００４１】
通信部６０５は、外部機器との通信処理、並びに通信信号の変復調並びに符号化復号処理を行なう。外部機器として、ユーザーが視聴する動画像などコンテンツを供給するコンテンツ再生装置（ブルーレイ・ディスク又はＤＶＤプレイヤー）や、ストリーミング・サーバーを挙げることができる。また、制御部６０１は、外部機器への送信データを通信部６０５から送出する。
【００４２】
通信部６０５の構成は任意である。例えば、通信相手となる外部機器との送受信動作に使用する通信方式に応じて、通信部６０５を構成することができる。通信方式は、有線、無線のいずれの形態であってもよい。ここで言う通信規格として、ＭＨＬ（Ｍｏｂｉｌｅ  Ｈｉｇｈ−ｄｅｆｉｎｉｔｉｏｎ  Ｌｉｎｋ）やＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）、ＨＤＭＩ（登録商標）（Ｈｉｇｈ  Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ）、Ｗｉ−Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信やＢＬＥ（Ｂｌｕｅｔｏｏｔｈ（登録商標）  Ｌｏｗ  Ｅｎｅｒｇｙ）通信、ＡＮＴなどの超低消費電力無線通信、ＩＥＥＥ８０２．１１ｓなどで規格化されたメッシュ・ネットワークなどを挙げることができる。あるいは、通信部６０５は、例えばＷ−ＣＤＭＡ（Ｗｉｄｅｂａｎｄ  Ｃｏｄｅ  Ｄｉｖｉｓｉｏｎ  Ｍｕｌｔｉｐｌｅ  Ａｃｃｅｓｓ）、ＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）などの標準規格に従って動作する、セルラー無線送受信機であってもよい。
【００４３】
記憶部６０６は、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）などで構成される大容量記憶装置である。記憶部６０６は、制御部６０１で実行するアプリケーション・プログラムや各種データを記憶している。例えば、ユーザーが視聴するコンテンツを記憶部６０６に格納する。また、外側カメラ６１２で撮影された画像を記憶部６０６内に記憶する。
【００４４】
画像処理部６０７は、制御部６０１から出力される画像信号に対して画質補正などの信号処理をさらに行なうとともに、表示部６０９の画面に合わせた解像度に変換する。そして、表示駆動部６０８は、表示部６０９の画素を行毎に順次選択するとともに線順次走査して、信号処理された画像信号に基づく画素信号を供給する。
【００４５】
表示部６０９は、例えば有機ＥＬ（Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）素子や液晶ディスプレイなどの、基本的には２次元画面からなるマイクロ・ディスプレイで構成される表示パネルを有する。虚像光学部６１０は、表示部６０９の表示画像を拡大投影して、ユーザーには拡大虚像として観察させる。なお、表示部６０９で出力する表示画像として、コンテンツ再生装置（ブルーレイ・ディスク又はＤＶＤプレイヤー）やストリーミング・サーバーから供給される商用コンテンツ、外側カメラ６１２の撮影画像などを挙げることができる。
【００４６】
外側表示部６１５は、表示画面がヘッド・マウント・ディスプレイの外側（装着したユーザーの顔とは反対の方向）に向けられており、外側画像を他のユーザーに表示することができる外側表示部６１５の詳細な構成については、例えば本出願人に既に譲渡されている特願２０１２−２００９０２号明細書を参照されたい。
【００４７】
音声処理部６１３は、制御部６０１から出力される音声信号に対して音質補正や音声増幅、入力された音声信号などの信号処理をさらに行なう。そして、音声入出力部６１４は、音声処理後の音声を外部出力、並びにマイクロフォン（前述）からの音声入力を行なう。
【００４８】
ヘッド・マウント・ディスプレイは、マイクロ・ディスプレイなどの表示部６０９の表示画像を虚像光学部６０１で拡大投影して、ユーザーの眼の網膜上に結像させる。本実施形態において特徴的なのは、表示画像の視聴時において、ユーザーが所望する形式で表示された画像を観察している状態を模擬する点にある。この状態の模擬は、入力画像に対して画像変換処理を施すにより実現することができる。画像変換処理は、例えば制御部６０１が所定のプログラム・コードを実行することも実現可能であるが、制御部６０１内又は画像処理部６０７内の専用ハードウェアとして実装ことも可能である。
【００４９】
ユーザーが所望する表示形式の画像の一例として、映画館のような、曲面スクリーンにプロジェクターで投影した画像を挙げることができる。本来の入力画像は２次元平面としてユーザーに観察されるが、本実施形態では、画像変換処理により、入力画像が曲面スクリーンにプロジェクターで投影した画像としてユーザーが観察できる状態を模擬する。
【００５０】
図４には、曲面スクリーンにプロジェクターで投影しているように模擬された画像をユーザーが観察している様子を斜視している。また、図５には図４を上から見た様子を示し、図６には図４を横から見た様子を示している。但し、各図において、水平方向をＸ方向、垂直方向をＹ方向、表示部６０９の表示画像を拡大投影した拡大虚像からの距離方向をＺ方向とおく。
【００５１】
虚像光学部６１０（図４乃至図６には図示しない）は、表示部６０９の表示画像を拡大投影して、ユーザーの眼４０から距離Ｌ2だけ先にある、幅ＶＷで高さＶＨの拡大虚像４１として、ユーザーの眼の網膜に結像する。このときの表示部６０９の表示画素の水平画角をθとする。ここで、拡大虚像４１は、入力画像を虚像光学部６１０で単に拡大投影したものではなく、曲面スクリーン４２にプロジェクターで投影した画像としてユーザーに観察されるように画像変換が施された後の「仮想表示パネル」とする。図５、図６に示す例では、プロジェクターの投影中心ＰＣ（Ｐｒｏｊｅｃｔｏｒ  Ｃｅｎｔｏｒ）から照射距離Ｌ1だけ離れた曲面スクリーン４２に投影された画像を、曲面スクリーン４２からの距離Ｌ2（但し、Ｌ2＜Ｌ1とする）の観察位置でユーザーが観察している状態が仮想表示パネル４１上で模擬されている。曲面スクリーン４２の曲率半径をＲとする。
【００５２】
図５において、プロジェクターの投影中心ＰＣから照射された光線５１と曲面スクリーン４２を観察するユーザーの視線５２との関係について着目してみる。光線５１は、仮想表示パネル４１上の点を通過した後、曲面スクリーン４２上の点Ｂに投影される。一方、曲面スクリーン４２上の点Ｂを左目で観察する視線５２は、仮想表示パネル４１上の点Ｃを通過する。したがって、入力画像上の点Ａに相当する表示画素の画像情報を、出力画像（表示部６０９の表示画素の拡大虚像４１）上の点Ｃに相当する表示画素で表示するように、Ｘ方向に移動若しくは変換を行なうようにすれば、ユーザーの左目には、投影中心ＰＣから曲面スクリーン４２に投影した画像を観察しているように見える。すなわち、入力画像をプロジェクターの投影中心ＰＣから曲面スクリーン４２に投影したときの各点（Ｂ）の画像情報が、これをユーザーの左目で観察する視線が仮想表示パネル４１に到達する点（Ｃ）で表示されるように、入力画像を画像変換すれば、曲面スクリーンにプロジェクターで投影した画像をユーザーが観察している状態を（Ｘ方向において）模擬することができる。図５において、点Ａを始点とし点Ｃを終点とするベクトルは、点Ａに相当する表示画素についての水平方向の「変換ベクトル」（但し、Ｖ／Ｈ分離（後述）をせず、２次元の変換ベクトルで一括変換する場合の水平成分）である。
【００５３】
同様に、図６において、プロジェクターの投影中心ＰＣから照射された光線６１について着目してみる。光線６１は、仮想表示パネル４１上の点Ａを通過した後、曲面スクリーン４２上の点Ｂに投影される。一方、曲面スクリーン４２上の点Ｂを距離Ｌ2だけ離れた位置観察する視線６２は、仮想表示パネル４１上の点Ｃを通過する。したがって、入力画像上の点Ａに相当する表示画素の画像情報を、出力画像（表示部６０９の表示画素の拡大虚像４１）上の点Ｃに相当する表示画素で表示するよう、Ｙ方向に移動若しくは変換を行なうようにすれば、ユーザーの左目には、投影中心ＰＣから曲面スクリーン４２に投影した画像を観察しているように見える。すなわち、入力画像をプロジェクターで曲面スクリーン４２に投影したときの各点（Ｂ）の画像情報が、これをユーザーの左目で観察する視線が仮想表示パネル４１に到達する点（Ｃ）で表示されるように、入力画像を画像変換すれば、曲面スクリーンにプロジェクターで投影した画像をユーザーが観察している状態を（Ｙ方向においても）模擬することができる。図６において、点Ａを始点とし点Ｃを終点とするベクトルは、点Ａに相当する表示画素についての垂直方向の「変換ベクトル」（但し、Ｖ／Ｈ分離（後述）をせず、２次元の変換ベクトルで一括変換する場合の垂直成分）である。
【００５４】
水平及び垂直方向の変換ベクトルは、例えば、表示部６０９の各画素から出射される光線を追跡する光学シミュレーションにより得られた光線追跡データに基づいて生成することができる。変換ベクトルは、元の入力画像上の画素位置と、表示部６０９から出力される提示画像上の画素位置との対応関係を記述したものである。
【００５５】
なお、図示を省略するが、図５及び図６に示したと同様で左右対称的な画像変換方法により、右目に関しても、表示部６０９の表示画素毎の画像情報の移動若しくは変換を行なうことにより、曲面スクリーン４２にプロジェクターで投影した画像を観察している状態を模擬することができる。
【００５６】
図１２及び図１３には、図１１に示した入力画像を、ユーザーの左目及び右目の各々で曲面スクリーン４２にプロジェクターで投影した画像を観察できるように変換した画像をそれぞれ例示している。
【００５７】
図１１で想定している入力画像は、水平方向及び垂直方向それぞれに均等に配置された複数の平行な線を組み合わせた格子縞からなる。虚像光学部６１０における光学歪みなどに起因する画像歪みがないと仮定すると、図１１に示した入力画像をそのまま表示部６０９に表示すると、仮想表示パネル４１上には入力画像の格子縞が、水平及び垂直な線が歪むことなく平行な直線で且つ等間隔のままで表示される。したがって、ユーザーの左右の目は、仮想表示パネル４１上で、図１１に示した入力画像をそのまま観察している状態となる。
【００５８】
図１２に示した画像は、図１１に示した入力画像をプロジェクターで曲面スクリーン４２に投影したときの各点の画像情報が、ユーザーの左目で観察する視線が仮想表示パネル４１に到達する点で表示されるように、図１１に示した入力画像を画像変換したものである。図１２に示した変換画像を左目用の表示パネル４０４Ｌに表示すると、図１１に示した入力画像をプロジェクターで曲面スクリーン４２に投影した画像をユーザーが左目で観察している状態を模擬することができる。
【００５９】
同様に、図１３に示した画像は、図１１に示した入力画像をプロジェクターで曲面スクリーン４２に投影したときの各点の画像情報が、ユーザーの右目で観察する視線が仮想表示パネル４１に到達する点で表示されるように、図１１に示した入力画像を画像変換したものである。図１３に示した変換画像を右目用の表示パネル４０４Ｒに表示すると、図１１に示した入力画像をプロジェクターで曲面スクリーン４２に投影した画像をユーザーが右目で観察している状態を模擬することができる。図１２に示した変換画像と図１３に示した変換画像は左右対称的であると理解されたい。
【００６０】
また、ユーザーが所望する表示形式の画像の他の例として、曲面パネルに提示された画像を挙げることができる。本来の入力画像は２次元平面としてユーザーに観察されるが、本実施形態では、画像変換処理により、入力画像が曲面パネルに提示した画像としてユーザーが観察できる状態を模擬する。
【００６１】
図７には、曲面パネルに提示しているように模擬された画像をユーザーが観察している様子を斜視している。曲面パネル７２の提示画像は、入力画像を、水平及び垂直方向に引き伸ばして提示した画像である（後述並びに図１０を参照のこと）。また、図８には図７を上から見た様子を示し、図９には図７を横から見た様子を示している。但し、水平方向をＸ方向、垂直方向をＹ方向、表示部６０９の表示画素の投影面からの距離方向をＺ方向とおく。
【００６２】
虚像光学部６１０（図８、図９には図示しない）は、表示部６０９の表示画像を拡大投影して、ユーザーの眼７０から距離Ｌ3だけ先にある、幅ＶＷで高さＶＨの拡大虚像７１として、ユーザーの眼の網膜に結像する。このときの表示部６０９の表示画素の水平画角をθとする。ここで、拡大虚像７１は、入力画像を虚像光学部６１０で単に拡大投影したものではなく、曲面パネル７２に提示している画像としてユーザーに観察されるように画像変換が施された後の「仮想表示パネル」とする。図８、図９に示す例では、曲率半径ｒの曲面パネル７２に提示された画像を、曲面パネル７２からの距離Ｌ3の観察位置から観察している状態が仮想表示パネル７１上で模擬されている。
【００６３】
図８において、曲面パネル７２を観察するユーザーの左目の視線８１について着目してみる。視線８１は、仮想表示パネル７１上の点Ｄを通過して、曲面パネル７２上の点Ｅに到達する。したがって、曲面パネル７２の点Ｅに表示すべき画像情報が、仮想表示パネル７１上の点Ｄに相当する表示画素で表示されるように、Ｘ方向に移動若しくは変換すれば、ユーザーの左目には、曲面パネル７２の提示画像を観察しているように見える。すなわち、入力画像を曲面パネル７２に提示したときの各点（Ｅ）の画像情報が、ユーザーの左目で観察する視線が仮想表示パネル７１に到達する点（Ｄ）で表示されるように、入力画像を画像変換すれば、曲面パネル７２に提示した画像をユーザーが観察している状態を（Ｘ方向において）模擬することができる。点Ｅを始点とし点Ｄを終点とするベクトルは、点Ｅに相当する表示画素についての水平方向の「変換ベクトル」（但し、Ｖ／Ｈ分離（後述）をせず、２次元の変換ベクトルで一括変換する場合の水平成分）である。
【００６４】
同様に、図９において、曲面パネル７２を観察するユーザーの視線９１について着目してみる。視線９１は、仮想表示パネル７１上の点Ｄを通過して、曲面パネル７２上の点Ｅに到達する。したがって、曲面パネル７２の点Ｅに表示すべき画像情報が、仮想表示パネル７１上の点Ｄに相当する表示画素で表示されるように、Ｙ方向に移動若しくは変換すれば、ユーザーの目には、曲面パネル７２の提示画像を観察しているように見える。すなわち、入力画像を曲面パネル７２に提示したときの各点の画像情報が、ユーザーの左目で観察する視線が仮想表示パネル４１に到達する点で表示されるように、入力画像を画像変換すれば、曲面パネルに提示した画像をユーザーが観察している状態を（Ｙ方向においても）模擬することができる。図９において、点Ｅを始点とし点Ｄを終点とするベクトルは、点Ｅに相当する表示画素についての垂直方向の「変換ベクトル」（但し、Ｖ／Ｈ分離（後述）をせず、２次元の変換ベクトルで一括変換する場合の垂直成分）である。
【００６５】
水平及び垂直方向の変換ベクトルは、例えば、表示部６０９の各画素から出射される光線を追跡する光学シミュレーションにより得られた光線追跡データに基づいて生成することができる。変換ベクトルは、元の入力画像上の画素位置と、表示部６０９から出力される提示画像上の画素位置との対応関係を記述したものである。
【００６６】
なお、図示を省略するが、図８及び図９に示したと同様で左右対称的な画像変換方法により、右目に関しても、表示部６０９の表示画素毎の画像情報の移動若しくは変換を行なうことにより、曲面パネル７２に提示された画像を観察している状態を模擬することができる。
【００６７】
入力画像と、曲面パネル７２が提示する画像との関係について、図１０を参照しながら説明しておく。曲面パネル７２の提示画像は、入力画像を、Ｘ及びＹ方向にそれぞれ拡大率α、βで引き伸ばした画像である。Ｘ方向の拡大率αとＹ方向の拡大率βの間に連動性はない。例えば、入力画像がシネマスコープのような横長の画面の場合には、曲面パネル７２に提示する際に生じる上下の黒帯をハードウェア的に可能な限り有効表示領域の外側に追い出すには、垂直方向の拡大率βの方が水平方向の拡大率αよりも大きくなる。一方、虚像光学部６１０で拡大投影した拡大虚像（すなわち、仮想表示パネル）７１は、入力画像をＸ及び方向に同じ拡大率で拡大した像であり、入力画像と相似形とする（ここでは、説明の簡素化のため、虚像光学部６１０で生じる光学歪みなどの画像歪みは無視する）。
【００６８】
図１０中で、入力画像と相似形の仮想表示パネル７１のサイズは、幅ＶＷで高さＶＨとする。これに対し、曲面パネル７２が半径ｒで中心角がγの円弧とすると、その横幅ＰＷはｒ×γであるが、ＶＷよりも長いことは図８からも明らかである。入力画像はＹ方向に引き伸ばされるが、図示の例ではＰＷ＝ＶＷ×αと表わされる（但し、α＞１）。一方、Ｙ方向には、上記のように水平方向にα倍に拡大した際に、上下の黒帯が有効表示領域の高さＶＨの外側に追い出されるようにβ倍に、入力画像が引き伸ばされる。仮想表示パネル７１の高さＰＨは、上下の黒帯を外側に追い出した仮想パネル７１の高さＶＨと同じでよい。
【００６９】
図１４及び図１５には、図１１に示した格子縞からなる入力画像（前述）を、ユーザーの左目及び右目の各々で曲面パネルに提示された画像を観察している状態を模擬するように変換した画像をそれぞれ例示している。
【００７０】
図１１に示した入力画像を表示部６０９に表示すると、仮想表示パネル４１上にはそのまま入力画像が表示される。したがって、ユーザーの左右の目は、仮想表示パネル４１上に提示された入力画像を観察している状態となる（前述）。これに対し、図１４に示した画像は、図１１に示した入力画像を曲面パネル７２に提示したときの各点の画像情報が、ユーザーの左目で観察する視線が仮想表示パネル４１に到達する点で表示されるように、図１１に示した入力画像を画像変換したものである。図１４に示した変換画像を左目用の表示部６０９に表示すると、図１０に示した入力画像を曲面パネル７２に提示した画像をユーザーが左目で観察している状態を模擬することができる。
【００７１】
同様に、図１５に示した画像は、図１１に示した入力画像を曲面パネル７２に提示したときの各点の画像情報が、ユーザーの右目で観察する視線が仮想表示パネル４１に到達する点で表示されるように、図１１に示した入力画像を画像変換したものである。図１５に示した変換画像を右目用の表示部６０９に表示すると、図１０に示した入力画像を曲面パネル７２に提示した画像をユーザーが右目で観察している状態を模擬することができる。図１４に示した変換画像と図１５に示した変換画像は左右対称的であると理解されたい。
【００７２】
図１６には、入力画像を他の形式で表示されている画像として観察されるように画像変換するための機能ブロック図を示している。他の形式の表示とは、上述したように、曲面スクリーンにプロジェクターで投影した画像を観察している状態（図４乃至図６を参照のこと）、あるいは、曲面パネルに提示された画像を観察している状態（図７乃至図９を参照のこと）などである。
【００７３】
図示の画像変換機能部１６００は、処理対象となる画像（入力画像）を入力する画像入力部１６１０と、入力画像に対し、他の形式で表示されている画像として観察されるように画像変換する画像変換処理部１６２０と、その画像変換に用いる変換テーブルを記憶する変換テーブル記憶部１６３０と、変換後の画像を出力する画像出力部１６４０を備えている。
【００７４】
画像入力部１６１０は、例えば、コンテンツ再生装置やストリーミング・サーバーなどからユーザーが視聴する動画像などのコンテンツを受信する通信部６０５や、撮影画像を供給する外側カメラ６１２などに相当し、これらのコンテンツ供給元から左目用の入力画像と右目用の入力画像をそれぞれ入力する。
【００７５】
画像変換処理部１６２０は、画像入力部１６２０からの入力画像に対し、他の形式で表示されている画像として観察されるように画像変換する。画像変換処理部１６２０は、例えば制御部６０１や画像処理部６０７内などに実装された専用ハードウェアとして構成される。あるいは、画像変換処理部１６２０は、制御部６０１が実行する画像変換処理プログラムとして実現することもできる。以下では、便宜上、画像変換処理部１６２０が専用ハードウェアで実装されるものとして説明する。
【００７６】
変換テーブル記憶部１６３０は、ＲＯＭ６０１Ａ又は画像処理部６０７の内部ＲＯＭ（図示しない）であり、入力画像を他の形式で表示されている画像として観察されるように画像変換する際に用いる、入力画像の各表示画素の変換ベクトルを記述した変換テーブルを記憶する。変換ベクトルは、元の入力画像上の画素位置と、表示部６０９から出力される提示画像上の画素位置との対応関係を記述したものである。変換ベクトルは、例えば、表示部６０９の各画素から出射される光線を追跡する光学シミュレーションにより得られた光線追跡データに基づいて生成することができる。
【００７７】
なお、本実施形態では、変換テーブルの記憶容量を抑えるために、すべての表示画素ではなく、離散的に配置した代表点の表示画素の変換ベクトルのみ変換テーブルに保持し、代表点以外の表示画素についての変換ベクトルはＶテーブル補間部１６５１とＨテーブル補間部１６６１が隣接する代表点の変換ベクトルから補間するようにしている。Ｖテーブル補間部１６５１とＨテーブル補間部１６６１による補間処理の詳細については後述に譲る。また、本実施形態では、変換ベクトルを水平方向と垂直方向に分離（すなわち、Ｖ／Ｈ分離）して、垂直方向変換テーブル（Ｖ変換テーブル）１６３１と水平方向変換テーブル（Ｈ変換テーブル）の２種類を装備し、画像変換を垂直方向と水平方向に分離して行なうようにしている。
【００７８】
画像出力部１６４０は、表示部６０９の表示パネルに相当し、画像変換した後の（他の形式で表示されているように観察される）出力画像を表示する。本明細書で開示する技術は単眼式のヘッド・マウント・ディスプレイにも適用可能であるが、以下の説明では、両眼式のヘッド・マウント・ディスプレイに適用し、画像出力部１６４０は左右の眼毎に出力画像１６４１、１６４２を出力するものとする。
【００７９】
画像変換処理部１６２０の機能的構成についてさらに詳細に説明する。
【００８０】
画像変換処理部１６２０は、他の形式で表示されている画像としてユーザーに観察されるように、画像入力部１６１０からの入力画像に対して画像変換を行なう。本実施形態において特徴的な点の１つとして、垂直方向の変換処理と水平方向の変換処理にＶ／Ｈ分離して行なうように、画像変換処理部１６２０が構成されていることを挙げることができる。このように垂直及び水平の方向毎に処理することで演算負荷を軽減することができる。このため、変換テーブル記憶部１６３０は、垂直方向の変換テーブル（Ｖ変換テーブル）１６３１と、水平方向の変換テーブル（Ｈ変換テーブル）１６３２の２種類を保持している。付言すれば、表示形式毎に１組のＶ変換テーブル１６３１−１とＨ変換テーブル１６３２−１、…を保持する（上記の例で言えば、曲面スクリーンにプロジェクターで投影した画像に変換する形式、並びに、曲面パネルに提示された画像の形式の各々について、１組のＶ変換テーブル１６３１−１とＨ変換テーブル１６３２−１、…を保持している）。
【００８１】
また、本実施形態において他の特徴的な点として、画像変換が左右対称であることに着目して、右目画像用（又は左目画像用）の片方の目についてのみ、垂直及び水平方向の変換テーブル１６３１、１６３２を保持し、記憶容量を削減する点を挙げることができる。すなわち、右目画像用の変換テーブル１６３１、１６３２のみを保持し、Ｖテーブル補間部１６５１とＨテーブル補間部１６６１が代表点以外のすべて画素の変換情報を補間した後、左右反転部１６５５、１６６５が右目用の全画素のＶ変換ベクトル及びＨ変換ベクトルをそれぞれ左右反転させて、左目用の変換情報を得るようにしている。
【００８２】
Ｖテーブル補間部１６５１は、変換テーブル記憶部１６３０から所望する表示形式のＶ変換テーブル１６３１を取り出すと、代表点以外の表示画素についての垂直方向の変換ベクトルを補間して、全画素についての右目用のＶ変換ベクトルからなるＶ変換データ１６５２を得る。また、Ｈテーブル補間部１６６１は、変換テーブル記憶部１６３０から所望する表示形式のＨ変換テーブル１６３２を取り出すと、代表点以外の表示画素についてのＨ変換ベクトルを補間して、全画素についての右目用にＨ変換ベクトルからなるＨ変換データ１６６２を得る。
【００８３】
そして、画素値Ｖ変換部１６５３は、画像入力部１６１０から右目用の入力画像１６１１を入力すると、各画素に対してＶ変換データ１６５２内の対応するＶ変換ベクトルを逐次適用して、まず垂直方向の変換処理を行ない、右目用のＶ変換済み画像データ１６５４を得る。
【００８４】
次いで、画素値Ｈ変換部１６６３は、Ｖ変換済み画像データ１６５４の各画素に対して、Ｈ変換データ１６６２内の対応するＨ変換ベクトルを逐次適用して、垂直方向の変換処理を行ない、垂直及び水平方向の変換処理済みの、右目用の出力画像１６４１を得る。この出力画像１６４１は、表示部６０９の右目用の表示パネルに提示される。
【００８５】
左右反転部１６５５は、Ｖ変換データ１６５２を左右反転させて、全画素についての左目用のＶ変換ベクトルからなるＶ変換データを得る。そして、画素値Ｖ変換部１６５６は、画像入力部１６２０から左目用の入力画像を入力すると、各画素に対して対応する左目用のＶ変換ベクトルを逐次適用して、垂直方向の変換処理を行ない、左目用のＶ変換済み画像データ１６５７を得る。
【００８６】
また、左右反転部１６６５は、Ｈ変換データ１６６２を左右反転させて、全画素についての左目用のＨ変換ベクトルからなるＨ変換データを得る。画素値Ｈ変換部１６６６は、Ｖ変換済み画像データ１６５７の各画素に対して、対応する左目用のＨ変換ベクトルを逐次適用して、水平方向の変換処理を行ない、垂直及び水平方向の変換処理済みの、左目用の出力画像１６４２を得る。この出力画像１６４２は、表示部６０９の左目用の表示パネルに提示される。
【００８７】
図１７には、変換テーブル記憶部１６３０が代表点のみ変換ベクトルを保持している様子を模式的に示している。同図中、濃いグレーで表示した場所が代表点の画素に相当するが、図示の例では水平及び垂直の各方向に等間隔に代表点が配置されている。Ｖ変換テーブル１６３１は、代表点の画素のみ垂直方向の変換ベクトルを保持し、また、Ｈ変換テーブル１６３２は、これらの代表点の画素のみ水平方向の変換ベクトルを保持している。
【００８８】
上述したように、Ｖテーブル補間部１６５１とＨテーブル補間部１６６１は、代表点以外の表示画素についての変換ベクトルを、代表点の変換ベクトルから補間する。図１８には、代表点以外の表示画素についての変換ベクトルを、Ｖテーブル補間部１６５１、Ｈテーブル補間部１６６１の補間処理により得た様子を模式的に示している。同図中、変換ベクトルが補間された画素を淡いグレーで表示している。
【００８９】
続いて、Ｖテーブル補間部１６５１とＨテーブル補間部１６６１において、代表点以外の表示画素についての変換ベクトルを補間する処理について説明する。
【００９０】
上述したように、本実施形態では、垂直方向の変換処理と水平方向の変換処理にＶ／Ｈ分離して行なうことを１つの特徴とし、このため、変換テーブルは、垂直方向の変換テーブル（Ｖ変換テーブル）１６３１と、水平方向の変換テーブル（Ｈ変換テーブル）１６３２の組み合わせで構成される。
【００９１】
図１９には、水平及び垂直方向に分離しない場合の変換テーブルの補間処理方法を例示している。同図中、グレーで示す代表点１９０２〜１９０７毎に、水平及び垂直の各方向の成分を持つ２次元変換ベクトルが変換テーブルに保持されている。代表点以外の画素１９０１の変換ベクトルは、例えば、隣接する４個の代表点１９０２〜１９０５、すなわち４タップの情報の２次元重み付け和により算出することができる。勿論、周囲の１６個の代表点１９０２〜１９１７の１６タップの情報から２次元重み付け和により、画素１９０１の変換ベクトルを求めるようにしてもよい。
【００９２】
一方、図２０及び図２１には、水平及び垂直方向にＶ／Ｈ分離する場合の変換テーブルの補間処理方法を例示している。各図中、グレーで示す代表点２００２〜２０１７のＶ変換ベクトルはＶ変換テーブル１６３１に記憶され、Ｈ変換ベクトルはＨ変換テーブル１６３２に記憶されているものとする。
【００９３】
Ｖテーブル補間部１６５１とＨテーブル補間部１６６１はそれぞれ、各変換テーブル１６３１、１６３２の補間処理を、垂直方向の補間（Ｖ補間）と水平方向の補間（Ｈ補間）の２段階で行なう。まず、Ｖ変換テーブル１６３１のＶ補間について、図２０を参照しながら説明する。垂直方向に代表点で挟まれる画素２０２１〜２０２４については、それぞれ、垂直方向に隣接する代表点２００７と２００８、代表点２００２と２００３、代表点２００５と２００４、代表点２０１４と２０１３の重みを計算し、各代表点のＶ変換ベクトルの１次元重み付け和によりＶ変換ベクトルを補間することができる（勿論、タップ数をさらに増やしてもよい）。そして、垂直方向に代表点で挟まれない画素２００１については、図２１に示すようにＨ補間、すなわち、同じ水平位置にあるＶ補間済み隣接画素２０２２、２０２３の重みを計算し、これらのＶベクトルの１次元重み付け和によりＶ変換ベクトルを補間することができる（勿論、タップ数をさらに増やしてもよい）。このようにＶ補間とＨ補間の２段階にＶ／Ｈ分離することにより、１次元重み付け和で変換テーブルの補間を行なうことが可能となり、処理量を削減することができる。また、Ｈテーブル補間部１６６１は、図２０及び図２１に示したと同様に、Ｈ変換テーブル１６３２の補間処理を垂直方向の補間（Ｖ補間）と水平方向の補間（Ｈ補間）の２段階で行なうことで、テーブル補間を行なうことができる。
【００９４】
また、図２２には、Ｖテーブル補間部１６５１並びにＨテーブル補間部１６６１が、図２１に示した変換ベクトルの水平方向の補間（Ｈ補間）の処理を削減する方法を図解している。比較のため、補間位置毎に重みを都度計算して変換ベクトルを補間する方法を図２３に示している。図２３に示す例では、Ｖ補間済み隣接画素２３１１、２３１２に挟まれた画素２３０１〜２３０４の変換ベクトルを、各々の補間位置に応じた重みを都度計算して重み付け和を計算する。これに対し、図２２に示す例では、まず、図２２Ａに示すように、２のべき乗（２n）個の画素間隔で代表位置２２０１、２２０２を設定すると（図示の例では、ｎ＝３）、これら代表位置２２０１、２２０２については、図２０及び図２１に示した方法に従い、垂直方向と水平方向の２段階の１次元重み付け和により変換ベクトルを補間する。そして、代表位置２２０１、２２０２間の画素に関しては重みを線形補間する。すなわち、図２２Ｂに示すように、代表位置２２０１、２２０２間の画素に関しては、等間隔に２タップ重み付け和で変換ベクトルを補間する。この２タップ重み付け和はビットシフトのみで実現可能である。図２０及び図２１に示した補間方法を代表位置の画素について適用するとともに、代表位置間の画素については図２２に示した補間方法を適用するというハイブリッド補間により、処理量をさらに削減することができる。
【００９５】
続いて、画素値Ｖ変換部１６５３で入力画像の垂直方向の変換を行なった後に、画素値Ｈ変換部１６６３で水平方向の画像変換を行なう処理について説明する。ここでは、右目用の画像についてのみ説明するが、左目用の画像についても画素値Ｖ変換部１６５６及び画素値Ｈ変換部１６６６が同様の処理を行なうものと理解されたい。
【００９６】
図２４には、入力画像に対する画像変換を、画素値Ｖ変換部１６５３で入力画像の垂直方向の変換を行なった後に、画素値Ｈ変換部１６６３で水平方向の画像変換を行なう処理手順を模式的に示している。垂直方向の変換処理と水平方向の変換処理をＶ／Ｈ分離することで１次元処理となり、処理負荷が軽減される。
【００９７】
まず、画素値Ｖ変換部１６５３は、入力画像２４０１に対して、Ｖ変換テーブル１６３１から補間２４０２したＶ変換データ１６５２を用いて、１次元的な垂直方向の変換処理２４０３を行ない、Ｖ変換済み画像データ２４０４を得る。Ｖ変換済み画像データ２４０４は、入力画像２４０１に対して垂直方向の変換２４０５が施されている。
【００９８】
次いで、画素値Ｈ変換部１６６３は、Ｖ変換済み画像データ２４０４に対して、Ｈ変換テーブル１６３２から補間２４０６したＨ変換データを用いて、１次元的な水平方向の変換処理２４０７を行ない、Ｖ／Ｈ変換済み画像データ２４０８を得る。Ｖ／Ｈ変換済み画像データ２４０８は、Ｖ変換済み画像データ２４０４に対してさらに水平方向の変換２４０９が施されている。
【００９９】
図２５には、２次元の画像変換処理を行なう例を示している。入力画像２５００の各画素２５０１〜２５０４に対して２次元の変換ベクトル２５１１〜２５１４をそれぞれ適用して、画像変換後の画素位置２５２１〜２５２４を求めると、各画素位置２５２１〜２５２４における画像情報を各対応画素２５３１〜２５３４に書き込むことで、出力画像２５３０が得られる。なお、画素位置２５２１〜２５２４を結ぶ曲線が水平方向の画素位置と交差する点の垂直方向位置が、図６並びに図９に示した垂直方向の「変換ベクトル」に相当する。また、これらの交差点から当該曲線までの水平方向の距離が、図５並び図８に示した水平方向の「変換ベクトル」に相当する。本実施形態において画像変換処理をＶ／Ｈ分離して行なうためのＨ変換ベクトル並びにＶ変換ベクトルは、Ｖ／Ｈ分離せず２次元で一括変換する際の水平方向の変換ベクトル並びに垂直方向の変換ベクトルとは相違する。水平方向の変換ベクトル並びに垂直方向の変換ベクトルを元に、Ｖ／Ｈ分離用のＨ変換ベクトル並びにＶ変換ベクトルを計算し直す必要がある。
【０１００】
一方、図２６には、図２４に示したように、垂直方向の変換処理と水平方向の変換処理にＶ／Ｈ分離して１次元の画像変換処理を行なう例を示している。
【０１０１】
まず、図２６Ａに示すように、画素値Ｖ変換部１６５３は、入力画像２６００の各画素２６０１〜２６０４に対して、Ｖ変換データ１６５２内の対応するＶ変換ベクトルをそれぞれ適用して、Ｖ変換後の画素位置２６１１〜２６１４を求める。そして、各画素位置２６１１〜２６１４における画像情報を各対応画素２６２１〜２６２４に書き込むことで、Ｖ変換済み画像データ２６２０を得る。
【０１０２】
次いで、図２６Ｂに示すように、画素値Ｈ変換部１６６３は、Ｖ変換済み画像データ２６２０の各画素２６２１〜２６２４に対して、Ｈ変換データ１６６２内の対応するＨ変換ベクトルをそれぞれ適用して、さらにＨ変換した画素位置２６３１〜２６３４を求める。そして、各画素位置２６３１〜２６３４における画像情報を各対応画素２６４１〜２６４４に書き込むことで、出力画像２６４０を得る。
【０１０３】
図１６では、主に処理アルゴリズムに着目して、画像変換機能部１６２０の内部の機能的構成を図解した。図２７には、その処理アルゴリズムを実現するための回路ブロック図を示している。
【０１０４】
フォーマット変換部２７０１は、左目用の入力画像と、これに同期する右目用の入力画像の各フレームを入力して、フォーマット変換を行なう。図２８には、フォーマット変換部２７０１により入力画像をフォーマット変換する仕組みを図解している。図示のように、フォーマット変換部２７０１は、左目用の入力画像２８０１と右目用の入力画像２８０２を入力すると、１ライン毎に左目用の入力画像と右目用の入力画像を交互に挿入した「ＬｉｎｅｂｙＬｉｎｅ」形式の変換ブロックにフォーマット変換する。このように左目用の入力画像２８０１と右目用の入力画像２８０２をマージしたフォーマットに変換すると、左目用の入力画像２８０１と右目用の入力画像２８０２の処理に同じ回路を共用できるので、回路規模を削減することができる。
【０１０５】
フォーマット変換部２７０１によりフォーマット変換された画像データは、ライン・メモリー・コントローラー２７０２を介してＳＲＡＭ（Ｓｔａｔｉｃ  ＲＡＭ）２７０３に一時保存される。
【０１０６】
画像変換機能部１６２０は、垂直方向の変換処理と水平方向の変換処理に分離して行なう。垂直方向の変換処理は、タイミング・コントローラー２７０４による同期制御の下で、ＳＲＡＭ２７０３、ライン・メモリー・コントローラー２７０２、デガンマー処理部２７０８、Ｖ補正部２７０５、Ｖベクトル補間部２７０７及びＶベクトル記憶部２７０６により行なわれる。一方、水平方向の変換処理は、タイミング・コントローラー２７０９による同期制御の下で、レジスター２７１１、ピクセル・メモリー・コントローラー２７１０、Ｈ補正部２７１２、Ｈベクトル補間部２７１３及びＨベクトル記憶部２７１４により行なわれる。
【０１０７】
垂直及び水平方向に分離して画像変換処理を行なうため、画素毎の変換ベクトルを垂直成分のＶベクトルと水平成分のＨベクトルに分解して、それぞれＶベクトル記憶部２７０６及びＨベクトル記憶部２７１４に記憶する。また、Ｖベクトル記憶部２７０６及びＨベクトル記憶部２７１４に全画素の変換ベクトルを格納するのではなく、代表点のみ変換ベクトルを保持するテーブルとして構成することにより（図１７を参照のこと）、メモリー量を削減している。代表点以外の画素の変換ベクトルは、Ｖベクトル補間部２７０７並びにＨベクトル補間部２７１３が補間により生成するようになっている。図１８には、代表点以外の表示画素についての変換ベクトルが補間処理により得た様子を模式的に示している。図１８中、変換ベクトルが補間された画素を淡いグレーで表示している。Ｖベクトル補間部２７０７並びにＨベクトル補間部２７１３によるベクトルの補間方法は、図２０〜図２２を参照しながら既に説明した通りである。
【０１０８】
タイミング・コントローラー２７０４は、ライン・メモリー・コントローラー２７０２によるＳＲＡＭ２７０３からの画像データの読み出しと、テーブル補間部２７０７による変換ベクトルの補間処理と、画素値Ｖ変換部２７０５による垂直方向の変換処理のタイミングを制御する。
【０１０９】
入力画像は、表示部６０９の表示パネルの特性に合わせて、各基本色の強さ（輝度）を調整するガンマー補正が施されていることが想定される。ところが、ガンマー補正がかけられた画像信号は信号値と輝度が線形的ではないので、輝度が変わってしまう。図２９には、ガンマー補正がかけられた画像信号の信号値と輝度の関係を例示しているが、図示の例では、信号値５０％に対し輝度２２％になってしまう。基本色毎に位相が異なると、輝度のバランスが崩れ、画像変換を行なうと色むらの原因になってしまう。そこで、本実施形態では、デガンマー処理部２７０８で、入力画像に対してデガンマー処理を施し、信号値と輝度を線形に戻してから画像変換を行なうようにしている。
【０１１０】
垂直及び水平方向に分離して画像変換処理を行なう仕組みは、図２４に示した通りである。Ｖ補正部２７０５は、デガンマー処理した後の入力画像に対して、Ｖベクトル補間部２７０７が補間２４０２したＶ変換ベクトルを用いて、１次元的な垂直方向の変換処理２４０３を行ない、Ｖ変換済み画像データ２４０４を得る。Ｖ変換済み画像データ２４０４は、入力画像２４０１に対して垂直方向の変換２４０５が施されている。
【０１１１】
次いで、Ｈ補正部２７１２は、Ｖ変換済み画像データ２４０４に対して、Ｈベクトル補間部２７１３が補間２４０６したＶ変換データを用いて、１次元的な垂直方向の変換処理２４０７を行ない、Ｖ／Ｈ変換済み画像データ２４０８を得る。Ｖ／Ｈ変換済み画像データ２４０８は、Ｖ変換済み画像データ２４０４に対してさらに水平方向の変換２４０９が施されている。
【０１１２】
本明細書で開示する技術によれば、入力画像をプロジェクターの投影中心から曲面スクリーンに投影したときの各点の画像情報が、これをユーザーの左目で観察する視線が拡大虚像に到達する点で表示されるように、入力画像を画像変換して、曲面スクリーンにプロジェクターで投影した画像をユーザーが観察している状態を模擬することができる（図４〜図６を参照のこと）。また、本明細書で開示する技術によれば、入力画像を曲面パネルに提示したときの各点の画像情報が、ユーザーの左目で観察する視線が拡大虚像に到達する点で表示されるように、入力画像を画像変換して、曲面パネルに提示した画像をユーザーが観察している状態を模擬することができる。
【０１１３】
また、上記のような画像変換処理を図２７に示した回路構成で行なうことにより、変換ベクトルを保持するメモリー量を削減する、画像変換の処理負荷を軽減する、画像歪みの発生を抑制する、といった効果がある。
【先行技術文献】
【特許文献】
【０１１４】
【特許文献１】特開２００７−１３３４１５号公報
【特許文献２】特開２０１２−１４１４６１号公報
【産業上の利用可能性】
【０１１５】
以上、特定の実施形態を参照しながら、本明細書で開示する技術について詳細に説明してきた。しかしながら、本明細書で開示する技術の要旨を逸脱しない範囲で当業者が該実施形態の修正や代用を成し得ることは自明である。
【０１１６】
本明細書で開示する技術は、ヘッド・マウント・ディスプレイを始めとして、マイクロ・ディスプレイなどに表示される画像を光学系越しにユーザーの瞳に投影する、さまざまなタイプの画像表示装置に適用することができる。また、本明細書では、本明細書で開示する技術を両眼式のヘッド・マウント・ディスプレイに適用した実施形態を中心に説明してきたが、勿論、単眼式のヘッド・マウント・ディスプレイにも適用可能である。
【０１１７】
要するに、例示という形態により本明細書で開示する技術について説明してきたのであり、本明細書の記載内容を限定的に解釈するべきではない。本明細書で開示する技術の要旨を判断するためには、特許請求の範囲を参酌すべきである。
【０１１８】
なお、本明細書の開示の技術は、以下のような構成をとることも可能である。
（１）画像を入力する画像入力部と、
画像を表示する表示部と、
前記表示部の表示画像が所定の形式で表示された画像として観察されるように、前記入力画像を変換する画像変換部と、
を具備する画像表示装置。
（２）前記画像変換部は、曲面スクリーンにプロジェクターで投影した画像として観察されるように、前記入力画像を変換する、
上記（１）に記載の画像表示装置。
（３）前記画像変換部は、前記入力画像を前記プロジェクターの投影中心から前記曲面スクリーンに投影したときの各点の画像情報が、これを観察するユーザーの視線が前記表示部の表示画像に到達する点で表示されるように、前記入力画像を画像変換する、
上記（２）に記載の画像表示装置。
（４）前記画像変換部は、曲面パネルに提示した画像として観察されるように、前記入力画像を変換する、
上記（１）に記載の画像表示装置。
（５）前記画像変換部は、前記入力画像を前記曲面パネルに提示したときの各点の画像情報が、これを観察するユーザーの視線が前記表示部の表示画像に到達する点で表示されるように、前記入力画像を画像変換する、
上記（４）に記載の画像表示装置。
（６）前記画像変換部は、前記入力画像上の画素位置と前記表示部から出力される提示画像上の画素位置との対応関係を記述した変換ベクトルを代表点の画素についてのみ保持する変換テーブルと、前記変換テーブルから前記代表点以外の画素についての変換ベクトルを補間するテーブル補間部を備え、補間された変換ベクトルを用いて前記入力画像の変換を行なう、
上記（１）に記載の画像表示装置。
（７）前記画像変換部は、垂直方向と水平方向に分離して前記入力画像の変換を行なう、
上記（１）に記載の画像表示装置。
（８）前記画像変換部は、代表点についての垂直方向のＶ変換ベクトルと水平方向のＨ変換ベクトルをそれぞれ保持するＶ変換テーブル及びＨ変換テーブルと、前記Ｖ変換テーブルから前記代表点以外の画素についてのＶ変換ベクトルを補間するＶテーブル補間部と、前記Ｈ変換テーブルから前記代表点以外の画素についてのＨ変換ベクトルを補間するＨテーブル補間部を備える、
上記（６）に記載の画像表示装置。
（９）前記Ｖテーブル補間部並びに前記Ｈテーブル補間部は、前記変換テーブルに保持された代表点の変換ベクトルの１次元重み付け和に基づいて垂直方向の画素についてテーブル補間を行なった後、垂直方向に補間済みの画素の変換ベクトルの１次元重み付け和に基づいて水平方向の画素についてテーブル補間を行なう、
上記（８）に記載の画像表示装置。
（１０）前記Ｖテーブル補間部並びに前記Ｈテーブル補間部は、水平方向の画素についてテーブル補間を行なう際に、２のべき乗個の画素間隔で配置した代表位置の画素については隣接する代表点の重みを計算して重み付け和により変換ベクトルを補間し、前記代表位置間の画素については等間隔に２タップ重み付け和で変換ベクトルを補間する、
上記（８）に記載の画像表示装置。
（１１）前記画像変換部は、前記Ｖテーブル補間部が補間したＶ変換ベクトルを用いて前記入力画像に対して垂直方向の変換を行なう画素値Ｖ変換部と、前記Ｈテーブル補間部が補間したＨ変換ベクトルを用いて前記画素値Ｖ変換部による変換済み画像に対して水平方向の変換を行なう画素値Ｈ変換部をさらに備える、
上記（８）に記載の画像表示装置。
（１２）前記表示部はユーザーの左右の目毎に画像を表示し、
前記画像変換部は、左右いずれか一方の目用の画像用の変換テーブルのみを備え、前記テーブル補間部が補間した一方の目用の変換ベクトルを左右反転させて、他方の目用の変換ベクトルを得る、
上記（６）に記載の画像表示装置。
（１３）前記画像入力部は、左目用画像と右目用画像を入力し、
前記画像変換部は、前記入力した左目用画像と右目用画像を１ライン毎に交互に挿入した形式にフォーマットと変換した後に、前記変換を行なう、
上記（１）に記載の画像表示装置。
（１４）前記画像変換部は、前記入力画像をデガンマー処理した後に前記変換を行なう、
上記（１）に記載の画像表示装置。
（１５）表示部で表示する画像が所定の形式で表示された画像として観察されるように変換する画像変換部を具備する画像処理装置。
（１６）表示部で表示する画像が所定の形式で表示された画像として観察されるように変換する画像変換ステップを有する画像処理方法。
【符号の説明】
【０１１９】
４０１Ｌ、４０１Ｒ…虚像光学部
４０３Ｌ、４０３Ｒ…マイクロフォン、４０４Ｌ、４０４Ｒ…表示パネル
４０５…眼幅調整機構
６０１…制御部、６０１Ａ…ＲＯＭ、６０１Ｂ…ＲＡＭ
６０２…入力操作部、６０３…リモコン受信部
６０４…状態情報取得部、６０５…通信部、６０６…記憶部
６０７…画像処理部、６０８…表示駆動部
６０９…表示部、６１０…虚像光学部、６１２…外側カメラ
６１３…音声処理部、６１４…音声入出力部、
６１５…外側表示部、６１６…環境情報取得部
１６００…画像変換機能部、１６１０…画像入力部
１６２０…画像変換処理部、１６３０…変換テーブル記憶部
１６３１…Ｖ変換テーブル、１６３２…Ｈ変換テーブル
１６４０…画像出力部
１６５１…Ｖテーブル補間部（垂直方向）、１６５３…画素値Ｖ変換部
１６５５…左右反転部、１６５６…画素値Ｖ変換部
１６６１…Ｈテーブル補間部（水平方向）、１６６３…画素値Ｈ変換部
１６６５…左右反転部、１６６６…画素値Ｈ変換部
２７０１…フォーマット変換部
２７０２…ライン・メモリー・コントローラー
２７０３…ＳＲＡＭ、２７０４…タイミング・コントローラー
２７０５…Ｖ補正部、２７０６…Ｖベクトル記憶部
２７０７…Ｖベクトル補間部、２７０８…デガンマー処理部
２７０９…タイミング・コントローラー
２７１０…ピクセル・メモリー・コントローラー、２７１１…レジスター
２７１２…Ｈ補正部、２７１３…Ｈベクトル補間部
２７１４…Ｈベクトル記憶部
【図１】
2015041936.tif 000003
【図２】
2015041936.tif 000004
【図３】
2015041936.tif 000005
【図１１】
2015041936.tif 000006
【図１２】
2015041936.tif 000007
【図１３】
2015041936.tif 000008
【図１４】
2015041936.tif 000009
【図１５】
2015041936.tif 000010
【図１６】
2015041936.tif 000011
【図２７】
2015041936.tif 000012
【図２９】
2015041936.tif 000013
【図４】
2015041936.tif 000014
【図５】
2015041936.tif 000015
【図６】
2015041936.tif 000016
【図７】
2015041936.tif 000017
【図８】
2015041936.tif 000018
【図９】
2015041936.tif 000019
【図１０】
2015041936.tif 000020
【図１７】
2015041936.tif 000021
【図１８】
2015041936.tif 000022
【図１９】
2015041936.tif 000023
【図２０】
2015041936.tif 000024
【図２１】
2015041936.tif 000025
【図２２Ａ】
2015041936.tif 000026
【図２２Ｂ】
2015041936.tif 000027
【図２３】
2015041936.tif 000028
【図２４】
2015041936.tif 000029
【図２５】
2015041936.tif 000030
【図２６Ａ】
2015041936.tif 000031
【図２６Ｂ】
2015041936.tif 000032
【図２８】
2015041936.tif 000033