(57)【要約】【課題】３Ｄコンテンツを表示する際の文字情報の読みづらさを解消可能な表示装置、透過型表示装置および表示装置の制御方法を提供する。【解決手段】使用者に対しコンテンツを虚像として視認させる頭部装着型表示装置ＨＭであって、画像情報および／または文字情報を含む３Ｄコンテンツを取得するインターフェース７２と、３Ｄコンテンツの文字情報または画像情報以外に対し、視差をなくすための変換処理を行う変換処理部５２ａと、変換処理後の３Ｄコンテンツを表示する表示部４０と、を備える。【選択図】図４
2015023435.tif 000002
【特許請求の範囲】
【請求項１】
画像情報および／または文字情報を含む３Ｄコンテンツを取得する取得部と、
前記３Ｄコンテンツの前記文字情報または前記画像情報以外に対し、視差をなくすための変換処理を行う変換処理部と、
前記変換処理後の３Ｄコンテンツを表示する表示部と、を備えたことを特徴とする表示装置。
【請求項２】
前記３Ｄコンテンツは、１ページを１画像として取り扱う形式の書籍コンテンツであり、
前記変換処理部は、前記書籍コンテンツの各ページデータから、前記画像情報を含む画像領域を抽出し、抽出した当該画像領域を除く領域に対して変換処理を行うことを特徴とする請求項１に記載の表示装置。
【請求項３】
前記３Ｄコンテンツは、１ページを１画像として取り扱う形式の書籍コンテンツであり、
前記変換処理部は、前記書籍コンテンツの各ページデータから、前記文字情報を含むテキスト領域を抽出し、抽出した当該テキスト領域に対して変換処理を行うことを特徴とする請求項１に記載の表示装置。
【請求項４】
２Ｄモードと３Ｄモードを切り替えるモード切替部をさらに備え、
前記変換処理部は、前記モード切替部により前記３Ｄモードに切り替えられた場合に変換処理を行い、
前記表示部は、前記モード切替部により前記２Ｄモードに切り替えられた場合、前記３Ｄコンテンツを２Ｄコンテンツとして表示することを特徴とする請求項１ないし３のいずれか１項に記載の表示装置。
【請求項５】
前記モード切替部は、無変換モードへの切り替えが可能であり、
前記表示部は、前記モード切替部により前記無変換モードに切り替えられた場合、前記変換処理部による変換処理を行っていない３Ｄコンテンツを表示することを特徴とする請求項４に記載の表示装置。
【請求項６】
請求項１ないし５のいずれか１項に記載の表示装置における各部を備え、
前記表示部は、使用者に対しコンテンツを虚像として視認させる透過型表示部であることを特徴とする透過型表示装置。
【請求項７】
使用者の頭部に装着して用いる透過型表示装置であって、
前記使用者が操作する指示体の動きを検出する指示体検出部と、
前記指示体の操作に対応した命令を実行する命令実行部と、を備え、
前記使用者は、前記透過型表示部に表示されたコンテンツを透過して前記指示体を視認可能であり、
前記命令実行部は、前記使用者から見た前記指示体の前記コンテンツに対する操作位置に応じて、命令を実行することを特徴とする請求項６に記載の透過型表示装置。
【請求項８】
前記表示部は、右目用透過表示部および左目用透過表示部を含み、
前記取得部は、前記３Ｄコンテンツとして、水平方向に１/２に圧縮された左目用画像データおよび右目用画像データを取得し、
前記表示部は、前記左目用画像データおよび前記右目用画像データを、それぞれ水平方向に２倍に伸長して、視差のある右目用映像表示データおよび左目用映像表示データに変換したものを、それぞれ前記右目用透過表示部および左目用透過表示部により表示することを特徴とする請求項７に記載の透過型表示装置。
【請求項９】
画像情報および／または文字情報を含む３Ｄコンテンツを取得する取得ステップと、
前記３Ｄコンテンツの前記文字情報または前記画像情報以外に対し、視差をなくすための変換処理を行う変換処理ステップと、
前記変換処理後の３Ｄコンテンツを表示する表示ステップと、を実行することを特徴とする表示装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、３Ｄコンテンツを表示可能な表示装置、透過型表示装置および表示装置の制御方法に関するものである。
【背景技術】
【０００２】
従来、透過型表示装置として、眼鏡形状の透過型ディスプレイを頭部に装着して用いる頭部装着型表示装置（ヘッドマウントディスプレイ（Head  Mounted  Display：ＨＭＤ））が知られている。また、頭部装着型表示装置には、３Ｄコンテンツを表示可能なものも提案されている（例えば、特許文献１）。近年、この頭部装着型表示装置にマニュアルや作業指示情報等を表示するなど、業務用途としての使用が注目されていることから、今後、よりリアルで臨場感のある３Ｄコンテンツの表示ニーズが高まると想定される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２４５８８９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところが、上記特許文献１の頭部装着型表示装置など、３Ｄ対応の表示装置で３Ｄコンテンツを表示する場合、画像情報だけでなく文字情報も３Ｄ表示されてしまうため、読みづらいといった問題がある。特に、頭部装着型表示装置を業務用途で使用する場合、３Ｄ表示された文字情報を長時間注視する必要があるため、目の疲労が課題となる。さらに、コントローラー不要の頭部装着型表示装置の場合（例えば、透過型ディスプレイに表示されるコンテンツ越しに使用者が指を動かすことにより、コントローラーを用いることなく各種操作を行うことが可能なもの）、３Ｄ表示によって文字情報、記号、アイコン等を視認しづらくなることから、操作位置を特定しづらくなり、誤操作の原因となってしまう。
【０００５】
本発明は、上記の問題に鑑み、３Ｄコンテンツを表示する際の文字情報の読みづらさを解消可能な表示装置、透過型表示装置および表示装置の制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の表示装置は、画像情報および／または文字情報を含む３Ｄコンテンツを取得する取得部と、３Ｄコンテンツの文字情報または画像情報以外に対し、視差をなくすための変換処理を行う変換処理部と、変換処理後の３Ｄコンテンツを表示する表示部と、を備えたことを特徴とする。
【０００７】
本発明の表示装置の制御方法は、画像情報および／または文字情報を含む３Ｄコンテンツを取得する取得ステップと、３Ｄコンテンツの文字情報または画像情報以外に対し、視差をなくすための変換処理を行う変換処理ステップと、変換処理後の３Ｄコンテンツを表示する表示ステップと、を実行することを特徴とする。
【０００８】
本発明によれば、取得した３Ｄコンテンツに文字情報が含まれる場合、当該文字情報に対し、視差をなくすための変換処理を行う。また、取得した３Ｄコンテンツに画像情報が含まれる場合、当該画像情報以外に対して変換処理を行う。これらの変換処理により、３Ｄコンテンツにおける文字情報の読みづらさを解消することができる。
なお、３Ｄコンテンツのフォーマットは、固定レイアウト方式のフォーマット、可変レイアウト方式のフォーマットなど、その種類は問わない。前者の例としては、１ページを１画像として取り扱う画像形式のフォーマットが挙げられる。また、後者の例としては、テキストデータを流し込むテキスト形式のフォーマットが挙げられる。
また、３Ｄコンテンツのファイル形式も任意である。例えば、水平方向に１/２に圧縮された左目用画像データおよび右目用画像データを、それぞれ水平方向に２倍に伸長し、視差のある左目用の映像表示データおよび右目用の映像表示データに変換されることで、３Ｄ表示データとして表示される「サイドバイサイド方式」を採用可能である。その他、上半分と下半分の画像の縦幅を圧縮して上下に配置した「トップアンドボトム方式」、右目用と左目用の画像をハイビジョン画質そのままに前から順番に並べた「ＭＶＣ方式」、３Ｄ動画の編集が可能な「ＩＯＭ方式」などが挙げられる。
また、取得部（取得ステップ）は、３Ｄコンテンツに画像情報および文字情報が含まれる場合、３Ｄコンテンツを解析して画像情報と文字情報を区別しても良いし、画像情報と文字情報が元々識別可能な状態で含まれる３Ｄコンテンツを取得しても良い。つまり、表示装置側で、画像情報と文字情報を分割できるような３Ｄコンテンツを取得すれば良い。
また、画像情報は、静止画像の情報であっても良いし、動画像の情報であっても良い。なお、３Ｄコンテンツが、１ページを１画像として取り扱う画像形式の場合、画像情報とは、コンテンツ全体を指すものではなく、テキスト領域以外の挿絵部分などの領域を指す。
【０００９】
上記の表示装置において、３Ｄコンテンツは、１ページを１画像として取り扱う形式の書籍コンテンツであり、変換処理部は、書籍コンテンツの各ページデータから画像情報を含む画像領域を抽出し、抽出した当該画像領域を除く領域に対して変換処理を行うことを特徴とする。
【００１０】
本発明によれば、挿絵などを含む書籍コンテンツ（電子書籍）から、挿絵部分（画像領域）を除いて変換処理を行うことにより、挿絵部分以外の表示情報（文字情報、記号、アイコンなどを含む）の視認しづらさを解消することができる。
なお、「１ページを１画像として取り扱う形式」とは、ＰＤＦ（Portable  Document  Format）やＪＰＥＧ(Joint  Photographic  Experts  Group)などのフォーマットが挙げられる。
【００１１】
上記の表示装置において、３Ｄコンテンツは、１ページを１画像として取り扱う形式の書籍コンテンツであり、変換処理部は、書籍コンテンツの各ページデータから文字情報を含むテキスト領域を抽出し、抽出した当該テキスト領域に対して変換処理を行うことを特徴とする。
【００１２】
本発明によれば、挿絵などを含む書籍コンテンツ（電子書籍）から、テキスト領域を抽出して変換処理を行う構成であるため、変換処理の処理負荷を最小限に抑えつつ、文字情報の読みづらさを解消することができる。
【００１３】
上記の表示装置において、２Ｄモードと３Ｄモードを切り替えるモード切替部をさらに備え、変換処理部は、モード切替部により３Ｄモードに切り替えられた場合に変換処理を行い、表示部は、モード切替部により２Ｄモードに切り替えられた場合、３Ｄコンテンツを２Ｄコンテンツとして表示することを特徴とする。
【００１４】
上記の表示装置において、モード切替部は、無変換モードへの切り替えが可能であり、表示部は、モード切替部により無変換モードに切り替えられた場合、変換処理部による変換処理を行っていない３Ｄコンテンツを表示することを特徴とする。
【００１５】
本発明によれば、ユーザーのニーズや、コンテンツの種類等に応じて、２Ｄモード、３Ｄモード、無変換モードを切り替えることができる。
なお、モード切替部は、ユーザーの操作にしたがってモード切替を行っても良いし、コンテンツに応じてモード切替を行っても良い。後者の場合、例えばコンテンツの種類やコンテンツの表示内容に応じてモード切替を行うことが考えられる。
【００１６】
本発明の透過型表示装置は、上記の表示装置における各部を備え、表示部は、使用者に対しコンテンツを虚像として視認させる透過型表示部であることを特徴とする。
【００１７】
本発明によれば、使用者に対しコンテンツを虚像として視認させる透過型表示装置においても、３Ｄコンテンツを表示する際の文字情報の読みづらさを解消することができる。
【００１８】
上記の透過型表示装置において、使用者の頭部に装着して用いる透過型表示装置であって、使用者が操作する指示体の動きを検出する指示体検出部と、指示体の操作に対応した命令を実行する命令実行部と、を備え、使用者は、透過型表示部に表示されたコンテンツを透過して指示体を視認可能であり、命令実行部は、使用者から見た指示体のコンテンツに対する操作位置に応じて、命令を実行することを特徴とする。
【００１９】
本発明によれば、頭部装着型表示装置においても、３Ｄコンテンツを表示する際の文字情報の読みづらさを解消することができる。また、本発明の頭部装着型表示装置は、コンテンツを透過して視認される指示体の操作位置に応じて命令を実行する構成であるため、文字情報の読みづらさが解消されることに伴い、誤操作を抑止できる。
【００２０】
上記の透過型表示装置において、前記表示部は、右目用透過表示部および左目用透過表示部を含み、前記取得部は、前記３Ｄコンテンツとして、水平方向に１/２に圧縮された左目用画像データおよび右目用画像データを取得し、前記表示部は、前記左目用画像データおよび前記右目用画像データを、それぞれ水平方向に２倍に伸長して、視差のある右目用映像表示データおよび左目用映像表示データに変換したものを、それぞれ前記右目用透過表示部および左目用透過表示部により表示することを特徴とする。
【００２１】
本発明によれば、「サイドバイサイド方式」のファイル形式に対応できる。また、ヘッドマウントディスプレイなど、右目用透過表示部および左目用透過表示部を有する透過型表示装置に本発明を適用できる。
【図面の簡単な説明】
【００２２】
【図１】本発明の一実施形態に係る頭部装着型表示装置の外観斜視図である。
【図２】頭部装着型表示装置の表示例を示す図である。
【図３】（ａ）は、左目用画像データの一例を示す図であり、（ｂ）は、右目用画像データの一例を示す図であり、（ｃ）は、３Ｄ表示データの一例を示す図である。
【図４】頭部装着型表示装置のブロック図である。
【図５】画像領域を除く領域に対する変換処理の説明図である。
【図６】表示処理モードの説明図である。
【図７】コンテンツ表示処理の流れを示すフローチャートである。
【図８】変形例２に係る変換処理の説明図である。
【図９】変形例２に係るコンテンツ表示処理の流れを示すフローチャートである。
【発明を実施するための形態】
【００２３】
以下、添付の図面を参照し、本発明の一実施形態に係る表示装置、透過型表示装置および表示装置の制御方法について説明する。図１は、本発明の透過型表示装置を適用した頭部装着型表示装置ＨＭの外観斜視図である。頭部装着型表示装置ＨＭは、使用者が頭部に装着するものであり、ヘッドマウントディスプレイ（Head  Mounted  Display：ＨＭＤ）とも呼ばれる。本実施形態の頭部装着型表示装置ＨＭは、使用者が虚像を視認すると同時に外景も直接視認可能な光学透過型の頭部装着型表示装置ＨＭ（透過型頭部装着型表示装置、シースルータイプ・ヘッドマウントディスプレイ）であり、眼鏡形状を有している。
【００２４】
頭部装着型表示装置ＨＭは、右保持部１１と、右表示駆動部１２と、左保持部１３と、左表示駆動部１４と、右光学像表示部１５と、左光学像表示部１６と、撮像センサー１７（指示体検出部）とを有している。
【００２５】
右光学像表示部１５および左光学像表示部１６は、頭部装着型表示装置ＨＭの装着時における使用者の右および左の眼前に対応する位置に配置されている。右光学像表示部１５の一端と、左光学像表示部１６の一端は、それぞれ頭部装着型表示装置ＨＭの装着時における使用者の眉間に対応する位置で接続されている。右光学像表示部１５の他端である端部ＥＲからは、右保持部１１が延伸している。同様に、左光学像表示部１６の他端である端部ＥＬからは、左保持部１３が延伸している。
【００２６】
右保持部１１は、右光学像表示部１５の端部ＥＲから頭部装着型表示装置ＨＭの装着時における使用者の側頭部に対応する位置にかけて、右光学像表示部１５とほぼ直角を成すように延伸して設けられた部材である。同様に、左保持部１３は、左光学像表示部１６の端部ＥＬから頭部装着型表示装置ＨＭの装着時における使用者の側頭部に対応する位置にかけて、左光学像表示部１６とほぼ直角を成すように延伸して設けられた部材である。右保持部１１と、左保持部１３は、眼鏡のテンプル（つる）のようにして、使用者の頭部に頭部装着型表示装置ＨＭを保持する。
【００２７】
右表示駆動部１２は、右保持部１１の内側、換言すれば頭部装着型表示装置ＨＭの装着時における使用者の頭部に対向する側であって、右光学像表示部１５の端部ＥＲ側に配置されている。また、左表示駆動部１４は、左保持部１３の内側であって、左光学像表示部１６の端部ＥＬ側に配置されている。
【００２８】
撮像センサー１７は、頭部装着型表示装置ＨＭの装着時における使用者の眉間に対応する位置に配置されている。撮像センサー１７は、頭部装着型表示装置ＨＭを装着した状態における使用者の視界方向（使用者の前方）における外景を撮像する。そして、その撮像画像から、使用者の操作を判定する。つまり、頭部装着型表示装置ＨＭは、撮像画像に基づいて、使用者が操作する指示体Ｐを認識し、操作信号を生成する。なお、本実施形態では、使用者の「指」を指示体Ｐとして用いる（図２参照）。その他、指示体Ｐとして、指輪型入力装置、ペン（ペン先）、リモコンの発光体等を用いても良い。また、撮像センサー１７による撮像範囲は、頭部装着型表示装置ＨＭを装着したときの使用者の視界２１（図２参照）よりも広い範囲であることが好ましい。
【００２９】
なお、本実施形態では、１つの撮像センサー１７を備えた構成を例示しているが、複数の撮像センサー１７を備えた構成でも良い。また、指示体Ｐを検出する手段は、撮像センサー１７に限らず、レーザーセンサーや超音波センサーなどを用いてもよい。
【００３０】
頭部装着型表示装置ＨＭは、さらに、右耳用の右イヤホン１８および左耳用の左イヤホン１９を有している。右イヤホン１８および左イヤホン１９は、使用者が頭部装着型表示装置ＨＭを装着した際に、それぞれ右および左の耳に装着される。また、特に図示しないが、右表示駆動部１２または左表示駆動部１４内には、後述する制御部３０を実現するための制御機構が内蔵されている。
【００３１】
次に、図２を参照し、頭部装着型表示装置ＨＭを装着した使用者が視認可能な情報について説明する。同図に示すように、頭部装着型表示装置ＨＭを装着した使用者の視界２１には、頭部装着型表示装置ＨＭが生成する虚像２２、すなわち頭部装着型表示装置ＨＭに入力されたコンテンツが表示されている。本実施形態では、２Ｄコンテンツ（２次元コンテンツ）だけでなく、３Ｄコンテンツ（３次元コンテンツ）の入力・表示が可能である。また、使用者は、視界２１の内、虚像２２が表示される領域以外の領域において、外景２３を見ることができる。この外景２３は、右光学像表示部１５および左光学像表示部１６が透光性を有することにより見ることができる情報である。以下、虚像２２が表示される領域を「虚像表示領域２５」と称し、これ以外の領域を「外景視認領域２６」と称する。
【００３２】
ところで、本実施形態の頭部装着型表示装置ＨＭは、虚像表示領域２５についても、虚像２２の背後に外景２３が透けて見えるようになっている。このため、使用者は、虚像２２として表示されたコンテンツを透過して指示体Ｐ（使用者の指）を視認することができる。つまり、頭部装着型表示装置ＨＭは、撮像センサー１７の撮像結果に基づいて、使用者から見た指示体Ｐのコンテンツに対する操作位置を特定し、その操作位置に応じて所定の命令を実行する。例えば、図２に示すように、指示体Ｐによって、コンテンツに含まれるアイコン２８が指定された場合、そのアイコン２８に対応した処理を行う。また、指示体Ｐによって、コンテンツに含まれる文字情報２９の一部が指定された場合、その位置のテキストを選択・コピーしたり、予めコピーしておいたテキストをその位置に貼り付けたりする処理を行う。なお、詳細については後述するが、表示処理モードの切替（２Ｄモード、３Ｄモード、無変換モードの切り替え）についても、指示体Ｐによる操作が可能である。
【００３３】
次に、図３を参照し、３Ｄコンテンツの表示原理について説明する。本実施形態で例示する３Ｄコンテンツは、１ページを１画像として取り扱う画像形式のフォーマットである。また、例示するコンテンツは、電子書籍として用いられる書籍コンテンツである。書籍コンテンツには、挿絵などの画像情報、および／または、文章・表などの文字情報が含まれる。
【００３４】
さらに、ファイル形式としては、例えば水平方向に１/２に圧縮された左目用画像データと右目用画像データを、それぞれ水平方向に２倍に伸長して、視差のある左目、右目用の映像表示データに変換することで、３Ｄ表示データとして表示される「サイドバイサイド方式」を採用する。「サイドバイサイド方式」では、同図（ａ）に示す左目用画像データＤＬ（１フレーム分の映像信号）と、同図（ｂ）に示す右目用画像データＤＲ（１フレーム分の映像信号）を、それぞれ水平方向に１／２に圧縮し、頭部装着型表示装置ＨＭにおいて、水平方向に１/２に圧縮された左目用画像データＤＬおよび右目用画像データＤＲを、それぞれ水平方向に２倍に伸長して、視差のある左目、右目用の映像表示データに変換することで、同図（ｃ）に示す３Ｄ表示データＤ０（３Ｄ映像）として表示される。
【００３５】
次に、図４を参照し、頭部装着型表示装置ＨＭの機能構成について説明する。頭部装着型表示装置ＨＭは、使用者に虚像２２を視認させる表示部４０と、撮像センサー１７と、右イヤホン１８と、左イヤホン１９と、電源部７１と、インターフェース７２（取得部）と、これら各部を制御する制御部３０とを有している。
【００３６】
電源部７１は、頭部装着型表示装置ＨＭの各部に電力を供給する。インターフェース７２は、画像（静止画像、動画像）や音声等のコンテンツの供給元となる種々の外部機器ＯＡを接続するためのものである。外部機器ＯＡとしては、例えば、パーソナルコンピューター、携帯端末（携帯電話やスマートフォン等）、ゲーム端末等がある。インターフェース７２としては、例えばＵＳＢインターフェース、マイクロＵＳＢインターフェース、メモリーカード用インターフェース、無線ＬＡＮインターフェース等を採用することができる。
【００３７】
制御部３０は、ＣＰＵ（Central  Processing  Unit）５０と、記憶部６０とを有している。記憶部６０は、ＲＯＭ（Read  Only  Memory）やＲＡＭ（Random  Access  Memory）等により構成されており、コンテンツのフォーマットに対応したアプリケーション（ビューア）など、種々のコンピュータープログラムを格納している。ＣＰＵ５０は、記憶部６０からコンピュータープログラムを読み出して実行することにより、オペレーティングシステム（ＯＳ）５１や、画像処理部５２、表示制御部５３、画像解析部５４、命令実行部５５、音声処理部５６として機能する。
【００３８】
画像処理部５２は、インターフェース７２を介して入力されたコンテンツに基づいて表示部４０に供給するための信号を生成し、表示部４０へ送信する。このとき、画像処理部５２は、必要に応じて画像データに対し、解像度変換処理、輝度・彩度の調整といった色調補正処理、キーストン補正処理等の画像処理を実行する。
【００３９】
また、画像処理部５２は、本発明の主要部となる変換処理部５２ａを含む。変換処理部５２ａは、取得した３Ｄコンテンツに画像情報が含まれる場合、当該画像情報以外に対し、視差をなくすための変換処理を行う。具体的には、図５に示すように、コンテンツの各ページデータ（図２（ａ），（ｂ）に示した画像データＤＬ，ＤＲ）から画像情報を含む画像領域Ｅ１を抽出し、抽出した当該画像領域Ｅ１を除く領域に対して変換処理を行う。図５の例では、２枚の画像データのうち左目用画像データＤＬについて、画像領域Ｅ１を除く領域（図示、網掛部）に対する変換処理を行う。変換処理としては、画像領域Ｅ１を除く領域を水平方向（左右いずれかの方向）にシフトさせる処理、右目用画像データＤＲの画像領域Ｅ１を除く領域をコピーして左目用画像データＤＬの画像領域Ｅ１を除く領域に貼り付ける処理、などが考えられる。
【００４０】
なお、画像領域Ｅ１の抽出は、既知の画像解析処理を用い、挿絵などの画像をメインとする領域を特定することにより行う。この場合、写真や絵画など特定のグラフィカルな情報のみを画像情報として検出し、当該画像情報を含む画像領域を抽出しても良い（つまり、アイコン等の単純な画像は画像情報として検出しない構成としても良い）。また、変換処理の対象となる画像データは、左目用画像データＤＬではなく右目用画像データＤＲでも良いし、左目用画像データＤＬおよび右目用画像データＤＲの両方でも良い。
【００４１】
一方、表示制御部５３は、右表示駆動部１２および左表示駆動部１４を制御する制御信号を生成し、表示部４０に出力することにより、表示部４０における画像表示状態を制御する。具体的には、表示制御部５３は、制御信号により、右ＬＣＤ制御部８３による右ＬＣＤ８４の駆動のＯＮ／ＯＦＦや、右バックライト制御部８１による右バックライト８２の駆動ＯＮ／ＯＦＦ、左ＬＣＤ制御部９３による左ＬＣＤ９４の駆動ＯＮ／ＯＦＦや、左バックライト制御部９１による左バックライト９２の駆動のＯＮ／ＯＦＦ等を個別に制御することにより、右表示駆動部１２および左表示駆動部１４のそれぞれによる画像光の生成および射出を制御する。３Ｄコンテンツを表示する場合、表示制御部５３は、右表示駆動部１２および左表示駆動部１４を交互に駆動する（フレームシーケンシャル方式）。
【００４２】
また、表示制御部５３は、使用者の操作に基づいて、表示処理モードを切り替える（モード切替部）。上述の通り、本実施形態では、３Ｄコンテンツを取得した場合、２Ｄモード、３Ｄモード、無変換モードのいずれかに切替可能となっている。但し、２Ｄコンテンツを取得した場合は、表示処理モードの設定は無効となり、２Ｄ表示を行う。
【００４３】
図６に示すように、表示制御部５３は、使用者によって２Ｄモードが選択された場合、左目表示用および右目表示用として、例えば右目用画像データＤＲを用いる。つまり、左右一対のフレームデータのうちいずれか一方の画像データを、使用者が両目で視認できるように表示することで、２Ｄ表示を行う（２Ｄコンテンツとして表示する）。また、３Ｄモードが選択された場合、左目表示用として左目用画像データＤＬを用い、右目表示用として右目用画像データＤＲを用いる。このとき、左目用画像データＤＬに対しては、画像領域Ｅ１を除く領域に対し、変換処理部５２ａにより視差をなくすための変換処理を行う。さらに、無変換モードが選択された場合、左目表示用として左目用画像データＤＬを用い、右目表示用として右目用画像データＤＲを用いる。但し、無変換モードでは、変換処理部５２ａによる変換処理は行わない。つまり、無変換モードは、従来の３Ｄ表示モードに相当する。
【００４４】
図４の説明に戻る。画像解析部５４は、撮像センサー１７による撮像画像を解析し、指示体Ｐを検出する。また、その検出タイミングや検出位置を、操作信号として画像処理部５２や表示制御部５３に出力する。画像処理部５２や表示制御部５３は、出力された指示体Ｐの操作信号に基づき、画像処理や表示制御を行う。また、命令実行部５５は、指示体の操作に伴って、予め設定された各種命令を実行する。音声処理部５６は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、右イヤホン１８および左イヤホン１９に出力する。
【００４５】
表示部４０は、右表示駆動部１２と、左表示駆動部１４と、右光学像表示部１５としての右導光板８６と、左光学像表示部１６としての左導光板９６と、を有している。なお、以下の説明では、右光学像表示部１５（右導光板８６）と、左光学像表示部１６（左導光板９６）を総称して「光学部材」とも呼ぶ。
【００４６】
右表示駆動部１２は、光源として機能する右バックライト（ＢＬ）８２と、右バックライト（ＢＬ）８２の駆動制御を行う右バックライト（ＢＬ）制御部８１と、表示素子として機能する右ＬＣＤ８４と、右ＬＣＤ８４の駆動制御を行う右ＬＣＤ制御部８３と、右投写光学系８５と、を含んでいる。右バックライト制御部８１は、入力された制御信号に基づいて、右バックライト８２を駆動制御する。右バックライト８２は、例えば、ＬＥＤやエレクトロルミネセンス（ＥＬ）等の発光体である。右ＬＣＤ制御部８３は、右目用画像データの他、クロック信号、垂直同期信号、水平同期信号等に基づいて、右ＬＣＤ８４を駆動制御する。右ＬＣＤ８４は、複数の画素をマトリクス状に配置した透過型液晶パネルである。
【００４７】
右投写光学系８５は、右ＬＣＤ８４から射出された画像光を投写するものであり、例えば、コリメートレンズを用いて構成される。右光学像表示部１５としての右導光板８６は、光透過性の樹脂素材等によって形成され、右投写光学系８５から出力された画像光を、所定の光路に沿って反射させつつ使用者の右眼に導く。なお、右投写光学系８５と右導光板８６とを総称して「導光部」とも呼ぶ。導光部は、画像光を用いて使用者の眼前に虚像を形成する限りにおいて任意の方法を用いることができ、例えば回折格子（一例としてホログラム素子）を用いても良いし、半透過反射膜を用いても良い。
【００４８】
左表示駆動部１４は、右表示駆動部１２と同様に、左バックライト（ＢＬ）制御部９１と、左バックライト（ＢＬ）９２と、左ＬＣＤ制御部９３と、左ＬＣＤ９４と、左投写光学系９５とを含んでいる。また、左光学像表示部１６としての左導光板９６は、光透過性の樹脂素材等によって形成され、左投写光学系９５から出力された画像光を、所定の光路に沿って反射させつつ使用者の左眼に導く。
【００４９】
このようにして、頭部装着型表示装置ＨＭの使用者の両眼に導かれた画像光が網膜に結像することにより、使用者は、例えば図２に示すように虚像表示領域２５内に虚像２２を視認する。なお、本実施形態では、このように使用者に対して虚像２２を視認させることを、「表示する」とも表現する。
【００５０】
次に、図７のフローチャートを参照し、頭部装着型表示装置ＨＭのコンテンツ表示処理の流れを説明する。ここでは、頭部装着型表示装置ＨＭに、２Ｄまたは３Ｄの書籍コンテンツが入力されるものとして説明する。頭部装着型表示装置ＨＭは、コンテンツを取得すると（Ｓ０１）、３Ｄコンテンツか否かを判別する（Ｓ０２）。取得したコンテンツが３Ｄコンテンツではない場合、つまり２Ｄコンテンツの場合は（Ｓ０２：Ｎｏ）、２Ｄコンテンツを表示する（Ｓ０３）。
【００５１】
一方、取得したコンテンツが３Ｄコンテンツの場合は（Ｓ０２：Ｙｅｓ）、画像領域Ｅ１が存在するか否かを判別する（Ｓ０４）。ここで、画像領域Ｅ１が存在する場合は（Ｓ０４：Ｙｅｓ）、画像領域Ｅ１を除く領域に対し、変換処理部５２ａによる変換処理を行い（Ｓ０５）、変換処理後の３Ｄコンテンツを表示する（Ｓ０６）。また、画像領域Ｅ１が存在しない場合は（Ｓ０４：Ｎｏ）、コンテンツのページ全領域に対し、変換処理部５２ａによる変換処理を行い（Ｓ０７）、変換処理後の３Ｄコンテンツを表示する（Ｓ０６）。
【００５２】
以上説明したとおり、本実施形態によれば、取得した３Ｄコンテンツの画像情報以外に対し、視差をなくすための変換処理を行うため、３Ｄコンテンツにおける文字情報の読みづらさを解消することができる。また、画像形式フォーマットの書籍コンテンツの場合、書籍コンテンツから、挿絵などの画像領域Ｅ１を除いて変換処理を行うため、文字情報のみならず、アイコンや記号なども含めて、視認しづらさを解消することができる。さらに、本実施形態の頭部装着型表示装置ＨＭは、コンテンツを透過して視認される指示体Ｐの操作位置に応じて命令を実行する構成であるため、文字情報やアイコンの読みづらさが解消されることに伴い、誤操作の抑止効果が期待できる。
【００５３】
また、表示処理モードとして、２Ｄモード、３Ｄモード、無変換モードを備えているため、コンテンツの種類や使用者の好みに応じて、所望のモードに切り替えることができる。つまり、３Ｄコンテンツを取得した場合でも、目の疲れを最小限に留めたい場合は２Ｄモードを選択すれば良い。また、３Ｄコンテンツの臨場感を生かしつつも文字情報の読みやすさを重視したい場合は、３Ｄモードを選択すれば良い。さらに、３Ｄコンテンツ自体の特性を生かしたい場合は、無変換モードを選択すれば良い。
【００５４】
なお、上記の実施形態に限らず、以下の変形例を採用可能である。
（変形例１）
上記の実施形態では、取得した書籍コンテンツに画像領域Ｅ１が存在しない場合、ページ全領域に対して変換処理を行うものとしたが（図７のＳ０４：Ｎｏ，Ｓ０７参照）、この場合の変換処理を省略しても良い。すなわち、図７の符号Ａに示すように、取得した３Ｄコンテンツに画像領域Ｅ１が存在しない場合（Ｓ０４：Ｎｏ）、左右一対の画像データのうちいずれか一方の画像データを、左目表示用および右目表示用として表示しても良い。つまり、取得した３Ｄコンテンツに画像領域Ｅ１が存在しない場合は、２Ｄコンテンツとして表示しても良い。
【００５５】
（変形例２）
また、上記の実施形態では、取得した３Ｄコンテンツに画像領域Ｅ１が存在するか否かを判別したが、これに代えて、テキスト領域の有無を判別しても良い。図８は、本変形例に係る変換処理の説明図である。同図に示すように、本変形例では、左右一対の画像データのうちいずれか一方の画像データからテキスト領域Ｅ２を抽出し、抽出した当該テキスト領域Ｅ２に対して変換処理を行う（図示、網掛部）。図９は、本変形例に係るコンテンツ表示処理の流れを示すフローチャートである。Ｓ１１〜Ｓ１３は、図７のＳ０１〜Ｓ０３と同様であるため説明を省略する。本変形例では、取得したコンテンツが３Ｄコンテンツの場合（Ｓ１２：Ｙｅｓ）、テキスト領域Ｅ２が存在するか否かを判別する（Ｓ１４）。テキスト領域Ｅ２の有無は、既知の画像解析処理を用いて判別する。ここで、テキスト領域Ｅ２が存在する場合は（Ｓ１４：Ｙｅｓ）、テキスト領域Ｅ２に対して変換処理部５２ａによる変換処理を行い（Ｓ１５）、３Ｄコンテンツを表示する（Ｓ１６）。一方、テキスト領域Ｅ２が存在しない場合は（Ｓ１４：Ｎｏ）、変換処理を行うことなく、３Ｄコンテンツを表示する（Ｓ１６）。このように、本変形例によれば、テキスト領域Ｅ２を抽出して変換処理を行う構成であるため、変換処理の処理負荷を最小限に抑えつつ、文字情報の読みづらさを解消することができる。特に、グラフィックが多い書籍コンテンツ（図鑑、画集、写真集など）の場合、変換処理の負荷軽減効果が高い。
【００５６】
（変形例３）
また、上記の実施形態では、ユーザーの操作にしたがって表示処理モードを切り替えたが、コンテンツに応じてモード切替を行っても良い。また、モード切替は、２Ｄモード、３Ｄモード、無変換モードの３つを選択肢とするのではなく、３Ｄモードと無変換モードなど２つのみの選択肢としても良い。コンテンツに応じたモード切替方法としては、例えばコンテンツの表示内容に応じてモード切替を行っても良い。例えば、最初の数ページのページデータから、文字情報が多いコンテンツか否かを判別し、文字情報が多い場合、３Ｄモードに切り替え、文字情報が少ない場合、無変換モードに切り替える、などの処理が考えられる。また、コンテンツの種類に応じてモード切替を行っても良い。例えば、書籍コンテンツの場合は、３Ｄモードに切り替え、映画コンテンツの場合は、無変換モードに切り替える、などの処理が考えられる。なお、コンテンツの種類は、コンテンツに付加された付加情報（メタデータ）に基づいて判別可能である。
【００５７】
（変形例４）
また、コンテンツの輝度（テキスト領域Ｅ２の輝度など）や使用環境輝度に応じてモード切替を行っても良い。例えば、文字情報の読みづらさが緩和されるようなコンテンツ輝度、および／または使用環境輝度の場合（例えば、テキスト領域Ｅ２の背景色の輝度が所定の閾値以上の場合や、使用環境輝度が所定の閾値以下の場合）、無変換モードに切り替え、そうでない場合は３Ｄモードに切り替える、などの処理が考えられる。
【００５８】
（変形例５）
また、上記の実施形態では、３Ｄコンテンツのフォーマットとして、画像形式のフォーマットを例示したが、テキストデータを流し込むテキスト形式のフォーマットを採用しても良い。また、画像ファイルとテキストファイルの両方を含むフォーマットを採用しても良い。これらの場合、ファイルの属性から画像情報、文字情報の有無を判別すれば良い。例えば、画像ファイルとテキストファイルの両方を含むフォーマットの場合、画像ファイルが請求項における画像情報に相当し、テキストファイルが請求項における文字情報に相当する。また、これらの場合、画像情報を含む画像領域と、文字情報を含むテキスト領域は、使用者の視界２１において一部または全てが重複していても良い。例えば、映画の字幕の場合、映画を表示する画像領域の一部に重畳して、字幕を表示するテキスト領域が設けられることになるが、この場合、テキスト領域（字幕）に対してのみ、視差をなくすための変換処理を行えば良い。
【００５９】
（変形例６）
また、上記の実施形態では、虚像表示領域２５の大きさが、外景視認領域２６の大きさよりも小さい場合を例示しているが、これに限るものではない。虚像表示領域２５と外景視認領域２６の大きさが同じである場合（言い換えれば、虚像表示領域２５が視界２１と同等の大きさの場合）、あるいは虚像表示領域２５が外景視認領域２６よりも大きい場合（言い換えれば、虚像表示領域２５が視界２１よりも大きい場合）においても、本発明を適用可能である。
【００６０】
（変形例７）
また、上記の実施形態では、使用者に虚像を視認させる表示部４０や表示部４０を制御する制御部３０等を１つの筐体内（装置内）に実装して頭部装着型表示装置ＨＭを実現しているが、これらを別々の装置として実現しても良い。すなわち、表示部４０、撮像センサー１７、イヤホン１８，１９を備えた頭部装着型表示装置ＨＭ本体と、制御部３０を備えたコントローラー（図示省略）を、通信可能に構成しても良い。この場合、本体とコントローラーは有線で接続しても良いし、無線ＬＡＮや赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）等により接続しても良い。また、コントローラーの機能を、パーソナルコンピューターや携帯情報端末（ＰＡＤ、携帯電話、時計型携帯端末）等により実現しても良い。
【００６１】
（変形例８）
また、上記の実施形態では、指示体Ｐの操作によって表示処理モードを切り替え可能としたが、頭部装着型表示装置ＨＭの本体上に設けられた操作子を用いて表示処理モードを切り替え可能としても良い。また、コントローラーを用いる場合、表示処理モード切替専用の操作子をコントローラー上に設けても良い。
【００６２】
（その他の変形例）
また、上記の実施形態では、透過型表示装置として両眼タイプの頭部装着型表示装置ＨＭ（光学透過型頭部装着型表示装置）を例示しているが、本発明は、例えばビデオ透過型や単眼タイプ等の他の形式の頭部装着型表示装置にも適用可能である。また、上記実施例では、眼の前方を覆う眼鏡タイプの頭部装着型表示装置ＨＭを例示しているが、これに限るものではなく、眼の前方を完全に覆わないタイプ（眼の前方の一部を覆うタイプ）の頭部装着型表示装置にも適用可能である。さらに、本発明は、頭部装着型表示装置に限らず、ヘッドアップディスプレイなど他の透過型表示装置、または透過性を有しない一般的な表示装置（テレビ受像機、タブレット端末、パーソナルコンピューターなど）にも適用可能である。
【００６３】
また、上記の実施形態では、バックライト制御部８１，９１、バックライト８２，９２、ＬＣＤ制御部８３，９３、ＬＣＤ８４，９４を含む表示駆動部１２，１４を例示したが、この様態はあくまでも一例であり、これらの構成部と共に、またはこれらの構成部に代えて、他の方式を実現するための構成部を備えても良い。
【００６４】
例えば、有機ＥＬ（有機エレクトロルミネッセンス，Organic  Electro-Luminescence）のディスプレイと、有機ＥＬ制御部とを備える構成としても良い。また、ＬＣＤに代えて、ＬＣＯＳ（Liquid  crystal  on  silicon，ＬＣｏＳは登録商標）や、デジタル・マイクロミラー・デバイス等を用いても良い。また、レーザー網膜投影型の頭部装着型表示装置に本発明を適用することも可能である。レーザー網膜投影型の場合、「画像領域」または「テキスト領域」とは、使用者の眼に認識される領域として定義することができる。また、頭部装着型表示装置ＨＭの光学系は、外光を、光学部材を透過させて画像光と共に使用者の眼に入射させるものであり、光学部材は画像光を部材内部に導光させるものに限らず、使用者の眼の方向に屈折または反射させるものでも良い。
【００６５】
また、本実施例では、光学系として投写光学系８５，９５を適用しているが、この様態はあくまでも一例である。例えば、光学系としてＭＥＭＳミラーで構成された走査光学系を採用し、走査光学系に信号光を射出する信号光変調部を備える構成としても良い。この場合、信号光変調部で形成し射出された信号光をスキャン部である走査光学系（ＭＥＭＳミラー）に入射する。走査光学系は信号光を走査光としてハーフミラー層を有する導光体に向けて射出し、ハーフミラー層の面上において走査光が走査されることにより、画像光による虚像が形成され、この虚像を使用者が眼で捉えることで画像を認識することができる。
【００６６】
また、上記の実施形態に示した頭部装着型表示装置ＨＭの各機能をプログラムとして提供することが可能である。また、そのプログラムを各種記録媒体（ＣＤ−ＲＯＭ、フラッシュメモリ等）に格納して提供することも可能である。すなわち、コンピューターを、頭部装着型表示装置ＨＭの各構成要素として機能させるためのプログラム、およびそれを記録した記録媒体も、本発明の権利範囲に含まれる。その他、上述した実施例によらず、頭部装着型表示装置ＨＭの装置構成や処理工程等について、本発明の要旨を逸脱しない範囲で、適宜変更が可能である。
【符号の説明】
【００６７】
１１…右保持部  １２…右表示駆動部  １３…左保持部  １４…左表示駆動部  １５…右光学像表示部  １６…左光学像表示部  １７…撮像センサー  ２１…視界  ２２…虚像  ２３…外景  ２５…虚像表示領域  ２６…外景視認領域  ２８…アイコン  ２９…文字情報  ３０…制御部  ４０…表示部  ５２ａ…変換処理部  ７２…インターフェース  Ｄ０…３Ｄ表示データ  ＤＬ…左目用画像データ  ＤＲ…右目用画像データ  Ｅ１…画像領域  Ｅ２…テキスト領域  ＨＭ…頭部装着型表示装置  ＯＡ…外部機器  Ｐ…指示体
【図１】
2015023435.tif 000003
【図２】
2015023435.tif 000004
【図３】
2015023435.tif 000005
【図４】
2015023435.tif 000006
【図５】
2015023435.tif 000007
【図６】
2015023435.tif 000008
【図７】
2015023435.tif 000009
【図８】
2015023435.tif 000010
【図９】
2015023435.tif 000011